AdMaster参与研发并部署国内首个无效流量协同过滤区块链应用DIF

分布式无效流量过滤器，简称DIF系统，是由MMA中国和中国广告协会发起，AdMaster等9家企业率先部署的区块链无效流量过滤应用，于2018年7月末正式上线。通过区块链的智能合约和共识机制，DIF能实现MMA中国联盟GIVT LIST工作组成员企业地位平等、提升GIVT LIST上传效率、实现IP地址/移动装置号撤销的自动化，并保证数据不被篡改。

早在2016年底，区块链尚未进入大众视野之时，区块链如何解决广告营销的痛点，就已成为众多广告科技公司讨论的焦点。作为广告营销行业两大权威机构，中国广告协会（以下简称中广协）和MMA中国也在关注并研究区块链技术在广告行业的应用，双方共同看好该技术在广告行业中的前景。

在此背景下，今年7月末，由MMA中国 GIVT LIST工作组组长RTBAsia主导研发、包括AdMaster在内的9家先行企业参与部署的Distributed Invalid Traffic Filter系统（分布式无效流量过滤器，简称DIF系统）正式上线。

作为联盟链，DIF采用HyperledgerFabric为底层，Hyperledger是Linux基金会发起的开源项目，在金融和供应链等行业的区块链解决方案中已有广泛的应用。与众多区块链应用偏向于谈论数字货币和颠覆式创新不同，DIF项目受实际的需求和行业面临的真实挑战所推动。

行业痛点：跨企业GIVT协同过滤效率低下

AdMaster最新发布的2018上半年《中国市场数字广告无效流量白皮书》显示，2018上半年无效流量（Invalid Traffic,IVT）占比为28.8%，同比过去两年有所下降，但近三成的占比仍值得行业各方关注和重视，某些领域垂直媒体无效流量占比甚至超过40%，情况不容乐观。

为推动行业的健康发展，MMA中国无线营销联盟在3月份发布《MMA中国无线营销联盟广告常规无效流量过滤列表》，并按双月更新，支持联盟成员使用此列表过滤广告投放过程中的GIVT-IP地址和GIVT-移动装置号。过滤列表中的数据均由联盟成员根据联盟约定的算法共识规则，对自身日常广告流量识别的结果。联盟成员可提交和合并，组成单一企业无法企及的无效流量过滤库。 但在实际运行过程中，此列表出现了一些值得改进的功能点：

效率较低：企业提交自己识别出的GIVT列表，无法立即让全网更新，需要等待管理员统一合并，再通知成员进行下载（通常为一个月）；

撤销机制不完善：如果有企业想移除某个被集体误判的IP地址/移动装置号，需要联系管理员组织小组讨论，进行原因陈述，沟通成本高；

追溯困难：保留完整记录历史版本的成本高，导致不同的企业历史提交过什么，撤销过什么，难以在出现问题时及时进行透明的追溯和分析。

DIF：建立无效流量共识机制的一大尝试

面对上述问题，DIF应运而生。通过区块链的智能合约和共识机制，DIF期望能通过技术提升效率，保证公平。具体来说，DIF具备以下优势：

公正平等：在联盟链中，每个成员企业都可以部署自己的节点，去中心化地连接在一起，构建了整个网络。每个成员企业地位都平等，不论是对数据（IP地址/移动装置号）进行提交、撤销，没有一个绝对的主导者；

效率良好：每个成员企业做为一个节点都可以随时增量提交自己的数据，触发智能合约，该企业即可获取自己跟全网数据合并后的GIVT LIST。如果某个IP地址/移动装置号通过了智能合约中的背书阈值N（MMA中国联盟GIVT LIST工作组会议制定的共识机制是，针对IP地址N为2，针对移动装置号N为1），就可以影响联盟中其他成员节点获得的GIVT LIST。比如，若要全网认可某个IP地址是无效流量来源，至少要有合计2个（满足N）节点提交过此IP地址，DIF系统在区块链上实时记录共识、实时合并，再也不用等管理员执行合并；

撤销自动化：想要对GIVT LIST中的某个IP地址/移动装置号进行撤销，同样可以由各节点提交，触发智能合约，获得至少T个（MMA中国联盟GIVT LIST工作组会议共识确定此处遵照小组议事原则即：重大事项需要至少有2/3成员参与投票并且有2/3票数通过，T确定为小组成员数量的4/9，以18个成员为例需要8个成员共识）节点背书同意，全网节点将自动更新数据；

数据不可篡改：每个成员企业的提交和撤销记录自始至终均存储在区块链账本中，可以方便地查找到任意一个数据版本和任意成员的提交记录。不论是评估贡献度、监督作恶或是分析过失操作，都能便捷地检索。

DIF系统示意图

AdMaster相关项目负责人邱文一表示：“15世纪到18世纪，航海技术的革新推动了“地理大发现”的进程，促成了世界范围内的互动连接，才有了后来的工业革命。而区块链技术正是数字世界的“航海技术”，他可以降低商业主体间的信任成本，连接数据孤岛，创造更大的数据价值。而DIF项目正是对上述变革的最佳实践。相信DIF项目未来在规范行业标准、流量甄别、品牌安全等领域上会走的更远。”

未来计划：促进GIVT、SIVT数据共享

DIF目前正在邀请行业更多企业参与测试，并建立迭代工作机制。期望在8月底，DIF可以正式同步在MMA中国GIVT LIST工作组中使用。GIVT数据的跨企业共享已经迈出了一大步，而面对更加长远的发展，DIF的运行机制也适合探索复杂无效流量（SIVT）模式数据的跨企业共享、内容安全数据的共享、地理定向偏差数据的共享等。

精硕科技集团创始人兼首席技术官洪倍（Bennett Hong）认为，MMA GIVT DIF联盟链是非常有意义的区块链落地尝试，也是区块链发挥共识价值的有效场景。

“通过MMA成员的群策群力，将过去手工而被动的无效IP地址上报、审核、确认、移除等过程改造成了智能合约（如二票否决等机制）的自动形式。同时 MMA GIVT工作组也意识到仅仅依靠区块链的底层标准技术和固化的智能合约，并不能满足频繁变化的环境对共识的升级迭代要求，因此工作组也通过月度的月会的充分沟通，对共识机制和智能合约的触发条件进行调整。”

AdMaster作为中国领先的第三方数据技术公司，一直致力于推进数字营销行业反欺诈生态的良性发展。在DIF研发初期，AdMaster便积极参与其中，作为DIF链的初始节点，贡献自己的技术和经验。接下来，AdMaster将同联盟链成员一起推进DIF的落地，探索区块链技术在数字营销领域的更多应用，相信MMA的GIVT DIF链将为行业带来有价值的实践经验和模式借鉴。

添加新手交流群：币种分析、每日早晚盘分析

添加助理微信，一对一亲自指导：YoYo8abc