当精准广告遇到大数据

从互联网广告诞生开始,精准的概念就一直为业界所讨论,因为互联网的技术性特征使得网络广告具备了实时投放管理优化以及针对海量数据挖掘的基础。目前,在美国精准广告已经由最初基于媒体主题频道和页面内容定向,演进到基于Cookie交换等数据分析服务,实现统一平台管理跨网络媒体并通过大数据技术实现精准广告投放的阶段。精准广告营销已经成为主流的营销手段。而在中国, 精准广告营销方兴未艾。根据相关数据统计,广告精准程度、受众覆盖规模和广告平台拥有的媒体资源是广告主考量广告平台的三大关键要素,而广告精准程度以69%的比例位列广告主考量广告平台的要素之首,精准广告的重要性由此可见一斑。

(资料来源,媒介360,2015广告主投放数据报告)

要实现精准广告营销,通常需要借助DSP来进行。由于DSP可大幅提升投放的精准度,为广告主提供跨媒介、跨平台、跨终端的广告投放平台,通过数据整合、分析实现基于受众的精准投放,并且实时监控不断优化,因此所有对广告的真实效果有追求的行业都适合DSP。但随着广告主对精准广告的要求越来越高, 以及大数据技术对精准广告的巨大推动作用,DSP平台对实时数据处理效率的要求和对大数据技术的引入成为了当务之急。因此,选择合适的大数据处理平台成为了精准广告营销用户面临的难题。

来自DSP的业务挑战

众成就数字传媒集团是央视最大的广告代理公司—三人行的母公司(以下简称“众成就”),集团下属三人行、闻成就、在身边三家子公司。业务覆盖电视广告、大内容策划、投资与代理、全媒体数字营销以及大数据研究与移动产品开发服务。基于19年积累的丰富广告服务经验,不断延伸互联网发展下数字营销领域的触角,致力于成为提供全媒体服务的综合性传媒集团。

从2012年至今,众成就文娱内容合作已超过220个IP;从2015年开始,独立投资打造《黄金线路》、《车神驾到》、《全家好拍档》、《魅力厨房》等热门IP,并以联合投资、内容代理等方式共同打造数十档IP内容;而伴随着大数据时代的来临,2015年启动以人为中心的IP文娱产业链布局,希望通过大数据分析产品开发,构建精准DSP平台,打通线上与线下,链接用户全媒体轨迹,获取大内容策划与制作的内容方向反哺与全平台投放策略。众成就DMP(数据管理平台)提供数字广告营销从曝光到转化全流程中集数据采集、存储、分析的解决方案,对外提供统计结果的前端展示和报表输出功能。众成就DMP致力于帮助广告主围绕用户受众优化媒体资源分配,辅助广告投放创意和落地页内容制作,并使数字广告投放策略实时调优成为可能,从而提升最终的销售转化。通过积累广告主历史投放数据并提供深度的数据全景洞察,广告公司和广告主结成战略伙伴关系。构建众成就的精准DSP平台,对数据的实时处理能力提出了很高的要求:

首先,众成就DSP平台由于具有接入用户众多,用户数量级达到了十亿量级,而页面也达到了百万量级,如此大规模的用户和页面处理对数据处理平台的性能是一个巨大的考验。

其次,众成就DSP平台具有高并发的特性,在线投放系统每天需要处理百亿次广告交易,这对数据处理平台的并发性能又提出了很高的要求。

最后,AD Exchange要求竞价在100ms内完成,这就要求数据处理平台具有低延时的特性,因此,网络带宽的质量有较高的需求。

华为企业云应对挑战

为了找到满足上述要求的数据处理解决方案,众成就IT部门多方比较、仔细调研,最终选择了华为企业云大数据解决方案搭建DSP的实时数据处理系统,该系统的架构图如下所示:

     该系统主要包括前端投放集群和后端大数据计算集群两部分,前端投放机业务集群使用物理机实现,后端计算集群部分使用弹性大数据服务(云服务器),采用混合托管形式搭建。众成就面向大数据后台接入功能做了大量测试,属于高级功能群的用户,使用spark Client向大数据集群提交作业,后台JDBC和Hbase client连接使用大数据。同时基于大数据+OBS的方案解决了客户对于本地kafka和数据存储的维护成本,压力峰值满足了众成就的业务场景,最终获得了众成就的认可。

该系统中,众成就主要使用的业务包括hadoop client、spark client、hive+hbase,为此,华为企业云进一步完善了功能验证、可扩展性和用户资料,同时通过测试以及个性化的定制方案满足了客户运行态作业后台监控和多用户使用场景功能需求,这些个性化的定制包括:

混合托管搭建:前端投放集群使用物理机,后端集群使用 大数据服务

使用多种大数据服务:hadoop 、spark 、hive+hbase

高质量5线全动态BGP网络保障

       除此之外,华为企业云大数据解决方案还具有以下特点:

一,海量存储,功能丰富,管理简单

PB级存储容量,云端无限扩容;全面支持采集、存储、分析、挖掘、深度学习;一站式可视化管理,简化部署及运维。

二,高度兼容开源,商用性保障

全面兼容开源技术;整合主流开源软件,性能稳定性提升30%以上;具有多种在线、离线分析工具。

三、企业级数据安全保护

VPC 私有网络隔离、数据冗余保护,11个9存储持久性、256位传输加密、永不进行数据变现。

客户收益

     通过华为企业云大数据解决方案,众成就DSP平台交出了每天17亿条数据记录处理,10分钟完成2万次TPS查询,竞价的延时在60ms以内,充分满足了众成就的业务需求,赢得了用户的高度赞誉和信任。

众成就大数据产品副总监马益民表示:“华为企业云提供灵活的云计算资源选择,按需的资源模式可以帮助我们在流量高峰时动态扩展系统前端投放机,并在高峰过后删除以节省资费,达到资源的利用最大化。在大数据系统的搭建方面,Mapreduce服务和对象存储服务帮助我们快速的实现了数据从流入、存储、分析、展示的整个流程。其中对象存储服务良好的数据高可用性,给了以数据为核心资产的团队足够的安全感,同时比起将数据存储在本地云硬盘上又节省了很大一笔开支。而Mapreduce服务与对象存储服务良好的兼容性使得我们在清洗和分析数据时体验更加流畅,清洗处理后的数据可以第一时间存入RDS做后续分析。另外,Mapreduce服务天然支持Spark内存运算,帮助我们在数据挖掘算法的应用上提供了非常好的支持。通过深入的合作,华为企业云与众成就达成了良好的合作模式与长期信赖。华为企业云迅速的服务反馈机制让人佩服,众多项目的高效及时上线为众成就的客户带来切实有效的营销服务与有价值的项目参考数据,成功为用户、品牌与媒体搭建了广告效果卓越且具有高度信任的服务平台。希望与华为企业云的合作能继续取得更大进展,双方共同成长。“

原文发布时间为: 2017年1月13日

时间: 2024-11-02 15:36:51

当精准广告遇到大数据的相关文章

往期直播:《驴妈妈,基于混合云的OTA行业数据分析、精准运营和大数据用户推荐》

最新活动报名: 3月16日直播<空格技术架构云上实践与经验>:https://yq.aliyun.com/webinar/join/4 3月18日直播<爆款App小咖秀产品服务端架构设计分享>:https://yq.aliyun.com/webinar/join/5 本期活动已经结束,视频出炉:https://yq.aliyun.com/edu/lesson/play/98 . 第3期在线培训报名开启,下面是本次直播详情. 直播主题:<基于混合云的OTA行业数据分析.精准运营

从网络广告透视大数据商业密码

2月底,在美国好莱坞第85届奥斯卡金像奖颁奖礼上,李安凭借<少年派的奇幻漂流>荣获最佳导演.有意思的是,这是微软研究院专家David Rothschild通过大数据分析预测的本届奥斯卡各奖项归属中,唯一出错的一个--David Rothschild对奥斯卡主要奖项其他各项奖的预测则全部命中.更早些时候,在2012年美国总统大选中,他还正确预测了51个选区中50个地区的选举结果,准确性高于98%. 这只是一个缩影,2012年以来,大数据已经在越来越多的领域和场合被人熟知,大数据的呼声此起彼伏,无

做精准营销把握大数据机遇

社交网络营销的概念渐近普及.在国外,Facebook开创了网络营销新的市场格局, 社交平台在网络营销中占据了越来越显著的位置.社交网络广告将带来哪些好处?在国内,应该如何利用社交平台优化营销效果?记者近日就这些问题,于钓鱼台国宾馆互联网产业年会之际,访问了腾讯开放平台总经理林松涛先生. 林松涛先生说:"在广告行业里面,有一句很经典的话是我知道有一半的广告费是被浪费的,但是我不知道是哪一半.而随着大数据时代的到来,精准衡量广告效果将成为可能." 早期营销中,由于信息不对称,广告主选择广告

叶檀:像百度这种能提供精准预测的大数据才最有价值

中介交易 http://www.aliyun.com/zixun/aggregation/6858.html">SEO诊断 淘宝客 云主机 技术大厅 5月29日,第21期创业家沙龙在上海绿洲大厦举行,著名财经评论人.知名专栏作家叶檀在现场谈到:"为什么现在美国很多专业工作找不到,但是有一个专业工作特别好找,就是大数据分析,因为数据不加分析就没有太大价值,互联网思维就是通过对大数据分析从而达到精准预测,百度平台把搜索大数据呈现出来,同时具有挖掘.预测和关联三大功能就有很大价值,不再

精准医疗亟需大数据技术

湖北日报讯 "大数据正在生物医疗界掀起一场革命,建议湖北发挥信息产业和生物产业的集成优势,瞄准生物大数据技术的研发和应用,引入全球统计界的领军人才."参加华创会的美国统计学会会士.乔治·华盛顿大学统计系教授李照海告诉记者. 李照海是天门人,1978年毕业于华中师范大学,1989年获哥伦比亚大学统计学博士学位,曾在华盛顿大学医学院从事生物统计的研究与教学,他还是美国国家卫生局癌症研究所的客座研究员. 回到家乡的李照海,发现中国在生物统计领域领军人才匮乏,"全球已进入精准医学时代

大咖直播第三期问答整理:邵汉成讲解驴妈妈基于混合云的OTA行业数据分析、精准运营和大数据用户推荐

问答列表: 混合云 ,自建和阿里在网络上 如何优化 驴妈妈的标签系统是如何一步步建立起来的? 对于学生来说 能否简明说一下学习路线 推荐一些好的书籍 社区 一主多备,如何解决主从同步延迟的问题? web端使用什么框架,对于微服务有什么使用? 未来技术人员的必备技能 刚才邵老师提到多遇到问题,技术人才能成长.能讲讲您个人的发展经历吗?今天大部分内容都是大系统,如果要做架构师,需要什么知识储备? google AI 战胜李世石,您有什么看法 帮转:老师的微信.博客能发出来吗?:) 景区的IT系统都比

Taste Analytics:大数据寻找“网红代言”的先行者

ZD至顶网CIO与应用频道 05月03日 北京消息:近期,随着Papi酱的走红,以庞大粉丝群体为基础的定向营销,将粉丝转化为购买力的"网红经济"在国内引起热议.当国内品牌厂商在拍脑袋选择网红代言的同时,美国硅谷则开始用大数据技术寻找与品牌本身契合的"网红"了,不仅提高了"寻找"过程的效率,更减少了成本的投入. Youtube的"网红经济" Youtube是美国非常重要的社交媒体,从政客到明星都有自己的Youtube频道, 也诞

大数据和精准投放是广告行业的一场变革

大数据与生俱来的变革力正在极大地改变社会结构.商业模式和人们的生活方式,对于广告行业也是如此. 腾讯集团法务部总经理江波在2016腾讯大数据合作与合规峰会上称:"如何能够合规.有效.安全地使用数据,需要寻找大数据的风险边界,在用户的隐私.数据安全和大数据产业发展之间寻找一种动态的平衡." 广告的半壁江山来自互联网 在2015年,广告业已有了将近6000亿的规模,其中约48%的份额由互联网广告贡献. 互联网广告之所以有如此的发展态势,中国广告协会副秘书长周玉梅在出席上述峰会时表示,根本原

从精准到推荐:大数据时代重构网络广告商业模式

现在的网络广告,发展空间还很大,因为他们把99%的赚钱空间都扔了.随着大数据的发展,这些钱会被下一代一一捡回来.到那时,人们对于从精准到推荐的道理,会认识得更清楚. 未来广告将是这样的,广告对于不同的人,呈现不同的内容.按照这个精准标准衡量,现在几乎所有的广告,在将来都已经被淘汰了. 精准是相对于消费者需要而言的.由于不精准,所以消费者不需要.精准的问题,就是如何真正挖掘出消费者个性化需求的问题.大数据时代提供了什么样的契机?精准广告是否将向生活方式推荐的方向发展?让我们从未来学观点展望一下网络