CCTC 2016 多盟汪巍:移动广告平台的大数据实践

5星(超过95%的资源)
所需积分/C币:10 2016-05-16 15:28:56 872KB PDF
65
收藏 收藏
举报

该文档来自CCTC 2016中国云计算技术大会。多盟基础平台负责人汪巍发表的题为“移动广告平台的大数据实践”的主题演讲,欢迎下载!
移动广告平台的大数据实践 CCTG2016中国云计翼技水大会 移动广告平台的大数据实践 背景 ·多盟的角色转变ADN->DSP ·数据量级从ADN的5亿/天增长到RTB的50亿/天 移动广告平台的大数据实践 CCTG2016中国云计翼技水大会 多盟的架构变迁 整体结构 业务系统 广告检索 数据模型 数据处理 移动广告平台的大数据实践 CCTG2016中国云计翼技水大会 多盟的架构变迁 ·ADN时代的广告检索 gInx ·PHPU性能or效率 PHP-UI PHP-Ul PHP-UI AS的过度设计 广告超投 AS AS AS ADServer ADServer ADServer ADIndexer 移动广告平台的大数据实践 CCTG2016中国云计翼技水大会 多盟的架构变迁 ADN时代的数据处理 数据模型/统计/B HDFS/HIVE/DATAX/ MYSQL 多条数据流难以运维 MYSQL Hive 没有统一的数据处理框架 Command DataⅩ logtaile Hadoop版本老旧 Hive HiveServer +HA 数据均衡 ·小时级数据/模型 Hadoop ·Join效率低下 数据盘ext3->eXt4 Mini Batch/MQ Dc omino Thrift 数据源:请求、展现、点击 移动广告平台的大数据实践 CCTG2016中国云计翼技水大会 多盟的架构变迁 · Domino DominoHome任务列表任务状态PAN状态Logout(wangwei@domo.cn) Inf FamIly Home( Plans hive load and insert clk total/ viewJob 任务#592 operations 返回任务 查看执行情况 D592 查看执行失败 名称 hive load and insert clk total 重跑本次执行 任务状态正常运 批量标注 命令行 ota-etl/bin & bash -x hi ve load and insert clk total. sh 运行周期小时 优先级中 最大次数1 最长运行时间s)1小时(3600s 最长调度时间(s)1小时(3600s) 延迟时间0(0s) 用户 search 行主机 bid. domo. cn 创建时间2013-1217111528 最后启动时间2013-121711:1528 报警联系人←wombcr,wangweI@domo.cn 报警方式由件+短信 维护人wangwei@domo.cn 创建人 wangwei@domb 描述将新的小时级点击写入 clk tota表54321 最后任务201605-131800 移动广告平台的大数据实践 CCTG2016中国云计翼技水大会 多盟的架构变迁 Domino任务依赖执行状况 任务颜色标识:新建成功失败重跑 dever hourly stats v201209 dctrmodel + tat_hourI120130801 adall lstats lourly v20130801 ver. -osea_stat!最yg2012128 Im-tathorry201209 fserpmk-Ft atthpurly-v201209 ader housed_stats adwall_hour housed stats hour ly v2012 112 4irMode1 Tiel UsErClckHil push ligy 城m超略 dUserClickFilterModel dne twork gen fact adnetwork adxmedia h 移动广告平台的大数据实践 CCTG2016中国云计翼技水大会 多盟的架构变迁 D omIno Web Worker Worker Monitor Plan Job Worker orker lose 移动广告平台的大数据实践 CCTG2016中国云计翼技水大会 多盟的架构变迁 ·RTB时代的广告检索 50亿广告请求 nginx PHP->GO Go-UI GO-U G0-U ·性能巨幅提升 GC ADServer ADServer ADServer PsErver StUp Server 广告库实时导出 ADIndexer(MQ实时导出)

...展开详情
试读 17P CCTC 2016 多盟汪巍:移动广告平台的大数据实践
立即下载
限时抽奖 低至0.43元/次
身份认证后 购VIP低至7折
一个资源只可评论一次,评论内容不能少于5个字
sundersky 好的资源,学习,学习
2016-10-20
回复
您会向同学/朋友/同事推荐我们的CSDN下载吗?
谢谢参与!您的真实评价是我们改进的动力~
  • 分享王者

关注 私信
上传资源赚钱or赚积分
最新推荐
CCTC 2016 多盟汪巍:移动广告平台的大数据实践 10积分/C币 立即下载
1/17
CCTC 2016 多盟汪巍:移动广告平台的大数据实践第1页
CCTC 2016 多盟汪巍:移动广告平台的大数据实践第2页
CCTC 2016 多盟汪巍:移动广告平台的大数据实践第3页
CCTC 2016 多盟汪巍:移动广告平台的大数据实践第4页

试读结束, 可继续读2页

10积分/C币 立即下载