2018年大数据助力海外精准营销.pdf

1、大数据助力海外精准营销简要回顾达特茅斯会议Birth of AIDartmouth Conference19571957Perception Perception 感知神经网络的发明Invention ofNeural Networks for Perception低谷大规模数据和复杂任务不能完成，计算能力无法突破Low EbbBig data andcomplicated tasks couldnot make it done.Calculating capability could not make a breakthrough.1956195619701970-19801980专家系统神

2、经网络+5+5代计算机Expert SystemNeural network 5th generation computer19821982后19861986BPBP神经网络算法的发明和应用Invention ofNeural Networks for Perception低谷DARPADARPA无法实现，政府投入缩减Low EbbDARPA could not be achieved.Governmentcut down investment.19901990-20002000深度学习突破性进展，进入发展热潮Deep LearningMajor breakthrough,entering u

3、psurge of development.20062006至今AIAI诞生数 据DATADATA平 台PLATFORMPLATFORM算 法ALGORITHMALGORITHM人工智能数 据平 台算 法 大量实时产生的数据为人工智能的应用奠定了基础 通过大量数据训练人工智能的算法模型 深度学习对并行计算及数据吞吐能力有更高的要求 GPUGPU发展及计算能力的提升使得云计算平台可以快速计算处理大量数据 机器学习算法是实现人工智能落地的引擎 机器学习尤其是深度学习及强化学习的发展与迭代促成了人工智能与商业场景的结合人工智能=数据+平台+算法头部大媒体中部程序化流量定制化长尾网盟流量全媒体移动营销

4、电子商务金融科技游戏工具类纵向延伸人工智能引擎总体布局混合云大规模集群资源调度YarnYarn/K8SK8S离线计算框架HadoopHadoop/SparkSpark实时计算框架FlinkFlink/KafkaKafka机器学习框架Deep LearningDeep Learning混合云存储S3S3/OSSOSS在线存储HbaseHbase/CassandraCassandraOLAP OLAP 框架KylinKylin/DruidDruid在线日志聚合层数据仓库设备画像AIAI算法商业智能数据计算平台架构DMPDMP设备数据来自ADNADN、DSPDSP、GAGA以及多家第三方数据统计包含

5、100100亿+条设备记录，每天更新1010亿活跃设备安装包、标签、国家地区、年龄、性别设备请求特征设备类型型号国家地区等CampaignCampaign特征广告位特征DMPDMPDMPDMP包含了历史所有设备的信息安装包、年龄、性别、国家等标签体系自动采集，人工标注能提供不同粒度（全量/周/天）活跃设备信息商业化产品DatatoryDatatory大数据在线查询平台http:/ 闭环高效的数据流平台 超大规模分布式的训练平台 高性能的在线预估平台支持混合云部署模型实时存储服务分布式模型训练框架ServerServerServerServerServerServerServerServerWo

6、rkeWorker rWorkeWorker rWorkeWorker rFTRL/FM/DNN FTRL/FM/DNN 算法组件实时特征工程离线特征在线特征分布式模型预测服务M1Replica 1Shared 1Shared nReplica 2Shared 2Shared nM2Replica 1Shared 3Shared n在线排序服务实时特征回流在线排序请求MindAlphaMindAlpha业务效果算法SSPDSPOther浏览HistoryHistory安装InstallInstall性别GenderGender位置LocationLoca