2024年StarRocks数据技术峰会 · 北京站嘉宾演讲PPT合集（共27套打包）

1、Make data-driven decisions报表、内容运营、会员运营剧集热度Build data-powered products搜索、推荐、广告用户增长、收入预估看过去知未来Hive离线数据Pilot智能SQL网关Kafka实时数据实时分析自助查询运营报表Spark批处理分钟级延迟ClickHouse数仓查询秒级延迟Iceberg近实时数据Trino灵活查询秒级延迟离线/近实时数仓Ic。

2、User Behavior AnalyticsAnti Fraud Rules EngineLog AnalysisReal-Time Data warehouseSupply Chain Logistics Report Video Quality AnalyticsApplication ObservabilityBusiness IntelligenceReal-Time Dashboar。

3、StarRocks 存算分离在得物的降本增效实践丁凯剑得物StarRocks负责人，8年OLAP研发经验，StarRocks Active Contributor，Apache Druid Committer010203Clickhouse 在大数据量下的困境从 Clickhouse 到 StarRocks 存算分离成果展示及未来规划01迁移背景背景丰富的场景OLAP 引擎在得物客服、风控、供应。

4、从探索到赋能：微众银行携手StarRocks 重塑数据分析林俊锋微众银行大数据工程师，StarRocks平台负责人微众银行大数据平台套件 一站式、全连通、金融级的数据应用开发管理套件 独特中间件层设计，简化整体架构，提升连通性、复用性、可扩展性和治理管控能力 解耦上层应用程序和底层引擎，简化新组件引入，降低开发运维成本WeDataSphere 开源开放 累计试用中/上生产公司达700+家，社区微。

5、基于基于StarRocks的向的向量量检索探索检索探索腾讯大数据腾讯大数据赵裕隆腾讯大数据研发工程师向量检索技术浅析StarRocks实现向量检索的原理及优化StarRocks向量检索在腾讯的实践案例挑战及未来规划01向量检索技术浅析什么是向量什么是向量检索检索向量向量检索检索新型新型应用不断涌现：应用不断涌现：听歌识曲、以图搜图、广告推荐、大模型检索增强等等；Embedding技技术的成熟：术。

6、集团化精细化平台化一体化CDP数据爆炸和多样化数据延时决策延时速度成为核心竞争力新的业务需求变化1234 StarRocks创新研发了基于 Bitmap 的用户圈选，可节省存储空间，支持快速的集合操作。此外，还配有如留存函数、漏斗函数等专属功能。基于 Roaring Bitmap 可轻松实现留存、漏斗等大量使用交集运算的分析。在用户行为分析场景，告别大量 SQL 任务调度，极大得减少集群压力。完。

7、Data SkippingDataCacheStarRocks OLAP Parquet T+1 I/O Join StarRocks DataCache 2.5 StarRocks DataCache OSSStarRocks BE P90 20%cache_block StarRocksDataCacheDataCachePK 。

8、StarRocks在腾讯音乐的大规模实践之路曹凤龙腾讯音乐专家工程师，业务运维中心总监010204QQ音乐数据仓库的演进历程StarRocks的存算分离模式在TME的实践QQ音乐数据仓库的演进历程01多维度&多场景运营&监控冷热&时效精细化&组件化2018-062021-122023-072024-03调研适配全面升级数据仓库的演进史StarRocks的存算分离模。

9、张元涛您的数据就是您的差异化因素来源：CDO Agenda 2024:Navigating Data and Generative AI Frontiers亚马逊云科技上的数据治理亚马逊云科技是制定数据战略、助力生成式应用程序的理想之选。

10、AI时代的时代的湖湖仓数据体系建设仓数据体系建设刘岩腾讯游戏数据技术负责人腾讯游戏数据工程的挑战基于多智能体的需求构造AI驱动的湖仓资产体系可持续优化的工程平台系统演示01腾讯游戏数据工程的挑战1.1 腾讯游戏数据发展腾讯游戏数据发展紧跟业务发展，以业务需求为核心紧跟业务发展，以业务需求为核心以数据以数据驱动业务变革，安全合规与成本治理。驱动业务变革，安全合规与成本治理。3.0 技术驱动创新逐步。

11、数据处理速度自助分析灵活性实时决策需求公司业务人员有快速处理每日新增数百万级交易、行情、资讯各类数据的需求，分析系统需要确保数据精准分析与及时响应。业务部门希望通过简单直观的方式灵活分析数据，减少对技术团队的依赖，加速决策。金融市场变化迅速，实时监控关键指标、快速应对风险是决胜的关键。运维成本高查询性能低数据时延高数据口径不统一数据冗余数据孤岛极速分析性能卓越架构简洁运维简单生态兼容性强大查询跑。

12、迈向云原生：理想汽车OLAP引擎变革之路海博理想汽车大数据工程师01020304理想汽车OLAP引擎的演进历程StarRocks存算一体旧架构的挑战StarRocks存算分离架构实践未来规划01理想汽车OLAP引擎的演进历程集群规模现状12+集群1.3w+CPU cores960w+查询/每天300T+数据量发展历程2024服务化建设&迈向云原生问题：集群内隔离能力不足机器成本不断上涨，。

13、Data WarehouseETLData MartsBI Analytics/GraphsData SourceHadoop Data LakeMPP/DWETLStreamingBI Analytics/GraphsDLMLData MartsData SourceData PreparationData SourceDLMLStreamingBI Analytics/GraphsData 。

14、StarRocks在电商数据分析场景的实践从2.5到3.X的迭代升级王新春唯品会-数据平台0102030405OLAP 在电商场景的发展历程StarRocks 2.5 存算一体加速分析StarRocks 3.1 存算分离优化和实践StarRocks 湖仓一体增强智能BI分析StarRocks Next：统一分析场景01OLAP在电商场景的发展历程Presto/ClickHouse到StarRoc。

15、*参考：The Value of Personal Data in Internet Commerce:A High-Stake Field Experiment on Data Regulation Policy*参考：赋能传统的报表分析，提供更准确的决策报表统计检验效力(Power)：指统计推断中检验出显著的能力，样本量越大，power越高。模型预估精度(MSE)：因果推断和机器学习模型结合。

16、移动云 x StarRocks：构建下一代云原生数仓陶捷移动云 数据库技术专家01020304移动云分析型数据库发展历程海山数仓的架构和理念海山数仓的核心技术及演进趋势移动云的实践与未来展望01移动云分析型数据库发展历程移动云数据库的发展历程移动云数据库团队十年前正式诞生，以实现数据库核心技术自主可控为目标，目前已构建完整产品和市场体系，并移动云数据库团队十年前正式诞生，以实现数据库核心技术自主。

17、存算分离StarRocks在京东物流的落地实践康琪京东物流高级技术专家/StarRocks&Apache Flink Contributor0102030405京东物流一站式自助分析场景存算一体向存算分离演进性能表现与降本增效稳定性保障与调优实践未来计划01京东物流一站式自助分析场景1-1.UData：京东物流一站式自助分析平台 以StarRocks高性能实时摄入、联邦查询、湖仓一体能力。

18、正式发售原生鸿蒙正式开启公测支付宝推出“支小宝”中国完成备案大模型数量已突破系列模型正式发布编程语言开源微软蓝屏宕机事件引发关注诺贝尔奖两度花落领域引发广泛关注国产视频生成模型频繁发布2023-2024年主要大模型发布/更新及竞争阶段OpenAI大模型所投入的训练集群规模变化宣布其包含十万卡的训练集群已投入训练年月，2023-2030年中国AGI市场规模（单位：亿元人民币）数据领域市场盘点AI 。

19、即席分析敏捷BI研效工具平台业务场景研发工作认证鉴权功能限制守护进程启停监控版本管理兼容方案监控告警日报周报月报基础能力建设稳定性建设运营指标建设crash自动恢复审计日志平台化价值收集Hive表加密字段数据读取收益敏捷BI规划其它集群进展当前进展。

20、StarRocks+Paimon：阿里集团 Lakehouse 架构的探索与实践翁才智 阿里云技术专家，Apache Paimon PMC Member范振（辰繁）阿里云计算平台开源 OLAP 负责人，StarRocks 社区 Champion阿里集团数据湖（ALake）项目背景数据生产-低效双重研发、资源浪费、数据口径核查难数据存储-冗余导出效率低、数据多份冗余、数据安全敞口数据分析-孤岛数据。

21、The Evolving Landscape of Iceberg REST CatalogYufei G 2024 Snowflake Inc.All Rights Reserved Caused by:org.apache.iceberg.exceptions.NotFoundException:Failed to open input stream for file:s3:/some/pa。

22、8MB1sPlanFEcachecachedistributed manifest plan job(,)(+)count/min/max Parquet Readerbloom filter Parquet/ORC Readerzonemap存算分离架构PaimonMVMVNested MVNested MVNested MVrefreshrefreshrefreshrefresh直接查询Pa。

23、更快、更高、更强丁凯StarRocks TSC member，镜舟科技云原生团队负责人存算分离最新进展0102030405StarRocks 存算分离存算分离-用户存算分离-性能存算分离-成本存算分离-生态01StarRocks 存算分离CacheAppKV-AppStarRocksShardManagerServiceManagerWorkerManagerFileStoreManagerLo。