5-2 无服务器技术赋能大数据分析.pdf

1、 2021,Amazon Web Services,Inc.or its affiliates.All rights reserved.2021,Amazon Web Services,Inc.or its affiliates.All rights reserved.无服务技术赋能大数据分析张镎高级产品经理，亚马逊云科技数据分析产品线Amazon EMR Serverless 在云端运行PBPB级规模的数据分析 2021,Amazon Web Services,Inc.or its affiliates.All rights reserved.2021,Amazon Web Services

2、,Inc.or its affiliates.All rights reserved.客户希望从自己的数据中获得更多价值用户多元化指数型增长来源众多格式多样化分析场景多变 2021,Amazon Web Services,Inc.or its affiliates.All rights reserved.智能湖仓 现代化数据架构Amazon OpenSearchServiceAmazonAuroraAmazon EMRAmazon SageMakerAmazon DynamoDBAmazon RedshiftAmazon S3 2021,Amazon Web Services,Inc.or i

3、ts affiliates.All rights reserved.无服务技术演进20062013201420162021.12 reInvent2017AWS AnalyticsData integration,ETL,and CatalogData warehousingBig data processingInteractive AnalyticsReal-time analyticsReal-time analyticsVisualizationData lake setup management and governanceS3KinesisLambdaAthena,QuickSig

4、htGlue2019LakeFormation 数据分析走向无服务 从单一分析能力到全栈数据分析能力 从Builder 到 BuyerEMR serverless-big data processingRedshift serverless-data warehouseMSK serverless-real-time analyticsKinesis on-demand-real-time analytics 2021,Amazon Web Services,Inc.or its affiliates.All rights reserved.Amazon EMR Serverless简单易用性

5、能优化功能全面成本效益无需管理服务器。Amazon EMR Serverless Amazon EMR Serverless 可预配置并动态扩展您数据处理应用程序每个环节所需的计算和内存资源。性能优化的运行时，兼容标准开放式协议，并实现超过2 2倍的性能提升。包含Amazon EMR Studio Amazon EMR Studio 和NotebookNotebook，以及熟悉的开源工具，帮您轻松开发、可视化并调试应用程序。只为您实际使用的计算时间和资源付费。在 云 中 运 行 P B 级 数 据 分 析，无 需 管 理和 运 维 集 群 2021,Amazon Web Services,In

6、c.or its affiliates.All rights reserved.1.简单易用更为简单的决策无需考虑实例类型或集群规模无需配置、优化、并运维集群无需管理操作系统补丁等更轻松地运行开源框架，选择一个版本，随后即可运行 2021,Amazon Web Services,Inc.or its affiliates.All rights reserved.2.无需猜测集群规模细粒度扩展，自动为处于不同Stage的工作负载轻松添加和删除工作节点数据量变化后无需重新配置仅为自己实际使用的资源付费能够指定最大扩展上限进而有效控制成本自动扩展。无需猜测集群规模 2021,Amazon Web S