许跃鸿-一站式向量检索平台 0.2.pdf

《许跃鸿-一站式向量检索平台 0.2.pdf》由会员分享，可在线阅读，更多相关《许跃鸿-一站式向量检索平台 0.2.pdf（17页珍藏版）》请在三个皮匠报告上搜索。

1、(-0.4136067032814026,-0.17186740040779114,.,-0.281367795440040)embeddingIVF-FLAT、HNSW、FLAT.ANN SEARCHp 数字经济时代的到来，未来数据量进一步增长：根据IDC的相关预测，全球数据圈将从2018年的33ZB增至2025年的175ZB，实现5倍以上的增长。预计到 2025年，中国数据圈将增至48.6ZB，占全球数据圈的27.8%数字经济时代的到来，数据正在成为新的自然资源、新的战略资源，海量数据的内容理解、高效检索成为业务系统的挑战图片检索视频检索LLM知识库意图搜索海量数据业务系统2业务系统n前端

2、应用海量数据海量数据海量数据分析数据价值特征信息检索EB级千亿级业务系统1业务规模业务需求p 传统的检索难以满足需求：业务系统中大部分是视频、图片、文档等非结构化内容混合检索数据删除向量检索向量检索向量检索数据接入索引管理向量同步图片向量化语音向量化向量化向量化文本向量化视频向量化身份认证授权应用管理数据集管理后台系统后台系统.模型管理集合管理文本切割数据预处理数据预处理视频抽帧图片处理文件存取基础设施向量数据库向量数据库对象存储GPU/VGPUK8S专线裸金属业务中台1业务中台2业务中台3.业务中台N应用应用场景场景.视频内容检索能力开放能力开放APISDK统一网关负载均衡动态路由熔断限流精

3、细化鉴权链路能力编排业务中台业务中台一站式向量一站式向量检索平台检索平台集合管理数据集管理智能搜图LLM知识库语音搜索一站式向量检索平台一站式向量检索平台实现音视图文多模态数据全量解析，高效存储、跨模态搜索、高效算力调度，满足各类实现音视图文多模态数据全量解析，高效存储、跨模态搜索、高效算力调度，满足各类客户的多模态数据分析运算和检索的需求客户的多模态数据分析运算和检索的需求一站式一站式用户/接入方仅仅需要将非结构化图片、文档、视频交给平台，全托管的完成向量数据集的构建和检索重新定义应用重新定义应用赋能传统应用积累的文件资产，理解文件内容，形成记忆体，易于应用智能化升级海量海量平台定位于中台，

4、能够使企业快速、高效地扩展业务，适合规模化复制支持海量向量数据的存储，支持在云上扩展，极速、高可用多模态支持多模态支持支持对文本、图片、音频和视频等非结构化数据特征提取，支持异构计算，可以高效地处理大规模的并行和分布式计算任务videosframescategorizeembeddingvectorsann searchpictureembeddingsearchresponsecategorize搜索任务数据集搜索任务数据集搜索任务数据集一站式向量检索平台视频检索系统1视频检索系统2视频检索系统n业务集合.搜索任务数据集搜索任务数据集搜索任务数据集业务n集合视频抽帧混合检索向量化任务管理im

5、agesvectorsann searchimage/textsearchresponse embeddingembeddingcloud syncdeleteadd用户级数据集用户级数据集用户级数据集一站式向量检索平台业务1搜图系统业务2搜图系统业务n搜图系统业务集合.用户级数据集用户级数据集用户级数据集业务n集合数据同步混合检索多模态向量化端云协同vectorsann searchLLM QuestionquestionembeddingLLMsplitQA datasetembeddingfileembedding业务1知识库一站式向量检索平台业务1智能助手业务2智能助手业务n智能助手.文本切分向量检索文本向量化知识库管理业务2知识库业务n知识库 向量的存储与检索是一个真实需求，而且会随着AI发展水涨船高，前途光明 向量将成为AI时代的JSON。03030202 0101大规模大规模应用落地、模型优化和算力调度端云协同模型减少云侧向量检索成本数智化转型进一步推进业务系统智能化升级改造谢谢！谢谢！向量的存储与检索是一个真实需求，而且会随着AI发展水涨船高，前途光明 向量将成为AI时代的JSON。