微博-张鑫-视频内容理解中台建设实践.pdf

1、主办方： 微博视频内容理解中台建设实践 张鑫 微博视频 高级系统研发工程师 主办方： 张鑫 高级系统研发工程师 “ 负责微博视频服务稳定性相关的架构优化及升级 视频编解码算法及策略优化 当前专注于视频内容理解中台搭建, 用以支撑微博视频 每天千万级内容理解任务的调度执行 ” 请插入 您的照片 讲师简介 主办方： 大纲 1.背景介绍背景介绍 2. 微博视频内容理解中台挑战 3. 视频内容理解中台架构设计 4. 总结 主办方： 1. 背景介绍 5亿+ 月活 2 亿+ 日活 百万级 视频日发布量 几十亿 视频日播放量 信息分享信息分享信息获取信息获取观点交流观点交流知识传递知识传递 主办方： 1.

2、背景介绍 高质量知识传递视频高质量知识传递视频 2300 万万+次播放次播放 主办方： 1. 背景介绍 下载下载 二次上传二次上传 版权保护版权保护 关联原创关联原创 点击跳转 主办方： 1. 背景介绍 视频消费场景视频消费场景 分类 推荐 搜索 审核 游戏? 开箱? 美妆? 出现的人或物 视频关键词 视频指纹 视频水印 结构化数据结构化数据 主办方： 原始数据业务 审核 推荐 搜索 版权 视频 标题 博文 1. 背景介绍 主办方： MCA(Media Content Analysis, 视频内容理解) 内容理解 1. 背景介绍 原始数据预处理数据 机器标注 标题 博文 视频 音频 图像 文本

3、 业务 应用数据 自动字幕 优选封面图 精彩片段 弹幕蒙版 自动审核 视频相似度 领域分类 人工标注 分类 画质 指纹 人脸 语音识别 LOGO . 非结构化 结构化 数据价值数据价值 播放 弹幕画质增强 分发 推荐搜索热门 生产 版权字幕 精彩集锦封面图 主办方： 1. 有什么? 2. 找谁接? 3. 如何接? 1. 背景介绍 指纹 消息队列 画质ASR 业务方1业务方2业务方3业务方4 消息队列 http http rpc rpc 零散 重复 接入方式 接入语言 增加接入门槛 放大沟通成本 产品快速孵化 响应用户的需求 主办方： “软件开发中遇到 的所有问题，都可 以通过增加一层抽 象而得以解决” 1. 背景介绍 主办方： 1. 背景介绍 指纹画质ASR 业务方1业务方2业务方3业务方4 中台 后台 业务方的规模化创新 前台系统的用户响应力 快速响应、探索、挖掘、 引领户的需求 视频内