1、新型人机交互体验演进与未来数字生活新型人机交互体验演进与未来数字生活20222022年年1111月月中国移动研究院中国移动研究院 用户与市场研究所用户与市场研究所2 2人机交互模式演进人机交互模式演进1 1人-机器交互体验与未来数字生活2 2人-虚拟人交互体验与未来数字生活3 33 3新技术背景下人机交互的信息感知与输出、信息处理和交互对象正在发生变化具体变化如下:1.1.信息感知信息感知:机器已经可以感知语音、手势等指令;2.2.信息处理信息处理:和人的决策相对应,机器开始借助人工智能技术进行信息处理和决策;3.3.信息输出信息输出:机器逐步普及语音输出通道,并出现简单的触觉信息输出;4.4
2、.身份识别身份识别:在人机交互的过程中对人进行身份认证;5.5.交互对象交互对象:虚拟人开始作为交互主体出现在人机交互过程中。1多种感知方式2机器决策3多通道输出4身份认证5虚拟人交互传统的人-机器交互流程4 4未来的人机交互主体将拓展为人-机器-虚拟人三方人与虚拟人交互人机器虚拟人未来人机间将建立起人人-机器机器-虚拟人三方互动虚拟人三方互动的交互模型。目前人与机器交互正在经历转变,人与虚拟人交互处于起步阶段。每种交互模式均遵循信息感知-决策-信息输出的交互流程。虚拟人虚拟人人人处理输出感知身份认证机器机器感知处理感知处理输出虚拟形象人与机器交互虚拟人与机器交互信息感知信息输出信息处理信息输
3、出信息处理信息感知身份认证人机器/虚拟人输出输入输出输入人机界面输出5 5人-机器-虚拟人三方交互将延伸出以虚拟人和智能机器为主导的交互模式人人虚拟虚拟人人机机人与虚拟人交互人-机交互人机器虚拟人未来人机交互还将发展出虚拟人与机器、虚拟人与虚拟人、机器与机器三种交互模式。随着机器人技术的成熟,虚拟人和机器有望在机器人身上得到融合,两种交互对象呈现融合趋势。虚拟人虚拟人人人处理输出感知身份认证机器机器感知处理感知输出人与机器交互虚拟人与机器交互机器机器人人虚拟人-虚拟人交互机-机交互处理输出虚拟形象识别6 6以虚拟人和智能机器为主导的交互模式将在10年后逐步出现2021元宇宙元年2031以后虚拟
4、人技术成熟1980年人机交互概念提出2016年左右XR和AI技术大规模应用除正在发生变化的人与机器和刚刚萌芽的人与虚拟人交互外,虚拟人与机器、虚拟人与虚拟人、机器与机器三个交互模式将在虚拟人与机器、虚拟人与虚拟人、机器与机器三个交互模式将在未来未来1010年后逐步萌芽。年后逐步萌芽。人与机器交互传统人机交互经历命令和图形用户界面时代随着XR和AI技术大规模应用,人与机器间呈现多通道、智能化交互趋势人与虚拟人交互元宇宙萌芽,人与虚拟人之间开始出现简单交互虚拟人与机器交互虚拟人具备主动交互能力虚拟人与虚拟人交互虚拟人形成规模机器与机器交互可交互机器形成规模注:技术成熟时间依据Gartner、信通院
5、等机构研究数据和研究院内部研究预判7 7人机交互模式演进1 1人人-机器交互体验与未来数字生活机器交互体验与未来数字生活2 2人-虚拟人交互体验与未来数字生活3 38 8未来10年人机交互将逐步拓宽信息感知及输出通道人输出输入信息感知人输入输出信息输出2年以内2-5年5-10年10年以上感知技术语音识别动作捕捉人脸识别情绪感知步态识别手势追踪眼球追踪肌电接口脑机接口2年以内2-5年5-10年10年以上传感技术语音合成沉浸声场体三维显示生物声传感全息显示气味模拟触觉反馈外骨骼1.1.信息感知信息感知:未来10年,语音识别、动作捕捉、肌电接口、脑机接口等技术逐步打通听觉、视觉、生物电等机器感知通道
6、。2.2.信息输出信息输出:未来10年,体三维显示、气味模拟、生物声传感、触觉反馈等技术逐步打通视觉、听觉、嗅觉、触觉等机器输出通道。注:技术成熟时间依据Gartner、信通院等机构研究数据和研究院内部研究预判机器/虚拟人机器/虚拟人9 9未来5-10年人-机器交互将迎来关键发展节点,并从个人生活延伸到生产和服务2年以内2-5年5-10年10年以上机器感知视觉手势+动作、表情+情绪+健康状况听觉语音语义+情绪同上机器输出视觉二维图像+三维图像+全息图像听觉+自然语音+沉浸立体声+生物声传感同上嗅觉气体+气味信号触觉触感+力辅助体验场景核心体验语音操控肢体+眼动操控听+触+嗅觉沉浸脑电操控典型场