《中移智库：新型人机交互体验演进与未来数字生活（2022年11月）（18页）.pdf》由会员分享，可在线阅读，更多相关《中移智库：新型人机交互体验演进与未来数字生活（2022年11月）（18页）.pdf（18页珍藏版）》请在本站上搜索。 1、新型人机交互体验演进与未来数字生活新型人机交互体验演进与未来数字生活20222022年年1111月月中国移动研究院中国移动研究院 用户与市场研究所用户与市场研究所2 2人机交互模式演进人机交互模式演进1 1人-机器交互体验与未来数字生活2 2人-虚拟人交互体验与未来数字生活3 33 3新技术背景下人机交互的信息感知与输出、信息处理和交互对象正在发生变化具体变化如下：1.1.信息感知信息感知：机器已经可以感知语音、手势等指令；2.2.信息处理信息处理：和人的决策相对应，机器开始借助人工智能技术进行信息处理和决策；3.3.信息输出信息输出：机器逐步普及语音输出通道，并出现简单的触觉信息输出；4.42、.身份识别身份识别：在人机交互的过程中对人进行身份认证；5.5.交互对象交互对象：虚拟人开始作为交互主体出现在人机交互过程中。1多种感知方式2机器决策3多通道输出4身份认证5虚拟人交互传统的人-机器交互流程4 4未来的人机交互主体将拓展为人-机器-虚拟人三方人与虚拟人交互人机器虚拟人未来人机间将建立起人人-机器机器-虚拟人三方互动虚拟人三方互动的交互模型。目前人与机器交互正在经历转变，人与虚拟人交互处于起步阶段。每种交互模式均遵循信息感知-决策-信息输出的交互流程。虚拟人虚拟人人人处理输出感知身份认证机器机器感知处理感知处理输出虚拟形象人与机器交互虚拟人与机器交互信息感知信息输出信息处理信息输3、出信息处理信息感知身份认证人机器/虚拟人输出输入输出输入人机界面输出5 5人-机器-虚拟人三方交互将延伸出以虚拟人和智能机器为主导的交互模式人人虚拟虚拟人人机机人与虚拟人交互人-机交互人机器虚拟人未来人机交互还将发展出虚拟人与机器、虚拟人与虚拟人、机器与机器三种交互模式。随着机器人技术的成熟，虚拟人和机器有望在机器人身上得到融合，两种交互对象呈现融合趋势。虚拟人虚拟人人人处理输出感知身份认证机器机器感知处理感知输出人与机器交互虚拟人与机器交互机器机器人人虚拟人-虚拟人交互机-机交互处理输出虚拟形象识别6 6以虚拟人和智能机器为主导的交互模式将在10年后逐步出现2021元宇宙元年2031以后虚拟4、人技术成熟1980年人机交互概念提出2016年左右XR和AI技术大规模应用除正在发生变化的人与机器和刚刚萌芽的人与虚拟人交互外，虚拟人与机器、虚拟人与虚拟人、机器与机器三个交互模式将在虚拟人与机器、虚拟人与虚拟人、机器与机器三个交互模式将在未来未来1010年后逐步萌芽。年后逐步萌芽。人与机器交互传统人机交互经历命令和图形用户界面时代随着XR和AI技术大规模应用，人与机器间呈现多通道、智能化交互趋势人与虚拟人交互元宇宙萌芽，人与虚拟人之间开始出现简单交互虚拟人与机器交互虚拟人具备主动交互能力虚拟人与虚拟人交互虚拟人形成规模机器与机器交互可交互机器形成规模注：技术成熟时间依据Gartner、信通院5、等机构研究数据和研究院内部研究预判7 7人机交互模式演进1 1人人-机器交互体验与未来数字生活机器交互体验与未来数字生活2 2人-虚拟人交互体验与未来数字生活3 38 8未来10年人机交互将逐步拓宽信息感知及输出通道人输出输入信息感知人输入输出信息输出2年以内2-5年5-10年10年以上感知技术语音识别动作捕捉人脸识别情绪感知步态识别手势追踪眼球追踪肌电接口脑机接口2年以内2-5年5-10年10年以上传感技术语音合成沉浸声场体三维显示生物声传感全息显示气味模拟触觉反馈外骨骼1.1.信息感知信息感知：未来10年，语音识别、动作捕捉、肌电接口、脑机接口等技术逐步打通听觉、视觉、生物电等机器感知通道6、。2.2.信息输出信息输出：未来10年，体三维显示、气味模拟、生物声传感、触觉反馈等技术逐步打通视觉、听觉、嗅觉、触觉等机器输出通道。注：技术成熟时间依据Gartner、信通院等机构研究数据和研究院内部研究预判机器/虚拟人机器/虚拟人9 9未来5-10年人-机器交互将迎来关键发展节点，并从个人生活延伸到生产和服务2年以内2-5年5-10年10年以上机器感知视觉手势+动作、表情+情绪+健康状况听觉语音语义+情绪同上机器输出视觉二维图像+三维图像+全息图像听觉+自然语音+沉浸立体声+生物声传感同上嗅觉气体+气味信号触觉触感+力辅助体验场景核心体验语音操控肢体+眼动操控听+触+嗅觉沉浸脑电操控典型场7、景2C个人消费+办公2C个人消费+家庭B+C娱乐+残障辅助2B医疗+工业1.1.机器感知方面机器感知方面，未来5-10年间从感知外在表现转向感知内在情绪。2.2.机器输出方面机器输出方面，未来5-10年间扩展出视听嗅触4种感知通道。3.3.应用场景方面应用场景方面，未来5-10间从个人消费等C端场景逐渐延伸到医疗和工业等B端场景。1010未来5年内动作捕捉、眼动追踪和人脸识别等技术使个人消费等场景的设备操控方式更加多样个人消费场景设备操控运动健身身体姿态监测头戴式设备眼动操控AR隐形眼镜眼动操控运动数据检测入户人脸解锁2-52-5年内，眼动追踪、动作捕捉等技术得到广泛应用，集中体现设备操控、运8、动健身等年内，眼动追踪、动作捕捉等技术得到广泛应用，集中体现设备操控、运动健身等个人消费场景下个人消费场景下。其中头戴式显示器、隐形眼镜等个人设备能够感知和识别的用户信息越来越多，身体姿态检测可识别的动作类型也越来越丰富。用户在消费生活中可以使用的操控方式越来越多样。家庭家庭安防1111未来5-10年气味模拟、触觉反馈、肌电接口等技术使个人娱乐等场景的体验更加沉浸，残障服务等场景的操控更加智能听觉沉浸娱乐场景商业场景残障辅助场景嗅觉沉浸商业客服义肢操控触觉沉浸盲文显示娱乐场景中的沉浸体验三维视频客服5-105-10年内，沉浸声场、气味模拟、触觉反馈、肌电接口、情绪感知等技术得到广泛应用，集中体9、现沉浸式娱乐和残障辅助等场年内，沉浸声场、气味模拟、触觉反馈、肌电接口、情绪感知等技术得到广泛应用，集中体现沉浸式娱乐和残障辅助等场景下。景下。沉浸式娱乐覆盖的感官越来越丰富，游戏沉浸感越来越强。肌电操控义肢可完成的动作越来越多，为残疾人提供越来越智能的帮助。肌电操控义肢电子盲文显示器121210年后脑机接口和步态识别等技术使医疗和公共服务等场景的流程更加高效医疗场景疾病识别治疗和康复工业场景公共安全场景抑郁症识别力量和运动辅助大人流识别非法入侵告警渐冻症治疗1010年后，脑机接口、步态识别、外骨骼等技术得到广泛应用，集中体现在智慧医疗和公共安全等场景下。年后，脑机接口、步态识别、外骨骼等技术10、得到广泛应用，集中体现在智慧医疗和公共安全等场景下。步态识别提高了抑郁症的诊断效率，脑机接口提高了神经类疾病治愈的可能性，医疗服务更加高效；步态识别目标人物提高了安防工作的准确率，公共服务更加高效。目标人物识别非法入侵识别劳动辅助1313人机交互模式演进1 1人-机器交互体验与未来数字生活2 2人人-虚拟人交互体验与未来数字生活虚拟人交互体验与未来数字生活3 31414未来5年后人-虚拟人交互将迎来关键发展期，并开始在生活和生产场景下协同发展2年以内2-5年5-10年10年以上虚拟人感知视觉手势+动作、眼动+情绪听觉语音语义+情绪虚拟人输出视觉二维图像+三维图像+全息图像听觉自然语音+沉浸立体11、声同上体验场景核心体验语音+手势操控+动作、表情同步+情感交互典型场景2B金融、零售等客服2C社交+娱乐B端与C端协同发展1.1.虚拟人感知方面虚拟人感知方面，未来5-10年间从感知外在表现转向感知内在情绪。2.2.虚拟人输出方面虚拟人输出方面，未来5-10年间实现三维图像显示。3.3.应用场景方面应用场景方面，未来5年后B端及C端场景协同发展，趋向成熟。1515未来2年内语音交互和手势识别等技术使智慧服务等场景下的体验更加智能服务型虚拟人（2B）虚拟客服金融场景文旅场景零售场景虚拟理财顾问虚拟导游虚拟讲解员虚拟导购2 2年以内的虚拟人交互体验以语音会话和手势同步为主，主要体现在金融、文旅和零12、售等场景下的虚拟客服方面年以内的虚拟人交互体验以语音会话和手势同步为主，主要体现在金融、文旅和零售等场景下的虚拟客服方面。虚拟理财顾问、虚拟讲解员、虚拟导购等形象在提供智慧服务的同时也突出了品牌形象特点。AIYA小浦滨滨屈晨曦1616未来2-5年动作捕捉、面部识别等技术使个人社交和娱乐等场景下的操控更加自然虚拟分身虚拟私人聚会社交场景娱乐场景虚拟会议数字角色操控2-52-5年以内的虚拟人交互体验以肢体动作同步、表情同步、眼神同步为主，主要体现在社交和娱乐场景的虚拟分身方面。年以内的虚拟人交互体验以肢体动作同步、表情同步、眼神同步为主，主要体现在社交和娱乐场景的虚拟分身方面。用户对虚拟聚会、虚拟会议中的第二分身和数字角色的操控更加自然。个人形象的虚拟第二分身游戏角色1717未来5年后情绪感知等技术使医疗和家庭服务等场景的体验更加情感化服务型虚拟人（2C）心理治疗家庭场景家庭陪护服务型虚拟人（2B）医疗场景家庭陪伴5 5年以后的虚拟人交互以情感化体验为特点，主要体现医疗和家庭等场景的情感陪伴方面年以后的虚拟人交互以情感化体验为特点，主要体现医疗和家庭等场景的情感陪伴方面。虚拟心理治疗师和家庭陪伴虚拟人具备情感交互的能力，能够为用户提供情感化的陪伴体验。虚拟心理咨询虚拟陪伴虚拟陪护训练研究院官方微信研究院官方微信中移智库官方微信中移智库官方微信研究院研究院官方网站官方网站http:/