孙立深度剖析MR交互技术与操作系统变革
8月15日上午, AWE Asia 2020在“创客之都”深圳如期举办。
AWE是享誉国际的XR行业博览会, 本次活动是它第四次选址亚洲。会上,400+业内高管、知名投资人、行业媒体人、优质供应商等齐聚一堂,在新5G时代来临之际,共同探讨XR行业市场走向,并思考后疫情时代对XR行业的深远影响。
摩尔定律的“预言”使得信息技术得以飞速发展,而当下,XR产业正迎来史无前例的发展机遇,且在不久后的将来必定会成为日常生活不可或缺的一部分。AWE Asia 2020开幕式上,影创科技董事长孙立作为第一个出场的演讲嘉宾,为大家深度剖析了“混合现实(MR)交互技术与操作系统变革”。
从上世纪六十年代中期的命令行界面,到八十年代初期微软、苹果公司用图形界面革新了操作系统,再将到2007年 “苹果、“微软”发表应用多点触控技术的产品。演讲开始,孙立梳理了人机交互操作系统的发展脉络。
接着,孙立又为大家详细阐述了AR到MR的技术发展历程。“从键盘按键过渡到屏幕触摸,用户有很长的适应期,MR作为下一个计算平台也一样。”在提到用户操作习惯培养时孙立提出,对于MR混合现实系统,其用户操作习惯的培养也是必经之路。
在MR世界中,人与世界、人与计算机的交互从2D平面跨入3D立体的世界,突破了传统屏幕的束缚。在视觉、操作、思维模式上,也发生着深刻改变。孙立说,MR系统下交互空间维度增加,交互的自然性和高效性得到了极大提升。
影创科技是全国第一,世界领先的混合现实领军企业。演讲中,孙立向与会人员演示了影创26自由度手势交互。在自主研发的计算机视觉基础上,借助边缘计算,影创搭建边缘云训练平台并完成手势识别算法云端部署,以此实现了26自由度手势追踪在MR智能眼镜上的准确识别和流畅运行。通过26自由度全自然手势交互,用户在佩戴影创MR智能眼镜后,学习成本几乎为零,轻松实现多种形态的手与虚拟物体间的交互。在即将到来的5G时代,通过5G网络提供高带宽、低时延网络传输能力,搭载了26自由度手势识别的影创MR智能眼镜将满足广域空间多人的即时自然手势互动协作。
随后,孙立阐述了MR人机交互技术主要的发展方向——多模态交互。据介绍,多模态交互包括声控交互、动作交互、姿态交互等。比如,“头部位姿”可以在空间中展示无穷多屏的内容,通过转动头部改变位置和姿态来切换视角焦点,查看不同内容。它与语音指令的结合,将为操控带来革命性变化。
操作系统是为人服务的。孙立认为,在设计系统最初就应该遵循以人为本的基本要求,并提炼出四大基本原则与同行共勉,即直接操作、环境相容、恰当反馈、美学考量。比如在操作上,应该把用户的舒适度放在重要考虑的位置;在追寻沉浸感时,要找到虚拟世界和现实世界的平衡;在追求创新性的同时需考虑系统以后的更新迭代;而视觉设计上,应当以少而精,不繁琐为妥。