《科创板日报》6月7日讯(编辑 宋子乔) 智能硬件迭代的本质是人机交互方式的升级,从键盘到触控、声音、手势,再到意念控制。
对于意念控制,最为人熟知的技术是脑机接口。苹果最先推开了触控交互之门,其MR设备也有望成为脑机接口技术在电子产品上的试水之作。
在苹果担任过神经技术研究员的Sterling Crispin 告诉人们,Vision Pro现在呈现的功能只是冰山一角,基于眼动感知、追踪、反应等技术,Vision Pro可通过人眼与大脑连接,创造一种粗糙的脑机接口体验。
AI模型可以通过眼球追踪、大脑电活动、心跳节奏、肌肉活动、脑内血液密度、血压、皮肤电反应等身体指标来推测用户的精神、心理状态,是否感到好奇、害怕?此刻注意力是否集中?是否记起过去的经历或其他认知状态?
从而预判用户行为,根据用户状态调整虚拟环境。Crispin表示,对瞳孔变化进行监测,能够被用来预测之后的行为,该技术已经获得专利且通过了有效性验证,通过这种监测瞳孔的方式来实时进行UI创建,这是一种非常酷的体验,“最酷的是在用户实际点击之前预测他们会点击什么。”
这种脑机预测功能,配合Vision Pro的12个摄像头、5个传感器、6个麦克风收集的数据信号,可让设备响应速度大幅提高、人机交互更加流畅。在Vision Pro上表现为,无需手柄的空中直接操控,设备间的无缝投屏切换,流畅的UI操控实时反馈。
不过,作为一家产品公司,苹果向来不爱将科技热词挂在嘴边。库克就曾公开表示,“元宇宙”概念模糊不清,苹果公司尽量避免卷入。对于脑机接口等词,苹果显然选择了同样的态度——用“神经科学”等术语解释相关功能。
也就是说,苹果并没有明确自己的MR设备具备脑机接口技术。
据职业社交网站领英,上文所述的Sterling Crispin于2018 年 5 月到2021 年 10 月任职于苹果,目前已离职,以战略和技术指导的咨询身份接受咨询工作。
Sterling Crispin在苹果的工作经历 信源:领英
领取专属 10元无门槛券
私享最新 技术干货