/多模态交互,打造新一代交互模式

多模态交互,打造新一代交互模式

正文字数:2161字

图片总数:26张

引言:“多模态交互”是融合了人的视觉、听觉、触觉等多种感官,计算机利用多种通信通道响应输入,并充分模拟人与人之间的交互方式。现被广泛运用到各种智能产品的交互设计中,人类通过语音、手势、表情等模态输入信息,计算机通过计算机视觉、听觉等通道响应就是典型的多模态交互。

01

全场景智联+人脸识别+智能猫眼三合一

Design by:华为

华为新款智能门锁集门铃、门锁和监控于一体,拥有人脸识别、指纹、手机/手表、卡片、密码、钥匙、临时密码等多种解锁方式,最关键的是它支持鸿蒙系统,用华为智慧屏或手机的用户可以与智能锁联动,随时可以查看门锁外面的情况,安全尽在掌控中。

分布式可视猫眼门外动态,尽在掌控;在家时,门铃一响华为智慧屏¹弹出视频窗口离家时,访客来访可通过手机远程视频对讲。

AI异常抓拍。既是门锁,也是安防摄像头,全天候实时监测门外动态,智能抓拍异常状况,并支持手机提醒和查看,时刻守护居家安全。

瞬时指纹解锁,每次指纹解锁时持续学习和完善用户指纹特征,解锁时间仅需0.5秒。双引擎AI指纹解锁老人小孩都好用,轻松应对各类复杂指纹不论是老人小孩的浅指纹还是过于干燥、潮湿或破损的指纹都能轻松解锁。

AI指纹解锁,一握即开。华为手机、手表,一碰解锁,多种解锁方式。门锁管理,一个App就搞定。通过华为智慧生活App即使不在家也能远程实时掌握门外动态并提供进出门和门外异常情况记录门未关/虚掩/劫持等自动告警功能。

02

小度配送机器人

Design by:百度

小度推出了自家的酒店服务机器人产品:小度配送机器人。该机器人依托于百度飞桨文心大模型,能自主感知周围环境与住客行为,实现多模态交互。

小度配送机器人采用了适度拟人化设计,长相讨喜、平易近人,脸部、颈部到机身,大量圆角曲线,柔软顺滑。深灰色装饰细节与腰身白色灯光点缀,伴随着灯光呼吸的节奏,再搭配灵动的表情,看起来俏皮可爱。提供个性化、多模态交互。

相比于常见的服务机器人,见面问好这些基础交互能力,小度配送机器人则更加强化了交互的个性化。它能够根据时间、节日、客人典型的行为特征,发起不同的交互方式。

比如女神节的时候,它会主动地跟女性客人说:女神节快乐等;这种主动交互还是多模态的,在打招呼时不仅使用热情具有特色的语言,还有生动丰富有感染力的表情,甚至机器人的形体动作。

机身搭载了 1 颗激光雷达,4 颗超声波传感器,4 个 TOF 视觉传感器,用以提升机器人感知范围和感知精度。基于百度最新研发的运动平台,通过视觉和激光双融合的定位导航算法,可以实现精准定位、灵活导航。

此外,小度配送机器人还采用了全新的悬挂减震方案,有着一定的越障性能,爬坡能力为 8°,越障能力为 20mm。

小度还推出了一款具有更大屏幕尺寸的配送机器人。在这块大屏幕上,可以用它拍摄好玩的互动视频,展示短片、宣传片,等。同时,对于酒店常有的会议、婚庆等活动场景,小度配送机器人能担当互动嘉宾,甚至客串“送花使者”等角色,为酒店增加收益的同时,也提升了活动内容的趣味性。

03

如影智慧中控inSight Air

Design by:如影智能

如影智慧中控inSight Air集智能面板、网关和语音控制于一体。同时,还融合智能音箱、多功能网关、智能门禁、四合一温控、智能闹钟、湿温度计、智能开关和音乐播放器功能于一身,将多种功能集于方寸之间,为用户展现极致的智慧中控服务。

不仅能将全屋设备汇总操控,同时还提供贴心的主动服务,为用户打造出全屋光影、气温、湿度、温度和安防等全场景智能生活体验,因此inSight Air通过控制家庭中多种设备,为用户打造一种全能、智慧和便捷的新家庭生活方式。

作为面向全家人的系统,需要最零门槛的交互,旋钮就是老人小孩都不用学习的交互方式之一。inSight Air 配有专利设计的超级旋钮,它可以实现无极调节,恰到好处的阻尼反馈:调音量、灯光亮度、室内温度 轻松控制。

采用了多模态交互,支持语音,触控,旋钮,按键,APP等方式控制,支持zigbee3.0 , 蓝牙5.0,双频wifi,RS485总线,以太网,KNX 等六种主流协议。


04

语音+手势多模态交互,宝马iNext量产搭载 

Design by:BMW

宝马声称,它与现有语音交互系统的不同之处在于,它无缝集成了语音和手势控制,允许司机根据自己的喜好在两种系统之间切换。语音识别、优化的传感器技术和对手势的上下文敏感分析使这种自由的多模态交互成为可能。

并且允许驾驶员在不同的组合方式下,同时使用语音、手势和眼神与车辆进行交互。该功能部分依赖于安装在仪表集群中的新一代摄像头,用来跟踪眼球运动和手势,给系统提供更多关于司机想要它做什么的信息,司机只需在说命令时指着汽车信息娱乐系统的某个区域,汽车就会在不触碰屏幕的情况下执行命令。

通过红外线信号,手势摄像机现在可以在驾驶员整个操作环境的三维空间中捕捉手和手指的运动,并确定一个精确的方向矢量。集成到仪表集群中的高清摄像头还可以记录头部和眼睛的方向。

驾驶者和乘客将能够与他们的外部周边环境进行互动,比如建筑物或停车位。即使是复杂的查询,系统也可以通过手指和发出语音命令来快速和轻松地回答。

素材来源:

1.https://mp.weixin.qq.com/s/PUVLRahI6p2lExrUsDAtDw

2.https://mp.weixin.qq.com/s/gThc20SQMNIfCTqMstywtw

3.https://mp.weixin.qq.com/s/Fid6GdMILkmQqqqIxOeOew

4.https://mp.weixin.qq.com/s/8aaY3_Et5go2FT_6ZCqxKA

版权说明:本文素材来源于网络,如有损害或影响您的合法权益,请积极与我们联系处理


 
          
编辑EDITOR|王辰梅
审核REVIEWER|贾俊杰

 

本文来自微信公众号“信息与交互设计研究所”(ID:gh_c1cd7847b233)。大作社经授权转载,该文观点仅代表作者本人,大作社平台仅提供信息存储空间服务。