深圳电子展
2024年11月6-8日
深圳国际会展中心(宝安新馆)

深圳电子展|探索虚拟与现实的边界:柔性应变传感器数据手套助力元宇宙时代

 

元宇宙概念的兴起,引发了人们对可穿戴设备的广泛关注。基于柔性应变传感器的数据手套因其成本低、重量轻、直接和连续监测手指运动而受到研究人员的青睐。近日,西北工业大学和军事科学院国防科技创新研究院合作,在人机交互领域国际著名学术期刊International Journal of Human-Computer Interaction(IJHCI)发表论文,综述了基于柔性应变传感器的数据手套在虚拟世界中的手势交互。今天就由深圳电子展小编为你解读更多行业新趋势。

 

文章先比较了基于视觉传感器、表面肌电传感器、惯性传感器以及柔性应变传感器的四种不同方法在设计数据手套方面的优缺点,论证了基于柔性应变传感器的数据手套在元宇宙应用中的优势。随后,对比了国内外代表性商用数据手套,并介绍了基于柔性应变传感器的数据手套各模块的结构设计。后,总结了手势识别在元宇宙中的应用和目前基于柔性应变传感器的数据手套存在的问题和发展前景。作者认为,基于柔性应变传感器的新型数据手套将产生变革性的影响,以实现精确、低延迟和沉浸式的元宇宙手势交互。

 

1、可穿戴手势识别系统

 

近年来,伴随着计算机视觉、柔性应变传感器等技术的不断进步,新型手势识别技术相继涌现,穿戴不便、设备复杂等问题正在得到解决。手势识别作为人机交互的关键内容之一,处于快速发展阶段。目前主流的手势识别关键技术包括视觉传感器、表面肌电信号传感器、惯性测量单元和柔性应变传感器。先,基于视觉传感器的手势识别方法容易受到环境亮度的影响,不可避免地存在遮挡问题,从而导致错误的结果。其次,基于sEMG的手势识别方案并不成熟,识别的手势数量不多,大多在10个左右,准确性和稳定性不足。近年来,苹果、Meta和谷歌等公司都在布局这种手势识别方案的开发。第三,数据手套作为另一种解决方案,提供了高准确率(>90%)和低延迟(毫秒级),并具有触觉和力反馈的附加功能。其中,基于IMU的数据手套需要在手上的关键点放置刚性传感器,这影响了舒适感。而基于应变传感器的柔性数据手套不会受到环境亮度、遮挡或噪音的影响,可以提高识别精度,提供更好的稳定性和稳健性,降低成本,佩戴舒适。

 

2、手套系统的功能模块

 

基于柔性应变传感器的手套系统,主要的三个部分是传感器、硬件电路和手势识别算法。柔性应变传感器将手指弯曲程度转换为电信号,由硬件电路对该模拟电信号进行放大、滤波等处理转换为数字信号,通过蓝牙或WIFI的方式送至PC系统,后用手势识别算法将数据转换为手势结果并应用到相关领域。

 

3、手势识别算法

 

计算机接收到蓝牙模块传输的数字信号后,需要通过相应的手势识别算法,将数字信号转换为相应的手势。目前的手势识别分为两类,即静态手势识别和动态手势识别,文中分别列出了2种典型算法。静态手势识别的手势种类有限,一般是将接收到的数字信号进行分类,将其映射到包含有限种类的手势集上。动态手势识别相对比较复杂,它需要从一个连续的数据流中分割手势,即找出每个手势的起始时刻和结束时刻。虽然过渡动作没有实际意义,但是其持续时间随手势动作的不同而不同,所以手势分割的实现比较困难,目前仍是一个挑战。

 

未来,元宇宙的终实现,将不可避免地建立起用户以及其他物理对象在虚拟空间中的数字孪生体,用户本人将拥有一个与自己完全对应的虚拟数字人。这需要外部设备将实际用户的手势、身体动作和声音等完全映射到元宇宙中。因此,在将现实映射到虚拟世界的过程中,手势的识别和建模至关重要。同时,虚拟用户在元宇宙中感知到的触觉、视觉、温度和湿度信息,也需要通过可穿戴设备反馈给实际用户。高性能的数据手套具有手势识别、触觉反馈和动觉反馈的功能,能够实现现实世界和元宇宙之间的双向交互。

 

以上便是深圳电子展小编为大家整理的相关内容,如果大家对这方面比较感兴趣,可以到深圳电子展参观交流。2023年10月11日-13日,深圳电子展将于深圳国际会展中心(宝安新馆)隆重开幕,将以“跨界+芯+智造”为创新理念,展会将汇聚1,200个企业及品牌参展,展示电子元器件、PCBA制程、智能制造、 EMS服务、半导体封测等相关的国内外设备新品及先进技术解决方案。与同期多展联动,带来消费电子、家电、工控、通信通讯、汽车、触控显示、新能源、医疗器械、光电等领域跨界商机,绽放亚洲电子工业新活力。此外,同期将举办超30场跨国、跨界活动,覆盖PCBA制程、半导体封装、工业机器人、智能仓储与物流、机器视觉、智慧工厂、工业互联网、激光、3C、家用电器、通信、汽车、5G、物联网、人工智能、AR/VR、新能源、医疗器械、照明等热门话题,创新打造多元化国内、外商务配对社交机会,一站式捕捉亚洲跨界商贸网络,诚邀您莅临参观,为您解读更多行业发展新趋势。

 

文章来源:传感器技术