ACM通信

从Jar Jar到手语动作捕捉的旅程打开了一扇新的交流方式的大门

达尔豪斯大学教授亚伦·纽曼是加拿大认知神经科学研究主席，他正在使用动作捕捉技术来更深入地理解手语和其他形式的基于手势的交流。研究手语对大脑影响的一个主要挑战是，人类的手势经常受到面部表情等其他刺激的辅助或影响。为了消除这些其他指标，纽曼准备了一些短视频，除了最基本的动作外，删除了所有内容。这些视频被展示给连接到监测大脑活动的脑电图系统的研究参与者。

他说:“我们可以在几毫秒内立即看到人们的反应。”“我们想知道符号交流在何时何地跨越门槛，成为大脑中成熟的语言。”

为了在视频中达到较高的清晰度，纽曼将学生志愿者连接到几十个光纤传感器上，并记录他们的运动。总的来说，20名学生使用动作捕捉数据制作了80多个短视频剪辑。在接下来的几个月里，纽曼将在手语使用者和不懂手语的人身上测试视频，他已经创建了第二组动作捕捉数据，并计划将其转化为另一组动画。

从长成这样
查看全文

没有发现记录