并非所有使用视频聊天应用程序的人都可以在交流中使用语音功能。因此,对于有听力障碍或语言障碍的人使用手语就变得很重要。到目前为止,视频通话算法还无法检测到这种情况。
Google开始寻找在视频通话期间可以检测到手语的方法。因此,使用手语的人在开始解释某事时可以类似地突出显示。
实际上,这一点的重要性体现在以下几点:在视频聊天应用程序中,扬声器进入主屏幕。换句话说,此功能是为了防止声音在拥挤的环境中干扰而添加的,使人们脱颖而出并依次说话。
Google还发表了一篇有关机器学习的文章。如文章所述,Google将通过手语这一步骤使它能够在视频通话中被感知,并使听障人士在对话中更舒适地表达自己。本文还展示了该算法如何在不影响视频质量的情况下区分手语运动和正常运动。