清朗学风 | 走近第七届中国国际“互联网+”大学生创新创业大赛金奖项目

10月12日至15日，第七届中国国际“互联网+”大学生创新创业大赛总决赛在南昌大学举行。我校聋人工学院学生团队的项目《“鲸可语”——多模态连续手语自动标注识别系统》摘得全国总决赛高教主赛道金奖，让我们一起来了解一下这个金奖项目。

“鲸可语”

多模态连续手语自动标注识别系统

主要成员

王建源、张益彬、高世雄、乌力杰

指导教师

薛翠红、袁甜甜、闵笛、任美琪

项目介绍

针对手语标注识别语料库少、单模态手语标注识别精度低的问题，开发了一套结合互联网+大数据+人工智能的多模态连续手语自动标注识别系统，将手语视频和标注标签进行对齐，进而提高复杂环境下手语识别精度。该系统界面简洁，听障人士可以直接针对该系统软件进行手语操作，实现实时手语标注识别，促进听障人士和健听人之间的无障碍沟通。

LOGO释义

“鲸可语”的LOGO采用了比心手形与鲸鱼外形相结合的形象，代表了对手形的识别与标注，以庞大的数据语料库支撑起“鲸可语”系统。“蓝底白鲸”的图案代表海底唯一只能发出52赫兹歌声的鲸鱼，在别的鲸眼里，52赫兹鲸就是一个聋哑的存在，恰似我们的听障群体。我们的初心就是帮助这只“52赫兹的鲸”，让爱心通过指尖来传递，搭起聋健融合的桥。

来源 |聋人工学院

编辑 |刘静宇高欣悦

责任编辑 | 戴一宏 刘静宇

审核 |刘迎 王天耀 于晓蕾

天津理工大学学生新闻中心