《中国科学报》:言语康复系统:听障家庭的福音
——记中科院深圳先进院王岚团队
中科院深圳先进技术研究院王岚博士的团队研发出可视化言语康复系统开创了新型的言语康复训练模式,利用最新的语音处理技术结合计算机图形技术,通过直观的可视化模型提供完整的语音生成过程,精确指导患者学习发音,并自动评价患者发音质量。该系统强化了患者对训练内容的接受程度,提升了训练效果,降低了培训技师的工作强度,扩充了训练容量,患者更可以通过客户端在家人的指导下进行训练。
让语音开腔
可视化言语康复系统是中科院“科技助残行动计划”和“国家自让科学基金”的重点项目,由中科院深圳先进技术研究院环绕智能实验室和广东省残疾人联合会联合承担。其中环绕智能研究室(以下简称)是深圳先进技术研究院首批建立的研究单元。AIMSL以研究员王岚博士为核心,在首席科学家蒙美玲教授、特聘专家王士元教授的大力支持下,致力于研究以语音语言智能处理为核心的多模态交互技术,刘循英博士、彭刚博士、燕南博士等一批学科专业人才加盟其中。
王岚博士毕业于英国剑桥大学,2007年加入中国科学院深圳先进技术研究院任环绕智能实验室执行主任,从事语音信息处理以及多模式智能信息系统等方面的研究。在英国学习工作期间,作为主要成员参与了美国DARPA组织的EARS和GALE两个国际上迄今最大的语音信息技术研究项目,参加开发的大规模连续语音识别系统在NIST和DARPA组织的语音识别性能评测中取得了最佳识别性能。
2009年初,AIMSL与广东省残疾人联合会共同承担中科院“科技助残行动计划”和“知识创新工程项目”的重点项目,其成果进一步应用于可视化言语康复系统。中科院深圳先进技术研究院研究员王岚博士在接受《中国科学报》记者采访时表示,可视化言语康复系统的整体技术水平已经达到国内领先、国际先进的程度,其采用的自动语音识别和三维头像发音模拟技术在国际、国内一流期刊杂志上发表了多篇论文,在国内多个知名三甲医院进行了技术演示,获得了一致好评。该项目的产业化已在逐步推进,借助市场化运作,年内有希望推出硬件产品。
孩子我“喂”你说
随着国家“十二五”助残计划的实施,先天和后天形成听力障碍的孩童将获得免费安装人工耳蜗,然而有限的听力难以通过日常对话获取正常的言语能力,这导致一大批学龄儿童患者止步于学校大门。
可视化言语康复系统提供一整套发音质量评价方法,能够实时反馈言语障碍患者的发音准确度、语句流利度等,并通过虚拟现实的方式展现发音时各个器官的透视联动过程,方便患者进行发音动作模仿,同时提供发音反馈帮助患者对照评价有效地纠正与调节。
2009年起,王岚团队以深圳市晴晴言语康复中心作为实验基地,“中心里的孩子们都是佩戴了助听器或者安装了人工耳蜗,我们的系统离不开所有特教老师和孩子们的支持与配合。”王岚博士深情地说。
王岚博士告诉记者,从系统的设计阶段开始,团队就一直跟踪观察特教老师和听障孩童的康复训练过程,在现场进行功能测试,每一次系统调试都要耗费一周时间,而收集数据的过程则更加辛苦,一个下午也只能做五个孩子的试验,数据真正合格的有时一个也没有。使用该系统的听障孩童年龄在3至7岁,界面设计风格是以孩童喜爱的卡通形象设计的,色彩丰富,运用了FLASH和3D增强学习兴趣,这些孩子们都很喜欢我们研发的系统,每次用我们的系统上课都会兴奋不已,家长反映孩子们的专注程度和主动学习的意识有很大提高,而特教老师的工作压力也明显得到缓解,训练效果的持续性大大优于传统模式。
2011年王岚团队将该系统与北京聋儿康复中心、广州聋儿康复中心、深圳早期干预中心等进行了实地交流,上述机构对该系统的实用性和研究的先进性都给予了一致的好评。
“从应用效果来看,我们开发的针对中文的三维说话人头像连续发音运动模拟系统,改进了传统依靠听力和图片进行言语训练的方式,为言语康复领域提供了全新的技术工具,对于该领域的规模发展是至关重要的一步。”王岚博士坦言,“基于我们的产业化目标,听障孩童的家庭将不必再为高昂的培训或治疗费用而苦恼,即使是小雨人,我们的系统也能‘喂’你说。”
想说就会说
在产业资本的关注下,可视化言语康复系统将首先以言语康复、助残发声训练软件的形式登陆市场,对于市场而言该系统的优势就在于易操作。可视化言语康复系统可以安装在普通电脑,平板电脑,手机上,用户可以根据不同的年龄段选择不同的学习内容扩展系统:在训练场所,特教老师可以把更有针对性的内容加入到该系统中作为教材使用;在家里,家长可以通过该系统的客户端来辅导孩子学习,保持训练效果的持续性和多样性。
中国大约有2100万人存在听力障碍,其中包括80万名年龄在7岁以下的儿童。“许多听障儿童仍然有微弱的听力,现在国家又在大力推行为听障儿童免费安装人工耳蜗,对这些孩子来说早一天通过专业化的言语康复系统进行发声和听力训练,那么他们当中的大部分孩子都能与正常儿童一起学习和生活。”王岚博士明确表示。
“在言语康复领域,依托越来越强大的互联网以及飞速发展的IT软硬件技术,全新的教育和学习模式正在逐渐显露出真正的价值和商机。可视化言语康复系统的研究成果在技术上使得交互式智能型自动语言学习真正成为现实,也必定会带来全新的教育商业模式。”王岚博士十分肯定地说。

附件下载: