昇腾AI大模型产业化落地 让手语学习更简单-PR-Newswire

2022-06-29 12:33:11 来源: 美通社

深圳 2022年6月29日 // -- 近日,千博信息、中国科学院自动化研究所、华为基于“紫东太初”三模态大模型、昇腾AI基础软硬件平台打造出手语多模态模型及手语教考一体机,辅助听障人士更好地理解和学习手语。我国有2700多万听障人士,手语是听障人群沟通交流的主要方式,但手语学习面临词汇更新慢、师资短缺、手语标准难统一等多重挑战。

<script src="https://static.prnasia.com/pro/fec/jwplayer-7.12.1/jwplayer.js" type="text/javascript"> </script> <script> jwplayer.key="3Fznr2BGJZtpwZmA+81lm048ks6+0NjLXyDdsO2YkfE=" </script>
<script type="text/javascript"> jwplayer('myplayer1').setup({file: 'https://mma.prnasia.com/media2/1849953/video_new.mp4', image: 'https://www.prnasia.com/video_capture/3802693_ZH02693_1.jpg', autostart:'false', aspectratio: '16:9', stretching : 'fill', width: '600', height: '338'}); </script>

手语多模态模型及手语教考一体机
手语多模态模型及手语教考一体机

研发人员让“紫东太初”三模态大模型学习了1.2万个手语词汇、50多万语法、70多万语料,基于昇思MindSpore AI框架,开发手语多模态模型,开创性地实现手语动作与视频、图片示意和文字说明的联动,让初学者对手语语义理解更加深刻。而后,基于手语多模态模型,利用昇腾AI基础软硬件平台开发出手语教考一体机。目前,该一体机已在湖南多个特殊教育学校陆续上线,一定程度上缓解了手语师资短缺问题。

手语教考一体机可以实现文本到图像的自动生成,具备实时手语手势识别、表情及唇语识别等能力,并且还可实现新事物词汇的及时学习与更新,适用于特殊教育学校、开设手语教学师资培养的大专院校、通用手语推广教学点和全国残联基层培训点等。此外,基于手语多模态模型打造的AI手语助手功能可用于同传翻译、新闻主持、服务引导等场景。

2021年底,基于“紫东太初”三模态大模型,华为携手伙伴成立了多模态人工智能产业联盟,经过半年多紧密合作,陆续孵化出多个行业解决方案,如手语多模态模型和手语教考一体机。在AI大模型产业化落地过程中,丰富的数据和参数、更泛化的应用场景,反哺大模型基础能力,让大模型更智能、场景适用性更好,从而对行业应用提供更大的支持,实现大模型创新到应用,再到迭代升级的产业正循环。未来基于中国算力网—智算网络的充沛算力,AI大模型的创新、应用到迭代升级的速度将进一步加快,大模型在不同领域的应用也将更加多元化。

责任编辑:Sophie
半导体行业观察
摩尔芯闻

热门评论