计算机学院五名学生开发手语app,大学生团队研发成功“聋人自然手语翻译器”APP...

把语音转换成文字,再将文字翻译成手语,在第25个“全国助残日”到来之际,江苏科技大学的一群平均年龄不到22岁的年轻创业者们,研发出了一款“聋人自然手语翻译器”,为普通人与聋哑群体搭建沟通的桥梁。

57cf4abf06c5409b76087e4f8dd39647.png

拿起手机,点击机器人图标,说出你想对聋哑朋友说的话,只需几秒钟,一张张手语图便跳了出来,实现普通人与听障者的零距离沟通。

这原本只是一个简单的概念设想,目前,一群平均年龄只有22岁的大学生做到了,让不懂手语的人也能和听障群体进行交流。

5月14日,江苏科技大学计算机系的5名志愿者来到镇江市特教中心,在没有手语老师翻译的情况下,通过一个手机APP——聋人自然手语翻译器,与高一年级10位聋哑学生交流互动。

去年10月,TouchVoice创新团队宣布,开始研发助听障群体沟通的软件,目前该团队已扩容至9人。理工科背景加上对自然语言处理的核心优势,几人一拍即合,决定潜心研究一个惠及聋哑群体的手机软件。把语音转换成文字,再将文字翻译成手语,为普通人与聋哑群体搭建沟通的桥梁。

设想勾画完成之后,“三大库”的建立至关重要:手语图片库、手语动画库、手语视频库。研发团队核心成员吴琪在接受媒体采访时表示,此外,为了该款软件研发的顺利推进,团队成员分别负责3D人体骨骼动画研究、安卓端的开发、算法研究、以及自然语言分析几大块工作。

“目前来看,我们已经完成最基础的构想——手语图片库,并且取得了良好的用户体验,和同学们交流了40多分钟,每句语音都被准确翻译成了手语图,他们都能看懂。” 吴琪介绍,几经周折,团队将“我爱手语网”列为最佳选择对象,在计算机系老师编写的“爬虫”软件支持下,目前已经成功收录5234张手语识别图片。

据介绍,为了呈现出动态手语,并将手语与文字翻译互通,用动画和视频进行呈现。团队购置了Leap Motion设备拍摄手语动画,并加入了配备RealSense 3D摄像头的笔记本配合图像采集。

但是,研发也不是一帆风顺,据团队另一核心成员陈璟透露,团队构思了各种手语识别算法,考虑平行关节、手指点、深度图等问题,最终由于手指关节数据的误差较大,产品研发优化在这方面的瓶颈尚待突破。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/25835.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

逃离无声的世界,跟AI一起听叶落的声音

9月27日,是第63个国际聋人日。在国际聋人日结束两天后,YouTube却取消了可以帮助听障人士的字幕选项,让人唏嘘。数字时代如同一个未曾停歇的洪流。而在这洪流之中,听障人士因为被按下了「静音键」而被数字世界渐渐遗忘和抛弃。毕业…

一文看尽 2020 年谷歌 AI 重大突破

2021-01-28 10:12:14 在二十年前刚刚加入谷歌时,我们关注的问题只有一个——如何面向这么多不同种类的联网计算机提供一整套质量出色且涵盖范围全面的网络信息搜索服务。到如今,尽管我们面临着各种各样的技术挑战,但谷歌已经基本达成了组织全…

厚积薄发的90后:读博前三年零文章,后期发力产出11篇一作,现任985高校博导...

点击上方“3D视觉工坊”,选择“星标” 干货第一时间送达 本文来源:重庆发布、重庆大学电气工程学院、清华研读间 本科毕业于山东大学,随后保研直博到清华大学,毕业后任职某知名企业做研究,再到如今成为重庆大学的博士生…

谷歌AI拜大年:为聋哑人带来科技福利,首页涂鸦有惊喜

晓查 发自 家中量子位 出品 | 公众号 QbitAI 大年初一,谷歌用人工智能为大家带来了双份的喜悦。 首先是谷歌AI博客更新了一项新的技术,为聋哑人带来了科技福利,只要有一部Android手机就能享受到实时语音转文字的技术。 逢年过节,谷…

用Netty实现WebSocket网络聊天室

最近学习Netty,学习到WebSocket一章节,将Netty中WebSocket的样例代码做了一些简单的改造,实现了一个简易的WebSocket网络聊天室,源码并非完全自己实现,只是将一些别人的代码做了下整合改造,今分享至此&…

聋哑六年级计算机课教学进度计划,小学六年级下册信息技术教学计划三篇

【导语】六年级的学生,通过三年的信息技术课的学习,已经对信息技术这门课很熟悉了,他们已经懂得了一些关于信息技术课的基础知识,掌握了计算机的基本操作,能利用画图软件绘出简单的图画,学习了Word文字处理…

计算机学院五名学生开发手语app,我院开发的手语合成系统有望让聋哑人用上手机...

高交会上参观者就系统性能向开发人员提问 网络信息中心宣(文/肖琼林 吴兴勤 图/吴兴勤)我院计算机科学与技术学科部智能计算研究中心开发的基于虚拟人技术的中国手语合成系统,有望成为千百万聋哑人的福音。 中国有数量巨大的聋哑人群体,据北京市手语研究…

【博主推荐】HTML浪漫表白求爱(附源码)

HTML浪漫表白求爱 带花询问表白HTML源码带花询问表白HTML效果展示爱心花环表白HTML源码爱心花环表白HTML效果展示动画图片表白HTML源码动画图片表白HTML效果展示酷炫爱心表白HTML源码酷炫爱心表白HTML效果展示树形爱心表白HTML源码树形爱心表白HTML效果展示唯美爱心表白HTML源码…

4链提币接口通道源码

介绍: 淘到的多签提币接口 可以借鉴参考 仅用于研究 请与下载24小时内删除 您的任何行和后果与本站无关 建议任何操作都走官方! 云盘下载地址: http://zijieyunpan.cn/yXYGwOTuCoT 演示:

最新仿闲鱼链接闲鱼验货宝+独立后台管理

后台一键生成链接,独立后台管理 教程:修改数据库config/Conn 不会可以看源码里有教程 下载程序:https://pan.baidu.com/s/16lN3gvRIZm7pqhvVMYYecQ?pwd6zw3

转转闲鱼源码搭建教程

教程:修改数据库账号密码直接使用。 下载程序:https://pan.baidu.com/s/16lN3gvRIZm7pqhvVMYYecQ?pwd6zw3

chatgpt赋能python:Python区域找图教程:快速定位您需要的图像

Python 区域找图教程:快速定位您需要的图像 在计算机视觉和机器人领域中,区域找图是一项重要的任务。它可以帮助我们找到图像中的特定区域,从而提高我们对图像的理解和分析能力。在本教程中,我们将学习如何使用Python中的OpenCV库…

基于ChatGPT生成的泊松圆盘采样代码 Python纯算法源码

先上代码直接运行 # -*- coding: utf-8 -*- """ --********************************************************************-- --file: 柏森采样示例代码 --author: donganning --create time: 2023/3/30 14:24 --description: --***************************…

IdentityServer 4 自定义身份校验/通过 token获取用户信息

Demo https://github.com/MartinAaron/data_collection 1、自定义身份校验 public static IEnumerable<Client> GetClients(){return new List<Client>{//grant_type basicnew Client{ClientId "xczx",AccessTokenLifetime 36000,AllowedGrantTypes G…

微信小程序登录 + 基于token的身份验证

官方时序图如下&#xff1a; https://developers.weixin.qq.com/miniprogram/dev/framework/open-ability/login.html 图里其实说的很清楚了&#xff0c;清理下流程&#xff1a; 1.前端调用wx.login()获取code值 2.前端通过调用wx.getUserInfo获取iv、rawData、signature、e…

Token:用户身份验证的令牌

一、Token是什么 Token&#xff0c;就是用户身份验证的令牌&#xff0c;代表执行某些操作的权利的对象&#xff0c;本质上是服务端生成的一串加密字符串、用于客户端进行请求的“令牌”。 当用户第一次使用账号密码成功登 陆后&#xff0c;服务器就生成一个token和token失效…

调用华为API实现身份证识别

调用华为API实现身份证识别 1、作者介绍2、调用华为API实现身份证识别2.1 算法介绍2.1.1OCR简介2.1.2身份证识别原理2.1.3身份证识别应用场景 2.2 调用华为API流程 3、代码实现3.1安装相关的包3.2代码复现3.3实验结果 1、作者介绍 雷千龙&#xff0c;男&#xff0c;西安工程大…

二十二、身份验证与权限

一、 准备工作 为了讲清楚身份验证与权限&#xff0c;我们再创建一个应用projects,设计模型如下&#xff1a; class Project(models.Model):name models.CharField(项目名称, max_length20, help_text项目名称)desc models.CharField(项目描述, max_length200, help_text项目…

人脸核身基础版 SDK 接入 > 合作方后台上送身份信息

文章目录 一、概述二、实现流程2.1. 获取获取 access_token2.2. 获取 SIGN ticket2.3. 生成签名2.4. 上送身份信息2.5. 获取 NONCE ticket 三、实战3.1. 获取获取 access_token3.2. 获取 SIGN ticket3.3. 生成签名3.4. 上送身份信息3.5. 获取 NONCE ticket 四、开源地址 一、概…

身份证验证接口API(仅需一行代码,公安部实时接口)

身份确认在互联网越来越普及&#xff0c;在二手、电商、贷款、交友、招聘等主流互联网应用中都有明确的刚需&#xff0c;传统的 身份证核验方式是用户上传身份证图片&#xff0c;客服后台人肉审核&#xff0c;但问题在于根本无从确认身份证的真实性&#xff0c;也不能确认该身份…