清华可穿戴智能喉登Nature子刊,实测准确率90%+,网友:@李雪健老师

丰色 发自 凹非寺
量子位 | 公众号 QbitAI

将一块仅硬币大小的圆片,贴在喉咙处,嗓子有问题的人就可以重获新“声”了

a29558faf3ede63688069de4f2773238.png

这是清华大学发表在Nature子刊上的最新研究成果,一个用石墨烯材料做成的可穿戴喉咙

e2e47b7e350d3753c20ae34688fc8366.png
△ Nature Machine Intelligence(自然·机器智能)

它可以准确识别到佩戴者喉咙处的细微振动以及模糊的话语,然后将之合成为正常的语音,平均识别准确率高达99.05%。

据称,这款设备在噪音非常大的地方也好使。

如此一来,那些不能正常发声的人,包括喉切除患者、临时嗓子发炎者、长时间讲课的老师、在嘈杂环境工作但需要交流的人等,都有救了。

4ea53c244dfcbf03680bc9863573f2b8.png
ef30950de1896ad1bec935baacfe33b2.png

当然,还有不少人直接cue起了李雪健老师。

9e40307eb7c2736a32079886fb451acc.png

清华可穿戴智能喉,患者实测准确率91%

要说帮喉咙有问题的人解决交流问题,科学家早就在研究了。

不过此前的一些方案由于带有一系列外设或者多通道电极,通常具有侵入性且不够便携。

要解决这俩问题,需要感应器足够灵敏且小巧,在外部就能使用。

还需要足够贴合皮肤。

因为理论上,喉部的振动反映的是声带以及相关肌肉群的运动。

一些声带发声有障碍的人,可能会训练食管发声,因此,需要柔性传感器来保持对皮肤的贴合从而照顾到这一部位。

c4311c2196f03f2e03f145618d7227fd.png

好在,有这么一种东西可以满足这些需要。

它就是用柔性激光直写(laser-scribed)石墨烯(LSG)制成的机械传感器,专门用于身体表面。

不过,由于不确定这种设备对低频肌肉运动和传递到皮肤表面的声音振动是否敏感,作者团队对它的蜂窝状微观结构进行了优化。

9b2bc754dd3a6b78f13322b865e44249.png

最终,它可以做到在>1000次的弯曲测试后仍表现出均匀稳定的灵敏度,准确识别出频率范围在100–20kHz之间的振动信息。

由于LSG薄膜具有导电性和导热性,这种设备也可以通过热声效应产生声音。在声音发射稳定性的实验中,作者证明它可以做到连续三小时都保持稳定。

下面是这款可穿戴智能喉的工作流程:

9d22cee3e52a524e20771319526edecd.png

首先,设备将收集到的振动信息编码为标准脉冲编码调制(PCM)信号。

然后通过快速傅里叶变换(FFT)生成相应的频谱图。

接着通过模型进行外部处理和识别,将检测到的多模态信号转换为相应的语音。

最后通过热声效应驱动设备发声,帮助佩戴者完成交流。

实验表明,这款设备对音素、音调以及单词的识别准确率平均达到了99.05%。

下图则显示了设备在不同强度(dB)噪音下的识别精度。

cc1d29ec04ae4370f69c8f61659ad2b6.png

可以看到,它在环境噪声超过60dB的情况下,也能保持识别能力,抗噪能力远远优于麦克风。

“Talk is cheap”,作者也进行了实战测试。

他们找来一位完成了喉切除(非全切)手术的志愿者,检测六个日常短句的识别情况。

从频谱图可以看出,可穿戴智能喉可以感知患者喉咙的发声振动。

不过由于发声器官不完整,患者有时会在说话时吞咽声音。不过微调模型仍然能够从信号中提取足够的信息,将识别准确率做到81.25%。

0c9b5a44fcbecdf1d484f12ca2a6b540.png

接着,他们又对用到的单个AlexNet模型进行了优化(Alex Net+ReliefF+SVM),最终实现了91%的识别精度。

173056085b5efe19c5b83723d68c8a41.png

总的来说,由于制造工艺可行、灵敏度高、性能稳定、抗噪能力强以及集成了发声能力,作者认为,这款可穿戴喉咙可以成为下一代语音识别和交互系统的理想工具。

而网友们也脑洞大开:

有让加个音色调节的过滤器,变成可穿戴变声器的;

也有说来个实时翻译,就让人直接拥有说多种语言的能力的。

0c75a5f0ded71f0c068a2f21dd5bdb79.png

你觉得还有哪些妙用?

论文地址: 

https://www.nature.com/articles/s42256-023-00616-6

参考链接:
https://weibo.com/1231317854/MwsEvkugi?refer_flag=1001030103_

「中国AIGC产业峰会」启动

邀您共襄盛举

「中国AIGC产业峰会」即将在今年3月举办,峰会将邀请AIGC产业相关领域的专家学者,共同探讨生成新世界的过去、现在和未来。

峰会上还将发布《中国AIGC产业全景报告暨AIGC 50》,全面立体描绘我国当前AIGC产业的竞争力图谱。点击链接或下方图片查看大会详情:

被ChatGPT带飞的AIGC如何在中国落地?量子位邀你共同参与中国AIGC产业峰会

77bfeacc2c4ca81f564e29cb0844534f.gif

点这里👇关注我,记得标星哦~

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.rhkb.cn/news/60329.html

如若内容造成侵权/违法违规/事实不符,请联系长河编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

iPhone7无服务问题解决方案-越狱绕过手机激活

iPhone7无服务问题解决方案-越狱绕过手机激活TOC 下载爱思助手,数据线连接开机手机 步骤一:电脑上下载爱思助手 步骤二:开机状态数据线连接电脑 步骤三:☑️勾选连接后自动激活设备,跳过激活 步骤四,选择…

解决Data source rejected establishment of connection, message from server: “Too many connections“的错误

文章目录 1. 复现错误2. 分析错误3. 解决问题4. 补充说明 1. 复现错误 今天在启动项目后,控制台却报出如下错误: java.sql.SQLNonTransientConnectionException: Data source rejected establishment of connection, message from server: "Too m…

consul注册中心服务All service checks failing及解决

文章目录 consul注册中心服务All service checks failing问题一:能注册,有报错,中间件不可用问题二:能注册,没报错,通不过检查问题三:同一个服务,注册了很多次 consul注册中心服务Al…

(unknown location)问题解决方法

遇到这样的问题,就去在这里插入图片描述 [anaconda文件夹找到sklearn包,卸载,重装一下就OK。

错误 “Avoided redundant navigation to current location...” 的解决方案

当 vue 项目中使用 vue-router 的 编程式导航 写法进行路由切换时&#xff1a; // Search/index.vue <button click"goSearch" v-model"keyword">搜索</button> //按钮绑定事件&#xff0c;切换路由methods: {goSearch() {this.$router.push…

【HMS Core】集成地图服务不显示地图问题

【问题描述】 关于华为HMS-地图服务不显示地图的问题。 背景&#xff1a;集成华为地图服务运行后页面不显示地图&#xff0c;运行app后不展示地图报错MapsInitializer is not initialized。 【解决方案一】 1、先检查一下agconnect-services.json此文件是否放到了主工程模块…

为什么手机有卡却突然显示无服务器,手机突然显示“无服务”,原因是什么?...

原标题&#xff1a;手机突然显示“无服务”&#xff0c;原因是什么&#xff1f; - 问题1 - iPhone插入耳机后没有声音&#xff0c;怎么回事&#xff1f; 有时候插入耳机时&#xff0c;与手机接触不良&#xff0c;导致耳机无法正常接收声音&#xff0c;试下拔掉后&#xff0c;再…

rviz无法显示地图error:no map receive

可能是代码main写错成mian 改后保存再运行即可解决

uni.getLocation和wx.getLocation方法调用无效,也不返回失败,解决方案!!!

线上已解决问题的代码 记录时间 2022.12.10 //获得地理定位信息uni.getLocation({type: wgs84,success: function(resp) {console.log(11111);//保存纬度数据let latitude resp.latitude;//保存经度度数据let longitude resp.longitude;console.log(经度 latitude);console…

mta计算机证书有用么,微软MTA认证有用吗 微软MTA证书含金量高吗

微软MTA认证有用吗&#xff1f;微软MTA证书含金量高吗&#xff1f;如果您还不知道什么是MTA考试&#xff0c;那么&#xff0c;下面我们就一起来认识下&#xff1a;IT专业的第一张国际认证——微软MTA认证。 微软MTA认证是什么&#xff1f; MTA是指Microsoft Technology Associa…

2020届MEM/MBA考研提面准备以及常见问题分享

目录 一、前言 二、开写前的一个小建议 二、提面考察什么 四、提面的流程 五、关于组面 六、英语口语 七、写在最后 一、前言 博主软件开发出身&#xff0c;现在深圳工作&#xff0c;在公司主要负责物联网团队组建、产品、项目、软件开发等工作。2020届MEM备考生&#x…

微软2013校园招聘笔试试题及详细解答

版权所有&#xff0c;转载请注明出处&#xff0c;谢谢&#xff01; http://blog.csdn.net/walkinginthewind/article/details/8770201 &#xff08;不定项选择题&#xff09; 1. Which of the following calling conversion(s) support(s) variable-lengt parameter(e.g. pri…

2023计算机专硕考研冲刺资料分享

各位考研的小伙伴大家好 考研进行到白热化阶段一、考研数学二、考研正治考研英语专业课复习总结 考研进行到白热化阶段 考研到了十月那就是真正的考验自己能力的时候到了 大家在这个时期呢肯定会遇到一些身心上的疲惫&#xff0c;也会感受到对自我的怀疑&#xff0c;但是&…

计算机考研复试专业课常见问题----1

一.英语口语 1.自我介绍------各个学校不同&#xff0c;考察时间有长有短&#xff0c;比如下例。 自我介绍模板网上也有很多&#xff0c;大家自己根据自身情况编写即可 2.英语对话&#xff0c;这个一般就是和老师对话&#xff0c;口语不好可以找同学练习 二.计算机专业课&a…

免费的微软认证考试券又双叒叕来了 Microsoft Build 2022

还记得我说过的宇宙最强学习资源库吗&#xff1f; >Microsoft Learn< Microsoft Build 2022 期间&#xff0c;福利活动又来了&#xff01; 活动页面 点击上方的“活动页面”链接&#xff0c;填写邮箱作为挑战开始时接收通知的方式即可。在挑战开始时&#xff0c;平台…

计算机科学Computer Science留学论文辅导选题推荐

Computer Science计算机科学在英国各个大学都属于热门专业&#xff0c;今天海马课堂(www.highmarktutor.com)给大家带来了计算机科学(Computer Science)论文选题推荐&#xff0c;供有需要的同学们参考。 一、计算机科学论文概述 计算机科学论文按内容性质和研究方法的不同&…

计算机考研复试中可能会被问到的40个问题

文章来源于网络 复试面试的形式是怎样? 专业课一般逐个面试&#xff1a;现场会有一定的评分标准&#xff0c;有些导师手中都会有评分表。大家抽签答题或者从题 库中抽取题目&#xff0c;导师也会随机提问&#xff0c;包括让考生自我介绍、为什么报这个学校/这个专业等等&…

kaptcha谷歌验证码工具

Kaptcha 简介 Kaptcha 是一个可高度配置的实用验证码生成工具&#xff0c;可自由配置的选项如&#xff1a; 验证码的字体验证码字体的大小验证码字体的字体颜色验证码内容的范围(数字&#xff0c;字母&#xff0c;中文汉字&#xff01;)验证码图片的大小&#xff0c;边框&…

一.Duilib开发之基本使用

一. Duilib介绍 Duilib是一款轻量级&#xff0c;遵循BSD协议的开源C GUI框架,可以免费用于商业项目&#xff0c;是由杭州月牙儿网络技术有限公司基于DirectUI界面思想设计出来的GUI开源框架&#xff1b;所谓的DirectUI思想其实指的就是窗口只有一个&#xff0c;而窗体上面的所…

​阿里最新年报:万霖、蒋凡成合伙人;Twitter 网址迁移至 X.com;Cython 3.0 发布|极客头条...

「极客头条」—— 技术人员的新闻圈&#xff01; CSDN 的读者朋友们早上好哇&#xff0c;「极客头条」来啦&#xff0c;快来看今天都有哪些值得我们技术人关注的重要新闻吧。 整理 | 梦依丹 出品 | CSDN&#xff08;ID&#xff1a;CSDNnews&#xff09; 一分钟速览新闻点&#…