快讯科技财经汽车社会旅游娱乐时尚健康生活科学教育

热搜：美财长称或会聊天懂印尼1月外视频丨“十柳江代表：科新丝路文旅经典IP焕新

首页 > 科技

OpenAI藏了1年多的技术公开！15秒素材克隆声音，HeyGen也在用

发布时间: 来源：量子位

观看：290

还帮助病患恢复了声音

克雷西发自凹非寺
量子位 | 公众号 QbitAI

OpenAI雪藏的新产品——语音合成引擎Voice Engine，终于被正式揭幕。

有了它，只需15秒的语音样本，就能克隆出一个人的声音，而且还能跨越语言！

APP版ChatGPT中的语音对话功能，也正是由这项技术所驱动。

效果如何？先来听段DEMO：

Salt also makes sure we stay hydrated which means there is enough water in our body for it to properly function.
盐分也可以保持人体内的水分，确保其满足正常功能的需要。

【音频效果请移步公众号】

而OpenAI通告显示，他们在2022年底就已经开发出了这项技术，但出于安全考虑一直没有正式发布。

这次，OpenAI终于官宣了Voice Engine，并展示了小规模测试中的几个应用案例。

比如，一家非营利医疗机构就利用这项技术，为一名年轻的病人恢复了她的声音。

另外值得一提的是，去年爆火的视频翻译软件HeyGen，采用的语音引擎也正是Voice Engine。

那么，这次OpenAI还展现了哪些效果，下面就来一睹为快。

用AI帮助病患恢复声音

首先是利用基础的语音合成能力，为儿童等不具备文字阅读能力的群体提供阅读辅助。

比如一家儿童教育技术公司，就一直在使用Voice Engine来给编写好的画外音内容配音。

DEMO中生成的大段内容，都是基于这样一段15秒的样本：

【音频效果请移步公众号】

然后，就可以合成相同音色的长段语音：

【音频效果请移步公众号】

再来看看HeyGen中用到的的语音翻译技术，原始素材是一段英语的音频：

【音频效果请移步公众号】

它被用原始的音色，翻译成了普通话、法语、德语等多种语言。

忽略译文的质量，只听声音，中文的效果是这样的：

【音频效果请移步公众号】

音色保持的还算不错，不过腔调很明显一听就是外国人在说中文。

至于这到底是个bug还是个feature，就见仁见智了（手动狗头）。

此外，一款名为Livox的残障人士辅助应用，也利用Voice Engine为不能说话的残障人士“发出声音”——

在有了Voice Engine之后，TA们可以选择专属的真人音色，而不再是机械感明显的合成音，并且在各种语言之间都能保持音色的一致性。

不只是帮助残障人士拥有自己的声音，Voice Engine还可以为因疾病导致声音发生在重大改变的人群，恢复患病之前声音，只要有以前的声音样本就能实现。

一名年轻的患者因罹患血管性脑肿瘤，失去了流利讲话的能力，说话变成了这样：

【音频效果请移步公众号】

医生从她所在学校录制的视频中提取到了她患病前的声音作为样本，在Voice Engine的帮助下为她恢复了此前的音色。

【音频效果请移步公众号】

此次发布的案例，特别是为不便人士提供帮助的场景受到了不少好评，但也有网友对这项技术的滥用表达了担忧。

安全问题需要全社会共同关注

实际上，安全问题也是OpenAI迟迟未将这项技术公之于众的主要考量。

出于安全考虑，前面案例的开发者都经过了OpenAI的严格筛选，并且需要承诺遵守使用协议。

这些开发者被要求必须明确说明声音是合成的，并且设定了黑名单以防止克隆公众人物声音。

此外，OpenAI还向合成的声音中添加了水印，以便出现问题时可以进行检测监控，同时呼吁人们采取措施共同应对这一问题：

在银行等敏感信息的安全验证措施中逐步淘汰语音验证方式
探索AI时代下个人声音的保护措施
教育公众理解AI的局限性，并了解其被用于欺诈的可能
加速开发跟踪溯源技术，让人们能够清晰辨别出真人和AI

参考链接：
https://openai.com/blog/navigating-the-challenges-and-opportunities-of-synthetic-voices

南方财经全媒体记者马嘉璐研究员仇雯广州报道凭借一纸证书，就能获批100万、500万、甚至千万元贷款……数据要素链接金融市场开辟的新财路，正吸引着越来越多的入局者。南方财经全媒再打一局游戏就睡，再刷几个视频就睡，终于放下手机，关灯睡觉了……结果翻来覆去睡不着，半夜醒来再也睡不着，为什么明明睡着了，睡眠质量却不高？3月21日是世界睡眠日，最新发布的《2024中国 3月19日，记者从中国科学院海洋研究所了解到，该所研究团队在国际上首次发布了银鲳的高质量染色体水平参考基因组。相关研究论文近日在线发表于《自然》子刊《科学数据》。银鲳广泛分布于西北太　　我国成功发射云海二号02组卫星　　中新网北京3月21日电(马帅莎曹译张艳)北京时间2024年3月21日13时27分，我国在酒泉卫星发射中心使用长征二号丁运载火箭/远征三号上面级，成功将云海二号02组卫星发射升空，卫星顺利 3月23日消息，vivo X Fold3系列将于3月26日正式发布，成为全球首款骁龙8 Gen3折叠屏电话。现在这款新机外观已经解禁，下面为大家带来图赏。vivo X Fold3提供了薄翼黑和轻羽白两种配色，后壳手感顺滑，触感　　中新经纬3月22日电据《日本经济新闻》22日报道，夏普正在讨论缩小液晶显示器业务，夏普已将子公司显示器(SDP、位于市)停产纳入视野。显示器业务持续陷入苦战，成为夏普在2022财年(截至2023年3月)时隔5年陷入最终亏损。

本文链接：OpenAI藏了1年多的技术公开！15秒素材克隆声音，HeyGen也在用http://www.sushuapos.com/show-2-4435-0.html

声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。

上一篇： GPT4单项仅7.1分，揭露大模型写代码三大短板，最新基准测试来了

下一篇：我的领导马斯克：痛恨开会，不要非技术中层，推崇裁员

OpenAI藏了1年多的技术公开！15秒素材克隆声音，HeyGen也在用

用AI帮助病患恢复声音

安全问题需要全社会共同关注

热门资讯

推荐资讯

科技最热文章