录制有声读物不是一件容易的事,即使对于经验丰富的配音演员来说也是如此。但对有声读物的需求正在上升,Spotify 等大型流媒体平台正在为它们的发展搭建专门的空间。为了将创新与狂热融合,麻省理工学院和微软的研究人员正在使用人工智能从在线文本制作有声读物。在一个雄心勃勃的新项目中,他们正在与世界上历史最悠久、可能也是最大的开放许可电子书在线存储库古腾堡计划合作,制作 5,000 本由人工智能讲述的有声读物。这个系列包括《傲慢与偏见》 、 《包法利夫人》 、 《野性的呼唤》和《爱丽丝梦游仙境》等经典文学作品。三人于 9 月在 arXiv 上发表了关于他们努力成果的预印本。 “我们想要做的是制作大量免费有声读物,并将它们回馈给社区,”麻省理工学院计算机科学与人工智能实验室的博士生、该项目的首席研究员马克·汉密尔顿 (Mark Hamilton) 告诉 PopSci。“最近,神经文本转语音技术取得了很大进展,这些算法可以阅读文本,而且听起来很像人类。” 实现这一目标的神奇因素是神经文本转语音算法,该算法经过数百万个人类语音示例的训练,然后负责模仿人类语音。它可以生成不同语言中不同口音的不同声音,并且可以仅用五秒钟的音频创建自定义声音。“它们可以阅读你给的任何文本,而且阅读速度非常快,”汉密尔顿说。“即使你给它八个小时的文本,它也会在几分钟内完成。” 重要的是,该算法可以捕捉到诸如音调之类的细微差别,以及人类在阅读单词时添加的修改,例如电话号码或网站的读法、哪些内容组合在一起以及停顿在哪里。该算法基于微软的一些论文合著者之前的研究成果。 与大型语言模型一样,该算法严重依赖机器学习和神经网络。“核心部分相同,但输入和输出不同,”汉密尔顿解释道。大型语言模型接收文本并填补空白。他们使用这一基本功能来构建聊天应用程序。另一方面,神经文本转语音算法接收文本,通过相同类型的算法对其进行处理,但现在它们不是输出文本,而是输出声音,汉密尔顿说。 [相关:互联网档案馆刚刚在针对大型图书出版商的联邦诉讼中败诉] “它们试图生成忠实于你输入的文本的声音。这也给了它们一点回旋余地,”他补充道。“它们可以发出它们认为解决任务所需的声音。它们可以改变、分组或改变发音,使其听起来更像人类。” 然后可以使用一种称为损失函数的工具来评估模型的表现是好还是坏。以这种方式实施人工智能可以加快 Librivox 等项目的努力,该项目目前使用人类志愿者制作公共领域作品的有声读物。 这项工作还远未完成。下一步是提高质量。由于古腾堡计划电子书是由人类志愿者创建的,因此每个制作电子书的人的做法都略有不同。他们可能会在意想不到的地方添加随机文本,电子书制作者放置页码、目录或插图的位置可能会因书而异。 “所有这些不同的东西都会导致有声读物产生奇怪的瑕疵,以及一些你根本不想听的东西,”汉密尔顿说。“北极星是开发更多更灵活的解决方案,利用良好的人类直觉来判断这些书中应该读什么,不应该读什么。”一旦他们搞定了这一点,他们希望利用这一点,以及人工智能语言技术的最新进展,将有声读物收藏扩展到古腾堡计划上的所有 60,000 本,甚至可能翻译它们。 目前,所有 AI 配音的有声读物都可以在 Spotify、Google Podcasts、Apple Podcasts 和 Internet Archive 等平台上免费播放。 这种算法有多种应用。它可以朗读剧本,并为每个角色分配不同的声音。它可以用你的声音模拟整本有声读物,这可以成为一份漂亮的礼物。然而,尽管有很多相当无害的方式来使用这项技术,但专家们此前曾对人工生成音频的缺点及其滥用的可能性表示担忧。 聆听下面的《野性的呼唤》。 |
许多退休男子喜欢在车库里修修补补来打发时间,比如修理一辆旧款捷豹 XKSS,或者为刚出生的孙子建造一...
一旦汽车实现了自动驾驶,无聊的乘客将如何打发时间——以及如何避免晕车?借助虚拟现实,也许日常场景中可...
《Teppen!!!!!!!!!!!!!!!》的魅力与评价:一部讲述女孩们努力登上喜剧顶峰的成长故事...
科学家本周表示,冬季阻碍了俄罗斯牵头的钻探南极湖的计划,该湖已被埋藏了 1400 万年。距离目标仅差...
本月初,Twitter 的数据中心受到了加州极端高温的考验。劳动节周末,加州气温高达 116 华氏度...
卡米耶拉维 第 1 季回顾和详细信息《神るならせ》于2023年10月5日至12月21日播出,是一部由...
自 2014 年首次亮相以来,索尼就专门为超低光照性能打造了 A7S 系列相机。本周,该公司宣布了最...
终极地带:多洛雷斯之眼:一个受宇宙命运摆布的人的故事《终极地带:多洛雷斯之眼》是一部电视动画系列,于...
能够高效地用双脚站立、行走和奔跑是智人与类人猿的区别之一,而这很大程度上要归功于凸起的足弓。虽然双足...
《善绿兔》第二季的魅力与评价 - 善绿兔■作品概要《全力兔》是改编自池田圭原作漫画的电视动画,于20...
澳大利亚中央鬃狮蜥的生活并不轻松。这些鳞片状的生物必须抵御高达 113 华氏度的极端高温,经受长达数...
虽然高尔夫技术在过去 20 年里取得了令人难以置信的进步,但仍然没有办法在冬季保持球场没有积雪。Ph...
地球空气通常是军用飞机电子系统的理想、便捷的冷却剂,而海水对海军舰艇的作用也类似。但是,这两种冷却剂...
众所周知,黑色星期五是购买各种音响的好时机,但令人惊讶的是,在前一周你可以获得如此多的优惠。你可以节...
每周故事乐园 - 每周故事乐园《周刊故事乐园》是1999年至2004年在日本电视台(NTV)播出的动...