AI语音独角兽ElevenLabs：B轮融资8000万美元，半年估值涨10倍，未来三大产品开发方向
小爬 • 发表于2024-01-29 16:02:44 • 45918次阅读
人工智能语音公司ElevenLabs 日前宣布已筹集 8000 万美元完成B轮融资。这使得ElevenLabs 的融资总额达到 1.01 亿美元，公司估值超过 10 亿美元（去年 6 月约为 1 亿美元），成为新兴的人工智能应用独角兽公司。我们此前曾报道过ElevenLabs （相关阅读：ElevenLabs：让AI有目的、有感情地吟诵更长的片段）。随着它完成新一轮的融资，可以看到规划中的AI配音等三大产品将迎来更大的变化。ElevenLabs 此轮融资由Andreessen Horowitz、Nat Friedman、Daniel Gross共同领投，Sequoia Capital、SV Angel、Smash Capital、BroadLight Capital 和 Credo Ventures 跟投。ElevenLabs 首席执行官 Mati Staniszewski 表示，新资金将用于产品开发、扩大 ElevenLabs 的基础设施和团队、人工智能研究以及“加强安全措施，以确保人工智能技术负责任且合乎道德的发展”。自成立以来，ElevenLabs 的用户已经生成了时长相当于 100 多年的音频，而公司员工也从 5 名增加到 40 名。如今，41% 的财富 500 强公司的员工正在使用 ElevenLabs 技术。
ElevenLabs 的技术已被众多垂直行业采用。它使创作者能够通过画外音和AI配音来增强观众体验，扩大教育机会，并在有声读物出版、娱乐和个人使用方面提供创新解决方案，包括提高可访问性。2023 年，ElevenLabs 还扩大了其在多个领域的业务，包括出版、游戏、媒体和对话垂直领域，并与主要媒体公司建立了 B2B 合作伙伴关系，其中包括：
出版：Storytel、华盛顿邮报、莱茵邮报、Curio
对话式AI：FlowGPT、SimpleTalk AI、Ollang、VoiceDrop、Vana、Infinitus AI
媒体与娱乐：Wondershare Filmora、Futuri Media、TheSoul Publishing
游戏：Paradox Interactive、网易、Inworld AI
后续，ElevenLabs既会进行已发布产品的维护与发展，也将进行三个方向新产品的开发。该公司去年推出了人工智能语音分类器： 一个可以验证音频样本是否包含 ElevenLabs 生成内容的工具。今年，该公司将致力于增强分类器的能力，以覆盖更多语音人工智能模型，并与其他分销商合作以实现更广泛应用。今年，ElevenLabs计划改进检测工具，以标记来自其他语音生成人工智能模型的音频，并与不知名的“分销商”合作，使该工具在第三方平台上可用。该公司还将很快将目前提供英语版本的 Turbo 和 Speech to Speech 模型扩展到更广泛的语言。
未来几周的路线图是一个新的配音工作室工作流程，其中包括生成和编辑转录本和翻译的工具，以及一个基于订阅的移动应用程序，该应用程序使用ElevenLabs的声音讲述网页和文本。新配音室工作流程：使用户能够为一整部电影配音，并能够生成和编辑其转录本、翻译本和时间码，从而提供对内容制作的额外控制。这些功能补充了现有的 AI 配音功能，可实现跨 29 种语言的（自动化、端到端）视频本地化。语音库市场：将为用户提供一个安全的平台，让他们可以从自己的语音的AI版本中获利。用户可以创建自己的专业AI语音副本，进行验证，并通过语音库进行分享。当其他人使用这些经过验证的声音时，原创者就会获得补偿。用户始终保留对其语音可用性和补偿条款的控制权。该市场已经为一小部分前期用户带来了收入。移动应用程序阅读器的早期预览版：可将文本和 URL 即时转换为音频，使用户在移动时更轻松地访问其他媒体中的内容。作为介绍性试用，该应用程序将在前三个月免费提供，用户将能够通过等候名单注册以提前访问。
ElevenLabs眼下面临着很多AI语音应用带来的争议。比如用户们能够在Elevenlabs的产品中生成知名公众人物的声音样本，并利用这些样本来传播仇恨言论；能够在几秒钟内利用 ElevenLabs恶意克隆声音，甚至能够生成一个足以骗过银行身份验证系统的克隆音频。ElevenLabs还面临配音演员的批评，他们声称该公司在未经许可的情况下使用他们的声音样本，这些样本可能被用来推广他们不认可的内容或传播虚假信息。在近期的一篇文章中，受害者讲述了ElevenLabs是如何被用于针对他们的骚扰活动的，其中一个例子是使用克隆的声音分享演员的私人信息——他们的家庭住址。作为回应，ElevenLabs封禁了多次违反其禁止滥用的服务条款的用户，并推出了一种检测其平台创建的语音的工具。Staniszewski表示，今年，ElevenLabs计划改进检测工具，以标记来自其他AI语音生成模型的音频，并与不知名的“分销商”合作，使该工具在第三方平台上可用。据外媒报道，配音演员越来越多地被要求签署他们声音的版权，以便客户可以使用AI合成版本，最终取代配音演员本身——有时他们甚至没有相应的报酬。令人担忧的是，配音工作——尤其是廉价的入门级工作——最终将被AI生成的人声所取代，演员将没有追索权。ElevenLabs的解决方案是语音市场。该市场目前处于早期测试阶段，并将在未来几周内变得更加广泛应用。该市场允许用户创建、验证和共享语音。Staniszewski说，当其他人使用语音时，原作者将获得补偿。
他补充道：“用户始终保留对其语音可用性和补偿条款的控制权。”“该市场旨在将人工智能的进步与既定的行业实践相协调，同时为ElevenLabs的平台带来多样化的声音。”
