首页 > 业界 > 关键词  > OpenVoice最新资讯  > 正文

MyShell发布开源AI语音克隆工具OpenVoice,瞄准语音模仿领域

2024-01-03 09:26 · 稿源:站长之家

**划重点:**

1. 🔍 **开源创新**:MIT、清华大学与加拿大AI初创公司MyShell联手推出开源语音克隆工具OpenVoice,在克隆用户声音方面,采用了概念简单但高效的方法,大幅减少计算资源消耗。

2. 🌐 **功能强大**:OpenVoice提供几乎即时的语音克隆,同时具备其他克隆平台所不具备的细致控制,包括语调、情感、节奏、停顿和语调等多方面的精确调整。

3. 💼 **MyShell商业模式**:MyShell计划通过开源OpenVoice,通过其Web应用提供月度订阅、第三方机器人创建者推广费用以及人工智能培训数据费用等多方面赚取收入。

站长之家(ChinaZ.com)1月3日 消息:MyShell最新推出的开源语音克隆工具OpenVoice引起了广泛关注。这一创新产品由麻省理工学院(MIT)、清华大学以及加拿大人工智能初创公司MyShell合作开发。OpenVoice采用了一种概念简单但高效的方法,可几乎即时克隆用户的语音,并使用明显更少的计算资源。

image.png

该工具不仅具备语音克隆的基本功能,而且提供了细致入微的控制选项,涵盖语调、情感、节奏、停顿和语调等多个方面。这意味着用户可以通过OpenVoice生成具有个性化风格的语音克隆,而无需花费大量时间和计算资源。

在作者的非科学性测试中,使用OpenVoice在HuggingFace平台上生成了一个相对令人信服的语音克隆,仅需几秒钟的随机语音即可完成。与其他语音克隆应用不同的是,用户无需朗读特定文本片段,只需随意说几秒钟的话,即可立即生成可播放的语音克隆,读取提供的文本提示。

OpenVoice的背后是两个主要的AI模型:文本到语音(TTS)模型和“音调转换器”模型。TTS模型控制“风格参数和语言”,并且通过来自两名英语演讲者(美国和英国口音)、一名中文演讲者和一名日本演讲者的30,000个句子的音频样本进行训练。与此同时,音调转换器模型则通过来自20,000多名不同演讲者的300,000个音频样本进行训练。

image.png

通过将用户提供的录音音频的音调与TTS模型的“基础发声者”结合起来,这两个模型共同可以复制用户的语音,并改变其“音调颜色”或文本所表达的情感表达。与其他方法相比,OpenVoice的方法在克隆语音时大大减少了计算资源的使用,包括Meta的竞争对手Voicebox。

MyShell,作为OpenVoice的推动者,成立于2023年,总部位于加拿大艾伯塔省的卡尔加里,通过由INCE Capital主导的560万美元种子轮融资以及Folius Ventures、Hashkey Capital、SevenX Ventures、TSVC和OP Crypto的额外投资,已经吸引了超过400,000名用户。该初创公司通过其Web应用提供各种基于文本的AI角色和机器人,包括一些带有不同“个性”的角色,还提供动态GIF制作工具和用户生成的基于文本的角色扮演游戏。

尽管MyShell将OpenVoice开源,但该公司仍通过其Web应用的月度订阅、希望在应用程序内推广其产品的第三方机器人创建者费用以及人工智能培训数据费用等多方面赚取收入。这种商业模式旨在为MyShell提供可持续的经济基础,从而在开源和商业利益之间找到平衡。

项目体验网址:https://top.aibase.com/tool/openvoice

论文网址: https://arxiv.org/abs/2312.01479

举报

  • 相关推荐
  • 创新驱动 芯耀未来——CPCA Show Plus 2025助力产业共享AI时代发展机遇

    2025年电子半导体产业创新发展大会暨国际电子电路(大湾区)展览会(CPCA Show Plus)将于10月28-30日在深圳举办。展会以“创新驱动,芯耀未来”为主题,汇聚超300家展商,覆盖PCB制造全产业链,聚焦AI时代产业升级。活动将展示智能制造、绿色环保方案,举办多场技术论坛,推动产业链高效对接与协同发展,助力行业把握智能化、低碳化新机遇。

  • 逗哥配音平台:千款AI配音演员覆盖全行业,重新定义语音创作边界

    随着内容创作行业蓬勃发展,高质量、多风格的配音需求日益增长。国内领先的AI语音技术平台——逗哥配音,凭借上千款精选音色和全面的行业适配能力,成为众多专业机构和个人创作者的首选方案。平台拥有超千款声音,覆盖不同年龄、声线和风格,可调参数达数十种,实现“千声千面”的语音多样性。其声音资源具备极强的行业适配性,适用于小说、影视解说、新闻播报、课程培训等多种场景,并针对ASMR、角色对话等专项优化。逗哥配音已整合文案提取、视频去水印等工具,打造一站式创作平台,显著提升内容产出效率。未来计划扩大声音库规模,深化垂直行业适配,并开放自定义音色训练功能,推动AI配音从技术辅助逐步进化为创意产业的核心生产力工具。

  • 华为AI城市峰会:共建城市数智底座,AI CITY先锋城市案例发布

    9月18日,华为全联接大会2025期间举办AI城市峰会,聚焦智慧城市治理、政务服务与产业升级。华为发布“AI CITY 1234MNX”参考架构,通过智能云底座、安全保障体系及统一平台,推动城市全域智能化转型。会议分享了深圳、广州等地的实践案例,展示AI在政务、城市管理及工业领域的应用成效,并呼吁各方共建AI城市生态,加速数字化进程。

  • 全球首个!OpenAI将推“AI版抖音”:禁止上传实拍内容 视频100%由AI生成

    国庆假期前夕,OpenAI发布了Sora 2,一款旗舰视频和音频生成模型。 据介绍,Sora 2可以完成以前的视频生成模型难以完成的事情,比如运动员的奥林匹克体动作、桨板上的后空翻,准确模拟浮力和刚度的动态等等,并擅长现实主义、电影和动漫风格。 一则来自《连线》杂志的重磅爆料更是指出,OpenAI的下一步棋,并非简单升级一个模型,而是要亲自下场,推出一个独立的AI影�

  • 千亿AI玩具市场:当IP被AI“唤醒”,玩具厂商如何开辟新赛道?

    过去两年AI技术热度飙升,从ChatGPT爆发到谷歌、Meta频发新一代大模型,AI已切实改变生活方式。传统玩具行业正孕育智能化尝试,迪士尼与乐森机器人合作推出Mini Robot智能潮玩,通过“通用底座+可替换IP公仔”平台化设计,结合机器人技术与情感交互,打破单一产品逻辑。该产品支持动作编程、语音定制及UGC内容共享,推动玩具从“产品消费”转向“情绪消费”,成为连接虚拟与现实的新型生命体。

  • AI为他们圆了导演梦

    “我们这么小团队做的‘小东西’真的可以吗?” 当得知自己作品《小怪物》入围釜山电影节时,黎晓薇的第一反应是“难以置信”,因为就在几个月前她才开始正式接触AI工具。 和黎晓薇一样幸运的,还有徐文君、小文和MANYMANY团队,这些来自中国的AI创作者们分别带来了《一目五先生》《权利童话》和《九宵》三部作品。 “未来影像计划”由即梦AI联合火山引擎、上海电�

  • PICO × 英特尔× 央美共探 AI 艺术新生态:技术重塑创作、教育与产业未来

    AI与艺术融合正加速发展:AI重塑设计流程,使创作者更专注美学思辨;三维重建技术以毫米级精度改写传统工艺,为文物复原提供科学依据;虚拟数字展厅凭借沉浸式体验与互动,为策展提供新可能。PICO联合中央美院等机构举办论坛,探讨AI赋能下的艺术生态。英特尔推出酷睿Ultra处理器,支持智能抠像、文生图等功能,提升创作效率。未来AI将推动艺术教育转型,培养复合型

  • 微博CEO称iOS 26微信语音没声音 网友同样中招 以为手机坏了

    微博CEO王高飞反映,iOS 26 Beta 1更新后微信语音通话首次接通无声音,需挂断重拨。多名网友反馈相同问题,甚至怀疑手机故障。微博智搜称,这是Beta系统的兼容性缺陷,已提供临时解决方案。iOS 26.1 Beta新增Apple Intelligence多语言支持及AirPods实时翻译功能,电话应用键盘采用全新液态玻璃设计。

  • ChatExcel重磅发布:基于AMD锐龙AI MAX+ 395处理器的数据分析Mini AI 工作站

    ChatExcel发布搭载AMD锐龙AI MAX+395处理器的Mini AI工作站,重构数据全链路,打造“找数-做数-分析数-看数-用数”的商业闭环平台。依托处理器96GB超大显存和统一内存架构,实现本地流畅运行GPT-oss-120B等大型模型,保障数据安全的同时显著提升分析效率。该方案以财务场景为例,支持多任务并行处理,将原本需1天完成的月度报表压缩至2小时,解决“数据不外发”与“高效处理”的核心矛盾。

  • AI玩具,再造一个泡泡玛特?

    2025年最时髦的遛娃神器,AI玩具必须拥有姓名。 国庆假期回老家的小小发现,家里小朋友们的玩具库里突然多了一类新玩意。它们不仅外形呆萌可爱,还搭载了AI功能,能和小朋友对话、讲睡前故事,还拥有记忆力,总之,不再是只会唱歌的老古董。 AI玩具赛道火于去年,但当时大部分产品的AI功能主要来源于外置挂件,且智能化程度不高,一度被质疑为蹭热度的套壳产品。�

今日大家都在搜的词: