直达「 通往AGI之路 」飞书知识库 →
首页/问答列表/问答详情

语音克隆 + 可以文转语音

回答

以下是关于语音克隆和文转语音的相关信息:

GPT-SoVITS

  • 是一个声音克隆和文本到语音转换的开源 Python RAG 框架。
  • 只需 1 分钟语音即可训练一个自己的 TTS 模型。
  • 5 秒数据就能模仿,1 分钟声音数据能训练出高质量 TTS 模型,完美克隆声音,适配中文。
  • 主要特点包括零样本 TTS、少量样本训练、跨语言支持、易用界面、适用于不同操作系统、提供预训练模型。
  • GitHub 链接:https://github.com/RVC-Boss/GPT-SoVITS
  • 视频教程:https://bilibili.com/video/BV12g4y1m7Uw/

Vidnoz AI

  • 支持 23 多种语言的配音,音质高保真。
  • 支持文本转语音和语音克隆功能。
  • 提供语音参数自定义和背景音乐添加工具。
  • 提供面向个人和企业的经济实惠的定价方案。

其他人工智能音频初创公司

  • adauris.ai:将书面内容转化为引人入胜的音频,并实现无缝分发。
  • Aflorithmic:专业音频、语音、声音和音乐的扩展服务。
  • Sonantic(被 Spotify 收购):提供完全表达的 AI 生成语音,带来引人入胜的逼真表演。
  • kroop AI:利用合成媒体生成和检测,带来无限可能。
  • dubverse:一键使您的内容多语言化,触及更多人群。
  • Resemble.ai:生成听起来真实的 AI 声音。
  • Replica:为游戏、电影和元宇宙提供 AI 语音演员。
  • Respeecher:为内容创作者提供语音克隆服务。
  • amai:超逼真的文本转语音引擎。
  • AssemblyAI:使用单一 AI 驱动的 API 进行音频转录和理解。
  • DAISYS:听起来像真人的新声音。
  • WellSaid:从真实人的声音创建逼真的合成语音的文本转语音技术。
  • Deepsync:生成听起来完全像你的音频内容。
内容由 AI 大模型生成,请仔细甄别(powered by aily)

参考资料

GPT-SoVITS实现声音克隆

GPT-SoVITS:只需1分钟语音即可训练一个自己的TTS模型。GPT-SoVITS是一个声音克隆和文本到语音转换的开源Python RAG框架。5秒数据就能模仿你,1分钟的声音数据就能训练出一个高质量的TTS模型,完美克隆你的声音!根据演示来看完美适配中文,应该是目前中文支持比较好的模型。界面也易用。主要特点:1、零样本TTS:输入5秒的声音样本即可体验即时的文本到语音转换。2、少量样本训练:只需1分钟的训练数据即可微调模型,提高声音相似度和真实感。模仿出来的声音会更加接近原声,听起来更自然。跨语言支持:支持与训练数据集不同语言的推理,目前支持英语、日语和中文。3、易于使用的界面:集成了声音伴奏分离、自动训练集分割、中文语音识别和文本标签等工具,帮助初学者更容易地创建训练数据集和GPT/SoVITS模型。4、适用于不同操作系统:项目可以在不同的操作系统上安装和运行,包括Windows。5、预训练模型:项目提供了一些已经训练好的模型,你可以直接下载使用。GitHub:[https://github.com/RVC-Boss/GPT-SoVITS](https://t.co/BpHX4SlsO3)[…](https://t.co/BpHX4SlsO3)视频教程:[https://bilibili.com/video/BV12g4y1m7Uw/](https://t.co/Uo7WtSSUGO)[…](https://t.co/Uo7WtSSUGO)[[twi]@小互(@_twi(1).mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/RymsbKdweody4Cxwtsqc7Yuenxd?allow_redirect=1)使用:

问:有没有给视频配音效的 AI 工具

功能特点:支持50多种语言的配音,音质自然流畅。提供实时配音功能,适用于直播和演讲。将语音转录为文本,方便后期字幕制作和编辑。与多种生产力和学习工具整合。1.Vidnoz AI:功能特点:支持23多种语言的配音,音质高保真。支持文本转语音和语音克隆功能。提供语音参数自定义和背景音乐添加工具。提供面向个人和企业的经济实惠的定价方案。这些AI配音工具各具特色,可以满足不同的需求和偏好。在选择视频配音工具时,请考虑支持的语言数量、语音质量、自定义选项和价格等因素。希望以上信息对您有所帮助。如果您还有其他问题,请随时提出。内容由AI大模型生成,请仔细甄别。

人工智能音频初创公司列表

[adauris.ai](https://www.adauris.ai/)-将书面内容转化为引人入胜的音频,并实现无缝分发。[Aflorithmic](https://audiostack.ai/)-专业音频、语音、声音和音乐的扩展服务。[Sonantic](https://pr-newsroom-wp.appspot.com/2022-06-13/spotify-to-acquire-sonantic-an-ai-voice-platform/)(被Spotify收购)-提供完全表达的AI生成语音,带来引人入胜的逼真表演。[kroop AI](https://www.kroop.ai/)-利用合成媒体生成和检测,带来无限可能。[dubverse](https://dubverse.ai/)-一键使您的内容多语言化,触及更多人群。[Resemble.ai](https://www.resemble.ai/)-生成听起来真实的AI声音。[Replica](https://www.replicastudios.com/)-为游戏、电影和元宇宙提供AI语音演员。[Respeecher](https://www.respeecher.com/)-为内容创作者提供语音克隆服务。[amai](https://amai.io/)-超逼真的文本转语音引擎。[AssemblyAI](https://www.assemblyai.com/)-使用单一AI驱动的API进行音频转录和理解。[DAISYS](https://daisys.ai/)-听起来像真人的新声音。[WellSaid](https://wellsaidlabs.com/)-从真实人的声音创建逼真的合成语音的文本转语音技术。[Deepsync](https://dubpro.ai/)-生成听起来完全像你的音频内容。

其他人在问
你如何使语音助手掌握情感意图
要使语音助手掌握情感意图,可以从以下几个方面考虑: 1. 明确“情绪识别系统”的概念:根据欧洲议会和欧盟理事会的规定,“情绪识别系统”是指根据自然人的生物数据识别或推断其情绪或意图的人工智能系统,例如快乐、悲伤、愤怒等,但不包括身体状态如疼痛或疲劳,也不包括仅仅检测容易察觉的表情、手势或动作,除非用于识别或推断情绪。 2. 借鉴相关研究和观点:如 AI 教父 Hinton 探讨的如果助手具有自我反省的能力,可能会有感觉,以及他提出的新的感觉模型。 3. 理解情感的重要性:情感对人类具有生存、沟通、决策、动机和维系等功能。比如,人类会因适应环境做出有利生存的生理反应,不同情感表达会使相同文字语言内涵不同,大脑决策依赖情感,情感能激发和维持个体行为,也是人类社会化维系的纽带。 4. 以情感计算为目标:情感计算旨在使计算机能够识别、感知、推断和理解人类的情感,最终赋予计算机类似人的情感能力。 总之,使语音助手掌握情感意图需要综合多方面的知识和技术,不断探索和创新。
2024-11-11
在语音数据的标注中你有什么针对你行业(车载语音助手)的特殊标注规则
在车载语音助手这一行业的语音数据标注中,特殊标注规则如下: 1. 音素覆盖:在录音开始前构建基础的文本前端,具备简单的文本转音素(G2P)系统。录音文本要保持多样性,音素或音素组合尽可能覆盖全,统计音素序列中的 NGram,避免某些音素或组合出现频次过高或过少。 2. 场景定制:收集车载播报的常用话术、专业术语(如油量、胎压等)、音乐名或歌手名、地名和新闻播报。对业务有一定理解,并在一开始就和需求方紧密沟通。 3. 文本正确性:确保录音文本拼写无误,内容正确,删除脏话、不符合宗教信仰或政治不正确的语句。
2024-11-11
在车载语音多轮对话训练中你如何训练模型掌握情感需求
目前知识库中暂时没有关于在车载语音多轮对话训练中如何训练模型掌握情感需求的相关内容。但一般来说,要训练模型掌握情感需求,可以从以下几个方面考虑: 1. 数据收集:收集包含丰富情感表达的车载语音对话数据,包括不同情感状态下的语音样本和对应的文本描述。 2. 特征提取:从语音和文本数据中提取能够反映情感的特征,如语音的语调、语速、音量,文本中的词汇、句式、语义等。 3. 模型选择:选择适合处理情感分析任务的模型架构,如基于深度学习的循环神经网络(RNN)、长短时记忆网络(LSTM)或门控循环单元(GRU)等。 4. 情感标注:对收集的数据进行准确的情感标注,以便模型学习不同情感的模式。 5. 多模态融合:结合语音和文本等多模态信息,提高情感识别的准确性。 6. 优化算法:采用合适的优化算法来训练模型,调整模型的参数,以提高模型的性能。 7. 模型评估:使用合适的评估指标来评估模型在情感需求掌握方面的性能,并根据评估结果进行调整和改进。
2024-11-11
车载语音助手
人工智能在汽车行业的应用非常广泛,以下是一些相关方面,包括车载语音助手: 1. 自动驾驶技术:利用 AI 进行图像识别、传感器数据分析和决策制定,实现汽车自主导航和驾驶,如特斯拉、Waymo 和 Cruise 等公司都在开发和测试。 2. 车辆安全系统:AI 用于增强自动紧急制动、车道保持辅助和盲点检测等系统,通过分析数据预防事故。 3. 个性化用户体验:根据驾驶员偏好和习惯调整车辆设置,如座椅位置、音乐选择和导航系统。 4. 预测性维护:分析车辆实时数据,预测潜在故障和维护需求,减少停机和维修成本。 5. 生产自动化:在汽车制造中用于自动化生产线,提高效率和质量控制。 6. 销售和市场分析:汽车公司用 AI 分析市场趋势、消费者行为和销售数据,制定策略和优化定价。 7. 电动化和能源管理:在电动汽车的电池管理和充电策略中发挥作用,提高能源效率和电池寿命。 8. 共享出行服务:如 Uber 和 Lyft 等,用 AI 优化路线规划、车辆调度和定价策略。 9. 语音助手和车载娱乐:AI 驱动的语音助手,如 Amazon Alexa Auto 和 Google Assistant,允许驾驶员通过语音控制车辆功能、获取信息和娱乐内容。 10. 车辆远程监控和诊断:AI 系统远程监控车辆状态,提供实时诊断和支持。 此外,SoundHound AI 与 Perplexity 合作将在线智能问答功能引入汽车的语音助手,可查询油价、电影演员阵容等信息。详细内容:https://xiaohu.ai/p/7737
2024-11-11
文转语音
以下是为您推荐的在线文本转语音(TTS)工具: 1. Eleven Labs:https://elevenlabs.io/ ,是一款功能强大且多功能的 AI 语音软件,能高保真地呈现人类语调和语调变化,并能根据上下文调整表达方式。 2. Speechify:https://speechify.com/ ,是一款人工智能驱动的文本转语音工具,可作为多种应用程序使用,用于收听网页、文档、PDF 和有声读物等。 3. Azure AI Speech Studio:https://speech.microsoft.com/portal ,是一套服务,提供 100 多种语言和方言的语音转文本和文本转语音功能,还提供自定义语音模型。 4. Voicemaker:https://voicemaker.in/ ,可将文本转换为各种区域语言的语音,并允许创建自定义语音模型,易于使用。 此外,还有 StyleTTS 2 这个开源的媲美 Elevenlabs 的文本转语音工具,其能够结合文本角色内容和场景音快速生成有声小说,具有多样化的语音风格、更自然的语音、高效生成、精确的语音控制、接近真人的语音合成和适应不同说话者等特点。工作原理是利用风格扩散和与大型语音语言模型(SLM)的对抗性训练来实现接近人类水平的 TTS 合成。 语音转文本(Speech to text)支持的语言包括:南非荷兰语、阿拉伯语、亚美尼亚语、阿塞拜疆语、白俄罗斯语、波斯尼亚文、保加利亚文、加泰罗尼亚文、中文、克罗地亚文、捷克文、丹麦文、荷兰文、英国英语、爱沙尼亚文、芬兰文、法国法式英语、加利西亚语、德语、希腊语、希伯来语、印地语、匈牙利语、冰岛语、印度尼西亚语、意大利语、日语、卡纳达语、哈萨克语、韩语、拉脱维亚语、立陶宛语、马其顿语、马来语、马拉地语、毛里求斯语、尼泊尔语、挪威语、波斯语、波苏尼语、塔加洛语、泰米尔语、泰语、土耳其语、乌克兰语、乌尔都语等。 内容由 AI 大模型生成,请仔细甄别。
2024-11-06
哪些ai可以文转语音朗读文章
以下是一些可以进行文转语音朗读文章的 AI: Kimi.ai KHANMIGO(KHAN ACADEMY 的 AI 指南),其基础模型可能会针对学生的学习风格,如为有阅读障碍的学生提供自动文本转语音的帮助。 语音转文本支持的语言包括:南非荷兰语、阿拉伯语、亚美尼亚语、阿塞拜疆语、白俄罗斯语、波斯尼亚文、保加利亚文、加泰罗尼亚文、中文、克罗地亚文、捷克文、丹麦文、荷兰文、英国英语、爱沙尼亚文、芬兰文、法国法式英语、加利西亚语、德语、希腊语、希伯来语、印地语、匈牙利语、冰岛语、印度尼西亚语、意大利语、日语、卡纳达语、哈萨克语、韩语、拉脱维亚语、立陶宛语、马其顿语、马来语、马拉地语、毛里求斯语、尼泊尔语、挪威语、波斯语、波苏尼语、塔加洛语、泰米尔语、泰语、土耳其语、乌克兰语、乌尔都语等。
2024-11-06
有哪款工具可以进行多语种对话?或者实现中文转英文和英文语音
以下是一些可以进行多语种对话或实现中文转英文和英文语音的工具: 1. 11labs:官网为 https://elevenlabs.io/ ,英文效果较好,但无法使用语速、情绪调节等控件,只能通过标点符号改变语音效果。 2. 出门问问的魔音工坊:国内工具,可使用情绪调节控件。 3. Voice control for ChatGPT Chrome 插件:用于和 ChatGPT 进行语音对话,支持多种语言,可当英语口语/听力老师使用。下载地址:https://chrome.google.com/webstore/detail/voicecontrolforchatgpt/eollffkcakegifhacjnlnegohfdlidhn?hl=zhCN 。但该工具提供的 TTS 效果较生硬。 4. VALLEX:一个开源的多语言文本到语音合成与语音克隆模型,支持多种语言(英语、中文和日语)和零样本语音克隆,具有语音情感控制和口音控制等高级功能。
2024-10-17
有什么AI可以实现科研论文转变为报告PPT
以下是一些可以帮助您将科研论文转变为报告 PPT 的 AI 工具: 1. Scite.ai:这是一个为研究人员、学者和行业专业人员打造的创新平台,旨在增强他们对科学文献的洞察。它提供了一系列工具,如引用声明搜索、自定义仪表板和参考检查,这些都能简化您的学术工作。网址: 2. Scholarcy:这是一款科研神器,主要为做科研、学术、写论文的人准备。它可以从文档中提取结构化数据,并通过知识归纳引擎生成文章概要,精炼地呈现文章的总结信息,分析中包含关键概念、摘要、学术亮点、学术总结、比较分析、局限等板块的内容。网址: 3. ChatGPT:这是一个强大的自然语言处理模型,可以提供有关医学课题的修改意见。您可以向它提供您的文章,并提出您的问题和需求,它将尽力为您提供帮助。网址:
2024-09-04
文转图
以下是关于文转图的相关知识: 图生图: 相比于文生图,图生图功能除了文本提词框外还多了图片框输入口,可通过图片给 AI 创作灵感。随便照一张照片拖入,文本输入框旁有两个反推提示词的按钮:CLIP 能通过图片反推出完整含义的句子;DeepBooru 能反推出关键词组。但两种方式生成的提示词可能有瑕疵,需手动补充信息。写好提示词后,调整宽度和高度使红框匹配图片。 文生图的简易上手教程: 1. 定主题:明确要生成的图的主题、风格和表达的信息。 2. 选择基础模型 Checkpoint:根据主题找贴近的模型,如麦橘、墨幽的系列模型。 3. 选择 lora:寻找内容重叠的 lora 控制图片效果及质量。 4. ControlNet:控制图片中特定图像,如人物姿态等,属于高阶技能。 5. 局部重绘:下篇再教。 6. 设置 VAE:无脑选择 840000 即可。 7. Prompt 提示词:用英文写需求,用单词和短语组合,不用管语法和长句,单词、短语间用英文半角逗号隔开。 文字生成视频的 AI 产品: “文生视频”指使用人工智能技术将文本内容转换成视频的服务。以下是一些产品推荐: 1. Pika:出色的文本生成视频 AI 工具,擅长动画制作,支持视频编辑。 2. SVD:熟悉 Stable Diffusion 可安装此最新插件,在图片基础上生成视频,由 Stability AI 开源。 3. Runway:老牌 AI 视频生成工具,提供实时涂抹修改视频功能,但收费。 4. Kaiber:视频转视频 AI,能将原视频转换成各种风格的视频。 5. Sora:由 OpenAI 开发,可生成长达 1 分钟以上的视频。 更多文生视频的网站可查看: 内容由 AI 大模型生成,请仔细甄别。
2024-09-03
文转视频
以下是关于文转视频的相关信息: 一些国内外提供文字生成视频功能的产品有: Pika:出色的文本生成视频 AI 工具,擅长动画制作,支持视频编辑。 SVD:若熟悉 Stable Diffusion,可安装其最新插件,在图片基础上生成视频,由 Stability AI 开源的 video model。 Runway:老牌 AI 视频生成工具,提供实时涂抹修改视频功能,但收费。 Kaiber:视频转视频 AI,能将原视频转换成各种风格的视频。 Sora:由 OpenAI 开发,可生成长达 1 分钟以上的视频。 更多的文生视频网站可查看:https://www.waytoagi.com/category/38 。内容由 AI 大模型生成,请仔细甄别。 PixVerse V2 的使用教程:点击“Text to Video”,在“Model”选择“PixVerse V2”,视频时长。PixVerse V2 支持多风格的视频生成,可在提示词中加入“Anime”“Realistic”等词语。 Vidu:全球上线,Web 端访问:https s://www.vidu.studio/ ,极速生成,实测 30 秒最快推理速度,具有动漫风格、角色可控、精准理解、大片质感等特点。Vidu 提示词指南:https://pkocx4o26p.feishu.cn/docx/M4I1dx5fVofxoexn4ELcMfN4nNc?from=from_copylink 。
2024-08-23
音频克隆
以下是关于音频克隆的相关信息: GPTSoVITS 是一个声音克隆和文本到语音转换的开源 Python RAG 框架。其主要特点包括: 1. 零样本 TTS:输入 5 秒的声音样本即可体验即时的文本到语音转换。 2. 少量样本训练:只需 1 分钟的训练数据即可微调模型,提高声音相似度和真实感,模仿出来的声音更接近原声,更自然。 3. 跨语言支持:支持与训练数据集不同语言的推理,目前支持英语、日语和中文。 4. 易于使用的界面:集成了声音伴奏分离、自动训练集分割、中文语音识别和文本标签等工具,帮助初学者更容易地创建训练数据集和 GPT/SoVITS 模型。 5. 适用于不同操作系统:项目可以在不同的操作系统上安装和运行,包括 Windows。 6. 预训练模型:项目提供了一些已经训练好的模型,可直接下载使用。 GitHub 地址: 视频教程: 使用方法: 1. 注册 colab,启动准备:点击进入按照步骤注册,新建笔记本,运行脚本启动 GPTSo VITS。整个过程比较漫长,需要耐心等待,可以整个脚本一起运行,也可以一段一段运行。运行过程包括克隆项目代码库、进入项目目录、安装 Python 依赖包、安装系统依赖、下载 NLTK 资源、启动 Web UI。运行成功后会出现 public URL。 2. 训练音频准备与上传。 此外,还有 XiaoHu.AI 日报中提到的声音克隆相关内容,它由主要模型 SenseVoice 和 CosyVoice 构成,声音克隆仅需几秒音频样本,无需额外训练数据,还能控制情绪情感、语速、音高。详细内容:https://xiaohu.ai/p/10954 项目地址:https://funaudiollm.github.io 在线演示:https://modelscope.cn/studios/iic/CosyVoice300M
2024-11-12
有哪些可以克隆声音,制作 AI 歌手的工具
以下是一些可以克隆声音、制作 AI 歌手的工具: VoiceSwap 推出的 StemSwap 工具,基于浏览器,可将混音曲目分成四部分,隔离人声并转换为其他歌手的声音,用户能从授权歌手名单中选择新声音并下载完整混音或各个音轨。链接:https://www.voiceswap.ai/ 人工智能音频初创公司,如: :将书面内容转化为引人入胜的音频并实现无缝分发。 :提供专业音频、语音、声音和音乐的扩展服务。 Sonantic(被 Spotify 收购):提供完全表达的 AI 生成语音,带来逼真表演。 :利用合成媒体生成和检测带来无限可能。 :一键使内容多语言化,触及更多人群。 :生成听起来真实的 AI 声音。 :为游戏、电影和元宇宙提供 AI 语音演员。 :为内容创作者提供语音克隆服务。 :超逼真的文本转语音引擎。 :使用单一 AI 驱动的 API 进行音频转录和理解。 :提供听起来像真人的新声音。 :从真实人的声音创建逼真的合成语音的文本转语音技术。 :生成听起来完全像您的音频内容。 此外,深度伪造技术(deepfakes)是一种利用 AI 程序和深度学习算法实现音视频模拟和伪造的技术,投入深度学习的内容库越大,合成的视音频真实性越高。粉丝们还会通过 Stems 音轨分离工具将人声与原始歌曲分离,再使用 DiffSVC 等人声转换模型将人声转换成另一位明星的风格,然后将新的人声轨道与原始作品重新拼接在一起实现 AI 翻唱。
2024-11-06
声音克隆然后朗读文章
声音克隆然后朗读文章的相关信息如下: 声音克隆主要由 SenseVoice 和 CosyVoice 模型构成。仅需几秒音频样本即可进行声音克隆,无需额外训练数据,还能控制情绪情感、语速、音高。 相关链接: 详细内容:https://xiaohu.ai/p/10954 项目地址:https://funaudiollm.github.io 在线演示:https://modelscope.cn/studios/iic/CosyVoice300M https://x.com/imxiaohu/status/1810239744812679271 开源的数字人组合方案中,声音克隆的步骤如下: 第一步,先剪出音频,使用 https://elevenlabs.io/speechsynthesis 或使用 GPTsovits(GPTSoVITS 实现声音克隆)https://waytoagi.feishu.cn/wiki/SVyUwotn7itV1wkawZCc7FEEnGg 克隆声音,做出文案的音频。 第二步,使用 wav2lip 整合包,导入视频和音频,对口型得到视频。基础 wav2lip+高清修复整合包下载地址:https://github.com/Rudrabha/Wav2Lip 。这就是目前的本地跑数字人的方案,效果都差不多,都是用的 wav2lip。相关产品:https://synclabs.so/
2024-11-06
有几十个角色台词的语音文件,用什么方式克隆他的声音质量更好?
很抱歉,您提供的内容中并未包含关于克隆几十个角色台词语音文件以获得更好声音质量的具体方法和相关信息。但一般来说,要提高语音克隆的质量,可以考虑以下几个方面: 1. 选择高质量的原始语音文件,确保其清晰、无噪音。 2. 利用先进的语音克隆技术和工具,例如一些专业的语音处理软件。 3. 对语音特征进行精细的分析和提取,以准确捕捉原始声音的特点。 4. 进行适当的参数调整和优化,以适应不同的角色和场景需求。
2024-11-01
声音克隆可以在什么网站或者平台实现
以下是一些可以实现声音克隆的网站和平台: CloneVoice:基于 Coqui AI TTS 模型,支持 16 种语言,包括中英日韩法,支持在线声音克隆,5 20 秒录音时长。链接:https://x.com/xiaohuggg/status/1739178877153681846?s=20 GPTSoVITS 可在以下平台实现声音克隆: ModelScope 平台: Huggingface 平台:
2024-10-24
克隆音色
以下是一些关于克隆音色的相关信息: 产品推荐: PlayHT:https://play.ht/studio/ ,包含预设音色,可免费克隆一个音色,若想生成多个,删除上一个音色即可做新的。 Elevenlabs:https://elevenlabs.io/app ,包含预设音色,新用户 1 美元开通一个月会员,可使用克隆音色。 魔搭社区:https://www.modelscope.cn/home ,是一个模型开源社区及创新平台,由阿里巴巴通义实验室联合 CCF 开源发展委员会发起,包含各种声音模型,有开发经验的朋友可使用。 Dubbingx:https://dubbingx.com/ ,免费克隆音色,有桌面版,Mac、Window 均可用。 魔音工坊:https://www.moyin.com/ 对口型相关: Runway:静态图片+音频文件,可生成对口型视频;动态视频+音频文件,可生成对口型视频,但需要消耗 20 点。 Pika:静态图片+音频文件,可生成对口型视频。 其他: 剪映:不能使用预录制的音频,只能现场朗读随机提供的文字材料收集音色信息,1 积分=2 个字,消耗积分生成配音,会员每个月赠送 1200 积分。 GPTSoVITS:开源 AI 克隆音色项目,部署难度较高,但效果很好,完整的教程和测评请查看:https://space.bilibili.com/5760446 。 Uberduck:克隆效果怪怪的,附官方使用指南:https://docs.uberduck.ai/guides/gettingstarted 。 ElevenLabs 推出全自动化的 AI 配音或视频翻译工具,可上传视频或粘贴视频链接,能全自动将视频翻译成 29 种语言,并克隆原视频声音。 豆包的音色模仿,读约 20 个字的句子,5 秒可生成相似音色,之后可用自己声音读生成的文字内容。 剪映也有新的声音克隆功能,效果不错。
2024-10-21