Navigate to WaytoAGI Wiki →
Home/Question List/Question Detail

怎么文字转语音，用自己的音色

Answer

要实现文字转语音并使用自己的音色，以下是一些方法和相关信息：

  • ChatTTS 增强版整合包：当文本内容很多时，可以勾选文本切割来处理，默认五十字符切割，还能将音频片段合并为一整段音频。切割的音频片段也支持增强处理。保存后的音频文件结构清晰，包括合成的一整段音频、增强处理后的整段音频、切分的音频片段等。该版本增加了批量处理功能，可上传按句换行格式的 TXT 文本。音色固定，可通过点击随机按钮多尝试找到满意音色，并将设置和音色种子保存到配置文件方便下次使用。
  • ElevenLabs 工具：能全自动将视频翻译成 29 种语言，更能克隆原视频里的声音来配音。
  • GPT-SoVITS + Bert-VITS2：一开始可选不同音色，基于网络红人训练，音色与网络红人相像。若没有接近的音色，可自己训练，参考 WaytoAGI 的知识库：GPT-SoVITS 实现声音克隆 。但实际使用中只改音色可能不够，如说话时的口头禅、重音、停顿等。
Content generated by AI large model, please carefully verify (powered by aily)

References

卡尔：终于蹲到ChatTTS增强版整合包，AI视频配角们有了自己的声音～

[ChatTTS声音增强版【本地端.wav](https://bytedance.feishu.cn/space/api/box/stream/download/all/CXeRb7tWdoWtsAxENksc9hWKnvh?allow_redirect=1)其次，当文本内容很多时,可以勾选文本切割来进行处理，默认为五十字符进行切割，还可以将音频片段合并为一整段音频，切割的音频片段也支持增强处理[ChatTTS念斗破-文本切割【本地端】.wav](https://bytedance.feishu.cn/space/api/box/stream/download/all/XNCpb4jK5oKWH7xFh10caVv6nKd?allow_redirect=1)保存后的音频文件结构相当清晰，concatenated Audio是合成的一整段音频，Enhanced Audio是增强处理后的整段音频Audio clip文件夹中是切分的音频片段。Enhanced开头的就是增强处理的音频片段，不带Enhanced就是生成的普通的音频片段。该个版本还增加了批量处理功能，勾选后可以上传一个TXT文本，TXT文本需要按照每句换行的格式。[ChatTTS念斗破-批量版【本地端】.wav](https://bytedance.feishu.cn/space/api/box/stream/download/all/HazTbEXHmopzo7x7iJDcSFQinih?allow_redirect=1)最后就是音色固定，前面提到这个项目不同的音频种子生成的人物说话音色会不一样。我们可以点击随机按钮，多尝试几次，找到自己满意的音色后，可以将设置和音色种子保存到配置文件中，方便下次使用。ChatTTS刚放出来的时候，我很惊讶于它的效果，

声音克隆合集

ElevenLabs推出一个全自动化的AI配音或视频翻译工具。你只需要上传视频或者粘贴视频链接，这个工具就能全自动的在几十秒到几分钟内将你的视频翻译成29种语言。更牛P的是直接克隆原视频里面的声音，来给你配音。群友瑞華测试：[2080_1706113804.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/HQ8sb2smBodPZpxOX2och4DmnIc?allow_redirect=1)[2081_1706113807.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/OVuvbds5XoxSjpx8lPmcUqtEnsg?allow_redirect=1)[2082_1706113840.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/VJzQbRRdZoOgSdx2eXicmfn8nHd?allow_redirect=1)[2083_1706113844.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/N2avbWxMZoVKxSxswcucQ27encf?allow_redirect=1)另外刚才有群友试了下豆包的音色模仿，读了大概20个字的句子，5s就可以生成非常像的音色，之后就可以用你自己的声音读生成的文字内容了。声音音色的模仿非常像了

Stuart：免费 AI 真人语音入门： GPT-SoVITS + Bert-VITS2

可变参数就是AIGC最有趣的地方，语音生成也一样：可变参数就是使用技巧。[heading3]更换音色🎵[content]一开始会感觉很简单，就只是字生成语音，能选的也就是不同的音色。音色因为基于网络红人训练，因此生成的语音音色会和对应的网络红人非常相像。只要选择和自己需要非常接近的音色即可。如果没有接近的音色，也可以自己训练一个，参考WaytoAGI的知识库：[GPT-SoVITS实现声音克隆](https://waytoagi.feishu.cn/wiki/SVyUwotn7itV1wkawZCc7FEEnGg?from=from_copylink)但是真正准备开始用就会发现，只改音色不够用了。😓我们真正说话，或者配音的时候，通常是边思考边说话，因此经常带着一些口头禅，类似“嗯”，“啊”，甚至更离谱的“m3？” 😂说话过程中有些重音，停顿和一句手写语句也不全相同。

Others are asking
现在AI领域做语音模型比较好的有哪几家？音色复刻做的比较好的有哪些
在 AI 领域，做语音模型较好的有阿里，其 CosyVoice 语音合成模型有以下特点： 精细控制：能生成符合性别、年龄和个性特征的声音。 自然模拟：可模拟笑声、咳嗽和呼吸等人类语音自然特征。 情感和风格：能够为声音添加情感和风格，更具表现力。 GitHub 链接：https://github.com/FunAudioLLM/CosyVoice 相关链接：https://x.com/imxiaohu/status/1818942399705710700 。但关于音色复刻做的比较好的，上述信息中未明确提及。
2025-01-19
我想有一个模仿名人的音色。
如果您想模仿名人的音色，一开始可能会觉得比较简单，只是字生成语音并选择不同的音色。音色通常基于网络红人训练，生成的语音音色会和对应的网络红人非常相像。您只要选择和自己需要非常接近的音色即可。如果没有接近的音色，也可以自己训练一个，参考 WaytoAGI 的知识库：。但真正准备开始用就会发现，只改音色可能不够用。我们真正说话或配音时，通常是边思考边说，因此会带着一些口头禅，如“嗯”“啊”，甚至更特别的“m3？”，说话过程中会有重音、停顿，且一句手写语句也不全相同。
2025-01-15
集合视频翻译和音色克隆，照片说话功能为一体的平台，ViiTorai
很抱歉，目前没有关于“ViiTorai”这个集合视频翻译、音色克隆和照片说话功能为一体的平台的相关信息。
2025-01-12
克隆音色
以下是一些关于克隆音色的相关信息： 产品推荐： PlayHT：https://play.ht/studio/ ，包含预设音色，可免费克隆一个音色，若想生成多个，删除上一个音色即可做新的。 Elevenlabs：https://elevenlabs.io/app ，包含预设音色，新用户 1 美元开通一个月会员，可使用克隆音色。 魔搭社区：https://www.modelscope.cn/home ，是一个模型开源社区及创新平台，由阿里巴巴通义实验室联合 CCF 开源发展委员会发起，包含各种声音模型，有开发经验的朋友可使用。 Dubbingx：https://dubbingx.com/ ，免费克隆音色，有桌面版，Mac、Window 均可用。 魔音工坊：https://www.moyin.com/ 对口型相关： Runway：静态图片+音频文件，可生成对口型视频；动态视频+音频文件，可生成对口型视频，但需要消耗 20 点。 Pika：静态图片+音频文件，可生成对口型视频。 其他： 剪映：不能使用预录制的音频，只能现场朗读随机提供的文字材料收集音色信息，1 积分=2 个字，消耗积分生成配音，会员每个月赠送 1200 积分。 GPTSoVITS：开源 AI 克隆音色项目，部署难度较高，但是效果很好，完整的教程和测评请查看原作者主页：https://space.bilibili.com/5760446 。 ElevenLabs 推出全自动化的 AI 配音或视频翻译工具，上传视频或粘贴视频链接，能全自动在几十秒到几分钟内将视频翻译成 29 种语言，还能克隆原视频里面的声音来配音。群友测试豆包的音色模仿，读大概 20 个字的句子，5 秒就可生成非常像的音色，之后可用自己的声音读生成的文字内容，声音音色模仿非常像。
2024-11-19
克隆音色
以下是一些关于克隆音色的相关信息： 产品推荐： PlayHT：https://play.ht/studio/ ，包含预设音色，可免费克隆一个音色，若想生成多个，删除上一个音色即可做新的。 Elevenlabs：https://elevenlabs.io/app ，包含预设音色，新用户 1 美元开通一个月会员，可使用克隆音色。 魔搭社区：https://www.modelscope.cn/home ，是一个模型开源社区及创新平台，由阿里巴巴通义实验室联合 CCF 开源发展委员会发起，包含各种声音模型，有开发经验的朋友可使用。 Dubbingx：https://dubbingx.com/ ，免费克隆音色，有桌面版，Mac、Window 均可用。 魔音工坊：https://www.moyin.com/ 对口型相关： Runway：静态图片+音频文件，可生成对口型视频；动态视频+音频文件，可生成对口型视频，但需要消耗 20 点。 Pika：静态图片+音频文件，可生成对口型视频。 其他： 剪映：不能使用预录制的音频，只能现场朗读随机提供的文字材料收集音色信息，1 积分=2 个字，消耗积分生成配音，会员每个月赠送 1200 积分。 GPTSoVITS：开源 AI 克隆音色项目，部署难度较高，但效果很好，完整的教程和测评请查看：https://space.bilibili.com/5760446 。 Uberduck：克隆效果怪怪的，附官方使用指南：https://docs.uberduck.ai/guides/gettingstarted 。 ElevenLabs 推出全自动化的 AI 配音或视频翻译工具，可上传视频或粘贴视频链接，能全自动将视频翻译成 29 种语言，并克隆原视频声音。 豆包的音色模仿，读约 20 个字的句子，5 秒可生成相似音色，之后可用自己声音读生成的文字内容。 剪映也有新的声音克隆功能，效果不错。
2024-10-21
我指的是要用我的音色翻唱歌曲 用AI来克隆 推荐不错的吧
以下是为您推荐的关于用 AI 克隆音色翻唱歌曲的相关内容： ElevenLabs 推出了全自动化的 AI 配音或视频翻译工具。您只需上传视频或粘贴视频链接，它能在几十秒到几分钟内将视频翻译成 29 种语言，还能克隆原视频中的声音进行配音。群友瑞华测试发现，模仿豆包的音色读约 20 个字的句子，5 秒就能生成非常相似的音色，之后可用自己的声音读生成的文字内容。详情可参考：https://mp.weixin.qq.com/s/nHIPaq4evPbvSQS1ctYZrA 剪映也有新的声音克隆功能，卡兹克做了对比，效果不错。 Stuart：免费 AI 真人语音入门 GPTSoVITS + BertVITS2 。一开始只是字生成语音并能选不同音色，音色基于网络红人训练，与对应的网络红人非常相像，也可自己训练，参考： 但真正使用时会发现只改音色不够用，因为真正说话或配音时有口头禅、重音、停顿等。 一些提供 AI Mastering 的网站列表： https://www.landr.com/onlineaudiomastering/ （收费） https://emastered.com/ （收费） https://app.kits.ai/aimastering （收费，推荐，除母带处理，还有分轨、替换人声、人声克隆等功能） https://app.bakuage.com/ （免费！强烈推荐，本文主角！正常情况下不需要魔法，为保证流畅，建议打开魔法）
2024-08-27
我想了解如何在微信公众号搭建一个能发语音的数字人
以下是在微信公众号搭建能发语音的数字人的相关步骤： 1. 照片数字人工作流及语音合成（TTS）API 出门问问 Mobvoi： 工作流地址：https://github.com/chaojie/ComfyUImobvoiopenapi/blob/main/wf.json 相关文件： 记得下载节点包，放进您的 node 文件夹里，这样工作流打开就不会爆红了！ComfyUI 启动后就可以将 json 文件直接拖进去使用了！ 2. 「AI 学习三步法：实践」用 Coze 免费打造自己的微信 AI 机器人： 组装&测试“AI 前线”Bot 机器人： 返回个人空间，在 Bots 栏下找到刚刚创建的“AI 前线”，点击进入即可。 组装&测试步骤： 将上文写好的 prompt 黏贴到【编排】模块，prompt 可随时调整。 在【技能】模块添加需要的技能：工作流、知识库。 【预览与调试】模块，直接输入问题，即可与机器人对话。 发布“AI 前线”Bot 机器人： 测试 OK 后，点击右上角“发布”按钮即可将“AI 前线”发布到微信、飞书等渠道。 发布到微信公众号上： 选择微信公众号渠道，点击右侧“配置”按钮。 根据以下截图，去微信公众号平台找到自己的 App ID，填入确定即可。不用了解绑即可。 最后去自己的微信公众号消息页面，就可以使用啦。
2025-02-18
如何可以通过ai语音转文字
以下是关于通过 AI 实现语音转文字的相关内容： 可以使用 GVoice 提供的语音录制和识别能力，其中文识别率优秀。语音识别的少量错误，ChatGPT 能正常理解和纠错，衔接较为流畅。 推荐 OpenAI 的 wishper，相关链接：https://huggingface.co/openai/whisperlargev2 。还有一个项目：https://huggingface.co/spaces/sanchitgandhi/whisperjax ，此项目在 JAX 上运行，后端支持 TPU v48，与 A100 GPU 上的 PyTorch 相比，快 70 多倍，是目前最快的 Whisper API。 对于有字幕的 B 站视频，可通过安装油猴脚本获取字幕，然后将字幕文字内容复制发送给 GPTs 进行总结。
2025-02-17
开源文字转语音
以下是为您提供的开源文字转语音相关信息： WhisperSpeech：通过对 OpenAI Whisper 模型的反向工程实现，生成发音准确、自然的语音输出。 相关链接：https://github.com/collabora/WhisperSpeech 、https://x.com/xiaohuggg/status/1748572050271420663?s=20 StyleTTS 2：一个开源的媲美 Elevenlabs 的文本转语音工具，可结合文本角色内容和场景音快速生成有声小说。 主要特点：多样化的语音风格、更自然的语音、高效生成、精确的语音控制、接近真人的语音合成、适应不同说话者。 工作原理：利用风格扩散和与大型语音语言模型（SLM）的对抗性训练来实现接近人类水平的 TTS 合成，通过扩散模型将风格建模为一个潜在的随机变量，以生成最适合文本的风格，而不需要参考语音，实现了高效的潜在扩散，同时受益于扩散模型提供的多样化语音合成。 相关链接：暂无
2025-02-15
自动语音识别加字幕
以下是关于自动语音识别加字幕的相关内容： 制作 AI 数字人视频添加字幕的方法： 在显示区域，拖动背景图的角将其放大到适合尺寸，如覆盖视频窗口，并将数字人拖动到合适位置。点击文本 智能字幕 识别字幕，然后点击开始识别，软件会自动将文字智能分段并形成字幕。至此，数字人视频完成，可点击右上角“导出”按钮导出视频备用。 文旅片添加字幕的方法： 选择朗诵男生或清爽男生的音色进行朗读，点击开始朗读自动生成音频。鼠标右键点击当前音轨，找到识别字幕/歌词，耐心等待生成对应文本字幕。操作复杂的部分可观看录制的视频。若剪映的识别字幕功能需要 VIP，可准备好字幕文件，点击本地字幕并导入文件。 视频自动字幕工具推荐： 1. Reccloud：免费的在线 AI 字幕生成工具，可上传视频精准识别，能翻译字幕并生成双语字幕，处理过 1.2 亿+视频，识别准确率接近 100%。 2. 绘影字幕：一站式专业视频自动字幕编辑器，提供字幕制作和翻译服务，支持 95 种语言，准确率高达 98%，可自定义字幕样式。 3. Arctime：能对视频语音自动识别并转换为字幕，支持自动打轴，支持 Windows 和 Linux 等主流平台及 SRT 和 ASS 等字幕功能。 4. 网易见外：国内知名语音平台，支持视频智能字幕功能，转换正确率较高，支持音频转写功能。 您可根据自身需求选择适合的工具。
2025-02-14
有免费好用的文本转语音工具吗
以下是一些免费好用的文本转语音工具： 1. Eleven Labs：https://elevenlabs.io/ 这是一款功能强大且多功能的 AI 语音软件，能生成逼真、高品质的音频，可高保真地呈现人类语调和语调变化，并能根据上下文调整表达方式。 2. Speechify：https://speechify.com/ 这是一款人工智能驱动的文本转语音工具，可将文本转换为音频文件，能作为 Chrome 扩展、Mac 应用程序、iOS 和 Android 应用程序使用，适用于收听网页、文档、PDF 和有声读物。 3. Azure AI Speech Studio：https://speech.microsoft.com/portal 这是一套服务，赋予应用程序“听懂、理解并与客户进行对话”的能力，提供了支持 100 多种语言和方言的语音转文本和文本转语音功能，还提供了自定义的语音模型。 4. Voicemaker：https://voicemaker.in/ 这一 AI 工具可将文本转换为各种区域语言的语音，并允许创建自定义语音模型，易于使用，适合为视频制作画外音或帮助视障人士。 此外，还有日语文本转语音软件 VOICEVOX，它提供多种语音角色，适用于不同场景，可调整语音的语调、速度、音高，开源且可商用。链接： 内容由 AI 大模型生成，请仔细甄别。
2025-02-12
语音转文字
以下是关于语音转文字的相关信息： 推荐 OpenAI 的 wishper，相关链接：https://huggingface.co/openai/whisperlargev2 。一分钟搞定 23 分钟的音频，相关链接：https://huggingface.co/spaces/sanchitgandhi/whisperjax 。此项目在 JAX 上运行，后端支持 TPU v48，与 A100 GPU 上的 PyTorch 相比，快 70 多倍，是目前最快的 Whisper API。 在声控游戏《神谕》中，使用 GVoice 提供的语音录制和识别能力进行语音转文字，中文识别率优秀。语音识别的少量错误，可被 chatgpt 正常理解和纠错，衔接流畅。 免费的会议语音转文字工具大多有使用时间限制，超过免费时间需付费。推荐工具包括：飞书妙记（https://www.feishu.cn/product/minutes）、通义听悟（https://tingwu.aliyun.com/home）、讯飞听见（https://www.iflyrec.com/）、Otter AI（https://otter.ai/）。更多会议记录工具请访问网站：https://waytoagi.com/sites/category/29 。
2025-02-11
有什么可以通过文字生成流程图或其他图片的AI网址
以下是一些可以通过文字生成流程图或其他图片的 AI 网址： DALL·E：由 OpenAI 推出，可根据输入的文本描述生成逼真的图片。 StableDiffusion：开源的文生图工具，能生成高质量图片，支持多种模型和算法。 MidJourney：因高质量的图像生成效果和用户友好的界面设计而受欢迎，在创意设计人群中流行。 您可以在 WaytoAGI 网站（https://www.waytoagi.com/category/104 ）查看更多文生图工具。 此外，还有一些文字生成视频的 AI 产品，如： Pika：擅长动画制作，支持视频编辑。 SVD：Stable Diffusion 的插件，可在图片基础上生成视频。 Runway：老牌 AI 视频生成工具，提供实时涂抹修改视频功能，但收费。 Kaiber：视频转视频 AI，能将原视频转换成各种风格的视频。 Sora：由 OpenAI 开发，可生成长达 1 分钟以上的视频。 更多的文生视频网站可查看：https://www.waytoagi.com/category/38 。 请注意，以上内容由 AI 大模型生成，请仔细甄别。
2025-02-18
国内有什么免费好用的文字转图片AI吗？
目前国内免费好用的文字转图片 AI 工具包括： 1. DALL·E：由 OpenAI 推出，可根据输入的文本描述生成逼真的图片。 2. StableDiffusion：开源的文生图工具，能生成高质量图片，支持多种模型和算法。 3. MidJourney：因高质量的图像生成效果和友好的用户界面而受欢迎，在创意设计人群中流行。 您还可以在 WaytoAGI 网站（https://www.waytoagi.com/category/104 ）查看更多相关工具。但需注意，内容由 AI 大模型生成，请仔细甄别。
2025-02-17
有没有把文字生成图片，并配图的ai软件
以下是一些可以将文字生成图片并配图的 AI 软件： 1. Stable Diffusion：可以根据文本指令生成与文本信息匹配的图片，生成的图片样式取决于使用者输入的提示词，难以出现完全相同的两张输出图片。 2. 无界 AI：可用于快速制作海报底图，在操作步骤上与其他同类软件有相似之处，大致流程包括确定主题与文案、选择风格与布局、生成与筛选、配文与排版。 3. DALL·E：由 OpenAI 推出，能根据输入的文本描述生成逼真的图片。 4. MidJourney：因高质量的图像生成效果和用户友好的界面设计受到广泛欢迎，在创意设计人群中尤其流行。 您可以根据自己的需求选择使用。在 WaytoAGI 网站（https://www.waytoagi.com/category/104 ），可以查看更多文生图工具。需要注意的是，内容由 AI 大模型生成，请仔细甄别。
2025-02-16
文字转视频
以下是关于文字转视频的相关信息： 文字生成视频的 AI 产品有： 1. Pika：出色的文本生成视频 AI 工具，擅长动画制作，支持视频编辑。 2. SVD：Stable Diffusion 的插件，可在图片基础上生成视频，由 Stability AI 开源。 3. Runway：老牌 AI 视频生成工具，提供实时涂抹修改视频功能，但收费。 4. Kaiber：视频转视频 AI，能将原视频转换成各种风格的视频。 5. Sora：由 OpenAI 开发，可生成长达 1 分钟以上的视频。 更多的文生视频网站可查看：https://www.waytoagi.com/category/38 （内容由 AI 大模型生成，请仔细甄别） 使用 Runway 生成第一个 AI 视频的步骤： 1. 进入 Runway 网页：https://runwayml.com/ 。 2. 右上角 Sign Up 注册，输入邮箱与基础信息，完成邮箱验证。 3. 选择 Try For Free 模式，新注册用户有 125 个积分进行免费创作（约为 100s 的基础 AI）。 4. 生成视频操作： 选择左侧工具栏“生成视频”。 选择“文字/图片生成视频”。 将图片拖入框内。 选择一个动画系数。 点击生成 4 秒视频。 下载视频。 腾讯运营使用 ChatGPT 实现文字转视频的方法：通过 ChatGPT 生成文案，将文案复制到支持 AI 文字转视频的工具内，如市面上的一些手机剪辑软件（腾讯智影的数字人播报功能、手机版剪映的图文成片功能），系统匹配的素材不符合要求时可手动替换。这类 AI 视频制作工具操作简单，让大众生产视频更轻松，AIGC 视频未来可能有更成熟的发展与应用。
2025-02-14