新闻中心

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

2024-06-01
浏览次数:
返回列表
未来人与人的交流,难道是这个样?

最近,一个名为chattts的文本转语音项目爆火出圈,引来大家极大的关注。短短三天时间,在github上已经斩获了9.2k的star量。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

项目地址:https://github.com/2noise/ChatTTS/tree/main

作者本人也在 x 上表示,ChatTTS 突破了开源天花板。不过,目前开源的只是底模,没有经过 SFT 监督微调。

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

该项目将文本转换成语音,效果是这样的:爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量ChatTTS 不仅能说中文,英文也能 hold 住,还支持一些细粒度控制,它允许你加入笑声、说话间的停顿,还有语气词,可玩性很强。 爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量它可以复刻已经逝去的人的绝版声音,想要再听到乔布斯开发布会,随时都可以。听它模仿霉霉的音色,不论是语调还是语气的变化,都挺接近本人,几乎听不出来 AI 味儿。 爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量中英文混说也能拿捏,这口半英半中的腔调勇闯留子圈,ChatTTS 的语言能力已达到 next level。 爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

以上音频来自 B 站: https://www.bilibili.com/video/BV1zn4y1o7iV/?share_source=copy_web&vd_source=983ec32a3036bb1cf2699e4fdbce3c28

根据上述描述展示中,我们可以看出,ChatTTS 能够实现自然流畅的语音合成,同时支持多说话人;还能预测和控制细粒度的韵律特征,包括笑声、停顿和插入词等;ChatTTS 在韵律方面超越了大部分开源 TTS 模型。

目前ChatTTS支持中文和英文。最大模型使用了超过10万小时的中英文数据进行训练。在HuggingFace中开源的版本为4万小时训练但尚未SFT的版本。

值得一提的是,上述展示的音频都是基于语音合成技术制作,旨在展示技术成果,无意冒犯或侵犯他*益。

项目一经发布,各路网友纷纷试用起来,给出了声音确实真假难辨。

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

还有人拿 GPT 生成文本,让 ChatTTS「读」出来,语气语调和真人的差距非常小:

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

效果这么好,自然是想要上手试试。怎样才能用 ChatTTS 当你的嘴替,可以参考如下方法进行操作。

易标AI 易标AI

告别低效手工,迎接AI标书新时代!3分钟智能生成,行业唯一具备查重功能,自动避雷废标项

易标AI 135 查看详情 易标AI

在线体验地址:https://huggingface.co/spaces/Dzkaka/ChatTTS

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

ChatTTS 主要有两种核心功能,第一种是文字转语音,第二种是将与大语言模型实时语音对话。在这些功能之外,可以在「Audio Seed」处调节数字指定说话人的音色,或者摇骰子随机生成一种。但是有不少测试者表示,每次采用一样的参数,生成的音色也不一定固定。

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

2Noise 称,目前支持音色克隆,但需要更大的数据量。

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

在文本框内输入文本后,ChatTTS 会自动为你生成韵律和停顿,还会加入一些如「然后」之类的语气词。如果你在输入时在文本中加入 [laugh] 和 [uv_break],就能手动控制 ChatTTS 在说话间产生一些「笑果」。爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

不过 ChatTTS 现在还不能搞定比较长的文本,有网友让它挑战了一下有声书,发现初始版本不能生成超过 30 秒的音频,需要手动修复。遇到比较长的文本时,ChatTTS 的分词也会出问题。

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量

以上就是爆火ChatTTS突破开源语音天花板,3天斩获9k的Star量的详细内容,更多请关注其它相关文章!


# 产业  # chattts  # 西安seo顾问 神超seo  # 开封整站seo关键词排名系统  # 娄烦特色关键词排名  # 塘沽seo推广价格  # 之争  # 新能源  # 五大  # 英文  # 也能  # 都能  # 语气词  # 华纳  # 南极  # 开源  # type  # udio  # follow  # git  # 关于网站优化的论文  # 营销推广方式认可l火18星来  # 陕西建设网官方网站下载  # 泉山企业网站建设公司  # 扎鲁特旗网站seo优化排名  # 成都seo公司 


相关栏目: 【 行业资讯67740 】 【 技术百科0 】 【 网络运营39195


相关推荐: 165开头的是什么电话号码  苹果的type-c接口是什么  如何用命令打开光驱  微信最多可以加多少好友  element ui是什么  固态硬盘装完如何使用  宝马x5仪表盘上边有power是什么意思  哪个品牌有折叠屏手机卖  联想手机如何输入命令行  如何在命令提示符播放音频  春运抢票哪个平台好抢  typescript怎么设置滚动条  轩逸e-power挡位b是什么意思  华为交换机如何复制命令行  360桌面壁纸怎么弄掉  电瓶车的power是什么意思  vivo手机爱奇艺怎么投屏到电视操作步骤  360n7锁屏壁纸怎么固定  夸克内测有什么好处  typescript怎么写游戏  typescript如何遍历map  公司的tm市盈率为负是什么意思  折叠屏手机选择哪个好  如何安装m.2固态硬盘  如何找出命令行  手机如何ip绑定域名解析  typescript有什么框架  怎么下载360桌面壁纸  linux如何使用db2命令  比亚迪秦nfc功能是什么意思  如何用dos命令分区  j*a中怎么截取数组  typescript和哪个语音很像  linux下如何重定位命令  2025年国外最佳语音聊天软件排行榜  如何使用命令行界面  苹果16哪些型号好用  typescript的文件如何执行  awful是什么意思  linux如何用命令修改ip  使用typescript对团队有什么要求  j*a里数组怎么赋值  显卡上面TYPE-C是什么接口  ftp$如何执行宏命令  如何使用程序编译 执行的命令  j*a二数组怎么创建  怎么在typescript写原型链  苹果16多有哪些功能  市盈率当中17A 18E是什么意思  video是什么意思 

搜索