新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

392次阅读
没有评论

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

语音模型学会了理解

金磊 假装发自 武汉

量子位 | 公众号 QbitAI

发疯文学的“疯”,终于是让AI给呐喊出来了

例如电视剧《180天重启计划》中的这段发疯名场面:

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

然后啊,我们让AI用于谦+郭德纲的腔调打开这段对话,画风是这样的:

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

视频地址:https://mp.weixin.qq.com/s/X_8-1s6ZZqkZ9vS69_LeiQ

这要放以前,那些平平淡淡的AI语音,这癫感、这呐喊,大概率是发不出来的。

那为什么现在AI就可以做到了呢?

因为就在刚刚,火山引擎把豆包语音大模型升级了——

语音学会了思考,更能理解台词,情感表达更有张力。

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

具体来说,火山引擎这次主要升级了2个模型,分别是豆包语音合成模型2.0(Doubao-Seed-TTS 2.0)和豆包声音复刻模型2.0(Doubao-Seed-ICL 2.0)。

刚才的那段发疯对话片段的制作过程,就是先上传了郭德纲和于谦的音频,让豆包声音复刻模型2.0在短短几秒中的时间里复刻出声音:

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

然后再在豆包语音合成模型2.0中,分别选择于谦和郭德纲的声音,并在台词的前面标注了一下想要达到的情绪效果:

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

值得注意的是,上面这一步的操作,就是此次豆包语音合成模型2.0的一大关键点,分为三种模式:

  • 默认模式:可以在台词前像我们刚才那样,添加细节描述内容;
  • 语音指令:可以控制说话的情绪、方言、语气和语速等;
  • 引入上文:把上文内容引进来,让AI更好地去理解完整内容。
新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

所以整体来看,这次火山引擎是想让AI语音达到的效果,是要从“像人”走向“懂人”

那么效果到底几何?老规矩,一波实测,走起~

豆包的语音,学会了理解

提到AI语音的玩法,怎么能少的了经典名剧《甄嬛传》

有请,华妃甄嬛

然后我们这次要模仿的片段,是闫妮和海清在一次颁奖典礼上的一段有趣对话:

海清:大家晚上好,站在我身边的是比我漂亮一点点的闫妮姐。

闫妮:站在我身边的是比我难看一点点的美妇海清。

操作方式上,依旧是先用豆包声音复刻模型2.0打造出华妃和甄嬛的声音,然后再把魔改的台词注入到豆包语音合成模型2.0中。

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

这一次,我们采用的是“默认+语音指令”的方式。

来,听一下效果:

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

视频地址:https://mp.weixin.qq.com/s/X_8-1s6ZZqkZ9vS69_LeiQ

啧啧啧,听完这个片段,华妃的大白眼儿都在脑海里翻上天了……

接下来,我们再用歌坛当红炸子鸡单依纯的声音来对比一下有无“语音指令”的区别。

台词是:

我逆转时空九十九次救你,你却次次死于同一支暗箭。谢珩,原来不是天要亡你……是你宁死也不肯为我活下去。

在没有“语音指令”的时候,单依纯的声音念这段台词可以说是平平淡淡、寡然无味:

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

音频地址:https://mp.weixin.qq.com/s/X_8-1s6ZZqkZ9vS69_LeiQ

但当我们加上这么一句指令,“小品女王”单依纯的情绪一下子就上来了:

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

音频地址:https://mp.weixin.qq.com/s/X_8-1s6ZZqkZ9vS69_LeiQ

不过有一说一,单依纯的声线……还是适合用来唱歌。

至于有无“上下文引用”,AI语音生成的效果差距也是比较的。

例如给定一段台词:

北京…因为我来,这是第二次,上一次是在一…八年还是什么时候来过一次但是时间很短也没有时间去,真正的去游历,所以北京对我来说…只是…还存在一种想象之中啊,嗯没有太多的,直观的体验。

可以看到,这段台词有大量的停顿之处,这就需要AI精准地去识别和思考。在没有“上下文引用”的时候,效果是这样的:

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

音频地址:https://mp.weixin.qq.com/s/X_8-1s6ZZqkZ9vS69_LeiQ

停顿可以说是杂乱无章了。但若是家里一句[#你怎么评价北京这个城市?],效果就会截然不同:

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

音频地址:https://mp.weixin.qq.com/s/X_8-1s6ZZqkZ9vS69_LeiQ

至于火山引擎这次是如何让AI语音能力提升的,背后的关键就是我们刚才提到的基于豆包大语言模型研发语音合成架构

它可以让合成和复刻的声音都能进行深度语义理解,并拓展出上下文推理能力,从单纯的文本朗读进化为 “理解后的精准情感表达”

这意味着模型可以捕捉到对话的背景信息、用户的潜在意图甚至是细腻的心理活动,从而在声音中注入真实的情感和拟人感。

基于这种深度的语义理解,模型不仅能实现更连贯、饱满的情感演绎,还能精确遵循用户的指令,灵活调控语气、情绪和语速。

这也就不难理解升级的豆包语音模型能让AI说话这么有味道了。

不过基于此,火山引擎还解决了一个业界老大难的问题——让AI精准地念出复杂公式

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

在现场,团队就放出了用咱们很熟悉的声音念出来的铜与浓硫酸反应

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

视频地址:https://mp.weixin.qq.com/s/X_8-1s6ZZqkZ9vS69_LeiQ

据了解,目前市面上的同类模型朗读准确率普遍低于50%,但豆包语音大模型2.0版本,在小学至高中阶段全学科的复杂公式朗读中,能够实现90%左右的准确率!

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

New的不仅仅是语音

除了语音上的大动作之外,火山引擎这次在基座模型和多模态方面,同样也有不少的动作。

首先,作为技术底座的豆包大模型1.6迎来了重要升级。

此次升级最大的亮点是,它成为了国内首个原生支持分档调节思考长度的Thinking模型。

在实际应用中,深度思考模型常因推理时间过长而导致响应延迟和成本高昂,这成为许多企业望而却步的门槛。

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

豆包大模型1.6通过训练四种不同的思考模式,让客户可以在效果、时延、成本三者之间找到最适合自身业务的平衡点。

例如,在低思考长度模型下,模型效果与升级前保持不变,但总输出tokens下降了77.5%,深度思考时间更是大幅缩短了84.6%。

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

与此同时,火山引擎还首次推出了轻量化的豆包大模型1.6 Lite,为不同应用场景提供了更灵活、高效的选择。

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

更进一步,火山引擎在国内首次发布了智能模型路由(Smart Model Router)。

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

“没有一款模型是万能的”,这是业界的共识。智能模型路由的核心价值在于,它能像一个智能调度中心,根据用户任务的复杂度和类型,自动匹配最合适的模型来执行。

用户可以在“效果优先”、“成本优先”和“平衡模式”之间自由切换,系统会自动选取豆包系列或其他业界主流模型(如DeepSeek、Kimi等)中最优的一个来完成任务。

这有效避免了“大材小用”造成的成本浪费或是“小材大用”导致的效果不佳。测试数据显示,在成本优先模式下,路由后的综合成本最高可下降71%,极大地降低了企业使用大模型的门槛。

中国公有云上,每两个token就有一个由火山引擎生产

从豆包图像创作模型Seedream 4.0到豆包语音模型2.0,迈向AI云,这是今年火山引擎的迭代速度。

因此在最后,我们还需要讨论一个问题——这一系列密集的产品发布,意味着什么?

答案其实清晰地藏在火山引擎眼中全球大模型技术演进的三大核心趋势:

更强的思考与理解能力更丰富的多模态交互以及更实用的Agent智能体

新豆包模型让郭德纲喊出发疯文学:(这班)不上了!不上了!不上了!!!

从能分档调节思考长度的豆包大模型1.6,到能理解上下文的对话式语音模型,再到精准调度模型的智能路由,无一不体现了火山引擎对模型“思考与理解”能力的深度探索。

而豆包语音、图像、视频等一系列多模态模型的持续迭代和生产级应用,则是在多模态趋势上的坚实布局。

这些技术创新并非停留在实验室的理论,而是已经深入到了真实的商业场景中,并创造着实际价值。

例如,小米的智能助手小爱同学在接入豆包大模型1.6后,让手机、智能眼镜等终端设备同时拥有了智慧的大脑和眼睛,能够结合看到的现实场景进行对话和处理信息。

国内领先的汽车平台懂车帝,利用“AI选车”功能,让复杂、模糊的购车需求得到高质量的回应,复杂需求搜索占比从过去的10%大幅提升至79.4%。

此外,包括OPPO、Keep、美图、洋葱学园在内的众多企业也已经开始应用火山引擎的语音技术,在对话助手、情感陪伴、内容配音、教育等领域提升用户体验。

这一切技术能力的实现与规模化落地,都离不开背后庞大算力和高质量数据的支撑。

一个惊人的数字是,豆包大模型的日均tokens调用量,在一年多时间里从1200亿增长至超过30万亿,实现了253倍的增长。

根据IDC数据,中国公有云上每两个token就有一个由火山引擎生产。

这背后正是火山引擎AI云所提供的稳定、高效的基础设施,它为模型的训练和推理提供了关键动力,成为推动AI技术从理论走向应用的坚实底座。

最后,豆包语音合成模型2.0和豆包声音复刻模型2.0现在都已经可以体验了,感兴趣的小伙伴可以去试试喽~

体验地址:
https://console.volcengine.com/speech/new/experience/clone?projectName=default

版权所有,未经授权不得以任何形式转载及使用,违者必究。

Read More 

正文完
可以使用微信扫码关注公众号(ID:xzluomor)
post-qrcode
 0
评论(没有评论)

文心AIGC

2025 年 10 月
 12345
6789101112
13141516171819
20212223242526
2728293031  
文心AIGC
文心AIGC
人工智能ChatGPT,AIGC指利用人工智能技术来生成内容,其中包括文字、语音、代码、图像、视频、机器人动作等等。被认为是继PGC、UGC之后的新型内容创作方式。AIGC作为元宇宙的新方向,近几年迭代速度呈现指数级爆发,谷歌、Meta、百度等平台型巨头持续布局
文章搜索
热门文章
清库存!DeepSeek突然补全R1技术报告,训练路径首次详细公开

清库存!DeepSeek突然补全R1技术报告,训练路径首次详细公开

清库存!DeepSeek突然补全R1技术报告,训练路径首次详细公开 Jay 2026-01-08 20:18:...
训具身模型遇到的很多问题,在数据采集时就已经注定了丨鹿明联席CTO丁琰分享

训具身模型遇到的很多问题,在数据采集时就已经注定了丨鹿明联席CTO丁琰分享

训具身模型遇到的很多问题,在数据采集时就已经注定了丨鹿明联席CTO丁琰分享 衡宇 2026-01-08 20:...
「北京版幻方」冷不丁开源SOTA代码大模型!一张3090就能跑,40B参数掀翻Opus-4.5和GPT-5.2

「北京版幻方」冷不丁开源SOTA代码大模型!一张3090就能跑,40B参数掀翻Opus-4.5和GPT-5.2

「北京版幻方」冷不丁开源SOTA代码大模型!一张3090就能跑,40B参数掀翻Opus-4.5和GPT-5.2...
AI金矿上打盹的小红书,刚刚醒了一「点点」

AI金矿上打盹的小红书,刚刚醒了一「点点」

AI金矿上打盹的小红书,刚刚醒了一「点点」 鱼羊 2025-12-26 17:04:08 来源:量子位 一个积...
最新评论
ufabet ufabet มีเกมให้เลือกเล่นมากมาย: เกมเดิมพันหลากหลาย ครบทุกค่ายดัง
tornado crypto mixer tornado crypto mixer Discover the power of privacy with TornadoCash! Learn how this decentralized mixer ensures your transactions remain confidential.
ดูบอลสด ดูบอลสด Very well presented. Every quote was awesome and thanks for sharing the content. Keep sharing and keep motivating others.
ดูบอลสด ดูบอลสด Pretty! This has been a really wonderful post. Many thanks for providing these details.
ดูบอลสด ดูบอลสด Pretty! This has been a really wonderful post. Many thanks for providing these details.
ดูบอลสด ดูบอลสด Hi there to all, for the reason that I am genuinely keen of reading this website’s post to be updated on a regular basis. It carries pleasant stuff.
Obrazy Sztuka Nowoczesna Obrazy Sztuka Nowoczesna Thank you for this wonderful contribution to the topic. Your ability to explain complex ideas simply is admirable.
ufabet ufabet Hi there to all, for the reason that I am genuinely keen of reading this website’s post to be updated on a regular basis. It carries pleasant stuff.
ufabet ufabet You’re so awesome! I don’t believe I have read a single thing like that before. So great to find someone with some original thoughts on this topic. Really.. thank you for starting this up. This website is something that is needed on the internet, someone with a little originality!
ufabet ufabet Very well presented. Every quote was awesome and thanks for sharing the content. Keep sharing and keep motivating others.
热评文章
海信CES发布全新一代RGB-Mini LED,全球首创玲珑4芯真彩背光

海信CES发布全新一代RGB-Mini LED,全球首创玲珑4芯真彩背光

海信CES发布全新一代RGB-Mini LED,全球首创玲珑4芯真彩背光 量子位的朋友们 2026-01-06...
英特尔CES奇袭老黄大本营!英伟达显卡刚涨价,最强酷睿量产出货

英特尔CES奇袭老黄大本营!英伟达显卡刚涨价,最强酷睿量产出货

英特尔CES奇袭老黄大本营!英伟达显卡刚涨价,最强酷睿量产出货 十三 2026-01-06 13:54:54 ...
陈天桥代季峰打响2026大模型第一枪:30B参数跑出1T性能

陈天桥代季峰打响2026大模型第一枪:30B参数跑出1T性能

陈天桥代季峰打响2026大模型第一枪:30B参数跑出1T性能 鹭羽 2026-01-06 14:28:58 来...
OpenAI推理第一人离职,7年打造了o3/o1/GPT-4/Codex

OpenAI推理第一人离职,7年打造了o3/o1/GPT-4/Codex

OpenAI推理第一人离职,7年打造了o3/o1/GPT-4/Codex 衡宇 2026-01-06 13:0...