英伟达携全新AI模型“颠覆”音频界:可创作音乐、修改人声
英伟达携全新AI模型“颠覆”音频界:可创作音乐、修改人声
财联社11月26日讯(编辑 黄君芝)据报道,英伟达(Nvidia)开发了一种新型人工智能(AI)模型,可以创造声音效果,改变人的发音方式,并使用自然语言提示生成音乐。
这个模型被命名为Fugatto,即Foundational Generative Audio Transformer Opus 1,是一个研究项目。英伟达表示,它不会宣布任何发布这项技术的计划,但它可能会对从音乐、娱乐到翻译服务等行业产生广泛的影响。
英伟达应用深度学习研究副总裁Bryan Catanzaro在接受采访时表示:“Fugatto最令人兴奋的地方在于,它拥有一个模型,你可以要求它以某种方式发出声音,这真的打开了你对它应用范围的想象。”
他进一步解释说,市场上的其他模型,有些可以合成语音,有些可以为音乐添加音效,但Fugatto全部都可以做到。Catanzaro说,可以将其视为视频和图像生成模型(如Stability AI的Stable Video Diffusion或OpenAI的Sora)的一种补充。
“这里最基本的改进是……我们能够使用语言合成音频,我认为,这为人们可以用来创造惊人音频的工具开辟了新的前景。”他补充说。
根据英伟达的说法,Fugatto是第一个具有新兴特性的基础模型,这意味着它能够混合经过训练的元素,并遵循“自由形式的指令”。
具体而言,该模型可以通过标准的文字提示生成音频,也可以处理您上传的音频文件。所以,如果你有一个人说话的文件,你可以把那个人的话翻译成另一种语言,同时让它听起来像他的声音。你也可以选择一个简单的曲调,让它听起来像管弦乐表演,或者在音乐中添加不同的节拍。
此外,你也可以上传一个文档,让模型用你喜欢的任何声音朗读。更重要的是,你可以告诉模型发出带有情感分量的声音。
不过,Catanzaro也补充说,这种模型并不总是完美的。而且,就像生成图像和视频的模型一样,Fugatto也会催生艺术家、音响工程师和相关领域人员的担忧。但Catanzaro指出,他的本意是希望这项技术能帮助音乐家。
“我希望这是艺术家探索的新工具。”“我认为音频一直是一个富有成效的探索领域。你知道,当我们获得新的音频工具时,有时我们会获得新的音乐形式。”他说。
阅 1.77W+特别声明:文章内容仅供参考,不构成投资建议。投资者据此操作风险自担。
网址:英伟达携全新AI模型“颠覆”音频界:可创作音乐、修改人声 https://mxgxt.com/news/view/1293006
相关内容
央视音乐频道秋晚颠覆形式人气新秀集结AI音乐家“出道”:可创造音乐和寻找未来明星
AI“音乐创作”横行 200多名国际音乐人联名反对
挪威团队用汽车扬声器颠覆音乐制作,探索《Overvoltage Organs & Oddities》音色库的无限可能
AI“音乐创作”横行给音乐家带来哪些隐忧
从唱歌到演出,AIGC与音频生成技术会颠覆艺人的生存模式吗?|PRO之声
AI音乐创作平台
AI音乐商业化进入爆发前夜,昆仑万维发布全球首款音乐推理大模型 Mureka O1
解码超级乐视 全方位全流程颠覆式创新
AI音乐改变热门歌曲创作方式 艺术创作也要沦陷?
随便看看
- 全面揭密“巅峰”拉拉队 亲吻拥抱尖叫成最直接方式
- 旅行家海林1L8:《姐妹情深,同龄互动:揭秘真诚相处的秘密》 谢娜与李小冉,两位明星,一次逛街,引发网友热议。这不就是学生时代的我们吗?手挽手,无忧无虑。而李小冉的姐姐们旅行节目,又让她收获了成长。同龄人相处,究竟该是怎样的模式? 每个人都有自己的生活方式和价值观,相处模式自然不同。有人觉得同龄人更懂彼此,有人则认为与年长者相处更能获得成长。那么,如何找到适合自己的相处之道呢? 真诚和尊重是基础...
- 一子依:边草草,也是一名明星子女邹元清扮演,看出来是谁的女儿了吗? 她的妈妈是闫妮。 虽然顶着明星子女的光环,不过她在电视剧《打开生活的正确方式》的表现,还真可圈可点。 1、邹元清的长相不算甜美,但也挺有自己的独特之处,有点不尖的小圆脸,棱角不够分明的五官,拒绝了大众的网红脸,反而让人印象深刻。 2、邹元清虽然只是表演新人,但演技还不错,一些特定镜头在她脸上留住,她也能通过自己的微表情来表现...
- 90式青春:刘畊宏太可怕了吧! 4月20日,刘畊宏发文,他的这次发文让大家对他又有了新的认识,原来是他在家给吴尊一家,还有陈浩民一家六口做线上体育课,帮助孩子们运动。 更让人没想到的是,刘畊宏还特意点名陈小春的儿子Jasper缺课,并且还让邹市明赶紧给儿子轩轩和皓皓报名,真的是一个他认识的小孩都不放过。 网友评论更搞笑:“连朋友家的狗都不放过,他怎么可能放过孩子。” 还有网友说:“再这样下...
- 金晨租别墅只为“隐身”?揭秘明星租房内卷背后:隐私保卫战!

