趣丸科技推出天谱乐大模型,可一键让视频开口唱歌
2024-07-31 19:04:04AI云资讯5776
7月26日至29日,2024年第二十一届中国国际数码互动娱乐展览会(ChinaJoy)在上海新国际博览中心开幕。由趣丸科技打造的多模态配乐大模型“天谱乐”惊喜亮相,成为本届大会最具创新的展品之一。
天谱乐大模型不仅支持文生音乐、音频生音乐,还首创图片/视频生音乐功能,多模态输入能力超越Suno。用户仅需上传相册中的一张图片或一段不超过60秒的视频,即可生成与图像内容和基调高度适配的带人声唱词的完整歌曲,生成效果达到专业级水准,极大地满足用户多样化的视听创作需求。
目前,天谱乐大模型已全面接入趣丸科技旗下唱鸭APP,面向所有用户开放。用户可登陆唱鸭官网或下载APP限时免费体验。
业内人士表示,天谱乐无疑带来了AI音乐生成技术的重大突破,展示了AI在理解和创造多模态内容的先进能力,对短视频、影视和音乐行业带来了前所未有的挑战和机遇。
天谱乐视频及文本生成歌曲案例视频生成歌曲,让同步视听生成变成现实随着数字音乐和短视频文化的蓬勃发展,越来越多的年轻人享受音乐的方式已不再局限于单纯地听歌、K歌,呈现出从“听唱”转向“唱作”的消费偏好,青年群体参与音视频作品创作的需求意识逐渐上扬。为了更好地满足用户,解决这些应用中的实际需求,趣丸科技天谱乐大模型应运而生。
天谱乐大模型独创的“视频生成歌曲”功能,支持上传图片以及MP4、MOV等多种视频格式,生成的音乐曲风丰富、歌词与人声兼备。同时输出带有字幕和封面标签的成品视频,方便一键分享到社媒或好友。
对于普通用户,即使不会乐器不懂乐理也可以为Vlog、家庭录像增添背景音乐或创作专属歌曲来表达自己的态度与情感。对于专业人士,唱鸭网页端为广告、影视和音乐从业者提供音乐专家模式,具备更精准的参数控制和更高的创作自由度。
此外,“文生音乐”功能,用户在输入一段文字后,仅需等待15-20秒,即可生成长达3.5分钟的纯音乐。“音频生音乐”功能,提供“三键成曲”、“哼唱成曲”多种玩法。
天谱乐的强大,在于打破了AI在音乐理解和生成上的局限。据了解,天谱乐大模型由趣丸科技唱鸭团队研发。该团队自研了“多模态音乐生成大模型”技术,在安全合规下,让模型不仅可以根据视频画面的明暗、色彩、情绪的细微变化逐帧识别和理解,也可以理解音乐的和弦、旋律、歌词、演唱风格等复杂特征,最终生成高契合度的视频配乐。
关于团队的构成,趣丸科技副总裁贾朔介绍到“与典型的大模型研发团队不同,我们团队大部分都是有很强的技术和音乐背景的复合型人才。所以我们更有能力去辨别一个好的音乐结构、好的音乐作品应该长什么样子,然后通过技术创造出更有音乐审美与应用价值的产品。”

唱鸭天谱乐官网
从技术到应用,释放AI的真正价值音乐是有生命的,它不仅是一种艺术形式,更是情感交流和表达的方式。趣丸科技深知AI音乐工具不仅是技术的堆砌,更是用户情感的载体。通过技术创新降低音乐创作门槛,让用户不再受限于专业的乐理知识,复杂的音乐制作流程和昂贵的版权费用,就可以轻松通过音乐创作记录生活的切片,在创作中提升审美自觉和音乐生产能力。
以唱鸭为代表的AI音乐创作工具使人人参与音乐创作成为现实,也带来生产侧和消费侧的全面革新,其对影视和音乐行业的潜在影响不会亚于数字音乐和流媒体的兴起。
《2024中国音乐产业发展总报告》显示,2023年中国数字音乐产业规模达到893.45亿元,中国网络音乐用户规模达到7.26亿。高盛《Music In The Air》指出,预计到2030年,全球音乐市场(录制音乐、词曲版权和演出市场)的收入预计达到1637亿美元。在可预见的未来,音乐市场仍将保持旺盛发展势头。而随着生成式AI的推动和广泛应用,数字音乐产业价值将进一步凸显。我们也应该看到,生成式AI技术虽然解锁了巨大的市场空间和可能性,但也不能忽视其不完美的现状。贾朔表示,“让AI工具能通过人类的服从性测试,真正嵌入到内容创作者的工具流里面,解决创作过程中的实际问题,可能是行业内的整体挑战。”
相关文章
- 携手共建“物理世界大模型”联合实验室,洞察时空与上海电信达成战略合作
- 东软添翼医疗大模型领跑 医疗AI进入“可信时代”
- 直接上智能体,还需要统一基座大模型吗?医院智能化走到十字路口
- 云知声 U2-ASR 2.5上线:首个中文方言语义转写大模型
- 全国首个内容审核大模型过审 云从科技破解Agent时代谣言难题
- 湖北移动AI实验室让中小企业零门槛用上大模型
- 数据的第三种形态:艺恩如何为大模型提供多模态的数据弹药?
- 荆华密算入选主流价值语料生态联盟首批成员,护航大模型时代,为AI系上“安全带”
- 稳居第一梯队!东软添翼医疗大模型用实力回应“医疗AI”
- 许欢:人工智能应急大模型开启应急管理新发展时代
- 唯一聚焦制造业!创新奇智入围IDC大模型私有化市场前五
- 可视、可管、可算、可追溯!浩鲸科技重磅推出鲸智大模型Token运营平台
- 数字峰会探新“智”| 数字中国AI竞速:大模型从“能力竞赛”转向“可信落地”
- 数字峰会探新“智”|为AI装上“质检员”,浪潮软件集团发布大模型“体检”方案
- AI大模型智能体独角兽再落子!探迹科技完成真爱美家收购交割,持股达 43%
- 北京亦庄设立大模型生态服务站 助力AI产业合规发展
人工智能企业
更多>>人工智能硬件
更多>>- 一飞智控携全空间解决方案及三款新品,亮相2026世界无人机大会
- 续航超强的微星全新尊爵系列,重塑轻薄本的超凡全能体验
- BOE(京东方)全球首发原生千帧FHD 护眼电竞显示器 真千帧硬实力引领电竞高刷新时代
- Neousys宸曜发布星宸系列强固嵌入式工控机,赋能工业智能升级
- BOE(京东方)OLED技术赋能联想YOGA Air 14 Ultra 定义超轻薄AI PC新标杆
- iQOO 15T正式发布:天玑9500 Monster版加持 全能体验无短板
- 从“+AI”到“AI+”:天禧AI 4.0加持,联想AI主机领衔L3级终端震撼登场
- 拾年匠音,声来不凡,致敬1000X系列十周年 索尼发布1000X十周年典藏版头戴降噪耳机
人工智能产业
更多>>人工智能技术
更多>>- Twinkle x昇腾,率先实现Deepseek-V4系列模型高效训练
- 高德发布鸿蒙首个生成式 UI 开源框架 AGenUI,告别传统 UI 开发模式
- 发布即适配| 天数智芯全力支持腾讯混元Hy3 preview 开源落地,共推国内大模型产业普惠
- Seedance 2.0面向企业公测,豆包大模型日均Token使用量突破120万亿
- 端到端OCR模型第一!百度千帆Qianfan-OCR正式发布
- 云知声Unisound U1-OCR大模型发布!首个工业级文档智能基础大模型,开启OCR 3.0时代
- 基石智算上线 MiniMax M2.5,超强编程与智能体工具调用能力
- 昇腾原生支持,科学多模态大模型Intern-S1-Pro正式发布并开源









