首发imi首个多模态功能体验,一键为音乐生成,月之暗面不再只卷长文本mv歌曲周传雄kimi

在闭着眼睛听一首歌的时候,你有没有在脑海里想象过,应该搭配什么画面?

Kimi 内测的最新功能「创作音乐视频」,就是奔着当 MV 导演去的。长文本领先的 Kimi,默不作声地「跨界」了。APPSO 也受邀首批体验了这一新功能。

当 MV 导演,Kimi 真的有点懂行

懂王入场曲、川普战歌《YMCA》,谁上头了?每当音乐响起,特朗普握紧双拳,上下挥动,没有人比他更懂怎么搓澡。

不妨试试拿 Kimi 做个同款。我上传了一段 11 秒的《YMCA》片段,并用提示词描述了视频的画面和分镜。

其中有个高难度的要求:帽子写上「MAGA」,应援的牌子更是要写一整个句子:「Make America Great Again」。

Kimi 理解了,它为每个镜头扩写了提示词,短短的 11 秒,有 6 个片段,同时符合我的提示词里的镜头切换逻辑。

接下来,打开音量,或者戴上耳机,欣赏一下完整视频。

特朗普的脸偶尔会崩,至于文字,缩写很稳,单词也不容易拼错,但就是没有生成符合要求的句子。

不过,舞王的感觉对了,胸前的红领带很鲜艳,特写尤其传神。

除了迪斯科神曲,《青花瓷》这样的经典中国风歌曲,Kimi 也能 hold 住。

近景切全景,特写切远景,有人物,也有空镜,每个镜头都是按照提示词的要求设计的,烟雨江南的意境到位了。

可惜人物的稳定性不够好,这位女主角从头到尾长得都不一样,手指的动作也比较诡异,一眼看出,这是个 AI。

以及 Kimi 可以解释一下吗,为什么她的手上还戴了戒指?为什么青花瓷瓶自己会滑动?

除了自己上传音乐,我们也可以复制粘贴抖音链接。

以后一键 get 同款抖音热歌,变得不费吹灰之力了。

让 AI 也来弹唱一段吧,虽然音乐里包含了歌词,但实践表明,对口型什么的就别想了。

这次主要都是室内的中近景,人物的一致性保持得不错,帽子和 T 恤都不带变的,但场景就不那么完美了。

毕竟,音乐视频还是一个 Kimi 的内测功能,至少从每个片段扩写的提示词来看,这位 AI 导演挺擅长写分镜,将我粗略的指令,细化成了具体的镜头语言,又不偏离原意。

以后我们听歌时脑海里的大致画面,都可以描述给 AI,让它帮我们「剪辑」。

操作新手友好,但 AI 常见的问题也避免不了

自定义的趣味性比较强,因为我们可以自己上传音乐、抖音链接,或者选择 Kimi 提供的背景音乐,创作更加自由。

同时,Kimi 有很多模板可以体验,音乐是固定好的,并且会附加一些文字和特效,对于新手来说更加友好,只需要描述画面。

《哈利波特》重映,经典归来仍是大热 IP,Kimi 也提供了一个哈利波特风格的模板。

那就试试生成哈利·波特和马尔福·德拉科的针锋相对名场面,主要包括,魔法比试、禁林探险、魁地奇球场。

视频的特效和转场酷炫,不过,两位的颜值不太稳定,马尔福有个瞬间特别像他爸,哈利波特的脸时而青春美少年时而方脸大叔。

而且,视频中也有一些错误,让人犯恐怖谷效应,六个手指就不说了,金色飞贼看着像个发光的甲虫,甚至中途冒出一个诡异的人头。

但不得不说,这个模板下有不少漂亮的画面,Kimi 的审美还是可以的。

「布达佩斯大饭店」的模板,则洋溢着对称美学和梦幻色彩。

韦斯·安德森或许也没想过,因为 AI 和我的异想天开,他的风格可以和古典的中国风融合, 画面切换还能与音乐节奏完美同步。

不过,舞者的面部和腿部动作看起来有些怪异,像是伪人。怎么把握人体结构,Kimi 还得练习。

不局限在三次元,让 Kimi 这位剪刀手将动漫人物放进好莱坞歌舞电影之中,也未尝不可。

比如,让《火影忍者》的鸣人和佐助,出演一段《爱乐之城》风格的 MV。

出现的问题就比较多了,上一秒,两人的脸部特写都很不错,下一秒,切换到跳舞,鸣人的舞伴莫名其妙地变成了女生。

不用担心,不必从头再来,Kimi 支持片段的微调,哪个片段不满意,就可以针对性地重新生成,或者说,抽卡。

我对不满意的片段重新生成了几次,得到了以下的结果,明明是同一个人,前后的画风仿佛有次元壁。

可以说,差强人意——没有用错成语,大体上还可让人满意。至少,空镜和特写是好看的。

人人生成一段简单的 MV,难度基本等于零。当然,如果模板的选择更多,那就更方便开脑洞,也不担心撞风格了。

我手写我心,我的 AI 创作我的心情

我们可以为熟悉的音乐创作 MV、基于喜欢的模板创作 MV,但从头开始,完全创作独一无二的作品,也不是不行。

方法是,走 AI 一条龙服务——为 AI 音乐,生成 AI 视频。

我之前用一张工作群回复收到的图片,让 Suno 图生音乐,生成了一段 30 秒的 k-pop 风格《收到之歌》。

用这首歌,让 Kimi 生成一段打工人的写实视频,会如何呢?

首先,它给这支 MV 取的名字就够伤人了——《打工人的不眠夜》,凄凄惨惨戚戚。

视频展现了打工人的群像,场景有些复杂,从早上切换到晚上,最后一段旋律的踩点丝滑。

更重要的是,Kimi 把打工人疲惫的精神面貌表现出来了,咖啡不离身,一天对着电脑,在凌乱的工位吃饭,这不就是世另我吗。

音乐视频,可以说是 Kimi 对外公布的第一个多模态功能。

11 月 16 日,Kimi 正式发布新一代数学推理模型 k0-math,对标 OpenAI o1 系列,。

被问到 Kimi 怎么不做多模态,杨植麟表示,「我们也做,几个多模态的能力在内测」。

在他看来,AI 接下来最重要的是思考和交互这两个能力,多模态肯定是必要的,但思考决定了它的上限。

未来,Kimi 的多模态会怎样迭代,把一致性做得更好,还是很值得期待一下的。

每次创作,Kimi 会先欣赏音乐,想象搭配音乐的故事,再根据故事生成画面,然后根据画面剪辑成视频。从前,这个流程让人类来做,可能要花好几天,甚至需要一个项目组。

AI 让任何人都可以讲述自己的故事,围绕我们的生活经验和兴趣爱好,生成非常个人化的内容,虽然现在问题还挺多,但未来可期。

不是所有歌曲都有精心拍摄的 MV,不是每个人都懂剪辑,但有了 AI 之后,我们喜欢的每首歌,或者自己生成的歌,都可以拥有一个专属视频。

一瞬的闪念,私人的心情,美妙的创意,都有了安放之处,和变成现实的权利。问题可以慢慢解决,但我们要先让可能性存在 。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

THE END
0.爆赞!8款国内即可使用的AI视频生成工具惊艳!这张61年前的老照片,我们用AI技术“复活”了 多说一句,目前爆火的AI老照片修复,很大程度上与可灵非常惊艳的AI视频效果有关。 主要特点: 文生视频:支持输入正反向提示词、支持生成5秒和10秒视频、支持运镜控制 图生视频:可对图片进行创意描述、增加尾帧功能、可输入负面提示词、支持生成5秒和10秒视频、支jvzq<84yyy4489iqe0ipo8hqpvkov87612=2685213=8:9:28a724A<2;9:70|mvon
1.一次学会,AI摄影+AI短视频+AI音乐创作❷ 第二步:一键生成动态旋律 AI直接生成带主旋律的音乐片段! 和弦走向、节奏变化全自动生成,AI直接给你整出电影级配乐! ❸ 第三步:AI自动生成音乐MV 用AI根据歌词或音乐风格来生成MV视频,或者将照片丢给AI,让它自动剪辑视频、识别歌词字幕,将零散画面串联成叙事线。 jvzq<84yyy4489iqe0ipo8hqpvkov87712:2:86319817?59;a727:9;;7:50|mvon
2.Ai一键成曲手机免费版软件下载Ai一键成曲是一款AI音乐创作工具,无需专业音乐知识即可快速生成原创音乐与MV,通过简单的文字描述如风格主题等,就能自动生成包含旋律编曲的完整作品,并提供歌词辅助和MV制作功能,软件内置多风格模板、支持实时预览调整及高效创作流程,是音乐爱好者和自媒体创作者的理想选择。 jvzquC41yy}/4A>0eqs0cƒwl17:85>80jvsm
3.文生3D模型大突破!MVDream重磅来袭,一句话生成超逼真三维模型图像图片来源:由无界 AI生成 不得了了! 现在只用打几个字就能创造精美、高质量的3D模型出来了? 这不,国外一篇博客引爆网络,把一个叫MVDream的东西摆到了我们面前。 用户只需要寥寥数语,就可以创造出一个栩栩如生的3D模型。 而且和之前不同的是,MVDream看起来是真的「懂」物理。 jvzq<84hkpgoen3ukpg/exr0ep5cnxhmejgjp872453226621fud/rr|stgvrB>73:;20|mvon
4.我用豆包,生成了AI版《红楼梦》MV要论最近最火的AI视频生成模型,无不论是生成的多人物、画面的质量,甚至是故事情节,豆包的视频可以说是相当有《红楼梦》那味儿了。 而也正如刚才提到的,打造这支MV背后的AI,统统都是字节系。 现在我们就来一一拆解细节步骤。 第一步,用豆包查询《红楼梦》中的经典片段原文,作为生成图片的Prompt。 jvzquC41zwkrk~3eqo522B<86;97488298<17B7
5.AI音乐半年观(上)音乐生成有哪些实用场景和代表产品?我将AI音乐生成的实际应用归纳为5个场景,生成技术在音乐视频和功能型音乐创作中正在发挥商业价值,社交娱乐和业余音乐创作场景未产生明确价值,专业创作领域尚待AI融合进工作流。 01 音乐视频 做一支属于你的MV AI 音乐生成的第一个应用场景是搭配 AI 图片和视频生成工具,制作音乐视频(MV,Music Video),正在被用于商业jvzquC41uuvbk7hqo1vpu}4;4696
6.免费一键生成「大片」,又一王炸AI工具上线这个AI 工具,可以通过文本和图片自动生成 4 秒的视频,同时内容相当炸裂。 口说无凭,大家可以先来品品这个用 Runway Gen-2 生成的视频,看完导演跟特效小哥是不是都得去送外卖了? 不过别人做得再好也是别的,自己上手完全不是一回事的话,那真没啥好吹的。 jvzquC4158qs0lto1r535:538;67:?64:8:
7.ai图片生成视频ai图片生成高清原创视频下载新片场社区汇聚全球优秀创作人和海量作品精选出1000条ai图片生成等4K原创短视频,覆盖ai图片生成相关的广告,宣传片,剧情短片,创意混剪,婚礼,纪录片,特殊摄影,旅拍,Vlog,影视干货教程,音乐MV等ai图片生成无水印高清视频案例学习下载jvzquC41yy}/zrsrkctdjjsi0eun1|jcten03=6479=
8.围猎Suno!国产AI音乐三巨头:华语创作称雄,MV一键生成全球首创目前支持文本、图片生曲,但不包括视频输入。 相比之下,拥有海量版权的在线音乐巨头则审慎得多。针对创作者,网易云音乐和腾讯音乐分别推出了具备 AI 辅助创作功能的「天音」和「启明星」平台。 「天音」更适合专业创作者,在「一键生成」上并没展现出领先其他 AI 生成应用的优势。「启明星」接入了「琴乐大模型」,仍jvzquC41yy}/3?80eqs0f‚4ctvodnn4LMDU4:J92737BSQT0jvsm
9.第一批用AI替自己干活的人:一个人顶一个团队|ai|贝聿铭|扎哈·哈迪德用建筑AI软件一键导出的大师风格效果图 贝聿铭大师风格(左)和扎哈·哈迪德大师风格(右) 用建筑AI软件一键导出的 建筑大师弗兰克·盖里风格效果图 与此同时, AI制图软件Midjourney 也在中国社交平台火了一把, 摄影师用它复原20世纪老照片, 设计师直接用它出图。还有建筑行业的AI,可以一键生成大师风格的效果图…… jvzquC41yy}/3?80eqs0f‚4ctvodnn4K56JNTNP274;94KG0jvsm
10.用AI制作歌曲MV!超详细教程,快速上手,收藏必看!5.导出成片 编辑完成后,点击【导出】按钮生成最终MV。 通过ChatGPT生成画面描述、即梦AI制作图片与视频,再用剪映剪辑成片,你可以轻松完成一部高质量的歌曲MV!无论是创作者还是初学者,这套方法都简单易上手。 赶紧试试,为你喜欢的歌曲制作专属MV吧!jvzq<84yyy4489iqe0ipo8hqpvkov8771273886519:65B=2a3757<<43;8/uqyon
11.用AI做自己喜欢的MV(Suno保姆级教程)一致性方面,可以使用图片 ID 和 Seed 值 如果没有 GPT 4,可以使用 Midjourney V6提示词结构:风格+主题+背景+构图+灯光+附加信息 五、用图片在 Pika 1.0 生成动画视频 六、用剪映合成视频 最后案例的这个 MV 视频,主题是 AI破局航海,灵感来源是目前正在举行的第三期 AI 破局俱乐部大航海。 jvzq<84yyy4489iqe0ipo8hqpvkov8761283886516965>=56a723>7492910|mvon
12.星火绘镜官网,ai生成视频,将文字描述自动转化为视频内容该应用涵盖了从生成剧本、分镜头设计到最终形成完整的视频短片的全过程。它特别适合于内容创作者和市场营销人员,因为它可以快速地将创意或故事以视频的形式呈现,简化了视频的制作流程。星火绘镜,AI视频创作平台。分镜自动拆分,画面一键生成。支持短剧、MV、预告片多题材。描述及创作,短视频轻松生成。jvzquC41hgo{j~pg0eun1|nvgu5ykwljwqnvksnpi0nuou
13.MOKI官网,AI视频短片创作工具,备智能剪辑、自动生成分镜图、AI–**AI短片创作**:支持动画短片、网文短剧、故事绘本和MV等多种视频类型,提供创意构思辅助。 –**AI生成分镜图**:自动生成分镜图并转换为视频素材。 –**AI智能剪辑**:自动识别视频关键帧,进行智能剪辑,提高编辑效率。 –**AI配乐**:根据视频内容自动添加契合的背景音乐。 –**AI音效**:自动添加环境或特定jvzquC41dkknq‚z0eqs0urygu1spmr3jvor
14.ai自动生成视频软件下载免费ai自动生成视频手机端ai自动生成视频软件是可以帮助我们自动生成各种短视频和长视频的工具,直接让我们的视频导入之后就可以自动的进行剪辑生成,或者是直接套用模板,快捷的解决剪辑问题,ai自动生成视频手机端可以直接一键生成,减少用户的剪辑视频时间,减少工作量,还可以分享给自己的好友,很多用户想要知道ai自动生成视频软件有哪些,下面就让小编给jvzq<84yyy4eq€see0ipo8p1ck€jfxsiujkoilmgpiyikynp1
15.最全合集!20个AI视频生成产品推荐&实战教程!优设网本篇通过产品介绍和丰富的案例实践,带你了解 AI 视频有哪些产品,效果如何实现。产品概况若从生成方式分类,AI 视频生成包含:文生视频、图生视频(Runway、Pika labs、SD + Deforum、SD + Infinite zoom、SD + AnimateDiff、Warpfusion、StabilijvzquC41yy}/wrxfe0ipo8fkie3wkmjq/4
16.EchoAI一键成曲app下载EchoAI一键成曲官方版下载v1.0.0EchoAI一键成曲是一款智能便捷的手机ai音乐创作软件,在软件中可以创作不同风格的音乐作品,不仅能够智能创作生成,还拥有智能翻唱,个人mv生成功能,喜欢就快来下载体验吧! 【软件特色】 一句话成歌:输入一句话/几句话,自动生成歌词、旋律与编配。 大师模式:细调风格、情绪、BPM、押韵、段落长度,版本对比一键切换。 jvzq<84yyy467@<0eqs0u8<383690qyon
17.大量AI生成音乐诞生,音乐行业正在一夜变天|钛媒体AGI杨樾,图片由其本人提供 3月23日凌晨3点多,一支全部由AI制作的MV出现了。 那一刻,作为这支作品的创作者,杨樾感到既兴奋,又幻灭。 这是这位坚定的AI爱好者,用AI做的一次极限尝试。Digital Dawn的歌词是ChatGPT写的,作曲编曲演奏演唱是Suno生成的,底图是用Midjourney画的,视频是用Kaiber生成的。 作为一个从1988年就jvzquC41yy}/vvyrquz/exr1dcoew8<229=927mvon
18.视频生成神器!口型自然,不限语言,多用途,一键生成对口型视频!数字人从此我也是MV音乐达人,【火爆全网的】AI视频生成神器!口型自然,不限语言,多用途,一键生成对口型视频!数字人说话工具Wav2Lip离线版。 1.下载方式:【123网盘下载】、【网盘下载】 Wav2Lip是一种数字人说话工具,主要用于实现视频人物的唇形同步。它可以根据输入的音频,在视频人物的口部生成与语音同步的唇形动画,使得生jvzquC41dnuh0lxfp0tfv8z23698695;1cxuklqg1fkucrqu13975<>995
19.AI生成人物AI智能人物照片生成AI生成人物图片,智能人物图片生成软件,支持二次元、写实、3D等各类风格人物图片生成,输入人物描述词,选择人物风格和尺寸即刻生成精美人物图片。体验AI人物生成 选择模板 讲师海报 宣传展架 小红书封面 视频封面图 照片拼图 十余种人物图片设计场景,海报/展架/封面图应有尽有 讲师海报 英语专八课程宣传海报 课程直播预告简约风手机 jvzquC41yy}/eqzcpiqjv7hqo1geny7148;/j}rn
20.刚刚,Sora官方发布首支MV这并非是August Kamp第一次用AIGC技术来制作MV。 早在上个月,他就在自己的Instagram账号中剧透了AI生成的MV片段: 同样的,这支MV片段的每一帧画面,都是由Sora生成。 很多网友们在看到Sora制作出来的MV之后可谓是感慨万千,有人评价道: Sora好像把一觉睡了300年所经历的梦给复刻出来了。 jvzquC41jwh/djfk0ci/ew4xkg}05?783