1987WEB视界-分享互联网热门产品和行业

您现在的位置是:首页 > 人工智能AI > 正文

人工智能AI

用AI创作音乐和音乐MV

1987web2023-08-29人工智能AI197
最近我用AI做了一首摇滚乐,然后又用AI给这首曲子做了一段MV。AI音乐MV《DrivinginMichigan》

最近我用AI做了一首摇滚乐,然后又用AI给这首曲子做了一段MV。

AI音乐MV《Driving in Michigan》

我一共使用了三种AI工具:

  • 音乐:Soundraw

  • 图片:Midjourney

  • 视频:Kaiber

  • 本文简要介绍了整个制作流程。

    (1)音乐 - Soundraw

    现在已经有不少产品能够利用AI技术帮助用户制作音乐,我们使用的工具叫做Soundraw。

    Soundraw AI会根据用户选择的音乐类型(Genre)、情绪(Mood)、主题(Theme)、时长(Length)、节奏(Tempo)和乐器(Instruments)等内容来生成音乐。

    AI生成音乐之后,用户可以检查每一个小节,并且通过修改每一节的强度来调整旋律。强度分为四种:Low、Medium、High、Very High。

    Soundraw还提供了专业模式(Pro Mode)。用户可以对乐器、音调、节拍、伴奏等等做更深入和细致的调整。

    我在MV中使用的是一段摇滚乐,并且在专业模式中调整过。

    由于是AI生成的音乐,所以也就没有版权问题。另外,这些音乐都是纯音,没有人声,因为AI还没有发展到这种程度。:)

    (2)图片 - Midjourney

    制作视频需要图片。虽然现在的视频AI工具基本都具备文字生成视频的能力,也就是Text-to-Video,但如果想针对特定的主题,并且想要更高的质量,用户往往都会采用Image-to-Video,或者Image+Prompt的方式。

    文字直接生成视频,这甚至可能是一个伪需求。在真实的项目中,可控性太低了。

    这次我使用的视频AI是Kaiber,而不是最近比较火的Gen2。Gen2的Image-to-Video只能生成长度为4秒的视频(最多可以延长到16秒),一张图片对一整段音乐MV来说是不够的。因为Kaiber的工作方式完全不一样,所以只需要一张图片就够了。

    Midjourney Prompt:

    drive on the country road in Michigan, dynamic shot, extremely detail, 8K --ar 16:9 --v 5.2

    (3)视频 - Kaiber

    Kaiber是一款出色的视频AI生成工具,通过风格迁移(Style Transfer)功能,它能够将图片和视频转换为不同的风格,并生成全新的内容。同时,它还具备音频反应(Audio Reactivity)功能,可以根据音频的节奏生成与之互动的画面内容。

    目前Kaiber正在与许多知名音乐人和艺术家合作,包括格莱美奖得主和艺术界领袖,利用AI技术创造更多充满创意、沉浸式的互动体验。比如Linkin Park,他们曾经与Kaiber合作开发了一首名为《Lost》的AI音乐MV。

    《Lost》是Linkin Park的一首经典作品,通过AI音乐MV,这个项目展示了AI技术在音乐和艺术领域的潜力。在这之后,Linkin Park又相继制作了多个类似的作品,包括《Fighting Myself》、《More The Victim》、《Faint》、《Halo》、《Attached》等等,这些视频在B站上都可以看到。

    Kaiber现在提供两种视频类型,一种是Flipbook,也就是逐帧动画,另一种是Motion,可以产生更加流畅的画面内容,但目前不支持音频,所以这次我们使用的是Flipbook。

    如果选择上传音频,那么音频的长度就是生成的视频长度。目前Kaiber最长可以生成8分钟的视频。

    另外,在上传音频的区域,我们还可以看到一个链接:Need to trim your audio file?

    (需要裁剪你的音频文件吗?)

    用户可以使用这个Audio Trimmer工具剪辑需要上传的音频长度。

    Kaiber的付费用户一个月充值默认1000点(点数用完可以再充),1点等于1秒,所以这个音频剪辑工具很有帮助。

    在上传图片和音频之后就进入了Prompt界面。

    Kaiber是Image+Prompt模式,也就是说Prompt是必填项,用户必须输入一个主题和转换风格。Kaiber提供了一个固定的格式,用户只需要填空就好,所以用起来很方便。

    我在这里输入的主题是drive on the country road in Michigan。

    风格选择了Lost。

    值得一提的是,Kaiber提供了很多独家艺术风格,这是他们与艺术家和音乐人合作开发的。我在这里选择的Lost,当然就来源于Linkin Park的AI音乐MV《Lost》。

    填完Prompt之后,我们需要对视频的一些参数进行设置。其中最重要的是Evolve和Audio Reactive。

    Evolve决定了视频内容的稳定性和可控性,范围1-10,数值越高,生成内容越有创意。Audio Reactive则决定了视频内容与音乐互动的强弱。

    设置完成后就可以生成视频了,生成视频所需的时间主要由音乐长度决定。

    (4)花絮

    在完成了《Driving in Michigan》之后,按照这个流程,我很快又做了一首原声吉他曲(Acoustic Guitar),然后又做了一段MV《Sunset》。

    这就是AI的威力吧。

    画面内容的稳定性和可控性是视频AI的巨大挑战,而在这种风格MV的场景下,这就不是个问题了。

    我不认为人类会被AI取代,恰恰相反,在专业人士的手中,AI会成为效率工具,提供巨大的助力。

    本文部分内容由Perplexity AI完成。

    Enjoy and have fun~ :)