元峰AI笔记 · AI绘画与视频

《水调歌头》中秋节,可灵 AI 把小姐姐整哭了!

<figure viewtype"Preview"<source href"https://internalapidrivestream.feishu.cn/space/api/box/stream/download/authcode/?codeMjIwYzZlNzE5ZmMzMTRmODBjNWNhY...

《水调歌头》中秋节,可灵 AI 把小姐姐整哭了!

十五的月亮,十六圆,十五的视频,十八发。

大家好,我是元峰。虽然今天已经八月十八了,中秋节也已经过去了,但中秋节前一天晚上在可灵 AI 的群里发现过一个有意思的活动——"让中秋诗词的中国式浪漫具象化"

图片展示的是“可灵AI创作者交流群2”中的一条消息。消息由用户“@快手科技”发布,内容为“用可灵AI,让中秋诗词的中国式浪漫具象化”,并详细说明了活动玩法核心、内容要求及发布时间等信息。其中,玩法核心是中秋佳节承载着古诗词的浪漫,唤起人们深情共鸣;内容要求是使用可灵AI将中秋、月亮相关的中国古诗词具象化,内容时长40s以内,在快手发布并带2个话题词;发布时间为9.14 - 9.17。该图片与上下文紧密相关,是作者在创作前参考的活动信息来源。

当时用可灵 AI 制作了一部中秋节主题的小短片,今天作为复盘和家姐一起分享一下这个视频的制作过程。

第1步:先确定古诗词

开始创作之前,我需要选择一首最能代表中秋意境的诗词。我打开 Claude,询问哪首诗最适合具象化中秋节的意境。猜猜 Claude 推荐了啥?没错,Claude 毫不犹豫地推荐了苏轼的《水调歌头》,特别是其中的名句:"明月几时有?把酒问青天。不知天上宫阙,今夕是何年。"

说真的,这首词简直就是为中秋量身定做的。这首词包含了对月的追问、对时间的思考、对人生的感悟,可谓中秋诗词中的翘楚。它不仅意境优美,更蕴含着深刻的哲理,完美契合了我们的创作主题。绝了!

图片为一段文字内容,是关于中秋诗词《水调歌头》的介绍。文字指出这首词是中秋题材的经典之作,意境优美,画面感强,适合视觉化呈现。开头几句“明月几时有?把酒问青天。不知天上宫阙,今夕是何年”描绘了中秋夜望月自问场景,充满对月亮、时间、人生的思考。还提到词中生动意象如“人有悲欢离合,月有阴晴圆缺”,将人事与月相变化巧妙联系,画面感强,意境深远,适合制作成视频。

第2步:分镜提示词

有了诗词,一步就得把它变成画面了。我又去麻烦了Claude,让它帮忙把词意转成画面。请它分析词的内容并进行视觉化,为我们勾勒出初步的分镜构想。

图片展示了苏轼《水调歌头·丙辰中秋》的分镜设计。第一段开场,画面1中,深邃夜空中一轮明月高悬,画面右下角一位穿着古装的文士(苏轼)背对观众仰望星空,手持酒杯作举杯状;画面2则拉近月亮,呈现月球表面细节,云雾飘过增添神秘感。第二段思乡情怀,画面3中,文士伸展双臂,仿佛要乘风而去。此图与上下文紧密相关,是将词意视觉化后的初步分镜构想。

苏轼《水调歌头·丙辰中秋》分镜设计

第一段:开场

明月几时有?把酒问青天。

不知天上宫阙,今夕是何年。

画面 1

  • 深邃的夜空中,一轮明月高悬
  • 画面右下角,一位穿着古装的文士(苏轼)背对观众,仰望夜空
  • 文士手持酒杯,作举杯状

画面 2

  • 镜头拉近月亮,呈现月球表面的细节
  • 月球表面逐渐变化,形成宫殿的轮廓
  • 轻纱般的云雾飘过,增添神秘感

第二段:思乡情怀

我欲乘风归去,又恐琼楼玉宇,

高处不胜寒。起舞弄清影,何似在人间。

画面 3

  • 文士伸展双臂,仿佛要乘风而去
  • 背景中出现若隐若现的仙境宫殿

画面 4

  • 宫殿近在眼前,但周围环绕着寒冷的雾气
  • 文士略显犹豫的表情

画面 5

  • 回到现实场景,月光下文士翩翩起舞
  • 地上投射出舞动的身影和月亮的清辉

第三段:哲理思考

转朱阁,低绮户,照无眠。

不应有恨,何事长向别时圆?

人有悲欢离合,月有阴晴圆缺,此事古难全。

画面 6

  • 镜头从月亮移向人间,展现一座精美的楼阁
  • 楼阁的窗户微开,月光透过窗缝洒入

画面 7

  • 室内景象,一位女子靠窗而坐,显得思绪万千

画面 8

  • 分屏展示:左边是人间离别的场景,右边是月亮由圆变缺的过程
  • 两边画面交替变化,体现"悲欢离合"与"阴晴圆缺"的对应

第四段:豁达与祝福

但愿人长久,千里共婵娟。

画面 9

  • 回到开场的场景,文士再次望向月亮
  • 他的表情变得平和、豁达

画面 10

  • 画面分割成多个小窗口,每个窗口里都有人在赏月
  • 暗示天涯共此时的意境

结尾画面

  • 月亮逐渐变大,占据整个屏幕
  • "但愿人长久,千里共婵娟"的文字优雅地浮现

不过呢,AI给的第一版分镜还是有点粗糙。为了获得更专业、更细致的分镜脚本,我又给了 Claude 一个特别的提示词。这个提示词要求 AI 扮演一个超专业的导演,提供包含画面内容、景别、画外音、运镜、台词、音乐和剪辑手法等详细信息的分镜头脚本。

图片展示的是《水调歌头·丙辰中秋》的详细分镜头脚本,包含序号、画面内容、景别、话外音/音乐、运镜等信息。画面内容从深邃夜空、文士仰望夜空、手持酒杯作举杯状,到月亮特写、月球表面细节、轻纱般的云雾飘过、文士伸展双臂等。景别有远景、全景、中景等。运镜有缓慢拉近、左右移动、环绕拍摄等。画面内容与上下文提到的分镜设计相呼应,呈现了中秋赏月的场景。

《水调歌头·丙辰中秋》详细分镜头脚本

序号画面内容景别话外音/音乐运镜台词剪辑手法
1深邃的夜空,繁星点点,一轮明月高悬远景柔和的古筝声响起缓慢仰拍(无)淡入
2一位身穿古装的文士(苏轼)背对镜头,仰望夜空全景古筝声持续,加入低沉的笛声steadicam 缓慢推进(无)切换
3文士手持酒杯,作举杯状中景音乐渐强左右平移朗诵:"明月几时有?把酒问青天。"切换
4月亮特写,逐渐变大特写音乐减弱,突出环境音推焦,由虚转实(无)溶镜
5月球表面细节,形成宫殿轮廓特写到全景神秘的音效缓慢拉远朗诵:"不知天上宫阙,今夕是何年。"叠化
6轻纱般的云雾飘过月球表面全景空灵的音乐静止(无)叠化
7文士伸展双臂,仿佛要乘风而去中景音乐激昂环绕拍摄朗诵:"我欲乘风归去,"切换
8背景中出现若隐若现的仙境宫殿全景音乐神秘快速推进朗诵:"又恐琼楼玉宇,"快速切换
9宫殿近在眼前,周围环绕着寒冷的雾气全景寒风呼啸声缓慢推进朗诵:"高处不胜寒。"
10文士脸部特写,表情略显犹豫特写音乐转为沉思氛围静止(无)
11回到现实场景,月光洒在地面上俯拍全景音乐轻快起来从高处缓慢下降(无)
12文士开始起舞,身影婆娑全景到中景舞蹈节奏音乐环绕拍摄朗诵:"起舞弄清影,"
13地上投射出舞动的身影和月亮的清辉特写音乐继续平移朗诵:"何似在人间。"
14镜头从月亮移向人间,展现一座精美的楼阁从特写到全景音乐渐弱,转为宁静快速拉远朗诵:"转朱阁,"
15楼阁的窗户微开,月光透过窗缝洒入中景轻柔的风声缓慢推进朗诵:"低绮户,"
16室内景象,一位女子靠窗而坐,显得思绪万千中景到特写低沉的琴声缓慢推进至特写朗诵:"照无眠。"
17月光下的华丽楼阁,朱红色的门楣在月色中格外醒目全景空灵的古筝声缓慢左右平移朗诵:"转朱阁,"淡入
18精致的雕花窗户,月光从缝隙中透入特写古筝声继续,加入轻柔的风声静态拍摄朗诵:"低绮户,"切换
19室内,一位女子靠窗而坐,眼神迷离,似乎无法入眠中景音乐渐弱,突出夜的寂静慢速推进朗诵:"照无眠。"慢镜头
20女子的脸部特写,眼中泛起泪光特写低沉的琴声静态拍摄朗诵:"不应有恨,"聚焦
21月亮由残缺逐渐变圆的过程(延时摄影)全景音乐节奏稍快静态拍摄朗诵:"何事长向别时圆?"延时摄影
22分屏:左边是人们欢聚,右边是离别场景分屏中景欢快与悲伤的音乐交织静态拍摄朗诵:"人有悲欢离合,"分屏效果
23分屏:左边是晴朗的月夜,右边是被乌云遮蔽的月亮分屏全景音乐富有韵律感左右画面交替推进朗诵:"月有阴晴圆缺,"分屏效果
24一本古籍缓缓打开,上面写着"此事古难全"特写音乐回归平静俯拍,缓慢拉近朗诵:"此事古难全。"淡出后静止

第3步:可灵AI出图

有了详细的分镜脚本,接下来就该把这些想象中的画面变成现实了。

我选择使用可灵AI(https://klingai.kuaishou.com/)直接来生成图像。你别说,可灵AI现在是真强,能够根据我们的描述,创造出符合古典诗词意境的画面。

每一帧画面都经过精心调教,力求在现代审美和传统意境之间找到平衡。从皓月当空到杯中沉月,从仰望星空到俯瞰人间,AI 的创作让苏轼笔下的意境跃然纸上。

图片展示的是可灵AI生成的《水调歌头》中秋主题图像界面。左侧为AI创作空间界面,有“AI创作”“AI调教”等选项。右侧上方是生成的四张图像,画面中人物身着古装,姿态各异。右侧下方是AI调教区域,有多个调教选项,如“人物”“场景”“光线”等,还展示了多张调教后的图像示例。该图片与上下文紧密相关,直观呈现了可灵AI根据描述生成符合古典诗词意境画面的过程。

图片展示了一位身着淡蓝色古装的女子,倚靠在窗边,姿态优雅。她头戴精致发饰,面带淡妆,眼神含情,手托下巴,神情略显忧郁。背景为木质窗格,窗外景色模糊。右下角有“可灵AI”标识。该图是文档中介绍可灵AI根据《水调歌头》创作的古典意境画面之一,体现了AI在现代审美与传统意境间的平衡创作能力。

图片展示了一位身着传统汉服的男子,他盘腿坐在木制长椅上,手持两个陶罐,背景是朦胧的山水景色和枯枝。男子长发束于脑后,面带严肃表情,目光望向画面左侧。画面右侧有“可灵AI”标识。该图是可灵AI根据“水调歌头·中秋”诗词描述生成的图像,体现了现代审美与传统意境的结合,与上下文介绍的可灵AI生成古典诗词意境画面的内容相契合。

图片展现了可灵AI生成的符合古典诗词意境的画面。画面中有一轮弯月和一轮满月高悬于空中,周围有几枝点缀着红色花朵的树枝。下方是平静的湖水,湖面倒映着空中的月亮,远处有山峦和古式建筑。整体营造出一种宁静悠远的氛围。这张图片与上下文关系紧密,是对上文提到的可灵AI能够依据描述创造出符合古典诗词意境画面的直观呈现,体现了其在现代审美和传统意境间的平衡创作。

第4步:可灵AI图转视频

静态的图像虽然美丽,但要真正体现诗词的韵味,还得动起来呀。因此,我们继续利用可灵 AI 的视频功能,为这些静帧画面注入了生命力。

图片展示的是可灵AI视频创作界面,左侧为AI视频创作区域,有“AI视频”“AI视频创作”等选项,下方有“AI视频创作”按钮。右侧是视频预览区,显示一位古风女子眼中泛起泪光的特写画面,画面中女子眼泪从眼角溢出,流下脸颊。右侧还有视频缩略图列表,包含多个视频缩略图。该图片与上下文紧密相关,直观呈现了可灵AI视频创作中生成的视频效果,特别是“流眼泪”这个细腻情感表达的镜头。

特别值得一提的是**"流眼泪"**这个镜头,AI 呈现出的效果异常真实,眼泪从眼角溢出,慢慢留下来,仿佛将诗人的感情具象化了。这种细腻的情感表达,让整个视频作品更添一分动人心弦的力量。

第5步:视频剪辑

图片展示的是视频剪辑软件界面,画面中呈现了中秋主题的视频素材。左侧是素材库,有多个视频片段缩略图。中间大画面显示“但愿人长久 千里共婵娟”字样,背景为古风山水画,前景有古书、花瓶等物品。下方时间线显示多个视频片段按顺序排列,部分片段有颜色标识。该图片与上下文紧密相关,直观呈现了视频剪辑过程中素材的选取与排列情况。

有了这些精美的视频素材,万事具备,只欠东风了。

最后的步骤就是剪辑与配乐了。我仔细地按照分镜脚本的顺序,将这些片段组合在一起,调整节奏,添加转场效果。

在配乐选择上,先找了一个水调歌头的朗诵,也尝试了一些现代演绎的古风音乐,但最终还是选了和另外一首笛声背景音乐搭配,既能呼应古典意境,又不失现代感的曲目,让画面与音乐完美契合。

在这个中秋之夜,当我们举杯邀明月时,不妨也邀请身边的亲朋好友一同欣赏这段凝聚了古今智慧的视频短片。让我们在 AI 描绘的诗画中,共同品味中国式的浪漫,感受节日的温馨,思考生命的意义。

祝大家中秋快乐!有空的话,不妨也试试用 AI 来玩转传统文化,说不定会有意想不到的收获!

可灵AI全新升级

这次视频能有这么好的效果,得益于可灵新模型的全新升级。

可灵基座模型再升级,视频生成推出可灵 1.5 模型,直出 1080P高清视频,挑战大屏清晰度与质感!除了清晰度大幅提升,画面美感及运动合理度、文本响应度均有明显提升!可灵 1.5 模型**“高品质模式”**已正式上线,生成价格不变

图片展示了可灵AI视频生成界面。左侧有“AI视频”标识及“可灵1.5 NEW”字样,下方有“文生视频”和“图生视频”选项。右侧弹出“模型选择”窗口,显示“可灵1.0”和“可灵1.5 NEW”两个选项,其中“可灵1.5 NEW”被高亮选中。该图片与上下文紧密相关,直观呈现了可灵AI视频生成中模型选择的操作界面,与文档中介绍可灵1.5模型直出1080P高清视频等内容相呼应。

可灵 1.0 模型的图生视频新增「运动笔刷」功能!支持为图片中的人物/物体等各种元素指定运动轨迹,从而实现更好的运动控制和运动表现!

图片是可灵AI推出全新1.5模型的宣传海报。上方标题为“可灵AI推出全新1.5模型 新增运动笔刷功能”。中间部分展示了可灵AI1.5模型支持多种运动模式、新增运动笔刷功能等。下方有“新增运动笔刷功能”“支持超大尺寸100M格式的图片”等内容,还列出近期其他功能升级,如支持一次性生成多帧视频、支持多帧视频拼接等。底部有可灵AI的二维码及网址。

具体功能可以看下这段视频介绍。

可灵 1.5 模型更多案例

还可以把这些可灵 AI 直接出来的视频制作为数字人