元峰AI笔记 · AI绘画与视频

《水调歌头》中秋节,可灵 AI 把小姐姐整哭了!

十五的月亮,十六圆,十五的视频,十八发。

《水调歌头》中秋节,可灵 AI 把小姐姐整哭了!

《水调歌头》中秋节,可灵 AI 把小姐姐整哭了!

十五的月亮,十六圆,十五的视频,十八发。

大家好,我是元峰。虽然今天已经八月十八了,中秋节也已经过去了,但中秋节前一天晚上在可灵 AI 的群里发现过一个有意思的活动——"让中秋诗词的中国式浪漫具象化"。

这是一张可灵AI创作者交流群的聊天界面截图,群内共有498人,界面中显示的是名为“快手科技”的用户发送的群公告,内容为可灵AI中秋限时投稿活动的相关信息,该活动主题为“可灵AI中秋限时投稿活动来啦”,活动核心是用可灵AI将中秋诗词的中国式浪漫具象化,公告还说明了活动的玩法核心、内容要求、发布时间及参考内容链接,并在最后送上了中秋祝福。该图片对应文档中提及的可灵AI中秋主题活动相关内容,呈现了文档中活动信息的来源场景。

当时用可灵 AI 制作了一部中秋节主题的小短片,今天作为复盘和家姐一起分享一下这个视频的制作过程。

第1步:先确定古诗词

开始创作之前,我需要选择一首最能代表中秋意境的诗词。我打开 Claude,询问哪首诗最适合具象化中秋节的意境。猜猜 Claude 推荐了啥?没错,Claude 毫不犹豫地推荐了苏轼的《水调歌头》,特别是其中的名句:"明月几时有?把酒问青天。不知天上宫阙,今夕是何年。"

说真的,这首词简直就是为中秋量身定做的。这首词包含了对月的追问、对时间的思考、对人生的感悟,可谓中秋诗词中的翘楚。它不仅意境优美,更蕴含着深刻的哲理,完美契合了我们的创作主题。绝了!

这张图片是一段为将《水调歌头·丙辰中秋》意象化制作视频提供的建议内容,明确指出该词是中秋题材经典之作,意境优美且画面感强,非常适合视觉化呈现用于制作视频。内容中还点明了词的开头几句,并分析了这些词句所描绘的中秋夜望月自问的场景及其中蕴含的对月亮、时间和人生的思考,同时提到可通过月亮、酒杯、云彩等元素来可视化这首词的内容,整体为该词的视觉化制作提供了明确的方向参考。

第2步:分镜提示词

有了诗词,一步就得把它变成画面了。我又去麻烦了Claude,让它帮忙把词意转成画面。请它分析词的内容并进行视觉化,为我们勾勒出初步的分镜构想。

图片展示了苏轼《水调歌头·丙辰中秋》分镜设计。第一段开场,画面1中,深邃夜空中一轮明月高悬,画面右下角一位穿着古装的文士(苏轼)背对观众仰望星空,手持酒杯作举杯状;画面2则拉近月亮,呈现月球表面细节,云雾轻飘增添神秘感。第二段思乡情怀,画面3中,文士伸展双臂,仿佛要乘风而去。此图与上下文紧密相关,是将词意视觉化后的初步分镜构想。

苏轼《水调歌头·丙辰中秋》分镜设计

第一段:开场

明月几时有?把酒问青天。

不知天上宫阙,今夕是何年。

画面 1:

  • 深邃的夜空中,一轮明月高悬
  • 画面右下角,一位穿着古装的文士(苏轼)背对观众,仰望夜空
  • 文士手持酒杯,作举杯状

画面 2:

  • 镜头拉近月亮,呈现月球表面的细节
  • 月球表面逐渐变化,形成宫殿的轮廓
  • 轻纱般的云雾飘过,增添神秘感

第二段:思乡情怀

我欲乘风归去,又恐琼楼玉宇,

高处不胜寒。起舞弄清影,何似在人间。

画面 3:

  • 文士伸展双臂,仿佛要乘风而去
  • 背景中出现若隐若现的仙境宫殿

画面 4:

  • 宫殿近在眼前,但周围环绕着寒冷的雾气
  • 文士略显犹豫的表情

画面 5:

  • 回到现实场景,月光下文士翩翩起舞
  • 地上投射出舞动的身影和月亮的清辉

第三段:哲理思考

转朱阁,低绮户,照无眠。

不应有恨,何事长向别时圆?

人有悲欢离合,月有阴晴圆缺,此事古难全。

画面 6:

  • 镜头从月亮移向人间,展现一座精美的楼阁
  • 楼阁的窗户微开,月光透过窗缝洒入

画面 7:

  • 室内景象,一位女子靠窗而坐,显得思绪万千

画面 8:

  • 分屏展示:左边是人间离别的场景,右边是月亮由圆变缺的过程
  • 两边画面交替变化,体现"悲欢离合"与"阴晴圆缺"的对应

第四段:豁达与祝福

但愿人长久,千里共婵娟。

画面 9:

  • 回到开场的场景,文士再次望向月亮
  • 他的表情变得平和、豁达

画面 10:

  • 画面分割成多个小窗口,每个窗口里都有人在赏月
  • 暗示天涯共此时的意境

结尾画面:

  • 月亮逐渐变大,占据整个屏幕
  • "但愿人长久,千里共婵娟"的文字优雅地浮现

不过呢,AI给的第一版分镜还是有点粗糙。为了获得更专业、更细致的分镜脚本,我又给了 Claude 一个特别的提示词。这个提示词要求 AI 扮演一个超专业的导演,提供包含画面内容、景别、画外音、运镜、台词、音乐和剪辑手法等详细信息的分镜头脚本。

图片展示的是《水调歌头·丙辰中秋》的详细分镜头脚本,包含序号、画面内容、景别、话外音/音乐、运镜等信息。画面内容从深邃夜空、文士仰望夜空、手持酒杯作举杯状,到月亮特写、月球表面细节、轻纱般的云雾飘过、文士伸展双臂等。景别有远景、全景、中景等。运镜有缓慢拉近、左右移动、环绕拍摄等。画面内容与上下文提到的分镜设计相呼应,呈现了中秋赏月的场景。

《水调歌头·丙辰中秋》详细分镜头脚本

序号画面内容景别话外音/音乐运镜台词剪辑手法
1深邃的夜空,繁星点点,一轮明月高悬远景柔和的古筝声响起缓慢仰拍(无)淡入
2一位身穿古装的文士(苏轼)背对镜头,仰望夜空全景古筝声持续,加入低沉的笛声steadicam 缓慢推进(无)切换
3文士手持酒杯,作举杯状中景音乐渐强左右平移朗诵:"明月几时有?把酒问青天。"切换
4月亮特写,逐渐变大特写音乐减弱,突出环境音推焦,由虚转实(无)溶镜
5月球表面细节,形成宫殿轮廓特写到全景神秘的音效缓慢拉远朗诵:"不知天上宫阙,今夕是何年。"叠化
6轻纱般的云雾飘过月球表面全景空灵的音乐静止(无)叠化
7文士伸展双臂,仿佛要乘风而去中景音乐激昂环绕拍摄朗诵:"我欲乘风归去,"切换
8背景中出现若隐若现的仙境宫殿全景音乐神秘快速推进朗诵:"又恐琼楼玉宇,"快速切换
9宫殿近在眼前,周围环绕着寒冷的雾气全景寒风呼啸声缓慢推进朗诵:"高处不胜寒。"
10文士脸部特写,表情略显犹豫特写音乐转为沉思氛围静止(无)
11回到现实场景,月光洒在地面上俯拍全景音乐轻快起来从高处缓慢下降(无)
12文士开始起舞,身影婆娑全景到中景舞蹈节奏音乐环绕拍摄朗诵:"起舞弄清影,"
13地上投射出舞动的身影和月亮的清辉特写音乐继续平移朗诵:"何似在人间。"
14镜头从月亮移向人间,展现一座精美的楼阁从特写到全景音乐渐弱,转为宁静快速拉远朗诵:"转朱阁,"
15楼阁的窗户微开,月光透过窗缝洒入中景轻柔的风声缓慢推进朗诵:"低绮户,"
16室内景象,一位女子靠窗而坐,显得思绪万千中景到特写低沉的琴声缓慢推进至特写朗诵:"照无眠。"
17月光下的华丽楼阁,朱红色的门楣在月色中格外醒目全景空灵的古筝声缓慢左右平移朗诵:"转朱阁,"淡入
18精致的雕花窗户,月光从缝隙中透入特写古筝声继续,加入轻柔的风声静态拍摄朗诵:"低绮户,"切换
19室内,一位女子靠窗而坐,眼神迷离,似乎无法入眠中景音乐渐弱,突出夜的寂静慢速推进朗诵:"照无眠。"慢镜头
20女子的脸部特写,眼中泛起泪光特写低沉的琴声静态拍摄朗诵:"不应有恨,"聚焦
21月亮由残缺逐渐变圆的过程(延时摄影)全景音乐节奏稍快静态拍摄朗诵:"何事长向别时圆?"延时摄影
22分屏:左边是人们欢聚,右边是离别场景分屏中景欢快与悲伤的音乐交织静态拍摄朗诵:"人有悲欢离合,"分屏效果
23分屏:左边是晴朗的月夜,右边是被乌云遮蔽的月亮分屏全景音乐富有韵律感左右画面交替推进朗诵:"月有阴晴圆缺,"分屏效果
24一本古籍缓缓打开,上面写着"此事古难全"特写音乐回归平静俯拍,缓慢拉近朗诵:"此事古难全。"淡出后静止

第3步:可灵AI出图

有了详细的分镜脚本,接下来就该把这些想象中的画面变成现实了。

我选择使用可灵AI(https://klingai.kuaishou.com/)直接来生成图像。你别说,可灵AI现在是真强,能够根据我们的描述,创造出符合古典诗词意境的画面。

每一帧画面都经过精心调教,力求在现代审美和传统意境之间找到平衡。从皓月当空到杯中沉月,从仰望星空到俯瞰人间,AI 的创作让苏轼笔下的意境跃然纸上。

图片展示的是可灵AI创作空间界面。左侧有“AI创作”标识及“可灵AI”字样,下方有“AI创作”“AI写诗”“AI作画”等选项。中间部分呈现了多张人物照片,人物姿态各异,背景有窗户等元素。右侧有“AI创作”“AI写诗”“AI作画”“AI写文”等选项,下方展示了多张古风人物、建筑等图片。该图片与上下文介绍的可灵AI根据描述创作符合古典诗词意境画面的内容相关,展示了AI创作空间的界面及部分创作成果。

这张图片是可灵AI为《水调歌头》主题创作的古风人物画面,对应文档中“第3步:可灵AI出图”的环节。画面里的女子身着浅青色古风衣衫,佩戴精致头饰与耳饰,倚在古式木格窗边,神情柔婉,整体风格贴合古典诗词的意境,尽显传统韵味,体现出可灵AI能将古典文学意境转化为视觉画面的创作能力,衔接上下文关于AI创作符合诗词意境画面的内容。

图片展示了一位身着传统服饰的男子,他盘腿坐在木制长椅上,手持两个陶罐,背景是朦胧的山水景色和枯枝。男子长发束于脑后,面带严肃表情,目光望向画面左侧。画面右侧有“可灵AI”标识。该图与上文提到的可灵AI根据描述创造出符合古典诗词意境的画面相呼应,是AI创作的符合苏轼笔下意境的图像之一。

图片展示了可灵AI根据《水调歌头》创作的古风画面。画面中,左侧是弯月,右侧是圆月,均倒映在平静的湖面上,湖对岸有山峦和古建筑。画面左上角和右上角各有一枝带红叶的树枝。远处山峦层叠,近处湖面波光粼粼。此图与上文提到的可灵AI能根据描述创造出符合古典诗词意境的画面相呼应,体现了AI在现代审美和传统意境间的平衡创作能力。

第4步:可灵AI图转视频

静态的图像虽然美丽,但要真正体现诗词的韵味,还得动起来呀。因此,我们继续利用可灵 AI 的视频功能,为这些静帧画面注入了生命力。

图片展示的是可灵AI视频创作界面,左侧为AI视频创作区域,有“AI视频”“AI视频创作”“AI视频创作(预览)”等选项,下方有“AI视频创作”按钮。右侧是视频预览区,显示一位女性侧脸特写,她面带泪痕,眼含泪水,背景模糊。右侧还展示了多张视频帧缩略图,包括人物、月亮等画面。该图片与上下文关系紧密,直观呈现了可灵AI视频创作中生成的视频画面效果,特别是“流眼泪”这个镜头,体现了AI呈现出的真实感。

特别值得一提的是**"流眼泪"**这个镜头,AI 呈现出的效果异常真实,眼泪从眼角溢出,慢慢留下来,仿佛将诗人的感情具象化了。这种细腻的情感表达,让整个视频作品更添一分动人心弦的力量。

第5步:视频剪辑

图片展示的是视频剪辑软件界面,画面中呈现了中秋主题的视频素材。左侧是素材库,有多个视频片段缩略图。中间大画面显示“但愿人长久 千里共婵娟”字幕,下方是一本打开的书和花瓶。下方时间线显示多个视频片段按顺序排列,有不同颜色标识。右侧有音量调节、转场效果等设置选项。该图片直观呈现了视频剪辑过程中素材的呈现及编辑状态,与上下文提到的视频剪辑步骤相契合。

有了这些精美的视频素材,万事具备,只欠东风了。

最后的步骤就是剪辑与配乐了。我仔细地按照分镜脚本的顺序,将这些片段组合在一起,调整节奏,添加转场效果。

在配乐选择上,先找了一个水调歌头的朗诵,也尝试了一些现代演绎的古风音乐,但最终还是选了和另外一首笛声背景音乐搭配,既能呼应古典意境,又不失现代感的曲目,让画面与音乐完美契合。

在这个中秋之夜,当我们举杯邀明月时,不妨也邀请身边的亲朋好友一同欣赏这段凝聚了古今智慧的视频短片。让我们在 AI 描绘的诗画中,共同品味中国式的浪漫,感受节日的温馨,思考生命的意义。

祝大家中秋快乐!有空的话,不妨也试试用 AI 来玩转传统文化,说不定会有意想不到的收获!

可灵AI全新升级

这次视频能有这么好的效果,得益于可灵新模型的全新升级。

可灵基座模型再升级,视频生成推出可灵 1.5 模型,直出 1080P高清视频,挑战大屏清晰度与质感!除了清晰度大幅提升,画面美感及运动合理度、文本响应度均有明显提升!可灵 1.5 模型**“高品质模式”**已正式上线,生成价格不变!

图片展示的是可灵AI视频生成界面。左侧有“AI视频”标识及“可灵1.5”字样,右侧弹出模型选择框,显示“模型选择:可灵1.0”及“可灵1.5 NEW”,后者被高亮选中。背景为深色,右侧有发光的几何图形。该图片与文档中介绍可灵基座模型再升级,视频生成推出可灵1.5模型,直出1080P高清视频等内容相关,直观呈现了可灵1.5模型在视频生成界面中的位置及状态。

可灵 1.0 模型的图生视频新增「运动笔刷」功能!支持为图片中的人物/物体等各种元素指定运动轨迹,从而实现更好的运动控制和运动表现!

图片是可灵AI推出全新1.5模型的宣传海报。上方标题为“可灵AI推出全新1.5模型,新增运动笔刷功能”。中间部分展示了模型支持多种视频格式、生成1080P高清视频、支持视频尺寸不限等新功能。下方有“新增运动笔刷功能”示例,如手指运动轨迹、手指静止区域等。底部还列出近期其他功能升级,如支持一次性生成多帧视频、支持视频尺寸不限等。底部有可灵AI的二维码及网址。

具体功能可以看下这段视频介绍。

可灵 1.5 模型更多案例

还可以把这些可灵 AI 直接出来的视频制作为数字人