前几期做了柿咪咪的MV、古诗视频,这次想挑战一个更有“文化分量”的东西——让AI把《红楼梦》的名场面,做成从书里“走”出来的3D微缩场景。
灵感来自于网上那种“立体书”视频:翻开一本古书,书页上突然出现立体的场景,人物像从纸面里浮出来。我心想,这用AI能不能做?
试了一下,还真行。这篇就把完整流程记录下来,从提示词生成到成片剪辑,每一步都写清楚。
依旧先看一下成片~
我用的还是豆包。先让它从《红楼梦》里挑8个家喻户晓的名场面,然后按照我给的格式,输出绘画提示词和视频脚本。
我的指令是这样的:
“请根据名著《红楼梦》的内容,为我挑出8个名场面,要求名场面的角色要众所周知,并依据名场面生成绘画提示词及视频动态脚本。输出示例如下,方括号以外的部分不允许修改,视频脚本动作幅度小、动作简单:”
然后贴了一段示例模板。模板的核心是:一本书翻开,左页是竖排书法标题,右页是裸眼3D微缩场景,人物、动作、环境都要写清楚。
豆包很快给出了8个场景。我挑几个印象深的:
1. 黛玉葬花
画面提示词里写:黛玉手持花锄,肩上挂着花囊,站在桃花树下,花瓣飘落,面容哀愁。环境是假山、流水、落花。视频脚本:黛玉弯腰拾起花瓣,放入花囊,抬头望天,轻轻叹气。
2. 宝钗扑蝶
宝钗手持团扇,在亭台楼阁间追逐蝴蝶,裙摆飘动,表情轻盈。脚本:宝钗轻手轻脚走近蝴蝶,扇子轻轻一扑,蝴蝶飞走,她微微一笑。
3. 湘云醉卧
湘云醉卧在芍药花丛中的石凳上,扇子掉在地上,脸颊微红,周围花瓣落满身。脚本:湘云翻了个身,伸手摸了摸掉落的扇子,嘴角微翘。
4. 刘姥姥进大观园
刘姥姥戴着头巾,被凤姐插了满头的花,表情憨厚又窘迫,周围丫鬟们捂嘴笑。脚本:刘姥姥摸摸头上的花,咧嘴笑,又不好意思地低头。
5. 宝玉挨打
宝玉趴在长凳上,王夫人和贾母在场,表情心疼,宝玉面色苍白。脚本:宝玉微微抬头,又无力地趴下,王夫人伸手想扶又不敢。
其他还有“宝黛初见”“晴雯撕扇”“黛玉焚书”,一共8个。
有了提示词,接下来是生成图片。
我用豆包的AI绘图功能。第一个“黛玉葬花”的提示词很长,我直接复制粘贴。关键的参数是:3D微缩场景、古书翻页、裸眼3D效果、暖黄青绿粉色、超写实质感。
第一张图生成出来,效果比我想的好——书页的纹理很真实,右边的黛玉像一个小小的立体模型站在书页上,花瓣是真的“飘”出来的感觉。但色调偏暗,我调整了一下“明度偏明亮”,第二版就透亮了。
剩下的7个场景,我直接用同样的模板,只替换了“经典画面”标题和人物场景描述。生成过程中,我发现不同场景的“书页颜色”有时候会变——有的偏黄,有的偏白。为了统一,我把第一张满意的书页作为参考图,后面的都加上“参考此图的纸张颜色和光影”。
8张图全部生成完,大概花了一个半小时。然后我把它们并排对比,挑出了5张风格最统一的(色调、光影、书页质感最接近),另外3张重新跑了一遍才满意。
静态图有了,但“从书里走出来”需要动态——人物要有细微的动作。
每张图生成4-5秒的视频,动作指令就按照豆包脚本里写的来。
比如“黛玉葬花”:
“黛玉弯腰拾起花瓣,放入花囊,轻轻叹气,动作缓慢,像微缩木偶剧的感觉”
“湘云醉卧”:
“湘云翻了个身,伸手摸了摸掉落的扇子,嘴角微翘,继续睡,身体随着呼吸微微起伏”
“宝钗扑蝶”:
“宝钗轻手轻脚走近蝴蝶,扇子轻轻一扑,蝴蝶飞走,她微微一笑,转头看向蝴蝶飞走的方向”
生成的时候,我发现动作幅度不能大。如果写“跑”“跳”,出来的效果会很鬼畜。脚本里特意强调了“动作幅度小”,我也照做了。出来的视频,人物动作像精致的微缩模型在动,很符合“书里走出来”的设定。
8段视频生成完,总时长大概40秒。
剪辑我用剪映。
操作流程:
1. 把8段视频按顺序拖进轨道
2. 添加BGM:剪映素材库搜红楼梦影视作品的bgm片段,节奏舒缓
3. 转场:每段之间用转场,时长0.5秒
4. 不加字幕(因为画面上的古书已经有竖排标题了)
5. 整体调色:加了一个“暖秋”滤镜,让色调更统一
6. 导出
🤔做完之后的几点感受
第一,模板式提示词是“偷懒”的好方法。
这次我没有自己写提示词,而是让AI按模板批量生成。只要模板写得好(把画风、构图、光影都定死),后面就是复制粘贴换标题。效率高很多。
第二,“从书里走出来”这个创意,AI很适合做。
因为AI擅长生成“超写实但又不真实”的画面。古书的纹理、微缩模型的比例、柔和的光影,这些AI都能拿捏。如果是真人拍摄,反而很难做出这种“介于2D和3D之间”的效果。
第三,动作幅度越小越好。
微缩场景最怕动作太“滑”。木偶剧、定格动画那种“一顿一顿”的感觉才对。所以指令里我反复强调“动作幅度小、动作简单”,出来的效果就对了。