想用AI生成视频但总被“分镜”卡住看着别人用Sora、Runway、Pika做出电影感十足的短片自己却只能得到一堆混乱、跳跃、风格不一的画面。问题往往不在模型而在于你给模型的“指令”太业余了。一个专业的电影导演绝不会对摄影师说“拍个好看的镜头”。他会精确描述“中景手持跟拍黄昏逆光主角背影略带忧伤地走向远方。”这就是“分镜”。对于AI视频生成你的Prompt就是导演的指令。没有专业分镜Prompt再强的AI模型也拍不出好“电影”。最近一个名为my_ai_town的开源项目在GitHub上火了。它不是一个AI模型而是一个专业的电影级Prompt库包含了超过200个经过精心设计的、可直接套用的分镜模板。从“英雄登场”的史诗广角到“悬疑对话”的过肩镜头它把电影工业的语言翻译成了AI能理解并执行的精确指令。这篇文章我将带你深度实测这个项目。核心判断是它解决的不是“有和无”的问题而是“专业与业余”的鸿沟。对于想用AI制作高质量短视频、产品演示、短剧甚至个人短片的创作者来说这是一个能立刻将你的作品质感提升数个档位的“作弊码”。下面我们从“为什么需要它”开始一步步拆解其原理、用法、实战效果以及如何融入你的工作流。1. 这篇文章真正要解决的问题从“乱拍”到“导演”很多AI视频新手会陷入一个误区认为AI视频生成就是“输入一句话等一个结果”。这种“开盲盒”式的创作效率极低质量不可控。其根本原因在于自然语言描述与视觉镜头语言之间存在巨大的认知偏差。你的描述自然语言“一个女孩在公园里开心地跑步。”AI的理解可能结果它可能会生成一个远景女孩很小、一个面部大特写看不到跑步、一个俯拍、一个仰拍……风格可能在写实和动画之间跳跃。专业导演的描述分镜Prompt“低角度广角镜头跟拍视角阳光穿过树叶形成光斑一位穿着运动服的年轻女性在公园小道上慢跑脸上带着微笑电影感浅景深夏日午后氛围。”后者使用了明确的景别广角镜头、角度低角度、镜头运动跟拍、光影阳光光斑、主体细节穿着、动作、表情和整体风格电影感。这就是my_ai_town这类Prompt库提供的核心价值它将模糊的想法结构化为AI模型如Stable Video Diffusion、Pika等能够精准还原的视觉元素清单。它解决的具体痛点包括创意枯竭不知道如何描述一个“有感觉”的镜头。术语匮乏不了解“Dutch angle”荷兰角、“dolly zoom”滑动变焦这些专业术语及其效果。风格不一连续生成的视频镜头之间没有连贯的视觉语言跳戏严重。效率低下需要反复试错、调整Prompt浪费大量计算资源和时间。谁最需要这个工具短视频/自媒体创作者想快速制作高质量片头、转场或情节片段。产品经理/市场人员需要制作产品概念视频或宣传短片但没有专业影视团队。独立游戏开发者/动画师用于生成游戏过场动画或动态概念图。影视专业学生/爱好者学习分镜语言并将其应用于AI辅助创作。任何对AI视频生成感到挫折希望获得确定性更高结果的探索者。2. 核心概念与原理Prompt库如何成为“分镜脚本”在深入项目之前我们需要厘清几个关键概念理解这个Prompt库是如何工作的。2.1 什么是“分镜”Storyboard分镜是影视拍摄的蓝图用一系列草图或文字来预演每个镜头的内容包括景别 (Shot Size)远景、全景、中景、近景、特写。角度 (Camera Angle)平视、俯视、仰视、倾斜荷兰角。镜头运动 (Camera Movement)固定、推、拉、摇、移、跟、升降。画面内容 (Framing)主体、配角、环境、道具。备注 (Notes)台词、音效、时长、特效。2.2 什么是“AI视频生成Prompt”这是你与AI视频模型如Stable Video Diffusion, ModelScope, Gen-2等沟通的“语言”。一个有效的Prompt通常包含主体谁/什么在画面里。动作主体在做什么。环境在哪里发生。风格电影感、动画风格、赛博朋克、水墨画等。技术参数画质8K, ultra detailed、镜头参数wide shot, close-up、光影cinematic lighting。2.3 my_ai_town项目的核心原理my_ai_town项目本质上是一个结构化、分类别的Prompt数据库。它做了以下几件事解构影视语言将常见的电影镜头、情绪氛围、视觉风格分解成可组合的Prompt关键词。分类归纳按照“镜头类型”、“情绪”、“风格”、“时代”等维度对Prompt进行归类形成模板。提供组合范例展示如何将这些模板像搭积木一样组合起来形成一个复杂而精确的完整镜头描述。开源与可扩展所有模板以文本文件如JSON、YAML或纯文本形式提供用户可以查看、修改、添加自己的模板。它不生成视频它生成“生成视频的优质指令”。你可以把这些指令复制粘贴到任何支持文本Prompt的AI视频工具中。3. 环境准备获取与使用Prompt库my_ai_town是一个开源项目使用它不需要复杂的编程环境核心是获取并理解其提供的文本资源。3.1 访问项目项目托管在GitHub上地址为https://github.com/mewamew/my_ai_town。 你需要一个GitHub账号非必须用于Star和关注更新。能够访问GitHub的网络环境。3.2 理解项目结构克隆或下载项目后你可能会看到类似如下的目录结构具体以项目实际为准my_ai_town/ ├── README.md # 项目说明文档 ├── prompts/ # 核心Prompt库目录 │ ├── shots/ # 按景别和角度分类 │ │ ├── wide_angle.json │ │ ├── close_up.json │ │ └── ... │ ├── movements/ # 按镜头运动分类 │ ├── genres/ # 按电影类型分类 │ ├── lighting/ # 按灯光氛围分类 │ └── ... ├── examples/ # 使用示例和效果图 └── templates/ # 组合模板示例关键文件是prompts/目录下的各种.json或.txt文件里面存储着结构化的Prompt数据。3.3 基础使用方式浏览查找直接打开prompts/下的文件用文本编辑器查看。例如打开shots/wide_angle.json你可能会看到{ name: heroic_wide_shot, description: 史诗感广角镜头用于展现壮丽场景或英雄登场。, prompt: epic wide angle shot, breathtaking landscape, dramatic sky, tiny figure in the foreground, cinematic lighting, hyperdetailed, 8K }复制粘贴将prompt字段的内容复制出来。组合使用从不同分类中选取多个Prompt片段与你的具体内容结合。例如基础内容“a lone samurai standing on a cliff”镜头来自shots/:“epic wide angle shot, low angle”风格来自genres/:“in the style of Akira Kurosawa, monochrome with high contrast”光影来自lighting/:“dramatic backlighting, long shadows, sunset”最终Prompt“epic wide angle shot, low angle, a lone samurai standing on a cliff, in the style of Akira Kurosawa, monochrome with high contrast, dramatic backlighting, long shadows, sunset, cinematic, 8K”4. 核心流程拆解从想法到成片的五步法使用专业Prompt库创作AI视频应该遵循一个系统化的流程而不是随意尝试。4.1 第一步构思与剧本确定“拍什么”在打开任何AI工具前先用最简单的话写下你的核心想法。例如“我想做一个关于未来城市中孤独侦探的15秒开场。” 然后将其分解为3-5个关键镜头镜头1雨夜侦探事务所窗外的霓虹城市远景。镜头2侦探靠在办公桌旁看着手中老照片的特写。镜头3门突然被推开一个神秘访客的逆光中景。4.2 第二步挑选分镜模板确定“怎么拍”打开my_ai_town的Prompt库为每个镜头寻找合适的模板。镜头1在shots/中寻找cityscape城市景观、rainy_night雨夜在lighting/中寻找neon_noir霓虹黑色电影风格、wet_streets潮湿街道。镜头2在shots/中寻找close_up特写、over_the_shoulder过肩在lighting/中寻找desk_lamp台灯光、nostalgic怀旧感。镜头3在shots/中寻找medium_shot中景、doorway_frame门框构图在movements/中寻找door_swing门摆动在lighting/中寻找backlit_silhouette逆光剪影。4.3 第三步组装与细化Prompt将模板关键词与你的具体内容结合。以镜头3为例基础a mysterious visitor standing at the door 镜头medium shot, from inside the room, doorway framing 运动the door swings open slowly 光影strong backlight from the hallway, silhouette effect, dramatic 风格cinematic, film noir, high contrast, 35mm film grain 画质8K, ultra detailed, photorealistic组装后Prompt“medium shot, from inside the room, doorway framing, the door swings open slowly, a mysterious visitor standing at the door, strong backlight from the hallway, silhouette effect, dramatic, cinematic, film noir, high contrast, 35mm film grain, 8K, ultra detailed, photorealistic”4.4 第四步在AI视频工具中生成将组装好的Prompt输入到你选择的AI视频工具。目前主流选择有Runway Gen-2 / Pika Labs在线平台对Prompt响应好易用性强。Stable Video Diffusion (SVD)开源模型可本地部署控制性强但对硬件要求高。ModelScope国内平台访问方便有中文优化。Kling / 其他新兴工具关注其Prompt兼容性。关键操作在工具中通常有“Text to Video”或“Prompt”输入框。将你的长Prompt粘贴进去调整好视频时长、尺寸如16:9、帧率等参数然后点击生成。4.5 第五步后期串联与调整单个镜头生成后使用视频剪辑软件如Premiere, Final Cut, DaVinci Resolve甚至剪映将它们按顺序拼接起来。添加转场使用交叉溶解、淡入淡出等让镜头衔接更自然。调整节奏剪辑每个镜头的时长控制整体节奏。配音与音效这是提升电影感的关键添加环境音、脚步声、音乐等。调色统一即使每个镜头都用了“电影感”Prompt色彩可能仍有差异在剪辑软件中进行整体调色使色调统一。5. 完整示例制作一个“赛博朋克逃亡”短片让我们通过一个具体例子将上述流程完整走一遍。假设我们要制作一个20秒的赛博朋克风格短片片段。5.1 剧本分解开场未来都市的空中航拍夜景飞行器穿梭。主角引入主角在拥挤的市集街道上奔跑回头张望。冲突点主角躲进小巷追踪者的红色激光瞄准点出现在墙上。结局主角跳上飞行摩托冲入雨夜镜头拉远。5.2 从my_ai_town挑选模板我们假设从库中找到了以下关键词实际使用时需在对应文件中查找镜头类aerialshot航拍crowded_street拥挤街道tight_alley狭窄小巷low_angle低角度dynamic_pov动态主观视角。风格类cyberpunk赛博朋克neon霓虹rainy_night雨夜bladerunner银翼杀手风格。光影类neon_glow霓虹辉光laser_sight激光瞄准wet_asphalt潮湿沥青volumetric_fog体积雾。技术类cinematic电影感ultra_wide超广角slow_motion慢动作high_speed高速。5.3 组装Prompt并生成镜头1 Prompt“aerialshot of a sprawling cyberpunk metropolis at night, flying cars weaving between towering skyscrapers, neon advertisements glowing in the rain, volumetric fog, cinematic, ultra wide, 8K”镜头2 Prompt“dynamic POV shot running through a crowded cyberpunk street market, people with augmented reality visors, stalls selling glowing tech, looking back over shoulder in panic, neon glow, rainy night, motion blur”镜头3 Prompt“tight alley shot, back against wet wall, breathing heavily, a single red laser sight dot appears on the wall next to the head, cyberpunk, high contrast, suspenseful”镜头4 Prompt“low angle shot, jumping onto a hovering motorcycle, engine ignites with blue neon light, speeding off into the rainy neon-lit cityscape, cinematic, slow motion to high speed, bladerunner style”5.4 在Runway Gen-2中的操作示例登录Runway ML进入Gen-2工作区。选择“Text to Video”。在输入框中粘贴“镜头1 Prompt”。设置视频时长4秒。宽高比16:9。点击“Generate”。等待约1分钟。生成后如果满意点击“Add to project”。如果不满意可点击“Remix”微调Prompt或重新生成。重复步骤3-6为镜头2、3、4分别生成视频片段。在Runway的编辑时间线中将四个片段按顺序排列。5.5 基础剪辑与导出以DaVinci Resolve为例# 这不是代码而是操作流程描述 1. 新建项目设置分辨率为1920x1080帧率24fps。 2. 将四个生成的视频片段导入媒体池。 3. 拖拽片段到时间线按1-2-3-4顺序排列。 4. 在“编辑”页面使用“转场”效果中的“交叉溶解”添加到每个片段之间。 5. 在“Fairlight”页面添加背景音乐和音效雨声、脚步声、引擎声、激光声。 6. 在“调色”页面新建一个节点应用统一的“赛博朋克”风格LUT并微调对比度和饱和度。 7. 在“交付”页面选择“H.264”格式质量“高”导出最终成片。通过以上步骤一个拥有专业镜头语言、统一视觉风格的AI生成短片就完成了。虽然每个镜头是独立生成的但得益于精准的Prompt控制它们在风格和氛围上保持了高度一致极大降低了后期统一风格的难度。6. 效果验证与质量评估使用专业Prompt库后如何判断生成效果是否达标可以从以下几个维度评估6.1 一致性检查风格一致性四个镜头的色彩基调、光影质感、细节水平是否统一例如都是写实风还是卡通渲染角色/环境一致性主角的衣着、发型、环境中的标志性建筑在不同镜头中是否可识别为同一元素这是当前AI视频的难点Prompt库主要通过描述“风格”和“氛围”来间接保证而非直接控制具体元素。6.2 镜头语言实现度景别与角度生成的画面是否准确体现了Prompt中要求的“广角”、“特写”、“低角度”镜头运动AI是否理解了“推镜头”、“跟拍”等运动描述这取决于模型能力但明确的Prompt能提高成功率。构图与光影逆光、剪影、霓虹光晕等效果是否出现6.3 实用价值评估可用性生成的片段能否直接用于你的项目还是需要大量修补或重生成效率提升对比之前自己写Prompt使用模板后达到满意效果所需的生成次数是否减少创意激发浏览模板库是否给你带来了新的镜头构思一个简单的验证清单[ ] 画面主体是否符合描述[ ] 整体氛围如“赛博朋克雨夜”是否到位[ ] 镜头构图是否有基本的电影感[ ] 与前后镜头在色调上是否冲突[ ] 如果单独作为静态图片是否有吸引力如果大部分答案为“是”那么这个Prompt和生成结果就是成功的。AI视频目前无法做到完美连贯我们的目标是利用Prompt库最大化每个独立镜头的质量从而为后期剪辑提供最好的素材。7. 常见问题与排查思路在实际使用my_ai_town或类似Prompt库时你可能会遇到以下问题问题现象可能原因排查方式解决方案生成的视频与Prompt描述完全不符1. Prompt中存在AI难以理解或矛盾的关键词。2. 使用的AI视频模型不支持某些复杂描述。3. Prompt过长核心信息被淹没。1. 简化Prompt只保留最核心的镜头、主体、风格词。2. 查阅AI工具官方文档了解其Prompt最佳实践。3. 使用my_ai_town库中的基础模板开始测试。从“一个远景一座山电影感”这样的极简Prompt开始逐步添加元素。确保关键词是常见的视觉描述词。画面风格跳跃不统一1. 为不同镜头使用了冲突的风格关键词如“photorealistic”和“anime”混用。2. 生成时没有使用相同的“基础模型”或“风格预设”。1. 检查所有镜头的Prompt确保风格基调一致。2. 在AI工具中尝试在生成系列镜头时固定一个“风格参考”或使用相同的初始化参数。为整个项目定义一个核心风格如“cinematic, photorealistic, 8K”并把它作为每个Prompt的后缀。在Runway中可以使用“Image to Video”用第一帧的风格去引导后续生成。AI忽略了镜头运动描述当前大多数文生视频模型对复杂的镜头运动理解能力有限。检查模型能力说明。例如Stable Video Diffusion对运动控制较弱而Runway Gen-2对“zoom in”、“pan left”等简单运动支持较好。1. 优先使用模型明确支持的运动关键词。2. 考虑在后期剪辑中通过缩放、平移等效果模拟镜头运动。3. 关注模型更新新版本可能会加强运动控制。提示词库中的模板生成效果不好1. 模板是针对特定模型如SDXL优化的与你用的视频模型不匹配。2. 模板描述过于复杂或抽象。1. 确认模板的来源和推荐使用场景。2. 将长模板拆解分部分测试效果。1. 将模板作为“灵感参考”和“术语词典”而不是直接拷贝。2. 根据你使用的AI工具的特性对模板进行本地化修改。建立自己的“有效Prompt”库。项目文件JSON/TXT打开乱码或无法理解文件编码问题或结构不熟悉。1. 使用专业的文本编辑器如VS Code, Sublime Text打开。2. 查看项目README了解文件结构。1. 尝试切换文件编码UTF-8, GBK。2. 如果是JSON文件可以使用在线JSON格式化工具美化查看。8. 最佳实践与高级技巧掌握了基本用法后以下实践能让你的AI视频创作更上一层楼。8.1 建立你自己的“私人Prompt库”my_ai_town是绝佳的起点但最趁手的工具一定是自己打磨的。创建笔记使用Notion、Obsidian或简单的文本文件。记录成功案例每次生成出彩的视频立刻保存其Prompt、使用的模型和参数。分类归档按“风景”、“人物特写”、“动作场景”、“特定风格如水墨风”等分类。迭代优化对同一个场景尝试微调Prompt换一个光影词、调整描述顺序对比效果记录最优解。8.2 与图像生成联动图生视频目前文生视频的稳定性不如文生图。一个高级策略是用SD/Midjourney生成关键帧使用更强大的文生图模型生成你心目中完美的、高细节的静态画面作为“关键帧”。使用图生视频在Runway Gen-2、Pika或Stable Video Diffusion中将这张关键帧作为输入并配合简短的、描述运动的Prompt如“slow zoom out”。优势画面质量、构图、细节更可控视频的起始帧质量极高。8.3 控制视频长度与连贯性单次文生视频长度有限通常4-6秒。制作更长视频需要分镜生成如本文所述将长视频分解为多个短镜头。使用“延长”功能部分工具如Pika允许在视频结尾继续生成但可能产生漂移。后期剪辑与转场这是目前最可靠的方法。熟练使用剪辑软件的转场、速度调整、蒙版等功能能有效弥补镜头间的跳跃感。关注新模型密切关注Sora、Luma等新一代模型在长视频连贯性上的突破。8.4 合法合规与版权意识内容安全绝对不要使用任何涉及现实人物肖像未经许可、暴力、色情及政治敏感内容的Prompt。这不仅关乎法律也关乎AI工具的使用政策。版权澄清使用AI生成的内容其版权归属目前在法律上存在灰色地带。用于商业项目前请务必了解相关平台如YouTube, B站对AI生成内容的标识要求以及目标客户的相关规定。原创性Prompt库是工具最终作品的灵魂在于你的创意和编排。结合实拍、手绘、音乐等元素打造独一无二的作品。9. 总结与未来工作流展望my_ai_town这类开源电影级Prompt库的出现标志着一个趋势AI视频创作正在从“技术魔术”走向“标准化生产”。它降低了专业影视语言的使用门槛让每个人都能以导演的思维与AI协作。回顾全文我们解决了从“乱拍”到“导演”的核心问题。你学到了为什么需要专业Prompt弥合自然语言与视觉语言之间的鸿沟提升生成结果的质量和确定性。如何获取与使用Prompt库以my_ai_town为例将其作为术语词典和灵感来源进行复制、组合与修改。系统化的创作流程遵循“构思-选镜-组装-生成-后期”的五步法告别盲目尝试。实战案例与技巧通过“赛博朋克逃亡”短片案例掌握了从模板到成片的完整路径并学习了图生视频、私人库搭建等进阶方法。下一步你可以立刻实践访问GitHub下载my_ai_town项目挑选一个最简单的模板在你熟悉的AI视频工具中生成第一个“有设计感”的镜头。深度定制根据你最常创作的视频类型如产品演示、知识科普、故事短片从库中提炼出属于你自己的“黄金模板组合”。关注演进AI视频技术迭代飞快。保持对Runway、Pika、Stable Video Diffusion、Sora当它开放时等模型更新的关注并观察专业Prompt库如何适配新模型的新能力。未来的AI视频工作流可能会是创意脑图 - AI分镜脚本Prompt库辅助- AI生成关键帧/视频草稿 - 专业后期软件精修合成。在这个过程中像my_ai_town这样的Prompt库将成为连接人类创意与AI算力之间最关键的“翻译器”和“加速器”。现在打开你的AI视频工具从一个专业的电影镜头Prompt开始去执导你的第一部AI短片吧。记住工具已经就位缺的只是你的行动。建议收藏本文在实践过程中随时回溯参考。