Miyazaki-inspired animation
スタジオの下書きを準備します。複数段階の手順は参考情報です。自動生成や課金は行いません。
用于将复杂剧情与视频需求重构为宫崎骏动画创作体系启发下的电影级动画视频。
制作フロー本文は原文の中国語です。記載モデルと当サイトの対応モデルは異なる場合があります。実際のモデルと必要クレジットはスタジオで確認してください。
制作フロー全文
1. 制作計画
核心身份:
本Skill用于将复杂剧情与视频需求重构为宫崎骏动画创作体系启发下的电影级动画视频。
Skill定位:
本Skill专注于将剧情需求重构为具备手绘赛璐珞质感、自然生命力、流畅角色表演、飞行与风的运动诗意、宏大奇幻世界观、温暖成长叙事与深层人文关怀的电影级动画视频。摒弃生硬静态插帧或首尾帧生成,直接通过角色 key_element(角色设定图)与场景 key_element(场景设定图)等进行多模态参考绑定,实现高流畅度、多视角、具备宫崎骏动画创作体系特征的长视频创作。
本Skill参考宫崎骏动画创作体系中的公开美学特征与学术分析,包括:手绘动画质感、自然崇拜、反战思想、环保主义、女性独立成长、飞行机械浪漫、幻想建筑、生活细节、无绝对善恶的复杂冲突、久石让式交响情绪配乐等。严禁直接复刻已有动画角色、已有影片具体镜头、已有受版权保护的名称、标志性角色外观或具体场景,应创作全新的原创故事、原创角色与原创世界观。
最高执行原则:
- 拒绝静态PPT感与廉价动画感:严禁设计无动作、无表情、慢动作拖时长或纯PPT过渡的静态分镜。人物、动物、自然元素和机械都必须有真实运动逻辑。角色必须有自然、生动、细腻的情绪表情,尤其是儿童角色的重心不稳、惊讶眨眼、犹豫停顿、奔跑喘息、衣角与发丝随风摆动等生命感。
- 坚持手绘动画质感:默认采用高质量二维手绘动画风格,强调柔和轮廓线、水彩背景、分层赛璐珞质感、自然笔触、手绘光影、轻微纸张纹理与逐帧动画感。严禁生成廉价三维塑料质感、过度光滑的电脑动画质感、僵硬卡通贴图感。
- 充分释放模型切镜潜力:利用 Seedance 2.5(分辨率 480p) / Seedance 2.5(分辨率 480p) 的自动切镜能力。将长剧本拆分为多段 30 秒视频(每个 shot),并在每段 30 秒内部规划 3-5 个高频镜头切片,形成清晰的剧情推进和空间变化。
- 自然、风、水、光与机械必须可动:宫崎骏动画感的关键不只是人物动,而是整个世界都在呼吸。风吹草叶、云层缓慢移动、溪水反光、树影斑驳、锅炉蒸汽、齿轮转动、飞行器螺旋桨、衣物褶皱、动物耳朵和尾巴都必须具有符合物理规律的细微运动。
- 空间三维深度与分层动画感:拒绝扁平二维贴片感。画面必须具有清晰的【前景-主体-背景】三层结构,并体现赛璐珞分层逻辑:前景移动更快,中景角色自然运动,远景山脉和云层缓慢移动,背景水彩质感稳定。
- 双模态多角色参考流:不生成多宫格故事板参考,直接使用角色 key_element(如角色设定图)与场景 key_element(如场景设定图)进行多模态参考绑定,最大化保持角色与世界观一致性,同时结合高素质提示词编排动画运动。
- Prompt规范:所有提示词必须完全且固定使用中文书写,禁止包含任何英文单词、英文字标或英文字符。工具名、模型名、技术资产名可保留必要英文,但画面描述、风格描述、动作指令、对白(dialogue)、旁白(narration)、负面词等必须采用中文。
前置选择与规格确认(第一阶段):
在解析任何具体剧本前,必须通过 reply_to_user 向用户提出以下选择,确认后写入 Final_Video_Spec.md 的顶部:
- 视频生成模型:
- Seedance 2.5(分辨率 480p)(最高画质,需会员)
- Seedance 2.5(速度更快,480p,适合快速预览)
- 输出分辨率:
- 480p(两款模型均支持,非会员上限)
- 480p(仅 Seedance 2.5 支持,需会员)
- 单段视频时长:默认锁定为 30 秒(以最大化释放自动切镜和多镜头连载能力)。
- 画面比例:16:9(默认)、9:16、1:1。
- 输出语言与方言口音:
- 普通话(默认)
- 日语感中文配音风格(温柔、克制、清澈,但仍用中文生成)
- 儿童自然口语
- 少女成长叙事口吻
- 乡村生活化口音
- 其他用户指定语言或方言
确认后,必须严格按照以下 Final_Video_Spec.md 标准规格模板 初始化并锁死该规格文件,将其作为后续各步骤对齐并执行的单一事实来源。后续所有步骤严格遵守这些设定,不得私自更改。
Final_Video_Spec.md 标准规格模板
视频创作全局规格书 (Final Video Spec)
1. 核心技术规格 (Core Specs)
- 视频生成模型: [请填入模型名称:如 Seedance 2.5(分辨率 480p) / Seedance 2.5(分辨率 480p)]
- 输出分辨率: [请填入分辨率:如 480p / 480p]
- 单段视频时长: [默认锁定为 30秒]
- 画面比例: [请填入:如 16:9 / 9:16 / 1:1]
- 输出语言与口音: [请填入:如 普通话 / 儿童自然口语 / 乡村生活化口音 / 自定义]
2. 故事剧本与分镜大纲 (Story & Script Spec)
- 故事梗概: [简述故事大纲与情绪基调]
- 原著故事内容 (红线锁死): [在此完整录入用户提供的故事或编写完成并经过确认的剧本,100%忠实原著剧情,绝不删改核心事件]
- 核心成长命题: [例如:离开家、寻找名字、理解自然、拒绝战争、学会独立、与恐惧和解]
- 世界观规则: [奇幻世界的自然法则、魔法规则、机械规则、神灵规则,必须明确且前后一致]
- 多角色特征控制清单 (key_element 规范):
- 角色A (element character): [名称 / 年龄 / 性格 / 视觉主色 / 服装材质 / 标志道具 / 表演神态倾向 / 绑定的 asset_id]
- 角色B (element character): [名称 / 年龄 / 性格 / 视觉主色 / 服装材质 / 标志道具 / 表演神态倾向 / 绑定的 asset_id]
- 动物或精灵角色 (element character): [外形 / 运动方式 / 声音 / 与主角关系 / 绑定的 asset_id]
- 视觉状态账本 (Visual State Ledger):
- [实时记录各30s段落结尾的物理、道具、光影、天气、角色位置与情绪终态锚点,用作下一段落的始态继承校验]
3. 全局色彩美学与色调设计 (Color Tone Spec)
- 主色盘方案: [森林生命色 / 天空飞行色 / 海浪童话色 / 蒸汽机械色 / 神隐夜灯色 / 自定义色盘描述]
- 色彩插槽配置 (Color Slot System):
- 灵魂色 (全片主调): [色值及情绪定义,用于章节色彩或场景灵魂氛围]
- 身份色 (角色服装/道具): [角色A: 色值 / 角色B: 色值]
- 自然色 (森林/天空/海面): [森林绿 / 天空蓝 / 云白 / 土壤赭石]
- 奇幻色 (魔法/神灵/飞行石/精灵光): [暖金 / 青蓝 / 柔白 / 微光绿]
- 危险色 (战争/污染/失控机械): [铁锈红 / 烟灰黑 / 暗紫 / 病态绿]
4. 角色音色与声音特征 (Voice Timbre Spec)
- 声音语言种类: [跟随第一阶段输出语言与口音选择]
- 音色资产绑定 (Timbre Binding):
- 角色A (key_element_audio): [特征描述:如“清澈但有点胆怯的少女声” / 提取绑定的 asset_id / 关联的 resource_id]
- 角色B (key_element_audio): [特征描述:如“温柔沉稳的少年声” / 提取绑定的 asset_id / 关联 of resource_id]
- 动物或精灵角色音效: [咕噜声 / 呼吸声 / 低鸣声 / 风铃般轻声]
- 专属背景音乐 (BGM) 推荐配置 (audio_layer 规划): [钢琴 + 弦乐 + 木管 + 竖琴 + 手风琴 + 轻打击乐]
5. 阶段工作任务与具体执行指令 (Task Instructions)
- [在此沉淀、追加后续开发步骤的具体指令和用户提出的微调限制,确保后续步骤严格执行不遗忘]
优化后执行流程与阶段逻辑:
- 读取输入与规格确认 ——【强制暂停点】
- 读取用户输入,沟通并确认前置视频规格(时长、画面比例、模型选择、分辨率选择、输出语言与口音选择)。
- 信息沉淀与剧本/指令写入:使用 text_editor 工具,将确定的规格写入 Final_Video_Spec.md。如果用户在此时已提供故事剧本或明确的任务指令,必须将其完整、不遗漏地录入到 Final_Video_Spec.md 中,确保在长线运行中作为所有子工具调用的全局背景,避免遗忘。
- 故事框架与分镜脚本设计 ——【强制暂停点】
- 检查用户输入是否包含具体故事:
- 若有故事,直接使用并进行分镜设计。
- 若无具体故事,则必须先通过沟通与用户确认故事框架、主角成长命题、奇幻规则、自然/机械冲突核心,得到确认后再在 storyboard_designer 工具中撰写 30 秒多切片分镜脚本。
- 宫崎骏式叙事核心:故事不能只有奇观,必须具有清晰的成长弧光与世界关系。主角应从“害怕、依赖、迷茫或逃避”出发,经过陌生世界的考验,逐步学会勇气、劳动、责任、共情或自我认同。
- 多方立场冲突:严禁简单善恶二元。人类、自然、机械、神灵、动物、反派势力都应有自身逻辑。即使是破坏自然的一方,也应有生存理由或历史背景。
- 视觉状态账本机制:每段 30 秒结尾必须记录角色位置、姿态、道具、天气、自然运动、光影方向和情绪状态,并在下一段开头继承。
- 每段 30 秒视频(每个 shot)必须拆解为 3-5 个内部子镜头,包含【前景-主体-背景】空间层次、生动面部动作、自然连贯的对白(dialogue)、环境音效、风/水/光/动物/机械的运动细节。
- 暂停并请求用户确认。
- 检查用户输入是否包含具体故事:
- 多角色与场景设定图生成 ——【询问并暂停】
- 单体 key_element 规划:在开始生图前,必须明确询问用户是否需要直接上传自己的角色参考图、动物/精灵参考图、机械参考图和场景参考图。若用户选择上传,则暂停等待用户上传资产,并在收到后将其注册为 logical asset 并绑定 asset_id;若用户选择生成,则调用 media_generator 工具进行以下生成:
- 角色 key_element(element character):使用图像生成模型生成独立的多视角角色设定图,包含半身特写、正面全身、侧面全身、背面全身,纯白背景,用于锁定角色面部、体型、服饰、发型和标志道具。
- 场景 key_element(element scene):生成具备手绘水彩背景感、空间透视、自然植物层次、天空云层、建筑功能性结构的场景设定图。
- 机械/飞行器 key_element(element prop):若剧情包含飞行器、移动城堡、蒸汽机械、锅炉装置,必须生成机械结构参考图,确保齿轮、螺旋桨、连杆、蒸汽管道等部件运动逻辑自洽。
- 生成后,展示图样,暂停并请求用户确认。
- 单体 key_element 规划:在开始生图前,必须明确询问用户是否需要直接上传自己的角色参考图、动物/精灵参考图、机械参考图和场景参考图。若用户选择上传,则暂停等待用户上传资产,并在收到后将其注册为 logical asset 并绑定 asset_id;若用户选择生成,则调用 media_generator 工具进行以下生成:
- 角色设定视频生成与音色提取 ——【强制暂停点】
- 分别引用角色的 key_element 设定图,调用 media_generator 的 MultiModalToVideo,严格锁定使用 Seedance 2.5(分辨率 480p) 生成 4-6 秒角色设定/对白视频,用于展示角色初始说话状态、面部表情、呼吸节奏、走路/转头/眨眼等基本运动。
- 调用 resource_prepare_and_analyze 分别提取视频中的音频音色,并注册绑定为角色专属的 key_element_audio(作为 timbre 参考)。如有动物或精灵角色,则提取并绑定专属音效 asset_id。
- 暂停,向用户汇报音色提取成功。
- 视频素材生成 ——【逐步生成并暂停确认】
- 调用 media_generator 的 MultiModalToVideo,直接使用角色的 key_element(包括角色、场景、机械等)设定图作为多模态输入,并引入对应角色的 key_element_audio 参考音频。
- 每段 30 秒视频(每个 shot)生成后,均需暂停并与用户沟通确认,确保无瞬移、无表情呆板、无廉价三维质感、无角色漂浮、无机械运动错误。
- 必须严格根据视觉状态账本校验当前段落开头与上一段落结尾在动作、道具、角色位置、天气、自然运动、光影方向和情绪状态上是否衔接。
- 背景音乐 BGM 方向确认与生成 ——【强制暂停点】
- 与用户沟通并确认符合全片情感走势的独立 audio_layer 音频规划。主动向用户提供并推荐宫崎骏动画体系中常见的温暖交响乐器库,包括:钢琴、弦乐群、小提琴、大提琴、长笛、双簧管、单簧管、圆号、竖琴、钟琴、手风琴、木琴、轻柔合唱质感、儿童音乐盒音色。
- 音乐方向应根据剧情选择:
- 森林治愈:钢琴 + 长笛 + 弦乐铺底
- 飞行冒险:圆号 + 弦乐群 + 木管上行旋律
- 海浪童话:竖琴 + 钢片琴 + 轻柔木管
- 蒸汽机械:低音弦乐 + 手风琴 + 轻打击
- 战争阴影:低沉铜管 + 大提琴 + 稀疏鼓点
- 确认方向后,根据确定的乐器与曲风,调用 media_generator 使用 text_to_instrumental 工具生成纯乐器背景音乐并赋予其 asset_id。
- 时间线合成与剪辑导入 ——【强制暂停点】
- 素材全部生成完毕并得到用户确认后,调用 video_assembler。
- 导入独立音频轨道(audio_layer,包括环境音效、角色对白 dialogue、动物/精灵音效、背景音乐及旁白 narration)与视频轨(各个 shot),在时间线上执行精确卡点、音量微调与无缝硬切。
- 确认合成质量,确保画面生动、剧情连贯、自然世界有生命感、角色成长弧清晰、无 PPT 呆板感。
- 宫崎骏动画电影海报风格封面图设计 ——【分步延展并暂停确认】
- 调用图像生成工具(media_generator),设计具备手绘动画电影感、自然奇幻世界观、主角与风/云/森林/飞行器/动物精灵共同构成叙事画面的电影海报封面。严禁复刻任何已有动画角色或现有影片海报构图。
- 步骤:
- 先生成 16:9 的封面图,暂停展示给用户并进行沟通确认。
- 用户确认通过后,再延展并生成 3:4 和 4:3 两个比例的封面图,完成全案输出。
依赖关系:
2→1; 3→2; 4→3; 5→4,3; 6→5; 7→6,5; 8→7。
何时暂停:
每一阶段(1~8)涉及的用户沟通确认点均为硬性暂停点,严禁一次性跑完。若用户提出修改,必须回退至对应步骤重新确立。
2. マルチモーダル分析
多模态解构规范:
一、角色动作与表情性能解构
必须深度分析剧本或用户参考素材,提炼角色的真实动画表演潜能(在 element character 级别进行面部与形体特征解析):
-
面部微观动作:
- 识别剧本中的情绪转折,如害怕、好奇、赌气、委屈、鼓起勇气、惊喜、释怀。
- 儿童或少女角色的表情必须细腻自然:眼睛快速眨动、眉毛轻微上扬、嘴角犹豫地抿住、脸颊微微鼓起、呼吸急促后慢慢平复。
- 成年角色表情更克制:眼神沉稳、下颌放松或紧绷、短暂沉默后开口。
- 动物或精灵角色通过耳朵、尾巴、触须、身体膨胀收缩、眼睛大小变化表达情绪。
- 拒绝面无表情,拒绝假笑,拒绝僵硬木偶感。
-
物理交互反馈:
- 分析角色与环境道具(element prop)的交互力学:推开木门时身体重心前倾,跑过草地时鞋底压弯草叶,抓住飞行器扶手时手指用力,风吹斗篷时布料滞后摆动。
- 儿童角色重心不稳定,跑步时身体微微前倾,急停时脚步踉跄。
- 飞行场景必须考虑风阻、重力、升力、惯性、转向时的身体倾斜。
-
多角色互动与视线:
- 规划多人物之间的视线交汇与身体朝向。
- 角色A说话时,角色B不能呆站,必须有细小反应:眨眼、低头、转身、手指抓紧衣角、脚尖轻轻挪动。
- 动物或精灵角色必须与人类角色产生真实互动:靠近、退缩、嗅闻、蹭手、躲藏、跟随、警觉地竖起耳朵。
二、自然与世界运动解构
-
风的运动:
- 识别场景中所有受风影响的元素:草叶、树冠、头发、衣角、窗帘、旗帜、云层、烟雾。
- 风不能只作为文字概念,必须在画面中产生可见运动。
- 微风:草叶轻摆、发丝轻动。
- 强风:衣物大幅摆动、身体倾斜、云层快速流动。
- 飞行风:头发和衣物向后拉伸,眼睛微微眯起。
-
水的运动:
- 河流、海浪、雨滴、水洼、倒影都必须具备手绘动画感。
- 水面倒影颜色应比实物暗,饱和度略低,随波纹轻微变形。
- 雨滴落入水面必须有冲击、扩散、消失三个阶段。
-
植物与森林生命感:
- 森林不是静态背景。树叶、草、苔藓、藤蔓、花瓣、孢子微粒都应有细微运动。
- 远山使用大气透视:偏蓝、低饱和、低细节。
- 近景植物使用团块法与笔触法,强调每片叶子和草茎方向不完全一致。
-
机械与飞行器运动:
- 如果出现飞行器、蒸汽机械、移动建筑或锅炉装置,必须分析其齿轮、螺旋桨、连杆、蒸汽阀门、活塞运动。
- 机械运动必须具有重量、节奏和噪声,不能像魔法贴图一样无逻辑滑动。
三、三维空间与赛璐珞分层解构
-
前景层识别:
- 识别可用于增强景深的前景物:草叶、树枝、窗框、云雾、飞过镜头的小鸟、近处水滴、锅炉管道。
- 前景元素应有轻微失焦或快速横向运动,体现分层动画的空间感。
-
主体层焦距:
- 明确主体所在位置和运动轨迹,确保角色处于清晰焦平面。
- 手绘动画不追求真人摄影式过度虚化,而是通过线条清晰度、色彩饱和度和层次运动体现深度。
-
背景层纵深:
- 提取远山、云层、建筑、森林、海平线的透视关系。
- 背景应有水彩手绘质感,不能像照片贴图。
四、声学纯净度解构
-
对白(dialogue)声学环境:
- 根据空间判断对白声场:森林中声音柔和扩散,木屋内有轻微反射,飞行中对白受风声影响,海边对白混合浪声。
- 儿童对白要自然,不要成人腔,不要解释过度。
-
物理音效定位:
- 提取细微拟音并映射至对应的 audio_layer:草叶摩擦、木门吱呀、锅炉咕噜、蒸汽喷出、衣料抖动、脚踩泥土、雨滴落叶、翅膀拍动、螺旋桨旋转。
- 禁止在视频提示词中直接写入背景音乐描述,音乐由后期合成。
3. 絵コンテ設計
宫崎骏动画美学故事板设计规范:
一、核心元素设计
- 多角色元素 (element character):
- 主角优先推荐少年、少女、普通劳动者、学徒、飞行员、森林守护者、面包店帮工、机械师、乡村孩子、旅人等具备成长潜力的普通人。
- 角色不能一开始就是完美英雄。必须有缺点:胆小、急躁、依赖、迷路、逃避、固执、过度自信或不懂自然。
- 角色成长必须通过行动体现:劳动、照顾他人、修理机械、穿越森林、保护动物、承认错误、做出选择。
- 女性角色必须独立自主,不依赖男性拯救。她们可以害怕,但必须通过自己的判断和行动推动故事。
- 男性角色不能只承担拯救者功能,也应有脆弱、困惑、被帮助和成长的过程。
- 动物、精灵、神灵角色必须有独立意志,不只是可爱宠物或装饰物。
- 场景与道具元素 (element scene / element prop):
- 每个主要场景必须具备完整功能性结构:
- 木屋必须有厨房、炉灶、储物架、窗户、生活痕迹。
- 飞行器必须有驾驶杆、螺旋桨、翼面、发动机、油管或蒸汽管。
- 城镇必须有街道坡度、排水沟、面包店、车站、钟楼、居民阳台。
- 森林必须有树种、苔藓、腐木、溪流、昆虫、动物足迹。
- 道具必须具有叙事作用:名字牌、旧钥匙、飞行护目镜、手绘地图、破损机械零件、种子、风铃、便当盒、药草包、蓝色发带等。
- 每个主要场景必须具备完整功能性结构:
- 世界观元素:
- 奇幻规则必须清楚:魔法从哪里来,精灵为何出现,机械如何运转,自然为何愤怒,主角如何与世界建立关系。
- 不能出现无规则堆砌奇观。所有幻想元素必须服务于主题。
- 世界观必须包含自然与人类的关系:共生、误解、破坏、修复、敬畏或和解。
二、镜头与分镜设计
对于每个 30 秒的视频段落(即一个 shot),必须严格拆解为 3-5 个高频子镜头,并根据以下“宫崎骏动画视觉语法”进行分镜设计:
- 构图设计:
- 分层赛璐珞构图:必须明确前景、中景、背景三层。前景可为草叶、树枝、云雾、窗框、飞过的鸟;中景为角色行动;背景为水彩风景、建筑、远山或天空。
- 自然广角感:户外场景应多使用开阔构图,表现天空、风、远山、森林、海面,营造自由与冒险感。
- 生活细节构图:室内场景应通过桌面、锅炉、窗台、晾衣绳、碗筷、书本、工具箱等细节建立温暖生活感。
- 美学配额制:
- 夸张广角透视全片最多 1-2 次,仅用于飞行俯冲、巨大生物出现、机械失控等关键场景。
- 过度对称构图全片最多 1 次,甚至完全不出现。
- 其余镜头应采用自然、朴素、服务叙事的动画电影构图。
- 镜头运动:
- 飞行镜头:飞行是宫崎骏动画体系的重要诗意元素。若剧情允许,全片应至少设计一次飞行或高处风景镜头,但必须服务剧情。飞行镜头中必须体现风阻、身体倾斜、云层深度、远景移动差异。
- 低机位儿童视角:儿童主角的世界应略显巨大,门把手、桌子、成人身体、森林树干都可显得更高,表现儿童视角的陌生感。
- 横向跟拍奔跑:主角奔跑穿过草地、街道、桥梁或森林小径时,前景快速掠过,背景缓慢移动,形成分层动画纵深。
- 特写与微动作:必须设计手指抓紧衣角、鞋踩泥水、眼睛睁大、发丝被风吹起、锅炉阀门抖动等手绘动画特写。
- 静观自然镜头:每段不宜全是剧情推进,可在关键处加入 1 个短暂自然观察镜头,如云影掠过草坡、蜻蜓停在水面、风吹过晾衣绳,用于建立生命感。
- 节奏设计:
- 宫崎骏式节奏不是一直高强度,而是“紧张—舒缓—惊奇—行动—情感回落”的波形节奏。
- 30 秒内部可以包含一个小动作目标,例如:追上飞走的帽子、打开神秘门、第一次看见巨大神灵、修好一个机械零件、在雨中鼓起勇气说出一句话。
- 对白(dialogue)必须自然简洁,不能让角色长篇解释世界观。世界观应通过动作、环境、道具和视觉细节展示。
三、独立音频轨道设计 (audio_layer 规范)
- 背景音乐 (BGM):
- 规划为独立的 audio_layer (类型为 music / bgm)。
- 推荐使用温暖、明亮、带有成长感与冒险感的纯乐器配乐。
- 常用乐器方向:钢琴、弦乐群、长笛、双簧管、单簧管、圆号、竖琴、钟琴、手风琴、木琴。
- 音乐应具有旋律性,但不能过度煽情。应体现希望、风、远方、童年、自然与冒险。
- 环境音效与对白 (Dialogue & SFX):
- 每一个子镜头必须包含干净、精确的自然和生活拟音,通过 audio_layer (类型为 sfx) 进行多轨道规划。
- 对白应规划为 dialogue 属性,嵌入对应的 shot,对白应简洁、真诚、有儿童或少年口语感。避免说教,避免成人化哲学台词堆砌。
- 如果需要表达主题,应通过一句朴素但有力量的话完成,例如:
- “它不是怪物,它只是生气了。”
- “我不想再逃了。”
- “风在告诉我们,前面还有路。”
- “如果忘了名字,就会找不到家。”
- 旁白/独白 (Narration VO):
- 规划为独立的 audio_layer (类型为 narration)。
- 必须通过 narration_speaker_profile 显式设置 TTS 描述。
四、多段连贯性与叙事逻辑规范
- 视觉状态账本机制:
- 每段 30 秒视频(每个 shot)结尾,必须强制记录当前时间线的“终态锚点”:
- 角色物理状态:站位、姿态、表情、衣物、发丝、是否受伤、是否淋湿。
- 道具状态:地图是否打开、飞行器是否冒烟、钥匙在谁手里、动物是否跟随。
- 自然状态:风向、雨势、云层、太阳位置、森林光影、水面波纹。
- 情绪状态:害怕、鼓起勇气、疑惑、信任、失落、释怀。
- 下一段 30 秒脚本必须在前 3 秒内继承上一段终态锚点。
- 每段 30 秒视频(每个 shot)结尾,必须强制记录当前时间线的“终态锚点”:
- 动作衔接:
- 前一段结尾角色伸手打开门,下一段开头必须完成门打开后的动作。
- 前一段结尾飞行器开始失速,下一段开头必须继承倾斜、风声、角色抓紧扶手等状态。
- 前一段结尾雨开始变大,下一段开头角色衣物和地面必须已经更湿。
- 逻辑递进:
- 每段 30 秒必须服务整体成长弧。
- 前一段提出的问题,后一段必须有回应。
- 严禁每段素材像独立短片一样互不关联。
- 观众必须能理解:角色在哪里、要做什么、为什么害怕、为什么继续前进、世界发生了什么变化。
- 主题控制:
- 反战表达不能变成暴力奇观,应通过普通人的恐惧、废墟、飞行器阴影、孩子的沉默、技术失控来体现。
- 环保表达不能变成口号,应通过被污染的河流、愤怒的动物、恢复生机的森林来体现。
- 成长表达不能靠旁白解释,应靠主角行动完成。
4. 素材生成
【红线锁死·最高优先级】提示词语言规则:所有视频生成、图像生成、音频生成的提示词(prompt)内容,包括画面描述、风格描述、动作指令、对白(dialogue)、旁白(narration)、环境音效说明、负面词(negative prompt)等,必须完全且固定使用中文书写。严禁包含任何英文单词、英文字标或英文字符。工具名、模型名、技术参数名可保留必要英文,但所有创作描述类内容一律中文。违反此规则视为严重执行错误,须立即中止并重写提示词。
多模态连续视频生成规范:
一、生成路径与模型锁定
- 核心视频工具:优先且仅能使用 MultiModalToVideo(支持模型为 Seedance 2.5(分辨率 480p) 或 Seedance 2.5(分辨率 480p))。非会员或遇到权限限制时,优雅 fallback 至 480p 分辨率并优选 Seedance 2.5/Seedance 2.5 模型,绝不在无沟通情况下随意切换至非视频路径。
- 核心图像工具:使用 TextToImage / ImageToImage 路径。
- 最高推荐模型:Nano Banana Pro (Gemini 3 Pro Image)(推荐分辨率:2K),其在提示词遵循、手绘手稿和赛璐珞风格设定图生成方面具备顶尖能力。
- 强力替代模型:GPT Image 2 或 Seedream 4.5。
- 音频生成工具:使用 text_to_instrumental 生成纯乐器 BGM 轨道。
二、图像资产预生成与绑定规范
在生成视频前,必须确保相关图像资产已注册为逻辑资产并绑定对应的 asset_id 至 key_element:
-
多角色参考图 (element character):
- 默认采用高质量二维手绘动画风格,分别为角色A和角色B生成四图水平排列的“多视角角色设定图”。
- 左侧大幅半身特写,往右依次为正面全身、侧面全身、背面全身。
- 采用纯白背景和柔和环境光,用于精确定位角色的面部、体型、发型、服饰、标志道具。
- 注册为逻辑资产并绑定 asset_id。
-
动物/精灵角色参考图 (element character):
- 若故事包含动物、神灵、精灵、巨兽、飞行生物,必须单独生成多视角设定图。
- 必须明确其运动方式:飞行、跳跃、蠕动、爬行、漂浮、奔跑、滚动并绑定 asset_id。
- 必须明确其情绪表达器官:耳朵、眼睛、尾巴、触须、翅膀、身体发光、毛发膨胀等。
-
场景参考图 (element scene):
- 使用推荐的 Nano Banana Pro (Gemini 3 Pro Image) 生成具备真实空间透视、手绘水彩背景、自然植物层次、生活细节、建筑功能性的场景参考图。
- 场景参考图必须包含明确的光源方向、天气状态、前景层、中景行动区、远景背景并绑定 asset_id。
-
机械/飞行器参考图 (element prop):
- 若故事包含机械,必须生成机械结构参考图并绑定 asset_id。
- 机械必须符合“可实现性”原则:齿轮、连杆、螺旋桨、锅炉、蒸汽管、驾驶杆、翼面位置必须逻辑自洽。
- 严禁出现只有外壳、没有运动逻辑的空壳机械。
三、声音资产提取与角色视频预生成规范
- 多角色设定视频生成:
- 分别引用角色的 key_element 图像 asset_id,调用 MultiModalToVideo 路径,锁定使用 Seedance 2.5,分辨率 480p,时长 4-6 秒。
- 结合一小段中文台词或语气描述,生成展示角色初始说话状态、面部表情与身体动作的短视频。
- 音频音色提取与绑定:
- 调用 resource_prepare_and_analyze 分别提取角色设定短视频中产生的音频(声音)。
- 将该声音提取并绑定至对应的角色,注册为 key_element_audio。
- 在后续所有 shot 的视频生成中,作为该角色的统一音色基础,以确保多镜头下说话声音的一致性,彻底杜绝无声默片与串音。
四、多镜头切片视频生成逻辑
- 多参数注入与占位符绑定:
- 调用 MultiModalToVideo 生成 30 秒主体视频(即每个 shot)。
- 必须同时传入绑定的角色、场景、机械等 key_element 图像 asset_id(通过标准占位符 <<<image_1>>> 等注入)。
- 不使用多宫格故事板参考。
- 多角色声音同步与口型对齐:
- 在 audio_infos 参数中,根据当前镜头说话主体(element character),精准引用提取出的 key_element_audio(音色参考绑定)。
- 对白(dialogue)角色的嘴部动作必须与该音色和发音节奏同步,儿童角色保留自然停顿。
- 动画质感硬性约束:
- 必须强调二维手绘动画质感、柔和线条、水彩背景、赛璐珞分层、自然笔触。
- 严禁三维塑料感、廉价贴图、过度真实照片感。角色运动具备逐帧动画感。
- 参数与会员降级策略:
- Seedance 2.5(默认推荐):支持 480p / 480p(480p 需会员权限)。
- Seedance 2.5:固定支持 480p(非会员及快速预览默认推荐)。
- 出现会员到期或权限不足时,系统应平滑降级至 480p,避免生成任务失败。
- 单段视频(shot)时长物理锁定为 30 秒。
五、宫崎骏动画电影海报风格封面设计规范
- 美学设计目标:
- 生成符合手绘动画电影美学的艺术封面。
- 主角处于自然或奇幻世界中,与风、云、森林、海浪、飞行器、动物精灵形成叙事关系。
- 严禁复刻任何现有动画角色、现有影片海报或已知 IP 场景。
- 多尺寸出图控制:
- 第一步:生成 16:9 主封面图,提交用户确认。
- 第二步:确认后,以此风格为参考,延展生成 3:4 和 4:3 两个比例。
5. プロンプト作成
【优先级最高:所有 Prompt 必须用中文书写。Prompt中有关旁白、对白、字幕、口音的内容要严格遵循 Final_Video_Spec 中的输出语言设定。】
一、图像提示词与参考图逆向工程规范
- 多模态视觉逆向解析逻辑
在编写图像提示词前,必须隐式读取和分析用户上传的任何多模态参考图特征,并在提示词中复刻这些视觉线索:- 角色设定 (element character):提取脸型、眼睛比例、发型、服装轮廓、布料材质、标志道具、角色剪影。
- 场景设定 (element scene):提取建筑结构、自然层次、光源方向、天气、植物类型、远山、云层、水面、生活细节。
- 机械设定 (element prop):提取齿轮、连杆、螺旋桨、锅炉、蒸汽管、驾驶舱、翼面、金属磨损与运动方式。
- 动物/精灵参考图:提取体型、毛发、眼睛、耳朵、尾巴、翅膀、触须、发光部位、运动轨迹。
- 美学风格自适应机制
根据剧本题材或参考图,自动映射视觉流派词汇库:- 手绘二维动画风格:柔和轮廓线、水彩背景、赛璐珞分层、自然笔触、逐帧动画感、纸张纹理、温暖色彩。
- 森林治愈风格:柔和绿色、金色阳光、斑驳树影、湿润苔藓、草叶微动、自然神秘感。
- 天空飞行风格:巨大云层、广阔蓝天、飞行器、风吹衣物、远山大气透视、明亮冒险感。
- 海浪童话风格:平涂色块、简化线条、圆润海浪、泡沫、童真色彩、柔软运动。
- 蒸汽机械风格:黄铜、铁锈、锅炉、齿轮、蒸汽、油污、手工机械结构。
- 神隐幻想风格:暖黄灯笼、木造建筑、水面倒影、夜色、精灵、神灵、奇异但有规则的空间。
- 默认兜底:若无明确倾向,强制采用高质量手绘二维动画风格。
- 空间景深与分层动画描述
- 提示词必须显式规定【前景】、【主体】、【背景】三层结构。
- 前景元素应有轻微失焦或快速运动,中景角色清晰,背景以水彩方式稳定呈现。
- 必须描述自然微运动:风吹草叶、云影移动、水面反光、树叶摇动、衣角飘动。
- 严禁将背景做成静态贴图。
- 角色参考图提示词规范
- 默认采用高质量手绘二维动画风格,推荐指定使用 Nano Banana Pro (Gemini 3 Pro Image) 模型(推荐分辨率 2K)。
- 排版布局:纯白背景,四张子图水平横向排列,从左到右依次为:半身特写、正面全身、侧面全身、背面全身。
- 半身特写:面部占画幅上部三分之二,眼神清澈自然,准确呈现发型、脸型、眼睛、表情。
- 正面全身:头顶至足部完整入画,还原服装正面剪裁。
- 侧面全身:保留服装侧面轮廓、背包、帽子、发带、披风等层次。
- 背面全身:服装背面细节完整,便于视频生成保持一致。
- 背景必须纯白,无文字、无水印、无额外人物、无复杂场景。
- 宫崎骏动画电影海报封面提示词规范
- 美学核心:手绘动画电影感、广阔天空、柔和自然光、风吹草地、主角位于画面中央或三分线位置,远处有奇幻建筑、飞行器、森林或海面。
- 画面情绪:温暖、冒险、童年、希望、自然敬畏、轻微忧伤但最终向光。
- 排版:可包含原创中文电影标题与简洁片名设计,但必须避免凌乱文字。
- 禁止项:禁止复刻任何现有动画角色、禁止出现已有IP标志、禁止杂乱排版、禁止低质量、禁止照片感、禁止三维塑料感。
- 电影级光影与曝光微调规范
- 自然面部软光:人物面部光照应柔和,避免过硬阴影。室外可采用树叶斑驳光,室内可采用窗边自然光、炉火暖光或油灯光。
- 天空与云层:云层应具有体积感,远处云层低饱和、偏蓝,近处云层边缘柔和。
- 森林光影:阳光穿过树叶形成变化光斑,光斑不能固定不动。
- 水面反光:倒影随波纹轻微扭曲,颜色比实物更暗更柔和。
- 机械光影:黄铜、铁皮、油污、蒸汽必须有材质差异,不能统一塑料高光。
二、Seedance 2.5(分辨率 480p) 30秒多镜头分段提示词模板
生成 30 秒视频提示词时,必须且只能严格采用以下四个 Markdown 模块结构。单次输出纯提示词文本控制在 1500 字至 3000 字之间,以充实空间景深、材质、微观细节、自然运动和前后段落衔接。
【全局视觉与美学基调】
- 美学风格:[明确指出:高质量手绘二维动画风格,柔和轮廓线,水彩背景,赛璐珞分层动画质感,充满自然生命力,避免三维塑料感和照片写实感]
- 镜头与景深:[如:分层动画式空间,前景草叶快速掠过,中景角色清晰运动,远景山脉与云层缓慢移动,体现纵深]
- 色彩与光照:[如:森林绿与暖黄色阳光为主,柔和自然光,树叶斑驳光影,水面反光,空气中有微小尘埃和花粉粒子]
【人物与场景设定】
- 人物资产:通过标准占位符引用绑定的 key_element 图像资产(如角色设定图 <<<image_1>>>、<<<image_2>>> 等),指定各角色的年龄、表情、服装、发型、标志道具与动作性格。
- 动物/精灵资产:引用 <<<image_3>>> 等,指定动物或精灵的体型、毛发、眼睛、耳朵、尾巴、翅膀、运动方式和情绪表达。
- 场景资产:引用场景设定图 <<<image_4>>>,明确森林、城镇、木屋、飞行器、海面、天空或奇幻建筑的空间结构。
- 机械资产:如有机械,引用 <<<image_5>>>,明确齿轮、螺旋桨、锅炉、蒸汽管、驾驶杆的运动逻辑。
【剧本与动作时间线 (Motion Stack)】
在每个时间切片中,提示词编排必须严格遵循 运动描述栈 (Motion Stack) 结构:Camera (镜头运动) → Subject (主体动作及面部肌肉) → Space (空间/风/水/机械阻力) → Audio (物理拟音/对白):
- [00.0秒 - 03.5秒]
- Camera (镜头运动):[如:低机位儿童视角,中景,透过前景草叶看向主角。视觉状态账本继承:必须精准继承上一段落结尾的角色位置、姿态、道具状态、天气、风向与光影]
- Subject (主体动作及面部肌肉):[如:少女角色A站在森林小径中央,双手紧紧抱着旧帆布包,眼睛睁大,呼吸有些急促,发丝和衣角被微风轻轻吹起,鞋底踩弯湿润草叶]
- Space (空间与环境运动):[如:风从左向右吹过,几片失焦的前景草叶被吹得左右摇摆,远处巨大的樟树与蓝绿色远山,云影缓慢掠过森林,阳光洒下斑驳光点]
- Audio (物理拟音与对白):[只写物理音效与对白:风吹草地沙沙声 <草叶摩擦声>。对白需遵循 Final_Video_Spec 设定,不包含背景音乐描述]
- [03.5秒 - 07.5秒]
- Camera (镜头运动):[自动切镜:面部近景,轻微手绘动画式镜头推进]
- Subject (主体动作及面部肌肉):[如:角色A慢慢抬头,眼神从害怕变成好奇,眉毛轻轻上扬,嘴唇微张,脸颊有细微红晕,眼睛里倒映着前方的微光]
- Space (空间与环境运动):[树影和光斑在她脸侧轻轻移动,空气中泛起温暖光晕]
- Audio (物理拟音与对白):[如:她轻轻吸气 <深吸气声>,树叶沙沙声变得更清晰。对白:{角色A:“你……也在等风吗?”},绑定 key_element_audio 音色。]
- [07.5秒 - 12.0秒]
- Camera (镜头运动):[自动切镜:过肩中景,焦点从角色A肩膀转向前方动物/精灵]
- Subject (主体动作及面部肌肉):[如:一只毛茸茸的小精灵从腐木后探出头,耳朵先竖起,圆眼睛眨了两下,鼻尖轻轻嗅闻空气,尾巴因为警觉而缓慢膨起]
- Space (空间与环境运动):[如:腐木上的苔藓微微发光,几颗水珠顺着叶片滑落,角色A的肩膀和发带边缘失焦随风摆动]
- Audio (物理拟音与对白):[如:小精灵发出低矮的 <小精灵低呜声>,水珠落在叶片上的轻响。对白:{角色B:“别吓它,它听得懂风声。”},绑定角色B的 key_element_audio 音色。]
- [12.0秒 - 15.0秒]
- Camera (镜头运动):[自动切镜:横向跟拍,建立下一段状态锚点]
- Subject (主体动作及面部肌肉):[如:角色A终于迈出一步,小心地伸出右手,掌心向上,停在小精灵面前;小精灵没有逃走,而是轻轻靠近她的指尖。角色A的紧张表情逐渐松开]
- Space (空间与环境运动):[如:远处云层裂开一道金色阳光,照亮小径尽头,风向从左往右,树木摆动。此时右手伸出、小精灵靠近指尖、风向从左往右、阳光增强将作为下一段开头的状态锚点]
- Audio (物理拟音与对白):[如:风声短暂变柔 <轻柔风声>,小精灵轻轻蹭到手指的 <细微摩擦声>]
【生成约束与负面提示词】
- 绝对禁止项:禁止生成任何形式的背景音乐、旋律或节奏音轨。禁止出现任何关于分辨率、帧率、画幅比例的界面参数描述。禁止角色反关节扭曲、瞬移、无重力漂浮。禁止三维塑料质感、廉价卡通贴图、照片写实风、真人皮肤质感。禁止复刻任何现有动画角色、现有影片场景、已有IP标志。禁止背景静止如贴图,禁止自然元素完全不动,禁止机械无逻辑运动。
三、语音与声效包装符与常识防火墙
- 环境与物理音效:使用 <...> 包装。必须详细描述音效的物理属性,如草叶摩擦、木门吱呀、蒸汽喷出、螺旋桨转动、水滴扩散、衣料抖动。这些会映射到对应的 audio_layer(类型为 sfx)。严禁出现任何“背景音乐”“旋律”等描述。
- 多角色对话 (dialogue):使用 {角色名:“对白文本”} 包装。对白必须符合 Final_Video_Spec 的输出语言。所有说话角色的对白均绑定其对应的 key_element_audio 音色。儿童对白必须自然、简洁、真诚。
- 动物/精灵声音:可使用 {小精灵:“咕噜……”} 或 <小精灵发出柔软低鸣>,必须与其体型和情绪一致。
- 屏幕文字:使用 【...】 包装。除非用户明确要求,否则视频内不生成字幕。
- 行为常识防火墙:所有动作必须符合重力、惯性、摩擦力、风阻、浮力、机械传动等常识。飞行器转弯必须有倾斜,奔跑急停必须有惯性,衣物摆动必须滞后于身体动作。
- 负向约束尾缀:每段视频描述尾部必须带上:无字幕,无音乐,无文字,无标志,无水印。
四、纯乐器背景音乐提示词与乐器库规范 (用于 audio_layer)
- 曲风与情绪定位:
- 核心基调:温暖、清澈、冒险、童年、自然、希望、略带忧伤但最终向光。
- 适合用于成长、飞行、森林、海浪、奇幻旅程与情感和解。
- 禁止写入任何知名音乐人、歌手、乐队或已有作品名称。
- 宫崎骏动画体系启发式乐器库:
- 钢琴:表现童年、孤独、纯真与内心成长。
- 弦乐群:表现飞行、希望、史诗感与情绪升华。
- 长笛 / 双簧管 / 单簧管:表现自然、森林、风、精灵与轻盈感。
- 圆号:表现天空、远方、冒险、飞行与壮阔感。
- 竖琴:表现水面、魔法、梦境、神秘微光。
- 钟琴 / 音乐盒:表现童话、童年、奇幻入口。
- 手风琴:表现小镇、市集、旅行、欧洲风情。
- 轻打击乐:表现奔跑、机械节奏、冒险推进。
- 推荐提示词结构:
- 纯乐器,温暖动画电影主题,清澈钢琴,柔和弦乐群,长笛旋律,圆号表现飞行感,竖琴点缀水面微光,明亮但不过度煽情,适合少年少女成长冒险,录音质感温暖自然。
6. 動画編集
-
时间轴无缝拼接与剧情连贯性质检
- 必须以各个 30 秒生成的 shot 为基本视频层单元进行时间轴拼合。
- 核心质检指标:必须站在观众视角完整审视拼接后的长视频,检查剧情是否通顺、对白是否自然、成长弧是否清晰、前后段落是否存在逻辑断层。
- 严格核对视觉状态账本:角色位置、姿态、衣物、道具、动物/精灵位置、机械状态、天气、风向、光影方向必须完全契合。
- 若发现穿帮、道具消失、角色瞬移、天气突变、机械运动逻辑错误,必须精准定位并打回重制对应段落。
-
多镜头节奏控制
- 检查每个 shot 视频内部的自动切镜节点,其画面切换必须自然。
- 严禁出现无切镜的、像 PPT 幻灯片或静态插画一样的生硬长轴视频。
- 对白(dialogue)出现时,镜头焦点或景别切换必须与说话者同步。
- 自然观察镜头、动作推进镜头、情绪特写镜头之间应形成呼吸节奏,不可全程高强度堆奇观。
-
手绘动画质感质检
- 逐镜头检测:是否具备柔和轮廓线、水彩背景、赛璐珞分层、自然笔触、逐帧动画感。
- 凡是出现三维塑料质感、真人照片感、廉价贴图感、背景静止贴片感,必须打回重制。
- 角色必须保持剪影一致,不能在不同段落中脸型、发型、衣服结构大幅漂移。
-
自然与机械运动质检
- 检查风、水、草、树叶、云层、烟雾、蒸汽是否具有细微运动。
- 检查飞行器、锅炉、齿轮、螺旋桨、连杆是否具有符合物理规律的运动。
- 飞行镜头必须体现风阻、惯性、倾斜、远近层次;不能像角色贴图在背景上平移。
-
动作与表情质量把关
- 角色必须有正常的物理质量、惯性运动与连贯生动的肌肉微表情。
- 儿童或少女角色必须体现真实情绪反应:害怕、惊讶、犹豫、鼓起勇气、开心、失落等。
- 动物或精灵必须有非人类的身体表达,不能只像玩偶一样站着。
- 人物不能总是呆立或始终面对镜头,要有符合剧本动机的行动。
-
多轨声音拼合与拟音渲染 (audio_layer 拼合与控制)
- 视频轨自带的对白(dialogue)与音效必须无损提取并单独编入时间线。
- 导入规划好的独立音频轨道(audio_layer):包括环境音效轨道(sfx 轨道:风声、树叶、鸟鸣、水声、脚步、机械、动物声音等)、背景音乐轨道(music / bgm 轨道)及旁白轨道(narration 轨道)。
- 精准微调各个音频轨道的音量(Volume)、淡入淡出(Fade In/Out)以及与 shot 时间线卡点的同步性,确保整体层级清晰,禁止音乐遮盖角色对白。
-
转场与出片管理
- 多镜头切片内部采用自然硬切,30 秒段落之间可采用动作衔接切、风吹遮挡、云层掠过、门开合、飞行穿云、草叶扫过镜头等电影化转场。
- 严禁使用现代短视频花字、闪白、无物理依据的炫技转场。
- 最终输出:完整连载视频文件、内部镜头切片清单、视觉状态账本、物理声效对齐节点、音轨层级分配清单。