| .forgejo/workflows | ||
| assets | ||
| demo | ||
| docs | ||
| CONTRIBUTING.md | ||
| README.md | ||
| submissions.json | ||
| SUBMISSIONS.md | ||
神话在哪里|Where Myth Lives
AIGC 驱动的 MR 文化内容生产与全球化适配工作流
参赛赛道:文化出海场景赛道 / AI内容
- 项目简介
“神话在哪里”是以中国地域神话与本土文化为内容核心,通过 MR 混合现实技术打造沉浸式交互观影体验的原创文化 IP。
项目目前已在北京今日美术馆、宁夏沙坡头黄河景区、贺兰山岩画馆、清远北江中心等不同类型场景完成实际落地。
本次 Wave 3 的核心目标,是在已有 MR 内容生产体系基础上引入 AIGC,建立从:
地域文化资料 → AI内容理解 → 剧情编创 → 分镜与视觉设计 → 3D / 视频 / 音频资产 → MR内容整合 → 多语言及跨文化适配 → 最终沉浸式体验的完整 AI 协同内容生产工作流。
我们希望解决传统 MR 内容生产周期长、创意迭代成本高、本地化适配复杂以及难以规模化复制的问题。
- Wave 3 核心验证
相比 Wave 1 的整体方案设计,本阶段重点通过真实 MR 项目验证以下四项能力:
-
打通 AI 辅助 MR 内容生产流程 将大语言模型、AI视觉生成、AI视频、AI 3D 和 AI 音频等工具应用到同一个项目中,从文化资料和剧情创作开始,一直延伸到最终 MR 内容制作,验证不同 AI 工具之间如何形成连续的生产流程。
-
验证 AI 内容能否实际进入 MR 产品 AI生成的图片、3D模型、视频、音频和文字并不直接作为最终成品,而是经过人工筛选、修改和技术处理后进入正式 MR 项目,验证 AIGC 在真实生产中的可用性。
-
人工定核心,AI提效率 AI负责资料整理、方案生成、创意探索和重复性执行,人负责文化准确性、创意方向、艺术品质、空间体验以及最终质量审核。
-
验证文化内容的海外本地化流程 在中文内容基础上,通过 AI 辅助完成翻译、文化背景适配、叙事调整、配音和字幕制作,再经过人工审核,形成面向不同语言和文化市场的内容版本。
-
AI 内容生产流程
下图展示了本项目从地域文化输入、AI 内容理解、剧情与分镜设计、数字资产生产、MR 内容整合到全球化适配的完整 AIGC → MR 生产链路。
注:流程图中的 Codex 表示团队已验证的可复用 MR 技术开发能力;本阶段 Codex 的实际验证案例来自长岛 MR 项目,并非《凤城纪》的原始开发过程。
3.1地域文化输入
输入地方神话、历史资料、文博资料、场地信息以及已有文化资产。
3.2|AI 内容理解
AI辅助完成:
- 文化资料整理
- 人物关系梳理
- 故事时间线整理
- 文化关键词提取
- 核心情节节点提取
- 可视化元素提取
3.3剧情与 MR 脚本
生成并迭代:
- 故事结构
- MR体验剧情
- 人物设定
- 旁白与对白
- 场景节点
- 用户交互与剧情触发节点
3.4角色、场景与分镜设计 AI辅助生成: • 角色外观与造型方案 • 场景环境概念图 • 剧情分镜和镜头画面 • 关键视觉画面 • 色彩、氛围和美术风格参考 • 多种视觉方案用于快速比较和迭代
3.5数字资产生产
AI辅助生产:
- 3D场景 / 角色 / 道具
- 动态视频内容
- 特效素材
- 音乐与环境声音
3.6MR 内容整合
生成内容经过人工审核、资产优化和技术适配后进入 MR 项目,在真实空间中形成沉浸式交互体验。
3,7全球化适配
中文母版内容可进一步通过:
翻译 → 文化适配 → 叙事调整 → 配音 → 字幕 → 人工审核
形成面向不同语言及文化市场的 MR 内容版本。本阶段将结合实际样例验证该本地化流程的可行性。
- Wave 3 验证案例:《神话在哪里·凤城纪》
本阶段以已经实际落地的清远《凤城纪》为核心案例。
项目基于清远当地流传的凤凰传说:
古时清远连日暴雨,渔民张跛在急流中救下被风雨逼至绝境的凤凰。大凤凰闻讯赶来庇护灾民,最终力竭而陨。当地百姓为纪念凤凰留下凤里、凤凰台等文化记忆。
我们将传统线性故事重新组织为空间叙事。
观众佩戴 MR 设备进入真实空间后,随着剧情推进,现实环境逐渐与数字神话世界融合,人物、凤凰和环境事件直接出现在观众所处空间中。
项目希望实现: 让观众从“聆听地方神话”,转变为“亲历神话现场”。
本轮将以《凤城纪》的既有内容与数字资产为基础,重点展示 AIGC 在剧情整理、视觉方案、数字资产生成、技术开发及海外本地化等环节中的实际应用。
- AIGC 内容生产能力与工具链
项目根据不同生产环节组合使用多种 AI 模型与工具:
-
内容策划与文本生成:利用大语言模型完成文化资料整理、故事结构设计、剧情脚本、旁白及文案辅助创作。
-
分镜与内容生产规划:利用 WorkBuddy 将剧情内容拆解为结构化分镜,辅助完成镜头时长、景别、旁白、画面描述及后续视频生成提示词。
-
视觉设计与内容探索:利用 Pixmax 及生成式图像模型完成角色造型、场景概念、关键剧情画面和视觉风格的批量生成与迭代。
-
动态内容生成:利用生成式视频模型辅助制作剧情动态画面及视频内容。
-
3D 资产生成:利用 TRIPO 3D 快速生成基础三维资产,并通过 Maya 等传统工具进一步检查、修正和优化。
-
代码开发与技术验证:利用 Codex 辅助 Unity / MR 项目的代码生成、场景分析、工程修改及运行验证。
-
声音与本地化:利用 AI 工具辅助完成音乐、环境声音、旁白、翻译及多语言内容适配。
项目不依赖单一 AI 平台,而是根据不同生产任务选择适合的模型和工具,并通过人工审核与传统制作流程,将 AI 生成结果转化为能够进入 MR 产品的内容资产。
- 已落地项目
北京今日美术馆|《神话在哪里》首展 城市文化空间 MR 沉浸式体验。
宁夏沙坡头黄河景区|《神话在哪里·幻沙》 地域文化与自然景区实景 MR 体验。
贺兰山岩画馆|《神话在哪里·岩画纪》 文博内容与 MR 沉浸体验结合。
清远北江中心|《神话在哪里·凤城纪》 基于当地凤凰传说打造的地域文化 MR 项目。
- Wave 3 交付内容与实际验证
本阶段围绕《神话在哪里·凤城纪》的 AIGC 内容生产流程,以及团队其他 MR 项目中的 AI 技术开发实践,对 AIGC → MR 的实际生产链路进行验证。
7.1 AI 辅助剧情与分镜设计
基于《清远凤凰传说》的故事内容,使用 WorkBuddy 将约 3 分钟内容拆解为 29 个镜头,并进一步生成镜头时长、景别、旁白、画面描述以及后续 Seedance 视频生成提示词。
这一步将原始文化故事转化为可以继续进入 AI 视觉和视频生产环节的结构化分镜。
7.2 AI 视觉设计与内容探索
根据分镜和剧情需求,通过 Pixmax 可视化工作流及生成式图像能力,对凤凰、人物、环境及关键剧情画面进行批量生成、筛选和多轮迭代。
部分视觉生成结果:
7.3 角色与概念设计
AI 生成结果同时用于角色造型和视觉方向探索,并作为后续 3D 资产生产的视觉参考。
角色设定示例:
7.4 AI 3D 资产生成与人工优化
项目使用 TRIPO 3D 辅助生成基础三维资产。AI 生成结果并不直接作为最终生产资产,而是继续进入 Maya 等传统 DCC 工具进行检查、修正、绑定及制作优化。
这形成了:
AI 3D 生成 → 人工检查与修正 → 模型绑定 → 动画制作 → Unity / MR 整合
的实际生产流程。
7.5 AI 辅助 MR 技术开发
除内容生产外,团队也在实际 MR 项目中验证 Codex 在技术开发环节的自主执行能力。
该部分采用团队的长岛 MR 项目作为跨项目技术验证案例。Codex 可以根据需求自动生成代码、读取和分析 Unity 场景结构、修改工程内容,并自主运行场景检查修改结果。
完整演示中的关键节点:
- 00:08 — Codex 自动生成代码
- 约 01:00 — 自动读取并分析 Unity 场景结构,给出修改建议
- 01:00 之后 — 根据需求自动读取相关场景设置并实施修改
- 约 02:00 — Codex 自主运行场景并核对修改结果,该阶段无人工操作
注:该案例来自团队当前的长岛 MR 项目,用于验证 Codex 辅助 MR 技术开发的可复用能力,并非《凤城纪》原始开发过程。
7.6 动画制作与 Unity 整合
经过生成、筛选和人工优化后的内容继续进入传统数字内容生产流程,并最终整合到实时引擎中。
7.7 MR Demo
最终内容进入 MR 应用并形成实际沉浸式体验。
7.8 本阶段形成的 AIGC → MR 实际生产链路
地域神话与文化资料
↓
WorkBuddy:剧情拆解与结构化分镜
↓
Pixmax / 生成式图像:角色、场景及镜头视觉探索
↓
TRIPO 3D:基础三维资产生成
↓
人工筛选、Maya 修正、绑定与动画制作
↓
Unity:实时内容整合
↓
MR 沉浸式体验
同时,团队通过长岛 MR 项目对 Codex 辅助 Unity / MR 技术开发进行了跨项目验证,包括代码生成、场景分析、工程修改和自主运行验证。该能力可作为后续《神话在哪里》系列项目的可复用技术开发能力。
- 本阶段核心目标 “神话在哪里”已经通过多个实际落地项目验证了:中国地域神话可以转化为具有沉浸体验价值和商业落地能力的 MR 文化产品。
本阶段重点验证 AIGC 在真实 MR 内容生产流程中的实际应用效果,包括内容策划、视觉设计、数字资产制作、技术开发及多语言适配等环节,并进一步评估其在缩短制作周期、降低定制成本和提升跨市场复制效率方面的价值。
通过 AIGC 与模块化 MR 内容生产方式结合,我们希望让同一套文化内容生产方法能够更高效地适配不同地域、语言和海外市场。
地域神话 → AI内容创作 → MR沉浸体验 → 全球传播 让地域神话从“被讲述”,走向“被亲历”






