type
Post
status
Published
date
Sep 1, 2024
slug
split-screen-folklore-white-snake
summary
以《白蛇传》为锚点，研究 AIGC 如何参与分屏叙事和中国传统故事的动态影像再创作。
tags
MPhil 2025-2026
生成式 ai
设计理论
论文产出
展览产出
recommend
category
研究与出版
icon
password
网址

项目产出 / Project Outputs

  • Xiang, Q., Wang, H., Ping, C., Yu, L., & Yip, D. K.-M. (2025). Split-Screen Folklore: Human-AI Co-Creation in Reimagining The Legend of the White Snake. In Proceedings of the 18th International Symposium on Visual Information Communication and Interaction (VINCI 2025), 45:1-45:5. ACM.
      • DOI: https://doi.org/10.1145/3769534.3769565 · DBLP: https://dblp.org/rec/conf/vinci/XiangWPYY25
  • Xiang, Q., Wang, H., Ping, C., Yu, L., & Yip, D. K.-M. (2024). The split-screen artistic re-creation of The Legend of the White Snake assisted by AIGC（展出）。
      • 待补展览链接 · 待补作品视频链接

项目关键词 / Project Keywords

Split-screen Folklore keyword cloud
Split-screen Folklore keyword cloud

项目简介 / Project Overview

该项目以《白蛇传》为锚点，研究 AIGC 如何参与中国传统故事的视觉再叙事，同时重新激活分屏这一从绘画多联画、早期电影、光学合成、多屏放映、数字剪辑到网页前端媒介中不断演化的视觉手法。我们并不只是用生成式 AI 生成画面，而是借助 AIGC 的高效试错能力，探索传统故事、传统创作手法和新媒介技术之间的关系。
作品以分屏和非线性叙事组织《白蛇传》的场景、时间线、情绪和象征元素，使用 Recraft、Midjourney、Runway 等工具生成与筛选素材，并在创作者控制下完成动态影像整合。项目一方面回应了分屏题材在 AIGC 中难以稳定控制、容易出错的问题，另一方面总结了可复用的提示词、构图、筛选和叙事路径。
White Snake visual overview: 以 AIGC 辅助生成的视觉素材重新组织《白蛇》叙事，把传统故事转译为分屏动态影像作品。
White Snake visual overview: 以 AIGC 辅助生成的视觉素材重新组织《白蛇》叙事，把传统故事转译为分屏动态影像作品。

研究问题 / Research Questions

  • 在数字艺术发展语境中，分屏叙事出现了哪些形式、趋势和观看方式的变化？
  • AIGC 的效率和表现力如何被优化，使其更接近创作者对分屏艺术、传统故事和动态影像的预期？
  • 当分屏成为 AIGC 创作中难控制的题材时，创作者如何通过提示词、构图规则、素材筛选和后期剪辑重新获得叙事控制？

我的角色和洞见 / My Role & Insights

我的角色 / My Role

我参与了项目的背景研究、分屏艺术方法梳理、AIGC 叙事方法分析，以及《白蛇》数字影像作品的视觉与叙事表达整理。我的个人报告重点讨论分屏技术的发展、不同媒介中的实现方式，以及在 AIGC 时代构建“means - forms - expressions”分析模型的可能性。
在创作阶段，我参与将《白蛇传》的情节、人物关系和象征元素拆分为可生成、可并置、可剪辑的视觉单元，并和团队一起比较不同生成路径在分屏画面控制、叙事连贯性和传统美学表达上的差异。

关键洞见 / Key Insights

这个项目让我意识到，AIGC 在传统故事再创作中的价值不只是生成图像，而是提供一种重新组织叙事关系的媒介条件。分屏可以把同一故事中的情绪、角色关系和时间线并置出来，使观众不再只沿着单一路径理解故事，而是在多个视觉线索之间主动建立联系。
从方法上看，AIGC 带来的革新并不自动发生在“生成质量”层面，而发生在创作者如何把不可控输出重新纳入叙事结构。我们最终得到的是一组关于视觉分段、色彩一致性、象征线索、镜头节奏和后期整合的工作流经验。

方法与过程 / Methods & Process

研究方法 / Research Methods

  • 回顾分屏手法在多联画、早期电影电话场景、Polyvision、光学合成、数字剪辑、多屏装置和网页影像中的演变。
  • 分析 contemporary split-screen digital artworks，从视觉分段、叙事结构和色彩效果三个维度比较横向对称、纵向对称、中心分割、多屏不规则分割等形式。
  • 围绕《白蛇传》的篷船借伞、盗灵芝、水漫金山、断桥、雷峰塔等情节，提取可被分屏重组的角色、场景、情绪和象征线索。

设计与实现 / Design & Implementation

  • Phase 1 Research & Question Formulation：建立分屏艺术谱系，形成两个研究问题，并确认从视觉分段、叙事、色彩三个维度评估作品。
  • Phase 2 Exploration & Initial Creation：以《白蛇传》为主题，制作 storyboard，提取颜色、线条、形态和留白等传统美学元素，并测试多种 AIGC 生成路径。
  • Phase 3 Refinement & Integration：从“展示多个视角”转向“把分屏冲突整合进非线性叙事”，将 AI 生成的视觉、音频和叙事元素组合为完整动态影像。
  • AI-assisted creation：比较三种路径，包括直接用文本提示生成分屏图像、通过 overlay/compositing 方式组合图像、基于既有图像训练或延展生成新视觉。
Split-screen method overview: 项目比较不同生成方法与素材组织方式，并把 AIGC 输出转化为分屏叙事的可编辑视觉单元。
Split-screen method overview: 项目比较不同生成方法与素材组织方式，并把 AIGC 输出转化为分屏叙事的可编辑视觉单元。

分析与验证 / Analysis & Evaluation

  • 项目总结出分屏叙事在数字艺术中的三个变化：分割形式多样化、互动/并置叙事增强、观众从线性观看者转向主动连接多条线索的解释者。
  • 通过个人报告和小组作品比较 AIGC 对视觉分段、非线性结构、传统美学和情绪表达的支持与限制。
  • 最终作品与 VINCI 2025 论文相互支撑，形成从课程创作、媒体艺术展出到研究发表的闭环。
Generated visual materials: AIGC 生成的粉色视觉片段被进一步筛选、组合并用于动态影像叙事。
Generated visual materials: AIGC 生成的粉色视觉片段被进一步筛选、组合并用于动态影像叙事。

附录 / Appendix

待补材料 / Materials to Add

  • 媒体艺术展「衍场」的正式展览页面、时间和地点。
  • 作品视频链接或可公开片段。
  • VINCI 2025 ACM 页面或作者最终版全文链接。