2026.4
周雪妃、周致远、饶冯桂
项目成果于2026在CHI 2026 Poster中成功入选并展示交流
该项目是一个以大运河历史文化为背景的具身交互装置项目。项目试图回应一个现实问题：在许多历史场景中，真实音频档案往往缺失、零散，难以直接还原过去的听觉环境。为此，项目并不依赖现成录音，转而从历史文献、地方志和文学描写中提取船行、水声、劳作、街市等感官线索，将这些文本中的场景信息整理为带有来源关联的文献语料库，并进一步生成预构建的声音片段与视觉资产。
在交互过程中，系统会从这—AIGC 资产库中选择并持续调制声景片段和水墨视觉内容，使参观者的身体动作能够参与到历史声景的组织与变化之中。相比把历史内容作静态信息进行展示，项目更关注一种可被感知、参与和调制的文化体验方式，让观众在运动、停驻与感知的过程中，与大运河的历史场景建立更具情境感的连接。项目同时将这种具身耦合方式与按钮、键盘等离散控制方式进行了对照：两种方式调用的是同一批内容素材，但前者更容易让参与者感受到连续变化、空间在场感与探索性调制，后者则更清晰地展现了离散界面控制在相同材料上的操作边界。基于试点A/B测试，项目进一步讨论了具身文化声景设计中的几个关键问题，包括具有文化可读性的动作模式、基于连续性的调制逻辑，以及如何用尽量少的提示维持系统的可理解性与探索空间
本项目成果入选 CHI EA ’26: Proceedings of the Extended Abstracts of the 2026 CHI Conference on Human Factors in Computing Systems。CHI 是人机交互领域的重要国际学术会议之一，本次论文收录于其 Extended Abstracts 论文集之中。
本项目受到 中国美术学院教育基金会青年发展基金 D&A Lab 跨学科设计 / 艺术专项研究共创资助计划 资助。
感谢相关支持单位与合作成员在项目推进过程中提供的支持。
跳转论文
系统图/效果图
系统Pipeline图