王文瑞
关键词:Toueh Designer;非物质文化遗产;交互展示;开发;平遥推光漆
山西省拥有丰富的传统文化资源,但目前展示方式不够新颖,展示内容较受限,推广程度受地域性限制较高,影响力不足。平遥推光漆也不例外,主要依靠平遥古城的旅游资源采用实体展示与售卖一体的经营模式,宣传推广的成果不够理想。非物质文化遗产(以下简称非遗)的宣传推广和传承保护工作可以从两方面考虑:
1)非遗传播展示的常规研究。包括非遗本身承载的传统文化、技艺特色、传承发展现状、数字辅助開发、数字宣传推广内容方式的分析研究。
2)关注新技术可能带来的行业影响和发展契机,应用最具影响力的技术手段对非遗进行宣传推广,令其以最新鲜的方式再度进入大众视野,提高知名度,挖掘潜在青少年用户,让非遗能在青少年中传承下去。
本文主要探讨基于Touch Designer的非遗项目互动展示开发研究,属新媒体交互艺术范畴。
新媒体交互艺术是与传感艺术、电子艺术、网络艺术、沉浸式艺术结合发展而来的一种融合新媒体特征、富有现代化气息,积极引导观众参与影响作品顺序、情节、状态的艺术表现形式。新媒体交互艺术关注的焦点是沟通和合作,不断探索新行为模式和新媒介。其具有互动连接性、专业技术性、虚拟性的特点,在交互装置、虚拟仿真、人工智能、社交互动、商业活动等方面都有广阔的应用,现已成为大众生活中不可或缺的一部分。
在国内,大多数非遗保护工作是由高校、非盈利机构、小型团队负责开发的,而新媒体交互艺术开发涉及学科门类众多,协同需求高,准入门槛高,使得高质量的非遗交互展示项目稀缺。而TD则为我们提供一个新的解决方案,其对程序进行了封装,由数百种节点元件构成,每一个元件执行一个具体的、微小的独立动作,通过元件的链接排序最终生成美轮美奂的交互视觉效果。这为我们对非遗进行高质量新媒体交互展示项目开发提供了新的可能。
1 ToUCh Designer概述
Touch Designer(以下简称TD)由加拿大Derivative软件公司开发,是专门面向交互艺术设计开发的基于节点式的视觉化编程语言。在欧美和日本,TD在商业应用上已有较大规模发展,也有固定群体对TD进行不断地探索实验。例如位于美国芝加哥的Leviathan体验设计工作室为谷歌、三星、空中客车、迪土尼、太平洋电器等多家科技与娱乐公司进行了项目开发;蒙特利尔的Moment Factory工作室为安大略的亨利堡开发了沉浸式新媒体公共艺术项目;纽约的VoluoxLabs工作室为微软艺术长廊进行了交互展示项目开发;上海的Digital FUN工作室也利用TD制定了大众CC上海船舶馆发布会和Audi A8L三亚发布会,打造出了令人惊叹的沉浸式交互演出。TD在互动装置、演出视觉装置投影、建筑外观投影、展会视觉设计、机械控制、VR体验、概念原型设计等多种实际工作中大放异彩。
一般情况下,用户交互信息采集、界面设计、交互控制、项目输出都依靠TD自身来进行制作,而动画影像资源的制作则可以依靠TD制作、外部资源导入、外部资源协作三种方式。TD包含COMP(合成与控件)、CHOP(信号输入与处理)、TOP(二维图像图片输入与处理)、SOP(三维图形制作与渲染)、DAT(备注文档、存储数据、执行命令)、MAT(三维图形材质与贴图)六大种类元件,包含输入型元件、运算性元件和输出型元件。设计师可以通过各种元件的叠加,通道引用、转换与代码控制来制作二维、三维动画及特效动画,生成炫目的动态效果。外部制作的视频影像可通过movie file in TOP元件导入DT进行进一步加工处理,外部制作的三维文件可通过file in SOP元件导入DT加工处理,贴图文件可通过PBR MAT导入,支持表面贴图、高光贴图、粗糙度贴图、环境贴图、自发光贴图、法线贴图等,从而实现高精度的材质贴图效果。对于三维模型与贴图的制作采用Maya、3Dsmax、UVlayout、Substance Painter、PhotoShop等制作完成后导入TD效率更高。特效动画也可以采用将houdini等软件制作的动画效果导入TD使用的方式。
此外,TD还支持Substances Designer、Notch、Ableton link等软体,支持OSC、TCP/IP、UDP、UDT等网络协议,支持Web浏览器和工具,支持OpenGL等图形语言,支持Pixar USD等3D场景,支持物理动力学等,为项目开发者提供众多适合自己的选择。
2基于Touch Designer的非物质文化遗产交互展示项目开发方式
交互作品由用户交互信息采集,信息计算与逻辑控制,用户交互与信息输出三部分组成,每个阶段都需要相应的硬件设备支持。TD提供众多硬件接口,为交互艺术的信息采集和输出提供了极大的可能性。以平遥推光漆为例,我们分析研究其可能实现的交互展示开发方式,具体内容如下:
2.1体感识别交互展示
体感识别交互展示是现今最受欢迎的现场展示方式之一。TD提供了Kinect元件接口,Kinect是微软公司2010年开始投放市场的体感交互外部硬件设备,通过TD连接Kinect即可进行墙面交互投影展示、地面交互投影展示或沉浸式交互投影展示项目开发。例如,默认状态投影展示推光漆技艺常用图案的动画,通过Kinect采集用户动作反馈到控制程序后,投影中的推光漆图案的运动方向、运动速度便会受到用户相应动作的影响,给用户造成一种进入推光漆中的新鲜体验。
2.2手势识别交互展示
手势识别交互展示也是现今非常受观众喜爱的现场展示方式。TD提供了Leap Motion元件接口,通过TD连接LeapMotion即可进行手势交互展示项目开发。例如,可以在投影中展示推光漆首饰盒,利用Leap Motion采集用户手势,从而实现对首饰盒的操作,如移动、放大、缩小、切换,或者打开盒盖与抽屉,取出盒中虚拟的各种首饰等。再如,通过手势采集,实现用户在首饰盒上绘制图案、上漆和推光的虚拟体验等。