【课程亮点】

· 跟随屡获殊荣的国际老师，学习前沿交互科技

· 学习Unreal引擎、Touch Designer等热门的软硬件互动技术

· 收获自己的实时交互影像作品

【课程介绍】

本课程主要以Unreal Engine（虚幻）和Touch Designer为主要创作手段，面向想要在实时影像、交互装置和现场表演等方面，进行创意实践的初级参加者，为他们提供系统性的指导。

整个8周的时间，你会学习到如何创建3D声音反馈、音画交互环境；通过此次课程，你还将对创意与交互的制作过程和工具、声音可视化作品有更深层次理解，并对素材制作的多种软件和数据操作的工作更熟悉。

为了创造这样的3D交互场景，课程的主要内容会基于Unreal Engine（TD）和Touch Designer(UE4)，以及一批用于内容创建的第三方软件(Zbrush, Houdini, Reality Capture、Oculus medium、Ableton)。

课程结束时，你将能够使用Unreal Engine、Touch Designer和第三方资源软件创建一个完整的实时交互影像作品，并可以通过iPhone/iPad/手机/平板电脑远程控制。

【课程大纲】

第一周

• 课程概述

• 实时交互影像的应用（投影，VR，交互安装/视频）

• 基于节点的软件和游戏引擎介绍

• Touch designer示例程序和声音反应图形的演练

• Unreal Engine介绍

• 用一个几何体和相应的材料、一个照相机和一个光照在Unreal Engine中建造初级场景

作业概述：

在Touch Designer中构建第一个基于过程实时节点的系统，创建基本的几何图形、相机和光照并将它渲染出来；在Unreal Engine中创建第一个场景。

第二周

• 作业审查

• 展示我自己的实时交互项目：TERRA

• 展示Touch Designer和Unreal中的工作流程

• 列出各种有用的软件、应用程序和市场

• 概述如何使用平板/手机设备进行OSC遥控

• 在智能手机/平板设备上下载TouchOSC并制作UI

• 在蓝图中分配多个通道到Unreal Engine内的参数

作业概述：

使用OSC在Unreal Engine与Touch Designer之间通讯。

第三周

• 作业概述

• 使用实时捕捉摄像头技术创建内容 

• 创建纹理贴图

• 在建模软件Zrush中平滑/抽取几何图形

• 内容创建：使用Oculus Medium的VR建模

• 内容创建：用Zbrush创建几何图形

• 导入素材到Unreal Engine

• 将导入的纹理使用到几何材料上

作业概述：

  通过OSC尝试控制本周创建的素材，实现夸屏幕远程操作。

第四周

• 着色剂/材质介绍

• 交互式材质演示

• 为几何图形创建你自己的材料

• 创建材料实例

• 借助促进OSC相互作用的参数设置来调整材质

作业概述：

为远程Unreal Engine控制器创建UI，它可以是智能手机或平板电脑（安卓或者苹果）

使用OSC创建交互材料，然后将材料应用到前一周创建的资源中。　

第五周

• 与麦克风演示中的声音交互

• Unreal声音反应概述

• 项目内熟悉理解节点结构和功能

• 创建第一个音频交互项目

作业概述：

在现有基础上使用OSC实现声音交互

第六周

• 创建一个粒子发射器

• 创建颗粒材质

• 中间颗粒材质演示

• 将Touch OSC连接到粒子发射器以使其交互

作业概述：

使用OSC实现交互式粒子系统或点云资源到Unreal Engine中。

第七周

• 作业审查

• 定序器基础

• 添加多个镜头

• 增加相机运动关键帧

• 从蓝图中使用OSC触发序列

• 后处理效果

作业概述：

制作自己的OSC远程可触发序列，增加分级和后处理效果

第八周

• 作业审查和故障排除

• 回顾以前几周的学习内容

• 性能优化（FPS，几何，实例）

作业概述：

创建最终的交互式场景，优化用户交互程序，并学习如何优化资源以获得更高的FPS，来保证作品的交互效果。