聲音驅動視覺
Audio Analysis → POP
音像藝術創作 W10 · 2026.11.09 · 週一 n5-6 節 · 南大 C308
秉聖老師 · 音像藝術創作 115-1
0 / 7
edu.pingshengwu.com/ava-w10
練習 8 回顧：三個講評面向
光源的方向性
一盞方向明確的光，比三盞平均打亮更能交代形體。
兩種 MAT 的取捨理由
說明要指出材質改變了什麼，不是哪一個比較漂亮。
背景
預設灰的意思是還沒決定。背景與主體之間的明度關係決定整張畫面的可看性。
課堂挑選數件現場開啟，一併檢視相機位置與光源數量。
1 / 7
本週目標：聲音與影像的相互建構
前九週處理的是工具。自本週起處理的是音像關係：聲音與影像如何相互建構。此即期末評分第一軸「聲影連動性」。
分析
Audio File In CHOP 或 Audio Device In CHOP → Audio Analysis CHOP：low／mid／high 頻段、envelope、kick 與 snare 偵測。
橋接
CHOP to POP 或 Lookup Channel POP：將音訊數值寫入點屬性。
映射設計
接到哪個屬性、如何縮放，屬創作決定，非技術步驟。
2 / 7
內容大綱：從聲音到點的路徑
訊號鏈
- Audio File In CHOP，收現場音源則用 Audio Device In CHOP
- Audio Analysis CHOP：拆頻段與 envelope
- Math CHOP 與 Lag CHOP：縮放與平滑；原始訊號直接使用會抖動
- CHOP to POP 或 Lookup Channel POP：寫入點屬性
接到哪裡
- 低頻 → 尺度或力場強度，偏身體感
- 高頻 → 顏色或抖動，偏神經感
- envelope → 出生率或 feedback 量
以上為起點配置。有效的映射須經得起 30 秒以上的觀察，而非表層同步。
3 / 7
映射的三種類型：同步之外
直接映射
音量對應尺寸。關係清楚，但約 10 秒內即被觀眾解讀完畢。
延遲與記憶
Lag、feedback、累積量：視覺保留對聲音的殘留狀態，關係因此具有厚度。
反向與斷裂
聲音密集時畫面留空，或刻意不同步。juxtaposition（併置）同樣是一種連動關係。
課堂討論題：今日三件賞析各屬哪一種類型？期末作品預計採用哪一種？
4 / 7
本週三件：聲影一體的三種答案
Alva Noto · Unitxt（2008）
raster-noton 的 uni- 系列。聲音素材直接取自資料本身（檔案格式、數學運算），現場影像與聲音出自同一份訊號。
觀察重點：一對一映射做到極致所產生的張力。
Mark Fell · Multistability 1-4（2010）
節奏的斷裂與不穩定；反 groove 的美學。
觀察重點：不同步如何比同步更具張力。
5 / 7
練習 9：audio-reactive 粒子
目標：粒子系統對音樂產生反應，且反應方式不限於同步跳動。
| 要求 | 細節 |
|---|---|
| 分析 | Audio Analysis CHOP 至少取兩個頻段，加 envelope |
| 映射 | 至少三條映射，其中一條須具記憶特性（lag、feedback 或累積） |
| 平滑 | 所有映射經 Math CHOP 與 Lag CHOP 調整範圍與平滑；輸出抖動即代表未調 |
| 繳交 | 節點截圖上傳 eeclass；60 秒錄影（含聲音）放個人 Google Drive 資料夾並附可存取連結。另以一句話說明最滿意的一條映射 |
6 / 7
下週：身體進入輸入端
W11 內容
WebCam 與 MediaPipe、Kinect 與 LiDAR、MIDI、OSC：以外部世界的資料驅動 POP。練習主題為攝影機互動點雲。
課前準備
- 繳交練習 9
- 觀看 W11 三件賞析（Rokeby、Levin、Iwai），互動藝術的三個原點
骨架版：開課前補完示範細節與截圖
7 / 7
← → · SPACE · CLICK