Back
入選團隊計畫

未來布袋戲劇場:人機互動、混合實境與操偶美學

 

關於計畫

探討如何運用新科技再現布袋戲傳統藝術,思考科技應當如何轉譯以及以何種形式表現布袋戲文化藝術。布袋戲操偶藝術與新科技人機互動具有共同點:雙手演繹千軍萬馬。偶/機是一種溝通的媒介,是人的身體延伸,「偶」作為操偶師的替身向他人演繹故事,傳情達意;「機」作為操作者身體功能的替代,或以物聯網的方式傳遞資訊,或在科技空間中的化身角色與他人互動。

本計畫構建了一個藝術學、設計學、資訊工程、媒體藝術等跨學科研究體系之科技藝術團隊,運用虛擬實境(VR)、混合實境(MR)、5G物聯網、AI、Xsens慣性動補系統、圓頂投影等技術,以展演為主的創新研究探索未來布袋戲劇場的面貌。計畫核心價值– 科技運用、文化藝術傳承;非物質文化遺產以科技的方式轉化為虛擬遺產,未來可提供於傳統表演藝術研究、技藝保存繼續活化與傳播台灣珍貴的非物質文化遺產。

總計畫主持人
陽明交通大學應用藝術研究所|許峻誠


共同計畫主持人
陽明交通大學資訊工程系|林一平
陽明交通大學應用藝術研究所|陳一平
臺灣藝術大學多媒體動畫藝術學系|李俊逸
臺南藝術大學動畫藝術與影像美學研究所|羅禾淋
清華大學藝術與設計學系|謝翠如
臺北商業大學創意科技與產品設計系|陳韻如

合作單位
西田社布袋戲基金會、交大校友總會、國立陽明交通大學浩然圖書館、財團法人碩英文教基金會、財團法人交大思源基金會、彰藝園掌中劇團、義興閣掌中劇團/ 王凱生、詹力韋實驗室、蒙捷文、國立臺灣藝術大學響藝術實驗中心、國立臺灣藝術大學跨域表演藝術研究所、東南大學/ 張景翔、迷克思互動科技/ 許仲佑

▲總計劃與四項子計畫
▲總計劃與四項子計畫
子計畫一

混合實境操偶與雲端共創布袋戲體驗

在後疫情時代探討如何採用虛擬互動科技重現布袋戲技藝與重塑布袋戲展演方式,計畫包含「重現」、「重塑」與「透視」布袋戲三部分,即:(1)重現—探討如何把實體操偶轉化為虛擬操偶,通過降低操偶學習難度,讓布袋戲在雲端傳播;(2)重塑—探討如何以多載具、跨平臺的不對稱互動方式達到布袋戲異地共創共演之可能;(3)透視—探討如何將布袋戲操偶技藝(如手勢軌跡、動態手形)從隱形轉化為顯性的視覺可見,從具象表演轉化為抽象藝術,透過國寶級資深操偶師的表演數據再現與民眾操偶實時互動,讓布袋戲具有跨時、異地、跨載具平臺的雲端共創共演之潛力。
▲不對稱性布袋戲操偶互動示意圖(來源:本計劃)
▲不對稱性布袋戲操偶互動示意圖(來源:本計劃)
子計畫二

5G物聯網與布袋戲科技劇場之應用

傳統布袋戲透過表演者藏身於戲台之後,操作戲偶進行表演,觀眾則是在一定距離觀看戲偶的演出,表演者的隱藏,使得觀眾在觀看戲偶演出時有著戲劇框中的沉浸感,也因此戲台的布袋戲,要設計戲台位置與觀眾位置,掌中戲偶有尺寸上的限制,間接也影響觀眾觀看的視角與其距離,一般傳統戲台要觀看戲偶演出劇離通常為2m-7m 之間,7m 以後之距離就不宜看到細節的演出,雖然現階段大部份的表演可以使用即時轉播與大螢幕投影,來解決部份「戲台」與「布袋戲」之間的表演距離,但是不能完全解決戲偶與操偶師細膩的演出。因此利用5G 物聯網設計布袋戲的遠端共演,成為遠距展演弊端之有效解決途徑。
▲手的延伸掌的傳承的演出紀錄
▲手的延伸掌的傳承的演出紀錄
子計畫三

沉浸式科技布袋戲跨域表演

嘗試在保有傳統布袋戲的藝術特質之下,與科技、舞蹈結合,呈現多元跨域表演,擬造一個「科技布袋戲沉浸式劇院」的場域,並突破傳統布袋戲的表現方式。透過動作捕捉設備同時呈現虛擬的傳統與金光布袋戲偶,虛擬傳統布袋戲偶由操偶師穿戴手部的光學動補設備操作並事先預錄,而虛擬金光布袋戲偶則是由舞者穿著全身慣性動補設備,與現場舞者演員和預錄好的虛擬傳統布袋戲偶同時去做現場即時的互動詮釋,在三方的對話下加入沉浸式圓頂投影技術,在虛實共演之下,讓整個影像延伸至觀者的周圍,藉此提升觀者的沉浸感,並對傳統布袋戲產生新的想像與認知。
▲本計畫展演示意圖
▲本計畫展演示意圖
子計畫四

不同掌中戲科技展演形式的觀者注意力分布與使用者沉浸體驗

探討在不同科技展演形式再現的掌中戲互動作品中,藝術參與者的視覺注意分佈和感官、認知、情緒、敘事面的美學與沉浸體驗。在整合性計畫中的角色為透過眼動研究、行爲觀察、生理參數分析等工具,提供其他子計畫觀於使用者體驗、互動介面、視覺人因、以及視覺行爲分析的支援。並從中探討操偶之科技美學以及未來可能在藝術教育之運用。
▲記憶、感官
▲記憶:眼動儀作為觀眾互動 | 感官:VR虛擬實境
▲人機、身體

▲身體:動捕科技的創新 | 人機:IoTtalk及機械手臂

國內展演成果

展覽名稱 地點 活動日期
異質共生科技藝術實驗展 陽明交大光復校區藝文中心 2023.06.01-07.05

國內展演成果

異質共生科技藝術實驗展
陽明交大光復校區藝文中心
2023.06.01-07.05

媒體露出

  • 布袋戲結合科技 首次登國際型舞蹈節
  • 西田社攜手陽明交大 古典布袋戲絕代風華再現
  • 異質共生—科技藝術實驗展 陽明交大藝文中心眩目登場
  • 陽明交大異質共生科技藝術實驗展 看見未來美學

合作單位