戈蘭 萊文創造回望着你的藝術

大家好！我的名字是戈蘭 萊文。 我是一個藝術家和工程師。 越來越普遍的一種誇領域的結合。 不過我仍然常陷入這奇怪的夾縫中， 人們似乎不理解我在做甚麼。 我就到處搜索，發現了這幅美妙的圖片。 這是在1967年來自“藝術論壇”雜誌的一封信 上面說“我們永遠不能想像做一份關於電子或電腦藝術的特別刊物。” 這對他們來說至今仍然是無法想像。 如果而在座的各位都自認為是數字精英，比他們懂的多， 我有一天登陸了蘋果的iPhone軟體商店。 哪裡有藝術方面的軟體？我找到生產力相關的軟體，也找到了運動類軟體。 不知何故，為iPhone製作藝術類軟體的想法， 我和我的朋友們現在正在進行的， 並沒有在我們對電腦 用途的理解中反映出來。

從兩方面來講，我都覺得缺少了一些理解 如果藝術家能夠使用他或她所處的時代的材料 進行創作意味著甚麼。 我覺得藝術家有責任要充分地 探索我們所擁有的新工具地表達潛力。 以我自己為例，我是一名藝術家， 我非常熱衷於 擴展人類行為的語匯並 通過交互來鼓動人們這樣做。 我希望人們可以將自己看待成表演者， 通過交互性的體驗，成為富有創意的表演者。

我的很多工作也是希望避免這種情況。 這是一幅拍攝了我一個學生的桌面的照片。 當我講到桌面，我並不僅僅 是指實際上被他的滑鼠磨損的桌面。 如果你仔細地觀察，你甚至會隱約發現 在左上角蘋果系統菜單的跡象。 在那裡虛擬世界真正的 穿越到了現實世界中。 所以就像喬伊芒福德曾經說的， ”滑鼠可能是最細小的吸管 你能使用它來吸取所有人類的表達。“

笑聲

我真正像嘗試要做的就是能夠讓人們擁有 更豐富多樣的交互體驗。 如何使用我們全身而不是鼠標作為 一種探索審美體驗的方式。 並不一定是實用主義的。 我編寫軟體，這是我創作的方式。 我許多的試驗 都從某方面再現了鏡子的概念。 因為在某種意義上，鏡子是人們最初 能觀察到他們自己的動作，發現自己 作為一個表演者的潛能的方式。 通過提問“誰是鏡子里的那個人？喔，這原來就是我。”

所以就拿去年的一個項目 來做一個例子。 它被稱作縫隙碎片處理器。 它能讓人們探索自己在做他們的日常動作 的時候所創造的負形狀。 當人們用他們的雙手或者頭部， 或者互相一起創造形狀的時候。 這些形狀會產生聲音並憑空出現然後墜落。 這基本上是將未被看見的空間， 或是未被察覺的空間，轉變成一種真實的物體, 人們可以欣賞並對其發揮創造力。 所以再一次，人們這樣發現他們的創造性動作。 並且他們自身的人格也因此 以非常特別的方式顯現。

除了使用全身來輸入之外， 我利用了一段時間探索了一些別的東西， 就是對聲音的利用。 有聲化是對我們來說非常具有表達力的系統。 歌唱是我們所使用來互相聽見 並理解的最古老的方法之一。 我發現這個由格式塔心理學之父沃爾夫岡 科勒 在1927年所進行的奇妙的研究。 他發送如下2個圖形給 像你們一樣的觀眾。 他說其中一個叫做Maluma。 还有一个叫做Teketa,哪個是哪個呢？ 有誰想嘗試着猜一下嗎？ Maluma是上邊的這個，對是這樣。 就像他說的，大部份人都能毫不猶豫地給出答案。

從中我們真正觀察到的是一個現象 稱作音義聯覺， 就好像你們大家都擁有的聯覺一樣。 奧利佛薩科斯博士曾提到 可能每一百萬人中只有一個人 真正地擁有聯覺， 他們可以聽見顏色或者品嘗到形狀之類。 音義聯覺是我們所有人都能在某種程度上體驗的東西。 這在不同的感知領域之間的映射， 比如硬度，鋒利感，明度以及黑暗， 以及我們能發出的音素。

70年來，通過一些研究 認知心理學加已經弄清楚了 這個現象。 L，M，B更多地於這種形狀聯繫在一起， P，T和K可能更多地和這種形狀相關連。 突然間我們就開始有了一在不同地曲率之間映射 可以量化地來研究開發， 一個在語音和曲率之間的相對的映射。

我突然想到，如果我们把这个过程回放会是怎么样的？ 由此这个称作Remark的項目就誕生了。 我們與扎迦利還有 電子藝術未來實驗室一起合作。 這個交互裝置呈現了一個 語音會產生可見的陰影的幻象。 這個理念是你走進一種魔幻的光線中， 當你這樣做的時候，你會看見自己說出的言語的影子。 它們從你頭部飛出。 如果電腦的語音識別系統可以聽懂 你在說甚麼，它就會講你所說的拼寫出來。 如果電腦聽不懂，它就會按照音義聯覺的原理產生一個 與你發出的聲音相匹配的形狀。 請播放一段關於這個項目的影片。

（掌聲）

謝謝。在這一個作品中， 我和非常厲害的抽象聲樂家，雅普 布朗克。 他是一個世界級的表演“Ursonate”的專家， 一首由柯特 舒維特在1920年所創作的 長達半小時的無意義詩歌。 它是一段長達半小時的高度模式化的無意義的語音。 一般人幾乎是不可能表演出來的。 不過雅普是少數能表演它的世界級專家之一。 在這個項目中我們開發了一種 智能實時字幕。 這裡是我們的現場字幕， 它們是由一台瞭解“Ursonate”的文字的電腦所生成的。 幸好雅普也很瞭解這些文字。 電腦在雅普發出聲音的同時呈現字幕。 所有你將看到的字幕 都是由電腦實時生成的， 將他的語音可視化。 這裡你能看見在他身後佈置着一個有字幕的螢幕。 好了。 （掌聲） 如果你有興趣的話可以在網路上找到整部的影片。

在現場表演的時候我碰到兩種截然不同的反映。 因為有些人理解實時字幕 這個概念是有些自相矛盾的。 因為通常字幕都是有人在影片完成後來製作字幕。 還有一群人感覺：“這有甚麼大不了的？” 我每天都在電視上看到字幕。“ 他們想像不到有人在幕後編寫所有的字幕的情景。

除了全身和語音之外， 還有一件最近我非常有興趣的事情 就是對眼睛的使用， 或者說注視，從人們互相之間如何聯繫來看。 許多深刻的信息是用眼睛 而不是語言來傳達的。 這也是技術上最有意思的挑戰之一， 它是當下計算機科學領域非常熱門的問題。 能夠有一台攝像機， 可以在比較遠的距離就理解這些 小小的眼睛在往哪裡看， 來揭露你對甚麼感興趣， 你的注意力集中在哪裡？ 在眼睛這個部位進行着許多情感上的交流。

所以我啓動了一些不同的項目， 來瞭解人們如何通過眼睛與機器產生聯繫。 大概地問這樣一些問題， 如果一件藝術作品知道我們在看着它？ 它會作何反映，在某種程度上， 來知曉或者是顛覆我們在觀賞它的事實? 如果它也看着我們會是怎樣？ 這些是下面這個項目里所發生的事情，

第一個我要展示給你們看的作品，被稱作眼睛編碼， 它是一個交互軟體 如果我們讀一下這個圈小字， 先前一個觀眾觀察時留下的痕跡看着 先前一個觀眾觀察時留下的痕跡 這個概念就是一個 完全由被不同的觀眾觀察的過程 所組成的圖像。 讓我切換過來，做一個現場演示。 來試試看行不行。

哦，嗯，這里有很多影像。 這只是一個用來顯示它正常工作的測試屏幕。 我會把這個窗口隱藏掉， 這樣你們就可以看見每當我眨眼的時候 它就紀錄我的眼睛的圖像。 哈嘍？ 我可以...哈嘍...好了。 不管我在甚麼位置，實際發生的是 這個眼睛追蹤系統都在嘗試定位我的眼睛。 如果距離的比較遠我的眼睛就會變得模糊。 屏幕上就會出現這些模糊的小點。 它們只是以非常抽象的方式再現了我的眼睛。 如果我靠的非常近並且盯這筆記型電腦上的 攝像機看，你們就會看到清晰的眼睛。

你們可以把這看成是在用眼睛打字一樣。 你所輸入的是當你在看別人的眼睛的時候 對你眼睛的紀錄。 所以每個人都在看着 之前的人。 這系統被應用在 更大的裝置里，有數千雙眼睛 供人觀看， 你看着那個看著之前 看著之前的人的人。 我再加上幾雙眼睛，眨眼，眨眼。 還有你能觀察到它又一次尋找到我的眼睛 並且盡可能估計我甚麼時候眨眼。 好了，就這樣吧。 這就是一種循環觀察系統。 （掌聲） 謝謝

最後幾個我相展示的是 是在新的機器人領域，對我來說比較新。 叫做光電隔離體。 我先放一個影片來展示早先的版本。 大約一分鐘左右，好。 在這個項目中，這個光電隔離器 在對眨眼的觀看者眨眼。 在你眨眼後的一秒種它也眨眼。 這是設備的用意是 用最簡單的材料來表現注視的現象。 僅僅是一隻眼睛 看着你，去掉了其他任何臉部的東西。 只是單獨來思考注視 就好像是，一種元素。 於此同時，它嘗試參與到我們所熟悉的 社會心理注視行為中。 如果你盯着它看太久它就看別的地方 因為它會害羞 或諸如此類。

好了，最後一個要給你們看的項目 是這個叫做長鼻子。 （笑聲） 它是一個八尺高的長鼻子， 加上一個曲棍球做眼睛。 （笑聲） 在它裡面有一台我借來的800磅重的 機械臂， （笑聲） 從一個朋友那裡。 （笑聲） 有好的朋友確是會幫到很多。 我在卡耐基梅隆大學。我們有非常棒的機器人研究所。 我想展示給你們這個叫長鼻子的東西 這個項目背後的概念是做一個 好像是一直很驚訝地看着你地機器人。 （笑聲） 這個概念基本上來說 如果他一直表現出“啊？...嗯？“ 這就是為甚麼它的綽號是反覆打量，打量兩次。 它好像總是在反覆地打量着：”甚麼啊？“ 這概念大概就是它會看着你 然後讓你覺得好像， ”怎麼了？是我的鞋子有問題嗎？“ “還是頭髮上黏了甚麼東西？”開始了，好。

看看他... 電腦迷們，這就是幕後的樣子。 它有一套電腦視覺系統， 它盡可能地盯着活動幅度最大的人。 這些是它的目標。 上邊是一個骨架系統， 就是它實際所要做的。 這件作品嘗試為一種新的生物創造一種新穎的肢體語言。 當然好萊塢經常做這種事情。 但同時也能使用這肢體語言與看着它的人 來交流一些事情。 這語言所表達的是它看到你很驚訝， 同時也很有興趣來觀察你。

笑聲

掌聲

非常感謝，以上就是我今天所有要講的內容。 我很高興能在這裡演講，謝謝大家！

掌聲