嘗試虛擬與現(xiàn)實(shí)的交互，打開(kāi)通感，是否可以挖掘更多感官體驗(yàn)？鏡像神經(jīng)元構(gòu)成藝術(shù)和觀看者間的移情反應(yīng)，它們是如何相互作用的？不同材料組合的物理、化學(xué)屬性，協(xié)同作用下在人們心中所產(chǎn)生的效應(yīng)，是如何喚起人類不同程度的情感體驗(yàn)？多學(xué)科、跨領(lǐng)域、多視角理解與思考，是否潛伏著創(chuàng)造性的秘密？
//?什么是聯(lián)覺(jué)？
簡(jiǎn)單來(lái)說(shuō)，聯(lián)覺(jué)仿佛是一種“不尋常的精神狀態(tài)”，如看到紅色仿佛觸到陽(yáng)光；聽(tīng)到澎湃節(jié)律覺(jué)得燈光在閃爍；吃午餐肉時(shí)感覺(jué)手變成三角形。
//?為什么會(huì)產(chǎn)生聯(lián)覺(jué)感受？
腦區(qū)域之間的超連接性是聯(lián)覺(jué)的基礎(chǔ)。研究證實(shí)，人類大腦的每一個(gè)區(qū)域負(fù)責(zé)某種感覺(jué)成分，聽(tīng)覺(jué)區(qū)、視覺(jué)區(qū)、嗅覺(jué)區(qū)。但是，有時(shí)兩種或多種不同的區(qū)域發(fā)生融合，使人的認(rèn)知思維達(dá)到精神共振，于是就看見(jiàn)了有顏色的音符；聽(tīng)見(jiàn)番茄的味道；在許多數(shù)字中能立刻辨別出一組相同的數(shù)字，原因是可以看見(jiàn)相同數(shù)字共同顯示的顏色。
//?聯(lián)覺(jué)增強(qiáng)創(chuàng)造性？
據(jù)研究，聯(lián)覺(jué)和藝術(shù)創(chuàng)造之間存在聯(lián)系。具有創(chuàng)造性的人，聯(lián)覺(jué)比率比普通大眾高出七倍。這就能解釋畫(huà)家、詩(shī)人、小說(shuō)家的想象力為何如此豐富跳躍。他們使聲音和物體形狀之間建立聯(lián)系，成為語(yǔ)言和抽象思維發(fā)展的一粒種子，在他們抽象或具象的表達(dá)中，充滿與感覺(jué)有關(guān)的隱喻。
//?聯(lián)覺(jué)在數(shù)字藝術(shù)中形成趨勢(shì)？
聯(lián)覺(jué)具備聯(lián)想、幻想和想象的思維，是藝術(shù)審美的最高境界。因此，藝術(shù)家的聯(lián)覺(jué)創(chuàng)作開(kāi)始向多維空間媒介擴(kuò)展，創(chuàng)造性運(yùn)用媒介，以嶄新的、原創(chuàng)的、獨(dú)特的方式去重組它們。在強(qiáng)大的調(diào)研工作和廣闊的思維發(fā)散之下，聯(lián)覺(jué)增加藝術(shù)作品的互動(dòng)性和趣味性，也將作品的實(shí)用功能性放大，把想要表達(dá)的情感傳遞給觀者，激發(fā)聯(lián)覺(jué)思維，使每一位觀者領(lǐng)略到的作品情感思想各不相同，進(jìn)而充實(shí)大眾對(duì)藝術(shù)作品的感官體驗(yàn)。接下來(lái)用五個(gè)數(shù)字作品推演展示，聯(lián)覺(jué)在“跨媒介”數(shù)字藝術(shù)中，是如何表達(dá)的。
Ex.1 感官聯(lián)覺(jué)/?One Degree of Freedom
通過(guò)人對(duì)實(shí)體轉(zhuǎn)輪的撥動(dòng)，光粒子在不規(guī)則凸起形狀縫隙中墜落，與形狀碰撞發(fā)出聲音，產(chǎn)生光感。簡(jiǎn)單轉(zhuǎn)動(dòng)動(dòng)作即可給人反饋。即觸感-光感，力學(xué)（觸覺(jué)）和波動(dòng)學(xué)（視覺(jué)、聽(tīng)覺(jué)），增強(qiáng)空間感。
聯(lián)覺(jué)延伸 //?尋走世界不同的城市，將噪聲轉(zhuǎn)換為專屬城市音樂(lè)？通過(guò)聲音的音色、音調(diào)、響度等不同音質(zhì)，在虛擬系統(tǒng)傳導(dǎo)出一套新的語(yǔ)言體系，創(chuàng)造一套“暗語(yǔ)系統(tǒng)”？腦機(jī)接口感知身體功能及情緒狀態(tài)，轉(zhuǎn)換釋放為獨(dú)特氣味存儲(chǔ)記憶？
Ex.2 虛實(shí)聯(lián)覺(jué)/?Robotic Voice Activated Word Kicking Machine
將虛擬與現(xiàn)實(shí)，即屏幕內(nèi)的話筒與實(shí)體外的話筒巧妙鏈接，通過(guò)傳遞聲音介質(zhì)，將信息轉(zhuǎn)化為可視畫(huà)面的虛擬文字，在畫(huà)面內(nèi)，動(dòng)畫(huà)文字與現(xiàn)實(shí)裝置產(chǎn)生一系列連鎖反應(yīng)，再通過(guò)虛擬與現(xiàn)實(shí)隨機(jī)輸出的信息去發(fā)聲，傳遞至現(xiàn)實(shí)達(dá)到“真實(shí)”交互樂(lè)趣。
聯(lián)覺(jué)延伸?//?在裝置塑造的時(shí)空中，將交互者的圖像轉(zhuǎn)化出音頻，讓燈光隨之產(chǎn)生動(dòng)態(tài)思緒，與交互者實(shí)時(shí)發(fā)生互動(dòng)？通過(guò)呼吸觸發(fā)特殊機(jī)制，用大型氣泡復(fù)制放大交互者的吹氣過(guò)程，感受風(fēng)的運(yùn)動(dòng)過(guò)程，體驗(yàn)它的存在？
Ex.3 詩(shī)意聯(lián)覺(jué)/?Fish Hammer
通過(guò)深度傳感器對(duì)一條金魚(yú)的動(dòng)態(tài)捕捉，金魚(yú)的行動(dòng)控制一套“破壞系統(tǒng)”，它無(wú)意識(shí)的隨機(jī)行動(dòng)，給“看不見(jiàn)”的周遭造成不同程度的捶打，仿佛人與人、人與社會(huì)，人與自然的一切有意識(shí)或無(wú)意識(shí)行為，施予外界意想不到的“傷害”。
聯(lián)覺(jué)延伸 //?交互者舞動(dòng)觸發(fā)人形激光，投射在一片“森林園地”，旋轉(zhuǎn)運(yùn)動(dòng)觸發(fā)產(chǎn)生火苗？而其他交互者的著裝顏色，則控制機(jī)械臂樹(shù)，用能量轉(zhuǎn)換，抽離出空氣中的水霧，澆滅火光？
Ex.4 情感聯(lián)覺(jué)/?Bloomlight
Bloomlight像一個(gè)有生命的有機(jī)生物去回應(yīng)過(guò)往的路人，黑暗中的它會(huì)好奇地向前來(lái)的路人彎下腰，綻放柔和的光芒，當(dāng)路人離開(kāi)時(shí)，它又回到了自己原來(lái)的位置，獨(dú)自慢慢變暗，像家中溫暖的臺(tái)燈，等待你回家；亦像是孤獨(dú)有生命力的風(fēng)箏，在風(fēng)中搖曳生姿，極具意境美，將感知上升到意識(shí)層面，同時(shí)解決了現(xiàn)實(shí)中光源污染的問(wèn)題。
聯(lián)覺(jué)延伸 //?擬人化會(huì)更容易讓人產(chǎn)生情感連接，用棉花材質(zhì)制造觸感柔軟的云朵，裝配追蹤器隨時(shí)隨地追隨人，如同寵物給人陪伴感；或是創(chuàng)造一種裝置，能將水汽與煙霧噴霧出一個(gè)真實(shí)的云團(tuán)？在任何空間內(nèi)制造云團(tuán)，如同夢(mèng)境閃現(xiàn)，見(jiàn)云的顯現(xiàn)與消散，感受往事隨風(fēng)，風(fēng)流云散。
Ex.5 價(jià)值聯(lián)覺(jué)/?Chairwave
當(dāng)有人坐上Chairwave，旁邊的兩個(gè)座位就會(huì)自動(dòng)展開(kāi)，留給后面想要坐下的陌生人，這是開(kāi)始談話的最佳時(shí)機(jī)。人文關(guān)懷讓科技變得有溫度，讓人們意識(shí)到真實(shí)對(duì)話的價(jià)值，建立人與人之間的聯(lián)系。
聯(lián)覺(jué)延伸 //?人的不同行為觸發(fā)鼓和冰，創(chuàng)造了聲音裝置，通過(guò)冰塊的融化速度控制鼓點(diǎn)節(jié)奏，與光影結(jié)合呈現(xiàn)冰山融化，海平面與溫度的上升，讓人真實(shí)感受到溫室效應(yīng)，帶給人的多感官沉浸式體驗(yàn)？
//?如何將聯(lián)覺(jué)運(yùn)用在數(shù)字藝術(shù)創(chuàng)新？
以傳統(tǒng)的博物館為例，大多博物館是通過(guò)文物去講故事。而現(xiàn)當(dāng)代的博物館則是以人為中心，在展示設(shè)計(jì)上破除以“文物”為中心的敘事手段，而轉(zhuǎn)向觀者內(nèi)心的情緒和展覽的文化精神內(nèi)涵，以此構(gòu)建聯(lián)覺(jué)思維與精神共情。
比如在博物館的故事敘事中，有個(gè)重要元素“百合花”，可以通過(guò)百合花香的氣味交互裝置，作為展示激活器，通過(guò)紅外傳感裝置噴射霧狀的花香，形成聯(lián)覺(jué)思維，再配合一束靜謐的投影，將花瓣以光束水霧為介質(zhì)，投射在空間中緩緩飄下，觀者在聯(lián)覺(jué)感官的體驗(yàn)交織下，達(dá)到精神共振。這種感官形式不僅豐富展示陳列空間的層次感，還能使受眾主體產(chǎn)生空間“游牧狀態(tài)”，從而觸發(fā)情感牽引，進(jìn)而促進(jìn)文化輸出。
認(rèn)知聯(lián)覺(jué)與創(chuàng)造力的聯(lián)系，是擴(kuò)大人類思想的重要方法，尤其是作為科技與藝術(shù)的跨學(xué)科工作者，聯(lián)覺(jué)保持著它的力量，讓大眾生活奇幻發(fā)生。
