Konverzácia s Yagiz Munganom, umelcom CODAME

Séria rozhovorov umelcov a rečníkov vystupujúcich na festivale CODAME ART + TECH [2018] od Irene Malatesta

Yagiz Mungan, interdisciplinárny umelec

Interdisciplinárny umelec Yagiz Mungan vytvára dielo, ktoré spája VR / AR, zvuk / hudbu, interakciu, výkon, virtuálne svety a hry. Zaujíma sa najmä o generatívne stratégie tvorby vizuálu a zvuku a spôsoby použitia technológie na posunutie hraníc ľudského vnímania a emočnej reakcie. Jeho práca sa často zameriava na prekontextualizáciu známych zážitkov alebo oslovenie záhadných technologických stretnutí v modernom živote.

Mungan je držiteľom titulu MSc z počítačového inžinierstva a MFA v odbore interaktívneho umenia a vystavoval svoju prácu po celom svete. Na festivale CODAME ART + TECH v roku 2018 vystaví Mungan projekt Illy, AI, ktorý komunikuje zvukom bez jazyka.

Tohtoročný festival CODAME s kódovým názvom #ARTOBOTS predstaví 4 dni inštalácií, workshopov, prednášok a ďalších, sústredených okolo rozširujúceho sa vplyvu umelej inteligencie a robotiky v modernom svete. V tejto konverzácii Mungan diskutuje o týchto témach a ďalších témach, vrátane jeho pozadia a počiatočných zvukových experimentov, ako kombinuje rôzne technologické médiá s cieľom vytvoriť nové mediálne umenie a ako nám VR môže pomôcť zažiť nemožné.

IM: Ahoj Yagiz, ďakujem za súhlas s chatom. Ste umelec, ktorý pracuje s interaktívnymi inštaláciami, interaktívnou hudbou a zmiešanou realitou. Mohli by ste začať tým, že sa trochu porozprávate o tom, kto ste a aký druh práce vykonávate?

YM: Páči sa mi vytváranie interaktívnych vecí alebo generatívnych vecí, kde počítač alebo softvér je súčasťou zážitku ako aktívny agent. V ten deň som študoval inžinierstvo a bol som inšpirovaný, aby som preskúmal, ako urobiť moje projekty kreatívnejšími. Pozrel som sa na algoritmické a generatívne prístupy k mojej práci. Podarilo sa mi dostať tam, kde nebol žiaden užívateľ, ale v softvéri bolo viac výrazu. Odtiaľ som sa dostal do hry: herný dizajn a interaktívne inštalácie.

Vždy som pracoval s hudbou a umením, ale technológia a umenie boli v skutočnosti mladými dvoma vecami; neexistovali spolu. Môj nápad kombinovať ich časom rástol. Keď som sa dostal do algoritmickej generácie, napísal som softvér, ktorý skladal hudbu a tvoril vizuály. Dostal som sa do systémov, s ktorými môžete komunikovať, vytvárať hudbu, videá, vytvárať kódy pre hry alebo inštalácie.

Zmiešaná realita alebo VR je iba ďalším médiom na vytváranie inštalácií, ak chcete. A vo VR nemáte žiadne fyzické obmedzenia na to, čo môžete vytvoriť.

Zdá sa, že by ste sa mohli opísať hlavne ako umelci, ktorí pracujú s interaktivitou, a všetky tieto rôzne médiá boli rôznymi spôsobmi, ako sa k tomu dostať.

To je jeden spôsob, ako to povedať, áno. Podľa mňa by som povedal interdisciplinárny umelec, pretože kódovanie je moje remeslo. Pre mňa sú zvuky vždy najdôležitejšou vecou: vždy sa snažím urobiť zvuk alebo hudbu. Vizuály sú vždy k dispozícii, ale vždy sa snažím urobiť z zvuku veľmi dôležitú súčasť projektu a budovať okolo neho, na rozdiel od „Poďme dať nejakú hudbu do pozadia“. Namiesto toho zvyčajne chcem hovoriť o tvorbe hudby.

To je zaujímavé, pretože to je skutočne zreteľný pohľad na to, či je hudba predmetom alebo či je hudba v pozadí. Už ste spomenuli, že kódovanie je vaše remeslo. Máte magisterský titul v odbore počítačového inžinierstva a tiež magisterský titul v elektronickom umení. Mohli by ste sa trochu porozprávať o svojom pozadí a odkiaľ ste a ako ste sa rozhodli pokračovať touto formálnou cestou vzdelávania?

Pochádzam z Turecka. Odkiaľ som v detstve, začiatkom 21. storočia, to bola kultúra, v ktorej, ak ste úspešný študent, musíte ísť študovať určité predmety. Nemal som príliš veľa možností na výber, tak som študoval inžinierstvo.

Vždy som mal pocit, že tam niečo chýba. Keď som ukončil magisterské štúdium, prešiel som od skúmania toho, čo sa dá urobiť s programovaním alebo inžinierstvom, až po uvedomenie si, že to môžem použiť na vytvorenie hudby, ktorú mám rada. Moja diplomová práca bola o algoritmickom vytváraní skladieb. Keď som s tým skončil, myslel som si, že chcem aj nejakú interakciu s používateľom.

Moji druhý Majstri sa týkali interaktívneho umenia ako média založeného na čase. Zamerala sa na inštalácie, viac umeleckých nápadov a interakciu používateľov. To bol druh mojej cesty.

Vaša kreatívna cesta vlastne dáva veľký zmysel: ste vývojárom UX, univerzitným inštruktorom, pracovali ste na hernom dizajne ... urobili ste veľa rôznych vecí, ale všetci sa podieľali na tejto zložke tvorivosti, vytváraní niečoho a interaktivite. a strojárstvo. Veľa si cestoval. Môžete komentovať pracovné miesta, ktoré ste mali, a mestá, v ktorých ste boli?

To je zaujímavá otázka, pretože som strávil toľko času na strednej škole. Pokiaľ ide o pracovné miesta, názvy, ktoré som zmenil, ale to, čo robím, sú väčšinou rovnaké. Za najzaujímavejšie považujem prácu, ktorú robím mimo svojich bežných „pracovných miest“. Ľudia, ktorých stretávam, technická a umelecká komunita v San Franciscu. Hovoriť s ľuďmi v tejto komunite je vždy viac ako zábavné, mám pocit, že musím urobiť viac. Nie konkurenčným spôsobom, ale viete, cítim sa inšpirovaný!

Bol som v mnohých mestách. Po ukončení štúdia som bol v Indiane. Bol som vo Švédsku a potom nejaký čas v Nemecku. Veľa času v Turecku. Pokiaľ ide o umeleckú komunitu, nemôžem porovnávať, napríklad, Indianu so San Franciscom, pretože je to také odlišné. Tu sa vždy stretávajú noví ľudia. Deje sa tu toľko vecí.

Najmä pokiaľ ide o vašu prácu, bol tu nejaký konkrétny projekt, ktorý vás už skoro inšpiroval?

Od siedmich rokov som sa vždy venoval hudbe. Môj hlavný nástroj je gitara. Tiež hrám syntetizátory. Myslím, že to začalo, keď som bol v triede a urobil som veľmi jednoduchý zvukový kód a chcel som ísť ďalej. Pozrel som sa do základného výskumu, je tam veľa vecí a uvedomil som si, že existuje toto pole, ktoré by som mohol študovať, výskum, ktorý by sa zlepšil.

Pokiaľ ide o prvú časť, bolo to trochu náhodné. Napríklad neustále získavate reklamy, e-maily od dodávateľov a to je všetko, pozrite sa na nového rečníka, čokoľvek. Pamätám si, dostal som e-mail s tvrdením, že nový rečník mal určitú konkrétnu frekvenčnú odozvu a myslel som si: „Ľudia to nemôžu počuť!“ Inšpiroval som sa, aby som to vyskúšal. Vytvoril som jednoduchý kód na prehrávanie tohto zvuku a samozrejme sme z prenosného počítača nič nepočuli.

Bol to iba skorý experiment. Len som sa bavil, a potom som si uvedomil, že môžem skutočne robiť hudbu týmto spôsobom. Postupom času som objavil celý rad nástrojov, ktoré ľudia použili pre kreatívne technológie. Bol to pre mňa prvý krok.

Poďme sa trochu porozprávať o práci, ktorú práve robíte. Mohli by ste sa trochu porozprávať o svojich súčasných kreatívnych projektoch, z čoho ste najviac nadšení, a tiež o tom, čo vás vedie k ich vytvoreniu? Prečo ich robíte, čo chcete komunikovať najviac zo všetkých?

Moja práca ide dvoma cestami. Niekedy vo výtvarnom umení existuje niečo, čo chcem preskúmať, alebo nejaká interakcia používateľa, na ktorú som zvedavý. Neexistuje teda žiadna skutočná správa ani význam, ale chcem len zistiť, kde som z estetickejšej pozície. Niekedy, podobne ako niečo, čo ma trápi alebo núti myslieť si, urobím o tom kus.

Práve teraz sa presúvam k ďalšej práci s hudobnými vizualizátormi a prostredníctvom hudby vytváram abstraktné krajiny. Snažím sa dostať preč od starých abstraktných tvarov a dostať sa k realistickejším vzhľadom. Je to zábavný projekt, ktorý skúma niektoré vizuálne efekty, ktoré dokážem prechádzať zvukom.

Čo je to o krajinách, na ktoré ste zvyknutí, prečo krajiny?

Povedal by som, že nie taká krajina ako v prírode, ale napríklad krajina v meste. Ako keď sedíte v kaviarni a sledujete ľudí prechádzajúcich ulicami. Môžem vytvoriť niečo také, čo by v skutočnom živote nebolo možné, s niektorými ľuďmi, ktorí sa pohybujú hore, iní sa pohybujú nadol ....

A potom na to môžem použiť snímanie pohybu. Zlomenie ma zaujíma o skutočnosť, že v skutočnosti neexistujú alebo nemôžu existovať.

Na vytvorenie svojich diel použijete Unity a WebGL. Môžete hovoriť trochu viac o médiách a nástrojoch, ktoré používate pri tvorbe svojej práce? Čo je pre vás najdôležitejšie?

Áno, to sú moje hlavné dva nástroje pre vizuály. Rád pracujem v priestore a práca vo fyzických priestoroch je zaujímavá, ale nie vždy cenovo dostupná alebo praktická. Preto rád pracujem vo virtuálnych priestoroch alebo ich kombinujem, takže o virtuálnych aspektoch sú nejaké fyzické aspekty. V týchto prípadoch používam Unity alebo WebGL.

Dôvod, prečo by som si mohol vybrať jedno alebo druhé, je, že v jednom z nich potrebujem niečo konkrétne. Hlavne som si vybral na základe distribučných prostriedkov. Ak potrebujem distribuovať prácu online ľuďom, potom pôjdem na WebGL, prehliadač, [používam knižnicu three.js, takže môžete jednoducho zdieľať odkaz a ostatní k nemu majú prístup. Pokiaľ ide o udalosti založené na udalostiach, rád používam Unity. Je veľmi zábavný a ľahko použiteľný s množstvom funkcií. Distribúcia je trochu ťažšia.

Ďalšou vecou [je potrebné zvážiť] je vernosť. Vďaka mojej zručnosti môžem získať lepšiu kvalitu v jednote, čo je niekedy dôležité. Pre zvuk je to trochu zaujímavé pre zvuk. Milujem Unity, ale jej možnosti vytvárania zvuku sú dosť obmedzené. Väčšinu času prepájam ďalšiu vec, ako je MAX / MSP, ktorá je ako nástroj na živé vystúpenie, ale to sťažuje nasadenie alebo odoslanie celého produktu.

Keď pracujem v priestore, rád využívam veľa zvukov v tomto priestore, aby sa zamiešal späť do výstavy, zachytil zvuky a spracoval ich späť. V rámci zážitkov, ktoré vytváram, niekedy rád predstavujem svoje vlastné kompozície na hranie gitary.

Aký druh emocionálneho umeleckého obsahu je podľa vášho názoru možný vďaka technológiám zmiešanej reality? Pracujete vo VR so všetkými týmito novými nástrojmi. Je zrejmé, že existuje dôvod, prečo umelci chcú používať VR na komunikáciu s niečím novým, nie?

Áno. Vo fyzickom svete existuje veľa vecí, ktoré nemôžete dosiahnuť, kvôli základným obmedzeniam, ako je priestor alebo zdroje, ako sú peniaze, atď. VR vám dáva schopnosť vytvárať veci, napríklad nemožné scenáre. Z pohľadu prvej osoby vás dostane dovnútra nemožným. Všetko sa náhle stane skutočným, napríklad: „V skutočnosti sa toho môžem dotknúť.“

Jednou z vecí, ktoré som nedávno urobil, bol VR a tanečný kúsok. S Freya Olafson sme vytvorili tieto tanečné avatary. Akonáhle ich vytvoríte dosť, cítilo sa, akoby ste sa nachádzali v lesnom poschodí tyčiaceho sa roboticky pohybujúcich sa avatarov. To vyvolalo vznešený pocit. Nemôžete sa tam dostať veľmi ľahko. Dostať sa k bodu, ktorý je nad rámec možného, ​​ale zrazu máte pocit, že „som tu skutočne, to je nemožné“.

Niektorí ľudia používajú VR na obnovenie fyzického sveta a potom sa to jednoducho stane zábavou, napríklad ako vtip. Zaujímavé je pre mňa uvedenie ľudí do týchto nemožných situácií, v ktorých sa stáva veľmi osobnou formou zážitku. Vidíte to na vlastné oči. Môže sa k vám skutočne dostať.

Foto z Motion Aftereffect od Freya Bjorg Olafson a Yagiz Mungan, 2017. Foto: Robbie Sweeny. Táto práca bola vyvinutá prostredníctvom programu uvádzania rezidencie umelcov do rezidencie CounterPulse s podporou Národnej nadácie pre umenie, Nadácie rodiny Zellerbachov a Fondu umenia Ken Hempel. Viac informácií tu.

Umelci sa zaoberajú vznešeným spôsobom rôznymi spôsobmi už veľmi dlho. Myslíte si, že technológia zmiešanej reality je obzvlášť dobrým médiom alebo priestorom na sprostredkovanie tohto pocitu?

Áno Myslím si. Je to médium pre čokoľvek, ale skutočnosť, že môžete umiestniť ľudí kamkoľvek, je veľmi silná, pretože ľudí môžete umiestniť kamkoľvek si dokážete predstaviť, a to nielen v rámci krajiny, ale aj v mindstate. Nemusí to byť skutočný priestor, na ktorý by sa mohli postaviť. Mohol by to byť priestor bez akejkoľvek pôdy, alebo to môže byť prechodný priestor. Mohli by to byť len svetlá a zvuky. Mohol by to byť žiadny priestor. To je dosť silné.

Absolútne. A čo tak trochu pozerať do budúcnosti? Existujú nové technológie, na ktoré ste nadšení, stále sú vo fáze koncepcie koncepcie, ale podľa vášho názoru ešte neboli úplne využité na vytvorenie umeleckých diel na vysokej úrovni?

Nové technológie vždy dosahujú lineárny pokrok. Stále sa zaoberáme sieťovými káblami a niekedy sú káble viac rušivé ako kus! Pokiaľ však ide o nové technológie, bolo by zaujímavé zistiť, kam ide AR. V tomto bode je to iba zoškrabovanie povrchovej úrovne, ale keď sa to skutočne stane, je ťažké povedať, čo je rozšírená realita a čo je fyzické. To bude zaujímavé a desivé.

Názory na Illy, autor: Yagiz Mungan

Poďme sa rozprávať o nadchádzajúcom festivale CODAME ART + TECH. Môžete nám povedať o práci, ktorú budete predvádzať?

Bude to verzia Illy, čo je čiastočne inteligentný systém. Je to vyvíjajúci sa projekt, ktorý sa už nejaký čas používa.

Východiskovým bodom pre Illy bolo zariadenie: Amazon Alexa alebo Google Home. Keď použijete jednu z týchto, hovoríte s plastovou vecou, ​​niečo poviete a očakávate výsledok. A keď dosiahnete tento výsledok, cítite sa spokojní a spokojní, ale keď sa v ňom hovorí: „Ach, nedostal som to,“ cítite sa frustrovaní. Keď hrá nesprávnu skladbu, budete frustrovaní.

Keď som prešiel týmto procesom so svojím prízvukom, bol som obťažovaný, že som mohol byť tak frustrovaný nad plastovou botou. Keď som o tom trochu premýšľal, prišiel som s Illy, čo je umelá inteligencia, ktorá nerozumie anglicky. Illy nerozumie žiadnemu jazyku, nerozumie hovoreniu, ale snaží sa interpretovať hlasy, výšku tónu, hlasitosť, hlavné charakteristiky zvuku a na základe toho sa snaží reagovať. Vytvára komunikáciu, kde obe strany vedia, že nebude existovať žiadne porozumenie. Je len na vás, aby ste svojmu slovu priradili akýkoľvek význam.

Takže komunikuje späť, keď s tým hovoríte, ale nie jazykom?

Presne tak. Konverzácia je skôr ako monológ, ale je len na vás, čo to hovorí. To je hlavný nápad. K dispozícii bude aj projekt VR alebo veľký displej. Na Illy sa môžete pozerať ako na vec, ktorá vydáva iba surové zvuky, alebo by to mohol byť váš najrozumnejší maznáčik, alebo s ním zaobchádzať ako s dieťaťom. Ako viete, hovoríte s dieťaťom. Vieš, že ti dieťa nerozumie. Je to všetko o tom, ako sa cítite.

Čo by ste chceli, aby ľudia vedeli o vašej práci? Alebo, čo by ste od nich chceli najviac premýšľať, keď uvidia vašu prácu na festivale?

Je to o našom vzťahu s vecami, s technológiou, s AI a o tom, ako komunikačné prostriedky menia našu perspektívu a očakávania. Napríklad, teraz hovorím niečo a vy tomu rozumiete, pretože používame rovnaké symboly, ale keby som hovoril po turecky, bol by to pre vás len hluk a vôbec by nemal byť cenný.

Alebo zvážte vzťah medzi ľuďmi, ako keď idete do kaviarne a požiadajte o kávu. Väčšinu času v našich ponáhľajúcich sa životoch očakávame: „Tento človek mi dá kávu.“ Ak sa tento človek s vami pokúsil nadviazať malú komunikáciu, vaša reakcia je: „Musím ísť, prečo strácate môj čas!“ Je to taká malá vec, ale byť si skutočne vedomý týchto interakcií v porovnaní s podvedomím, je veľmi odlišné.

Je zaujímavé premýšľať o tom, ako sa zvuk, kvalita zvuku a význam jazyka spoja veľa času. Rovnako ako vo vašom projekte: prezentujete to týmto spôsobom, ale vieme, že môžeme povedať niečo veľmi sladkým hlasom a naopak. Je pre nás veľmi ľahké mať tieto očakávania, ktoré sa potom mýlia, pretože iba uplatňujeme svoju vlastnú perspektívu.

To je kultúrny konštrukt. Rôzne jazyky majú rôzne spôsoby, ako hovoriť veci. Napríklad v niektorých jazykoch by mohlo niečo znieť „roztomilé“ v jednom jazyku, akoby som sa s vami rozprával. Všetky tieto významy sú ľudskými kultúrnymi vecami, na ktorých sa musíme dohodnúť. Potrebujete správny dekodér, aby ste to pochopili, a čo keď to nemáte?

Pripojte sa a dozviete sa viac o Yagiz Munganovi na webe CODAME:

Jeho diela nájdete na festivale CODAME ART + TECH [2018], štvordňovej konferencii s workshopmi, prednáškami a podujatiami nočného života @ Midway, San Francisco, 4. - 7. júna 2018, kódové označenie #ARTOBOTS:

Festival CODAME ART + TECH [2018] #ARTOBOTS

Irene Malatesta je spisovateľka, kreatívna stratégka a milovníčka digitálneho umenia v San Franciscu. Nájdete ju na Twitteri a Instagrame @irenekaoru.