Ein Gespräch mit Yagiz Mungan, CODAME Artist

Eine Reihe von Interviews mit Künstlern und Referenten, die Irene Malatesta beim CODAME ART + TECH Festival [2018] vorgestellt hat

Yagiz Mungan, interdisziplinärer Künstler

Der interdisziplinäre Künstler Yagiz Mungan schafft Arbeiten, die VR / AR, Sound / Musik, Interaktion, Performance, virtuelle Welten und Spiele miteinander verbinden. Er interessiert sich besonders für generative Strategien zur Schaffung von Bild und Ton sowie für Möglichkeiten, mithilfe von Technologie die Grenzen der menschlichen Wahrnehmung und emotionalen Reaktion zu erweitern. Seine Arbeit zielt oft darauf ab, vertraute Erfahrungen neu zu kontextualisieren oder unheimliche technologische Begegnungen im modernen Leben anzusprechen.

Mungan hat einen MSc in Computertechnik und einen MFA in interaktiver Kunst und hat seine Arbeiten auf der ganzen Welt ausgestellt. Für das CODAME ART + TECH Festival 2018 zeigt Mungan ein Projekt namens Illy, eine KI, die über Ton ohne Sprache kommuniziert.

Das diesjährige CODAME Festival mit dem Codenamen #ARTOBOTS bietet 4 Tage lang Installationen, Workshops, Vorträge und mehr, die sich auf den wachsenden Einfluss künstlicher Intelligenz und Robotik in der modernen Welt konzentrieren. In diesem Gespräch diskutiert Mungan diese und weitere Themen, einschließlich seines Hintergrunds und seiner frühen Klangexperimente, wie er verschiedene technologische Medien mischt, um neue Medienkunst zu schaffen, und wie VR uns helfen kann, das Unmögliche zu erleben.

IM: Hallo Yagiz, danke, dass du dem Chat zugestimmt hast. Du bist ein Künstler, der mit interaktiven Installationen, interaktiver Musik und gemischter Realität arbeitet. Könnten Sie zunächst ein wenig darüber sprechen, wer Sie sind und welche Art von Arbeit Sie leisten?

YM: Ich mag es, interaktive oder generative Dinge zu erstellen, bei denen der Computer oder die Software Teil der Erfahrung als aktiver Agent ist. Früher habe ich Ingenieurwissenschaften studiert und mich inspirieren lassen, meine Projekte kreativer zu gestalten. Ich habe mich mit algorithmischen und generativen Ansätzen für meine Arbeit befasst. Ich konnte dorthin gelangen, wo es keinen Benutzer gab, aber es gab mehr Ausdruck durch Software. Von dort kam ich zum Spielen: Spieledesign und interaktive Installationen.

Ich habe immer mit Musik und Kunst gearbeitet, aber Technologie und Kunst waren wirklich zwei getrennte Dinge, als ich jünger war; sie existierten nicht zusammen. Meine Idee, sie zu kombinieren, wuchs im Laufe der Zeit. Als ich zur algorithmischen Generierung kam, schrieb ich Software, die Musik komponierte und Visuals erstellte. Ich bin in Systeme eingestiegen, mit denen Sie interagieren können, um Musik, Videos, Code für ein Spiel oder Installationen zu erstellen.

Mixed Reality oder VR ist nur ein weiteres Medium, um Installationen zu erstellen, wenn Sie so wollen. Und in VR gibt es keine physischen Einschränkungen für das, was Sie erstellen können.

Es hört sich so an, als würden Sie sich hauptsächlich als Künstler beschreiben, der mit Interaktivität arbeitet, und all diese verschiedenen Medien waren unterschiedliche Wege, um dies zu erreichen.

Das ist eine Möglichkeit, es auszudrücken, ja. Für mich würde ich "interdisziplinärer" Künstler sagen, weil das Codieren mein Handwerk ist. Klänge sind für mich immer die wichtigsten Aspekte einer Sache: Ich versuche immer, sie klang- oder musikorientiert zu machen. Visuals sind immer da, aber ich versuche immer, den Sound zu einem sehr wichtigen Teil des Projekts zu machen und darauf aufzubauen, im Gegensatz zu „Lass uns etwas Musik in den Hintergrund stellen“. Stattdessen möchte ich normalerweise Musik machen.

Das ist interessant, weil das eine wirklich unterschiedliche Sichtweise darüber ist, ob die Musik das Thema ist oder ob die Musik im Hintergrund ist. Sie haben bereits erwähnt, dass die Codierung Ihr Handwerk ist. Sie haben einen Master in Computer Engineering und einen MFA in Electronic Art. Könnten Sie ein wenig über Ihren Hintergrund und Ihre Herkunft sprechen und wie Sie sich entschieden haben, diesen formalen Ausbildungsweg einzuschlagen?

Ich komme aus der Türkei. Woher ich in meiner Kindheit in den frühen 2000er Jahren komme, war es eine Kultur, in der man als erfolgreicher Student bestimmte Fächer studieren muss. Ich hatte nicht zu viele Optionen zur Auswahl, also habe ich Ingenieurwissenschaften studiert.

Ich hatte immer das Gefühl, dass dort etwas fehlt. Als ich meinen Master gemacht habe, habe ich untersucht, was mit Programmieren oder Engineering gemacht werden kann, und festgestellt, dass ich damit die Musik basteln kann, die mir gefällt. In meiner Masterarbeit ging es darum, Kompositionen algorithmisch zu erstellen. Als ich damit fertig war, dachte ich, ich wollte auch eine Benutzerinteraktion.

Bei meinem zweiten Master ging es um interaktive Kunst als zeitbasiertes Medium. Das konzentrierte sich auf Installationen, kunstbasierte Ideen und Benutzerinteraktion. Das war irgendwie mein Weg.

Ihr kreativer Weg macht tatsächlich sehr viel Sinn: Sie waren UX-Entwickler, Universitätslehrer, haben am Spieledesign gearbeitet ... Sie haben viele verschiedene Dinge getan, aber alle haben diese Komponente der Kreativität mit einbezogen und etwas und Interaktivität geschaffen und Engineering. Sie sind auch viel gereist. Können Sie Ihre Jobs und Städte kommentieren?

Das ist eine interessante Frage, weil ich so viel Zeit in der Graduiertenschule verbracht habe. Wenn es um Jobs geht, haben sich die Titel geändert, aber was ich mache, ist meistens das gleiche. Am interessantesten finde ich die Arbeit, die ich außerhalb meiner regulären „Jobs“ mache. Die Leute, die ich treffe, die Tech- und Kunstgemeinschaft in San Francisco. Mit Menschen in dieser Community zu sprechen ist immer mehr als unterhaltsam. Ich habe das Gefühl, dass ich mehr tun muss. Nicht auf wettbewerbsfähige Weise, aber Sie wissen, ich fühle mich inspiriert!

Ich war in vielen Städten. Ich war nach meinem Studium in Indiana. Ich war in Schweden und dann einige Zeit in Deutschland. Viel Zeit in der Türkei. Was die Kunstszene betrifft, kann ich beispielsweise Indiana nicht mit San Francisco vergleichen, weil es so anders ist. Hier gibt es immer neue Leute zu treffen. Hier passieren so viele Dinge.

Gab es insbesondere in Bezug auf Ihre Arbeit ein bestimmtes Projekt, das Sie schon früh inspiriert hat?

Ich war seit meinem siebten Lebensjahr immer mit Musik beschäftigt. Mein Hauptinstrument ist die Gitarre. Ich spiele auch Synthesizer. Ich denke, das begann, als ich in einer Klasse war, und ich habe einen sehr einfachen Sound-Making-Code erstellt, und ich war daran interessiert, weiter zu gehen. Ich habe mich mit der Grundlagenforschung befasst, es gibt viele Dinge da draußen, und mir wurde klar, dass es dieses Gebiet gibt, das ich studieren und erforschen kann, um mich zu verbessern.

Für den ersten Teil war es ein bisschen zufällig. Zum Beispiel erhalten Sie ständig Werbung, E-Mails von Anbietern und das ist alles, sehen Sie den neuen Sprecher, was auch immer. Ich erinnere mich, ich erhielt die E-Mail mit der Behauptung, dass der neue Sprecher einen bestimmten Frequenzgang hatte und ich dachte: "Menschen können das nicht hören!" Ich war inspiriert, es zu testen. Ich habe einen einfachen Code erstellt, um diesen Sound abzuspielen, und natürlich konnten wir nichts vom Laptop hören.

Dies war nur ein frühes Experiment. Ich hatte nur Spaß und dann wurde mir klar, dass ich auf diese Weise tatsächlich Musik machen kann. Im Laufe der Zeit entdeckte ich eine ganze Reihe von Werkzeugen, die Menschen für kreative Technologien verwendet haben. Es war der erste Schritt für mich.

Lassen Sie uns ein wenig über die Arbeit sprechen, die Sie jetzt machen. Könnten Sie ein wenig über Ihre aktuellen kreativen Projekte sprechen, worüber Sie sich am meisten freuen und was Sie dazu antreibt, sie zu erstellen? Warum machst du sie, was willst du am liebsten kommunizieren?

Nun, meine Arbeit geht zwei Wege. Manchmal gibt es etwas in der visuellen Kunst, das ich untersuchen möchte, oder eine Benutzerinteraktion, auf die ich neugierig bin. Es gibt also keine wirkliche Botschaft oder Bedeutung, aber ich möchte nur sehen, wo ich von einer ästhetischeren Position aus lande. Manchmal, als ob mich etwas stört oder zum Nachdenken bringt, mache ich ein Stück darüber.

Im Moment arbeite ich mehr mit Musikvisualisierern und erstelle abstrakte Landschaften durch Musik. Ich versuche, mich von den alten abstrakten Formen zu lösen und realistischere Bilder zu erstellen. Es ist ein lustiges Projekt, bei dem einige visuelle Effekte untersucht werden, mit denen ich durch Sound fahren kann.

Was ist mit den Landschaften, zu denen Sie hingezogen sind, warum Landschaften?

Nun, ich würde sagen, nicht so wie Landschaft wie in der Natur, sondern Landschaften zum Beispiel in einer Stadt. Zum Beispiel, wenn Sie in einem Café sitzen und Menschen beim Überqueren der Straßen zusehen. Ich kann so etwas erschaffen, das im wirklichen Leben unmöglich wäre, wenn einige Leute nach oben gehen, andere nach unten…

Und dann kann ich Motion Capture verwenden, um dies zu erstellen. Zerbrochenheit interessiert mich, die Tatsache, dass sie nicht wirklich existieren oder nicht existieren können.

Zum Erstellen Ihrer Kunstwerke verwenden Sie Unity und WebGL. Können Sie etwas mehr über Medien und Werkzeuge sprechen, mit denen Sie Ihre Arbeit erstellen? Was ist dir am wichtigsten?

Ja, das sind meine beiden wichtigsten Werkzeuge für die Visualisierung. Ich arbeite gerne in einem Raum und die Arbeit in physischen Räumen ist interessant, aber nicht immer erschwinglich oder praktisch. Deshalb arbeite ich gerne in virtuellen Räumen oder kombiniere sie, so dass die virtuellen Aspekte einige physische Aspekte haben. In diesen Fällen verwende ich Unity oder WebGL.

Der Grund, warum ich mich für den einen oder anderen entscheiden könnte, ist, wenn ich in einem von ihnen etwas Bestimmtes brauche. Hauptsächlich wähle ich basierend auf den Verteilungsmitteln. Wenn ich die Arbeit online an andere Personen verteilen muss, gehe ich auf Browser-Weise zu WebGL. [Ich] verwende gerne die Bibliothek three.js, damit Sie einfach einen Link freigeben können und andere Zugriff darauf haben. Für eine ereignisbasierte Sache verwende ich gerne Unity. Es macht sehr viel Spaß und ist einfach zu bedienen und bietet viele Funktionen. Es ist etwas schwieriger zu verteilen.

Eine andere Sache ist die Treue. Mit meinen Fähigkeiten kann ich eine bessere Qualität in Unity erzielen, was manchmal wichtig ist. Für den Sound ist es ein bisschen interessant für den Sound. Ich liebe Unity, aber die Möglichkeiten zur Klangerzeugung sind ziemlich begrenzt. Meistens verknüpfe ich eine andere Sache wie MAX / MSP, die einem Live-Performance-Tool ähnelt, aber die Bereitstellung oder das Senden des Gesamtprodukts an andere erschwert.

Wenn ich in einem Raum arbeite, verwende ich gerne viele der Geräusche in diesem Raum, um sie wieder in die Ausstellung zu mischen, die Geräusche aufzunehmen und sie wieder zu verarbeiten. Manchmal mag ich es auch, meine eigenen Kompositionen zu spielen, die Gitarre spielen, als Teil meiner Erfahrungen.

Welche Art von emotionalem künstlerischem Inhalt wird Ihrer Meinung nach jetzt aufgrund von Mixed-Reality-Technologien möglich? Sie arbeiten in VR mit all diesen neuen Tools. Es gibt offensichtlich einen Grund, warum Künstler VR verwenden möchten, um etwas Neues zu kommunizieren, oder?

Ja. In der physischen Welt gibt es viele Dinge, die Sie aufgrund grundlegender Einschränkungen wie Platz oder Ressourcen wie Geld usw. nicht erreichen können. Was VR Ihnen gibt, ist die Fähigkeit, Dinge wie unmögliche Szenarien zu erstellen. Es versetzt Sie aus der Sicht der ersten Person in das Unmögliche. Alles wird plötzlich real, wie "Ich kann das tatsächlich anfassen."

Eines der Dinge, die ich kürzlich gemacht habe, war ein VR- und Tanzstück. Freya Olafson und ich haben diese tanzenden Avatare erstellt. Sobald Sie genug davon erstellt haben, fühlte es sich einfach so an, als wären Sie im Waldboden eines hoch aufragenden, sich roboterhaft bewegenden Avatars. Es schuf ein Gefühl des Erhabenen. Sie können nicht sehr einfach dorthin gelangen. Es ist unmöglich, dorthin zu gelangen, aber Sie haben plötzlich das Gefühl: "Ich bin tatsächlich hier, das ist unmöglich."

Einige Leute benutzen VR, um die physische Welt neu zu erschaffen, und dann macht es einfach Spaß, wie ein Witz. Für mich ist es interessant, Menschen in diese unmöglichen Situationen zu bringen, in denen es zu einer sehr persönlichen Form der Erfahrung wird. Du siehst es mit deinen eigenen Augen. Es kann dich wirklich erreichen.

Foto von Motion Aftereffect von Freya Bjorg Olafson und Yagiz Mungan, 2017. Foto von Robbie Sweeny. Diese Arbeit wurde im Rahmen des CounterPulse Artist Residency Commissioning Program mit Unterstützung der National Endowment for the Arts, der Zellerbach Family Foundation und des Ken Hempel Fund for the Arts entwickelt. Weitere Informationen hier.

Künstler beschäftigen sich schon sehr lange auf unterschiedliche Weise mit dem Erhabenen. Denken Sie, dass Mixed-Reality-Technologie ein besonders gutes Medium oder ein Raum ist, um dieses Gefühl zu kommunizieren?

Ja, ich denke schon. Es ist ein Medium für alles, aber die Tatsache, dass Sie Menschen überall hinbringen können, ist sehr stark, weil Sie Menschen überall hineinbringen können, wo Sie sich vorstellen, nicht nur innerhalb einer Landschaft, sondern auch in einem Geisteszustand. Es muss kein realer Raum sein, auf dem sie stehen könnten. Es könnte ein Raum ohne Boden sein, oder es könnte ein Übergangsraum sein. Es könnten nur Lichter und Geräusche sein. Es könnte kein Raum sein. Das ist ziemlich stark.

Absolut. Und wie wäre es mit einem kleinen Blick in die Zukunft? Gibt es neue Technologien, über die Sie sich sehr freuen und die sich noch in der Proof-of-Concept-Phase befinden, die Ihrer Meinung nach jedoch noch nicht vollständig für die Erstellung von Kunstwerken auf hohem Niveau genutzt wurden?

Es gibt immer den linearen Fortschritt, den aufkommende Technologien haben. Wir beschäftigen uns immer noch mit Netzwerkkabeln und manchmal werden die Kabel störender als das Stück! Bei den neuen Technologien wäre es jedoch interessant zu sehen, wohin AR führt. Zu diesem Zeitpunkt kratzt es nur an der Oberfläche, aber wenn es tatsächlich da ist, ist es schwer zu sagen, was Augmented Reality und was physisch ist. Das wird interessant und beängstigend sein.

Ansichten von Illy, von Yagiz Mungan

Lassen Sie uns über das bevorstehende CODAME ART + TECH Festival sprechen. Können Sie uns etwas über die Arbeit erzählen, die Sie zeigen werden?

Es wird eine Version von Illy sein, einem halbintelligenten System. Es ist ein sich entwickelndes Projekt, das schon seit einiger Zeit läuft.

Der Ausgangspunkt für Illy war ein Gerät: ein Amazon Alexa oder Google Home. Wenn Sie eines davon verwenden, sprechen Sie mit einer Plastiksache, sagen etwas und erwarten ein Ergebnis. Und wenn Sie dieses Ergebnis erhalten, fühlen Sie sich glücklich und zufrieden, aber wenn es heißt: „Oh, das habe ich nicht verstanden“, sind Sie frustriert. Wenn es das falsche Lied spielt, werden Sie frustriert.

Nachdem ich diesen Prozess mit meinem Akzent durchlaufen hatte, war ich besorgt, dass ich über einen Plastikbot so frustriert sein könnte. Nachdem ich ein wenig darüber nachgedacht hatte, kam ich auf Illy, eine künstliche Intelligenz, die kein Englisch versteht. Illy versteht keine Sprache, versteht das Sprechen nicht, aber er versucht, die Stimmen, die Tonhöhe, die Lautstärke und die Hauptmerkmale des Klangs zu interpretieren und darauf basierend zu reagieren. Es entsteht eine Kommunikation, in der beide Seiten wissen, dass es kein Verständnis geben wird. Es liegt an Ihnen, dem, was es sagt, eine Bedeutung zu geben.

Es kommuniziert also zurück, wenn Sie mit ihm sprechen, aber nicht in der Sprache?

Genau. Das Gespräch ist eher wie ein Monolog, aber es liegt an Ihnen, was es sagt. Das ist also die Hauptidee. Es wird auch entweder ein VR-Projekt oder ein großes Display geben. Sie können Illy als eine Sache betrachten, die nur rohe Geräusche macht, oder es könnte Ihr verständnisvollstes Haustier sein, oder Sie können es wie ein Baby behandeln. Wie Sie wissen, sprechen Sie mit einem Baby. Sie wissen, dass das Baby Sie nicht versteht. Es geht nur darum, wie du dich fühlst.

Was möchten Sie, dass die Leute über Ihre Arbeit wissen? Oder woran sollten sie am liebsten denken, wenn sie Ihre Arbeit auf dem Festival sehen?

Es geht um unsere Beziehung zu Dingen, zur Technologie, zu KIs und darum, wie die Kommunikationsmittel unsere Perspektive und Erwartungen verändern. Zum Beispiel sage ich jetzt etwas und Sie können verstehen, dass wir dieselben Symbole verwenden, aber wenn ich auf Türkisch spreche, wäre das nur Lärm und für Sie absolut nicht wertvoll.

Oder denken Sie an die Beziehung zwischen Menschen, wenn Sie in ein Café gehen und nach einem Kaffee fragen. Die meiste Zeit in unserem hektischen Leben erwarten wir: "Diese Person gibt mir Kaffee." Wenn diese Person versucht, ein kleines Gespräch mit Ihnen zu führen, lautet Ihre Reaktion: "Ich muss gehen, warum verschwenden Sie meine Zeit!" Es ist diese kleine Sache, aber es ist ganz anders, sich dieser Wechselwirkungen wirklich bewusst zu sein, als sich unbewusst bewusst zu sein.

Es ist interessant darüber nachzudenken, wie Klang, Klangqualität und die Bedeutung der Sprache häufig miteinander verschmelzen. Wie in Ihrem Projekt: Sie präsentieren es so, aber wir wissen, dass wir mit einer sehr süßen Stimme etwas Gemeines sagen können und umgekehrt. Es ist sehr leicht für uns, diese Erwartungen zu haben, die dann falsch sind, weil wir nur unsere eigene Perspektive anwenden.

Das ist das kulturelle Konstrukt. Unterschiedliche Sprachen haben unterschiedliche Arten, Dinge zu sagen. Bei einigen zum Beispiel könnte es so klingen, als würde ich mit Ihnen sprechen, wenn Sie etwas „Süßes“ in einer Sprache aussprechen. All diese Bedeutungen sind von Menschen gemachte kulturelle Dinge, auf die wir uns einigen müssen. Sie benötigen den richtigen Decoder, um zu verstehen, und was ist, wenn Sie ihn nicht haben?

Verbinden Sie sich und erfahren Sie mehr über Yagiz Mungan auf der CODAME-Website:

Sie finden seine Arbeiten beim CODAME ART + TECH Festival [2018], einer viertägigen Konferenz mit Workshops, Vorträgen und Veranstaltungen zum Nachtleben @ The Midway, San Francisco, 4. bis 7. Juni 2018, Codename #ARTOBOTS:

CODAME ART + TECH Festival [2018] #ARTOBOTS

Irene Malatesta ist Schriftstellerin, kreative Strategin und Liebhaberin digitaler Kunst in San Francisco. Sie finden sie auf Twitter und Instagram @irenekaoru.