Veröffentlicht am 07-03-2019

Der Körper in der Maschine

Glimmer, mit freundlicher Genehmigung des Sundance Institute

Sundances New Frontier ist ein anregender Ort, um zu erkunden, wie Künstler und Technologen zusammenarbeiten, um neue Erzählformen zu schaffen. Von der virtuellen Realität über die gemischte Realität in Kombination mit der Entwicklung künstlicher Intelligenz experimentieren diese immersiven Medienmacher nicht nur mit der Zukunft des Geschichtenerzählens, sondern testen neue verkörperte räumliche Schnittstellen außerhalb unserer 2D-Schwarzspiegelbildschirme. Nonny de la Peña, VR-Pionier, erklärte in einer Podiumsdiskussion: "Wenn die Welt nicht flach ist, warum sollten dann die Medien sein?"

In dem Bestreben, den Medien eine gelebte Welterfahrung näher zu bringen, wird der Körper zu einem zentralen Erkundungsraum. Die Projekte Interlooped und Mica sind besonders interessant, um die Entstehung hybrider Räume zu verstehen, in denen menschliche Körper in virtuellen 3D-Welten digital dargestellt werden bzw. künstliche Intelligenzen in der physischen Welt virtuell verkörpert werden. Diese "Dynamik des Biodigital-Looping", wie der Kurator von New Frontier, Shari Frilot, das Programm beschrieb, eröffnet neue Befragungen dieser Erweiterungen der Realität.

Interlooped kombiniert VR und Live-Performance und nimmt die Zuschauer mit auf eine Reise in Richtung unbegrenzter digitaler Reproduktion. Diese 7-minütige Erfahrung, die von der Künstlerin Maria Guta in Zusammenarbeit mit dem Technologieunternehmen Imverse erstellt wurde, ist einfach, aber unheimlich und spielt mehr mit Wahrnehmung als mit Geschichtenerzählen. Die Teilnehmer setzen ein VR-Headset auf und betreten ein schwarzes Feld. Dabei werden sowohl ein virtuelles Rendering von María als auch ihre eigenen Körper in Echtzeit angezeigt, die in 3D im virtuellen Raum erfasst werden. Mit der Musik ändert sich auch Maria, mit der der Benutzer hauptsächlich durch Tanzen interagiert. Schon bald ruft Maria den Namen des Teilnehmers an, was darauf hindeutet, dass der Künstler nicht nur virtuell da ist, sondern auch in Echtzeit festgehalten wird und den physischen Ausstellungsraum teilt. Zu diesem Zeitpunkt beginnt die Zeitschleife. Durch das Berühren eines leuchtenden schwebenden Balls kehren die Zuschauer in der Vergangenheit zurück, um mehrere Kopien von sich selbst aus den letzten Minuten zu sehen, und erzeugen so ein außerkörperliches Erlebnis, das die Unterschiede zwischen den Originalkörpern und ihren Kopien verwischt.

Um diese Erfahrung zu generieren, entwickelte Imverse ein volumetrisches Erfassungssystem auf der Basis von Voxeln (volumetrische Pixel). Kameras mit Tiefensensoren sind mit einer Software verbunden, die Körper in Voxel umwandelt und digitale 3D-Repliken in Echtzeit darstellt. Obwohl die Voxel-Auflösung nicht völlig realistisch ist, wurde die Schnittstelle mit niedriger Auflösung als aktiver Wirkstoff bei der Konstruktion der algorithmisch reproduzierten Identitäten des Stücks nach vorne gebracht.

Interlooped, mit freundlicher Genehmigung des Sundance Institute

Anstatt menschliche Körper in einen digitalen Raum zu überführen, bringt das Flaggschiffprojekt Mica von Magic Leap eine in Bearbeitung befindliche KI durch die Verwendung von Mixed Reality (MR) in die materielle Welt. Diese Technologie zeichnet sich durch die Anordnung von Hologrammen aus, die auf ihre Umgebung reagieren. Mica ist ein blondes, kurzhaariges, weißes, weibliches Gender-Hologramm, das von dem kürzlich eingeführten Magic Leap MR-Headset angetrieben wird. Das beeindruckende an diesem Headset ist die Qualität der Hologramme und der eingebauten Sensoren zur Erfassung des Körpers des Benutzers und der umgebenden räumlichen Informationen. Dieses Gerät umfasst Computer Vision, die nicht nur die Elemente im Raum, sondern auch die Augenbewegungen, Gesten und Sprache des Benutzers aufzeichnet.

Die Einstellung von Mica in Sundance beschwor den Cyborg-Feminismus und den Surrealismus. Inspiriert von Marina Abramovics The Artist is Present, befand sich das KI-Hologramm in einem Raum an einem Tisch und wartete darauf, dass der Zuschauer das Headset aufsteckte und die Interaktion begann. Momentan kann Mica nur durch nonverbale Aktionen kommunizieren, aber ihre Gesten sind ziemlich beeindruckend (wenn auch etwas übertrieben). Im Gegensatz zu einem KI-Assistenten wie Siri oder Alexa folgt Mica nicht den Anweisungen und gibt dem Teilnehmer sogar Anweisungen, beispielsweise eine weiße Leinwand an die Wand zu legen. Nach Abschluss erscheint eine holografische Darstellung von René Magrittes Gemälde Der Verrat der Bilder (Ceci N'Est Pas Un Pipe). Glimmer steht auf und nimmt die Pfeife weg, ein Zeichen dafür, dass wir in eine postrepräsentative Sphäre eintreten, in der die Realität ständig durch digitale nichtmenschliche Interaktionen geformt wird.

Mica 's Cyborg feministische Erzählung widersprach nicht nur der Tatsache, dass sie die standardmäßige zeitgenössische Cyborg-Figur reproduzierte, erkennbar an den Figuren in Ghost in der Shell und Ex Machina. (Dies wirft an sich kritische Fragen auf, wie zum Beispiel: Wie soll KI aussehen? Sollte es menschlich sein? Warum wird es regelmäßig als weiß und weiblich dargestellt?) Die Erfahrung, die ein Datenerfassungssystem betrieb, um diese KI mit der laufenden Arbeit mit Informationen aus den Körpern der Teilnehmer zu versorgen.

„Magic Leap sammelt bestimmte Daten über Sie, einschließlich der Größe und Position Ihrer Pupillen und der Iris… Wir extrahieren geometrische Darstellungen Ihrer Gesichts- und Körperbewegungen aus den Audio- und visuellen Aufzeichnungen… Magic Leap und seine Dienstanbieter verwenden nur die Informationen Um die Produkte und Dienstleistungen von Magic Leap zu entwickeln und zu verbessern “, lesen Sie einen Teil des Freigabeformulars, das die Teilnehmer unterschreiben mussten. Daher fragen Sie sich, ob die Daten des Nutzers das eigentliche Produkt dieser Erfahrung sind (wie bei Facebook und anderen Plattformen). In diesem Fall geht es nicht so sehr um die Geister in der Maschine. Vielmehr geht es darum, wie wir uns im Zeitalter der Biometrie, Big Data und Überwachung damit befassen sollten, dass unsere Körper in die Maschinen eindringen. Wie werden wir digitalisiert, datengestützt, kommerzialisiert?

Sowohl Interlooped als auch Mica werfen Fragen auf, wie unsere Körper virtuelle Räume betreten und verlassen. New Frontier ist ein guter Ort, um kritische Gespräche über diese Entwicklungen zu führen, denn es bringt Menschen mit unterschiedlichen Hintergründen zusammen, die nicht nur die Zukunft des Geschichtenerzählens, sondern unseres Lebens gestalten. Kamal Sinclair, Direktor von New Frontier Lab Programs (und ein Redakteur bei Immerse), sagte bei einer Podiumsdiskussion: „Wir haben jetzt die Möglichkeit, den Kurs der Technologie zu ändern, da sie noch keine definierte Sprache hat. „Wir müssen jedoch ernsthaft über die soziopolitischen und ethischen Konsequenzen einer neuen Realität nachdenken.

Immerse ist eine Initiative des MIT Open DocLab und des The Fledgling Fund und wird von Just Films | finanziert Ford Foundation und die MacArthur Foundation. IFP ist unser finanzieller Sponsor. Erfahren Sie hier mehr. Wir sind bestrebt, Medienprojekte zu erkunden und zu präsentieren, die die Grenzen der Medien überschreiten und Probleme der sozialen Gerechtigkeit angehen - und auf Freunde wie Sie angewiesen sind, um sich selbst zu erhalten und zu wachsen. Begleiten Sie uns noch heute mit einem Geschenk.

Siehe auch

# 5Women Artists: Frauengeschichte-Monat an der UNMAMWilliam KentridgeProjekt 2Wie (nicht) eine Figurzeichnung erstellt wirdLaut Papst Shenouda der Dritte "Ein Ort könnte in Ihnen leben, nicht Sie leben darin"