plusinsight

Tag Archives: Hybrid Media

Ars Electronica 2017: POST CITY. CODED SKELETON von Miyu Iwafune, Taisuke Ohshima

Der Wirbelsäule nachempfunden sind einzelne Gelenkplatten in einer Richtung beweglich oder dehnbar. In der anderen Richtung sind sie steif. Die Künstler nennen das Material Coded Skeleton. Es ist eine Kombination aus Formgedächtnislegierungen (Abkürzung FGLenglisch shape memory alloy, Abkürzung SMA) und 3 D gedruckten Modulen. Formgedächtnislegierungen  finden sich bei pneumatischen Ventilen in der Automobilindustrie, bei optischen Bildstabilisierungen, beim Autofokus, bei Stents in der medizinischen Implantatentechnik, bei Zahnspangen, bei Brillengestellen usw..

Das Material für den 3D Drucker  kann sich an eine frühere Formgebung trotz nachfolgender starker Verformung scheinbar „erinnern“. Daraus entstehen modulare mechanisch verbundene einseitig bewegliche Wirbelstrukturen. Sie können groß oder klein sein. Diese Module werden durch Code und Microcontroller bewegt. Es sieht mühelos aus und in die entsprechende Form verpackt, wie im Beispiel gezeigt, das Spielzeughasenöhrchen, ist die Bewegung mühelos und natürlich. Das 3 D Material ist in der Haptik ähnlich dem Knorpel in Gelenken. Etwas durchscheinend, warm und in seiner Härte elastisch.

Diese Arbeit inspiriert. Sie verbindet analoges mit Technik in einem vorstellbaren Masse. Es
ist die nachgebildete Anatomie, die so vertrauenserweckend ist. 

Coded Skeleton

 

Ars Electronica 2017: POSTCITY: DUOSKIN vom MIT Media Lab – Living Mobile Group und Microsoft Research Natural Interaction Group

Duoskin ist ein Klebetatoo mit Verbindung zu den Mobilen Geräten. Duoskin steuert durch One Touch Eingabe, Nahfeldkommunikation (Near Field Communication, abgekürzt NFC) und vermittelt thermochrome Anzeigen (Thermochromie bezeichnet man die Eigenschaft bestimmter Substanzen, bei Temperaturänderung die Farbe zu ändern). Diese Tatoos sind aus Blattgold, hauchdünn und werden auf die Haut appliziert. Sie sind relativ robust und haben einen hohen Trage Komfort. Federleicht und dabei mit der Erscheinung eines Schmuckstücks oder dergleichen.

Bildergalerie:

Sie halten einen Tag, dann werden sie abgewaschen und beim Duschen und späteren Abtrocknen entfernt. Es gibt auch welche, die schon fast zwei Wochen auf der Haut sind. Mit einfachen Touchgesten lassen sich Funktionen beim Mobile Phone durchführen: Musik wechseln, lauter, leiser, überspringen. Oder bei Präsentationen braucht es keinen Infrarot Pointer, ein Streichen in einer bestimmten Richtung reicht und die nächste Folie wird angeklickt. Wer smarte Gegenstände im Haus und Hof hat, der steuert diese an: Lampen, Schlüssel, Jalousien, Garagentore, Fenster oder ähnliches.

Diese Version ist bereits im Test, zwar wird noch an Speicher, an Akkuleistung und Microcomputer gearbeitet aber das ist eine absehbare technologische Entwicklung. Wir werden in den nächsten Jahren diese Steuerelement auf der Haut direkt tragen und sollten sie zudem eine hohe ästhetische Wirkung haben dann werden sich diese Art von Minicomputer, on skin electronics durchsetzen.

Der Designer des Interfaces und des Looks für die Tatoos von der Microsoft Research Natural Interaction Group zumindest kann von ersten Einsätzen erzählen und zeigt sich entsprechend überzeugt.

Narrative Erzählweisen am Beispiel von „Schatten“


Auf 125 qm macht die eventmedial Raum-Inszenierung Schatten einen szenischen Kurzfilm mit gleichem Titel „Schatten“ erlebbar.

Konzeptionell ging es um die Dekonstruktion des szenischen Kurzfilms. Der Film erzählt linear, zeitbasiert. Event Medien erzählen dekonstruiert und asynchron. Welche Themenbereiche sind packend und lassen sich szenisch durch Event mediale Mittel darstellen? Diese Frage zu lösen kostet Zeit und Gedanken. Nur die filmischen Höhepunkte eigenen sich, längere Ausführungen durch Filmbildsprache sind schleppend, langatmig in einer Event medialen Erzählweise. Der Besucher geht oder steht im Raum oder in Räumen. Ablenkungen und Aufmerksamkeitseinschränkungen werden durch Umgebungsimpulse wie Ton, Licht, Arrangement, Aufbau, Elemente, andere Besucher oder im ungünstigsten Fall durch Kommunikation mit Handy oder sonstigen mobilen Endgeräten erzeugt. Der Fokus kann leicht gebrochen werden, aber umso schwerer ist es, ihn konstant zu halten. Dafür ist die Erzählweise auf das Raumgefüge anzupassen. Prägnanz, emotional, eindrucksstark werden die Medien eingesetzt. Auch weil die Geschichte dekonstruiert und non-linear vermittelt wird. Der Besucher wird mit höhen Anforderungen konfrontiert. Die Bereitschaft zum Erschließen, zum Sich Einlassen und Verarbeiten ist größer als im Kino. Dort werden Umgebungseinflüsse reduziert, Dunkelheit, Surround Tontechnologie, Steuerung der Blickrichtung auf eine überdimensionale Leinwand, Bewegungseinschränkung durch Sitzen: all das führt zu größerer Konzentration auf das Narrative Geschehen. Geschichten werden schneller entschlüsselt, Interferenzen werden stärker verhindert. Im Event Medialen Raum steht der Besucher vor der freien Wahl. Geht er schnell oder langsam, unterhält er sich oder nicht, betrachtet er, berührt er Dinge, probiert er etwas aus? Steuert er durch die Räume wie durch einen Bahnhof, bleibt er stehen und hört, sieht, beobachtet und erschießt er die medialen Informationen? Der Besucher lenkt sich und sein Erlebnis. Alle Raumelemente werden mit den Möglichkeiten des Handelns abgestimmt.

Wie wird der Film gestalterisch in den Raum eingeflochten? Die Bilder sind der Größe des Ausgabemediums angepasst. Rückpro, Aufpro, Durch-Projektionen, Leinwände aus Gaze oder PVC, Bildträger, Bewegung oder Standbild, Bildschirme, LED Wände und deren Auflösung, Lichteinfall durch andere Medien, vorgebaute Installationen wie halbtransparente Spiegelfolien oder Diffudierungen durch Plexiglas oder andere Materialien fordern mehr Helligkeit, Dunkelheit, Saturation, Kontraste oder andere Farbgebung. Der Standpunkt des Betrachters ändert sich und damit der Hot Spot. Die Technik ändert nicht nur die gestalterische Qualität sondern auch die inhaltliche. Jede Technik kommuniziert als Element. Ist es ein warm oder kühl anmutendes Material? Bekannt oder fremd, alt oder neuwertig?

Teile der Installation und der Kurzgeschichte Schatten werden auf überdimensionierten Stelen erzählt. Die Größe der Bilder, die Kadrage und die Platzierung wird genau auf die zu erzielende Wirkung abgestimmt: andere Ausschnitte, andere Zeiten, andere Effekte, andere Kontraste und Farbe, anderes Placement, andere Montage. Teilweise wurden sogar spezielle Filmszenen nur für den Eventmedialen Raum aufgenommen.

Im Film „Schatten“ geht es um Erik, der in einer Notrufleitstelle arbeitet. Eines Nachts verschuldet er versehentlich den Tod eines Kleinkindes. Er lässt sich von einer Handynachricht seiner schwangeren Frau ablenken während er gerade einen Notruf bearbeitet.
Infolgedessen schickt er den Krankenwagen zur falschen Adresse, woraufhin das Kleinkind verstirbt. Die Schuld, die Erik fühlt, beginnt ihn zu verschlingen. Er droht daran zu zerbrechen.

Diese Geschichte zu vermitteln, ist eine Sache, aber das ist nicht alles. Natürlich ist es nicht alles. Wenn ein Erlebnis geschaffen wird, dann muss der Besucher muss eingebunden werden. Er muss aktiv werden, er muss erkennen, dass er es ist, er allein, der die Geschichte wieder zusammen bringt. Das kann im Kopf geschehen, aber es kann mit Hilfe von Interaktion stattfinden. Die Kopfkinos erfüllen diese Anforderung. Nicht nur wird durch die Formsprache der Medien an und für sich Bedeutung vermittelt, sondern auch durch das Besucher Handeln. Er tritt in das Kopfkino hinein, bückt sich und überwendet gleichzeitig eine kleine Stufe. Das ist anstrengend. Er steht allein in dem Inneren des Kubus.

Dort setzt er den Kopfhörer auf und auf einem curved Display wird in der subjektiven filmischen Einstellung das markante Erlebnis erzählt. Durch die Subjektive ist der Besucher der Hauptdarsteller. Im Kopfhörer ist ein Infrarot Sensor eingebaut. Mit der Drehung des Kopfes werden bestimmte Bildbereiche sichtbar, klar erkennbar, der Rest des Bildes verschwimmt. Der Betrachter sieht und erlebt den Tunnelblick des Hauptdarstellers im Film. Und das curved Display hilft bei dem bildlichen Umschließen des Menschen. Im hinteren Bereich starrt der Hauptdarsteller des Films auf den Hinterkopf des Besuchers. Es ist eine beengte Situation, so beengt wie die Erzählte im Film. Wenn der filmische Klimax erreicht ist, wenn dem Hauptdarsteller des Film den Boden unter den Füssen entzogen wird, dann erleuchtet das Podest auf dem der Besucher steht. Es ist ein endless Mirror. Der Boden bricht weg. Die formale Gestaltung der Installation selbst drückt die erzählten Inhalte aus.

Wir könnten jetzt noch unendlich lange über die Installation sprechen, über die Hürden im Bühnenbau, oder überhaupt eine so große professionelle Installation zu finanzieren. Über Beschaffungsschwierigkeiten zu den Technologien, logistische Herausforderungen, Ab- und an Transport der Technologien, über Versicherungen, über Sicherheit, über Lichtstimmung, über Tonstimmung, über die Projektionen, aber das wird in Folgebeiträgen behandelt. Es geht erst einmal um eine Bewusstwerdung der Differenzen über filmische Narrative und Event Medialer Narrative.

Current (2014) von Michael Awad und David Rokeby

Current ist eine temporäre Medieninstallation. Es ist ein Kunstwerk im Bereich der Medienarchitektur. Dieses Werk steht an der Schwelle zwischen Kunst, Wissenschaft, Technik und Architektur. So wie wir es von David Rokeby schon in Vorläuferwerken erlebten.  Wir kennen ihn eher aus projizierten Bildwelten an Architektur. Hier sehen wir eine reaktive mediale Fassade.  Die Fassade reagiert auf die Umgebungseinflüsse. Sensoren erzwingen Veränderungen von an einer Fassade angebrachte Elemente. Das kann alles mögliche sein, Lichter, Scheiben, Lamellen, Roboterarme usw.  alles was sich bewegen kann. Hier an diesem Beispiel werden Windrichtungszeiger, beim Segeln die Verklicker genannt,  an einer Aussenfassade angebracht. Sie reagieren sensibel auf Luftänderungen.  Sie stehen sie von der Fassade ab und reagieren auf jeden Luftimpuls. Fast synchron bewegen sie sich. Ein meditatives Erlebnis das dem Schwung der Wellen gleicht. Und so wird es auch von den Künstlern verstanden. Sie zeigen die unsichtbaren Wellen des Windes auf. Verwandeln die Fassade in ein Messgerät. 

Ars Electronica Center: Neue Bilder vom Menschen

img_9057
Holoman

Brainlab Ars Electronica Center 2016

Im Untergeschoss befinden sich 4 Labore: Im BioLab wird über Wahrnehmung nachgedacht, im neurolab geht es Microkosmen und Gentechnik, im FabLab werden high tech Modematerialien, 3 D trends und das Selbermachen in den Vordergrund gerückt und im RoboLab wird die Verschmelzung des Menschen mit Maschinen gezeigt. Es geht um Prothesesn, Spielzeug oder auch Haushaltshilfen. Alles was dem Menschen zur Hand geht. Das muss ja nicht gleich sichtbar als Roboter sein, es sind die Maschinen und Geräte, die uns bedienen.

Dieses Geschoss, wie das ganze Ars Electronica Center wird an Kinder adressiert. Alles ist zu berühren, Bewegung, Projektionen und die Aufforderung zu agieren steht im Vordergrund. Als nächste Schicht geht es um das Betrachten. Wie schnell das geht, bleibt jedem überlassen. Die Kinder stellen die Dinge zügig von links nach rechts oder wo auch immer hin, schauen auf das Feedback der Maschine und sind damit zufrieden.

Andere schauen ausgiebig die Installation an. Betrachten die Technologie. Erkunden das Material und die Vielfalt der Möglichkeiten. Dann agieren sie, bleiben erneut stehen, erkunden die Änderungen, ermitteln die Aussage, wollen den Kontext begreifen. Vielleicht ist vorher die Informationstafel gelesen worden, vielleicht nicht. Es ist eine innere und äußere Auseinandersetzung mit den Aufbauten und den flüchtigen Bildern. Die Aussagen bleiben manchmal verschlüsselt, manchmal offenbaren sie sich. Und in orange gekleidete Helfer sind jederzeit zur Ansprache bereit. Sie erklären. Es gibt viele Wege, das Werk zu erschließen.

img_9058

Zeit aber ist notwendig. Denn alle Elemente dieser Werke wollen bemerkt werden. Wie ist der Aufbau des Ganzen? Welche Ebenden und Medien werden eingesetzt? Wo sind interaktive Schnittstellen. Wo stehen die Projektoren, werden Daten generiert, arbeitet ein Algorithmus, werden Medien zugespielt, sind sie vorbereitet und als Dateien abspielbar? Funktionieren die Technischen Geräte, sind die Projektoren noch Licht und kontraststark genug oder haben sie so viele Arbeitsstunden hinter sich, dass sie bald ausgewechselt werden müssen? Gibt es Aufbauten, die als Vermittler dienen, als Elemente deren Form und Funktion etwas bestimmtes assoziieren sollen, aber sollen eher als Repräsentanten verstanden sein? Spielt vielleicht Licht eine besondere Rolle? Gibt es Grafiken? Wird Ton eingespielt? Nur für den Betrachter oder strömt er durch den Raum? Ist er vielleicht zentriert auf einen bestimmten Punkt ausgerichtet? Hat er eine illustrierende oder informierende Funktion? Werden Bedienungsanleitungen gegeben? Werden Informationstexte geliefert? Muss ich mit vielen, einigen, mehreren Menschen das Kunstwerk oder das Experiment durchführen oder ist es für eine Person ausgelegt? Ist es von einer Forschungseinrichtung, Künstler oder Künstlerin oder einem Kollektiv? Ist es ein aktuelles Kunstwerk oder schon 2 oder 3 oder 6 Jahre alt?

Wer sich diesen Fragen stellt, unvoreingenommen seine Alltags- und Wissenswelt im Hintergrund belässt, der wird sich lange aufhalten und viel bemerken.

img_9047

Der Holoman. An der Stirnseite eine Projektion, etwas über das Gardemaß des Menschen. Zweigeteilt in einen oberen und unteren Teil, deshalb wohl weil es ungefähr 50 Zoll große Flächen im Hochformat sind. Ob es Steglosmonitore oder Aufprojektionen sind, bleibt offen, die Abbildungsqualität in dem dunklen Bereich ist klar und genügend Kontrastreich. Es werden anatomische Darstellungen zum menschlichen Körper aus der Wissenschaft und Kunst über die Jahrhunderte anschaulich gemacht. Eine Slideshow. Davor stellt sich der Besucher auf einen vorbestimmten Punkt, nimmt aus einer Nische einen Holoscreen im Din A 2 Format, zuvor noch das Geschlecht durch Knopfdruck gewählt haben, dann den Screen vor den Körper halten und schauen was kommt. 4 Modi sind verfügbar. Die Interaktion besteht nicht nur durch das reine Hinstellen, sondern durch Drehen des Screens, an den Seiten sind Sensoren angebracht, die Drehbewegung wird abgelesen und das stellt das Signal zum Programmwechsel dar. Ein Blick auf das menschliche Skelett, innere Organe, Nervenbahnen oder Muskeln wird gegeben. Immer im Ausschnitt des Screens. Es ist eine hochwertige Scheibe aus Acrylglas gegossen, leicht und nicht besonders schadensanfällig. Eher Rückprojektionsfähig, aber auch Aufpros gehen. Die Projektionen auf dem Holoscreen erscheinen 3 Dimensional. Das Bild ist beidseitig sichtbar, es entsteht im Inneren der Scheibe und wird durch Polymere in alle Richtungen gleichmäßig weiter geleitet. Für Holoscreens ist Dunkelheit gut, dann erst entfaltet sich das Bild ordentlich. Das Umgebungslicht im Lab ist mittelig, und so ist auch das Bild auf dem Screen erkennbar aber nicht brilliant. Kein Ton dazu, aber die Helferin in orange (orange ist he new black as we know) hilft mit, erklärt wie der Screen zu halten ist, eher in der Diagonale für die beste Abbildungsmenge und gibt Randinformationen.

img_9050

Es ist eine Installation die wissenschaftliche Erkenntnisse technisch und grafisch anspruchsvoll vermittelt, Kunst ist es nicht, ein massentaugliches Darstellungsobjekt von menschlicher Forschung.

So auch die nächste Station. Hier wird ein Blick ins Auge geworfen. Es geht um die Retina, es ist die Rückseite des Augapfels und dort werden mit rund 130 Millionen Sehzellen Kontraste und Farben erfasst. In den Nervenzellen entstehen erste Bildeindrücke. Über den Sehnerv, der aus rund einer Million Nervenfasern besteht, werden diese an das Gehirn weitergeleitet. Impulsgeber für das Sehen. An der Wand wird eine Retinaoperation als Video gezeigt. Denn erkrankt die Retina, kann es zu einem vollständigen Sehverlust kommen. Für solche Fälle entwickeln WissenschaftlerInnen derzeit eine digitale Netzhaut (so genannte Retina-Chips). Diese Retina-Chips können Lichtsignale in elektrische Impulse umwandeln und diese über den Sehnerv an das Gehirn weiterleiten. Die Retina ist eine Art Außenstelle unseres Gehirns und eines der wichtigsten Portale für unsere Weltwahrnehmung. Der Punkt, an dem das Licht der Außenwelt in die Bilder unserer inneren Vorstellungswelt verwandelt wird.

Es besteht die Möglichkeit, sich ein Bild der Retina per Mail nach Hause zu schicken.

image

Das ist meine vom 8.9.2016. Es war dunkel und die Oranghelferin beschwerte sich, meine Linse sei  so klein, der Lichteinfall minimal, die Retinafotografie würde wohl schwer. Aber es ist doch was raus gekommen. Am hinteren Ende, der rechten Bildseite, dort wo die hellen Punkte sind, dort befindet sich der Sehnerv. Da geht es ab ins Gehirn und in die Verarbeitung. Halali! mein Auge. Auch wenn ich beim Augenarzt das alles schon kenne, im Ars Electronica Center ist es auch schön.

Wissenschaftliche und medizinische Beratung: Prim. Priv. Doz. Dr. Siegfried Priglinger (AKh Linz)