 Hallo, er hat C3Lingo.org. Damit willkommen zum Talk Media von Daniel aus Puerto Rico. Er ist jetzt ein Künstler mit der neuen Medien und noch mehr und darüber werden wir später reden in Berlin und einen der Sachen über den er redet sind, die unendlich über virtuelle Realität von blinden für blinde reden wird. Hallo, ich bin Sabia, der Wissenschaftler und hier ist mein ganz langer Name und ich will mit euch über ein paar meiner Projekte reden. Zuerst möchte ich ein kleines Experiment mit euch machen. Bitte schließt eure Augen und während wir alle unsere Augen schließen, würde ich gerne 30 Sekunden zuzuhören. Hört tief zu, zu dem Raum um euch herum. Während ihr zuhört, versucht euch ein Bild zu machen von dem Raum um euch herum. Denkt, versucht haus, wenn wieder viele Räume im Raum sind. Ein Bild von den Menschen, die jetzt in den Raum reingehen, wo sie herkommen und versucht das einfach mal. Okay, jetzt könnt ihr eure Augen wieder aufmachen. Während ihr eure Augen öffnet, stellt euch an diese 30 Sekunden und stellt euch vor, es sei 30 Minuten oder 30 Jahre. Und dann stellt euch vor, das ist Standardansicht an die Welt. Jetzt stellt euch vor, dass ihr tausend Jahre diese visuellen Ideen habt, wie ihr jeden Tag mit dieser Erfahrung ein Computer dran geht. Und denkt, bleibt da so ein bisschen, weil wir gehen jetzt um einen kleinen Parallelweg. Ich werde euch eine lange Geschichte von meinem Leben erzählen. Eine Reihe von Eckklärungen, drei. Wenn ihr fühlt, dass ihr abbrechen müsst, dann könnt ihr das tun. Als ich fünf Jahre alt war, sagte ich, ich wollte Videogames, also Computerspiele machen. Meine Mutter meinte so, ja, was auch immer. Und zehn Jahre später fragte sie wieder, das ist halt das Leben in fünf Stunden. Ich sagte, ich möchte Videospiele schreiben. Und es hat mich in diesen verrückten Weg gezeigt. Ich bin in Georgia Tech gegangen und die Universität und habe Computer gelernt und war in Barcelona mit diesem Typ, der mein Leben verändert hat. Ich habe ihn früher in der Flur gesagt und dann habe ich gesagt, hey, du hast mein Leben geändert. Und er so, ja, okay. Aber was er mir beigebracht hat ist, dass, was man mit Code machen kann. Und ich habe gesehen, was alles um mich herum Code war. Und alles konnte man verändern. Und jedes Ding kann man ein Kunstprojekt werden, irgendein Kunst. Und das war dieses tolle Erfahrung, das ich in meinem Leben hatte. Und ich habe in den nächsten acht Jahren damit gemacht. Ich habe mich überhaupt nicht mit Computerspiele nachgedacht und habe Zeug mit Code gemacht. Videoprojektion, Installationskunst, all dieses Zeug. Und dann lasst uns weiter bei Virtual Reality reden. Und dann habe ich bemerkt, oh ja, da ist diese immersive Kunst, die ich die ganze Zeit mache, diese Erfahrungsmappings, die Logistik, die dabei sind. Wie wäre das mit einer virtuellen Realitätserfahrung? Und was passiert damit? Und das hat mich komplett weggeblasen. Und dann bin ich auch ein Musiker. Als ich das virtuelle Set Set bekommen habe, habe ich mir gedacht, habe ich mich gefragt, ob man da auch Musik mitmachen kann. Und ich habe auf Bühnen Sachen gemacht und möchte jetzt gar nicht drüber reden. Als ich das gemacht habe, hat es in Deutern regelmäßig gekommen. Da haben wir vertelt, du machst Musik für virtuelle Realität. Und ich meinte, nee, ich mache Musik in virtuelle Realität. Und dann habe ich mein Job aufgehört. Und hier ist eine Liste von Sachen, wie man Musik in XR Technologien macht, die Folien werden oben sein und alles zurück. Und ich bin nach Berlin gezogen und ich habe einen Kurs gemacht mit einem, der wirklich Audio macht und habe diese ganzen Technologien gelernt, wie man Sound in einem Raum aufnehmen kann. Und ich habe diese Frage, wie kann eine Gruppen-Audio-VR-Erfahrung laufen? Ich habe es gemacht mit tollen Leuten, wo wir vier Leute mit verbundenen Augen hatten. Und es ist ein riesiger Raum, wo es Audio von überall kommt. Und wo Ton im Raum um einen herum ist. Und man kann mit Geräuschen unterschiedlich agieren. Es war eine tolle Erfahrung, wie man Leute in eine soundbasierte Umgebung macht, bringt. Aber das Problem ist, es ist dort, man kann den Raum nicht irgendwo anders hinbringen. Und vielen Dank für alle, die da sind. Ich habe etwas erfahren. Ich habe daran nachgedacht, wie es ist, wenn man blind ist. Es ist etwas, das wir hier nie erfahren, wie man damit in der Umgebung umgeht. Und ich möchte euch noch einmal die Augen zu schließen. Ich habe bitte euch zu fühlen. Versucht die Fingerspitzen zu fühlen, die Unterseite eurer Füße. Und ich frage euch, ob ihr die Vibrationen um euch herum fühlen könnt. Und ob ihr die wirkliche Reflexion im Raum spüren könnt. Okay, jetzt könnt ihr eure Augen wieder öffnen. Und ihr könnt euch wieder, die ganzen Sachen, wieder und wieder vorstellen. Diese Minuten, diese Stunden, diese Jahre. Und am Ende des Ganzen, wo wir am Ende ankommen, ist das, dass alles nur unsere Erfahrung ist. Von unserer limitierten Erfahrung in diesem. Und wir brauchen eine tiefere Perspektive in das Ganze. Wir brauchen eine tiefe Perspektive. Wir brauchen eine tiefe Perspektive. Wir brauchen eine tiefe Perspektive in das Ganze. Und Leute sagen mir häufig, was ist virtuelle Realität? Leute in virtuelle Realität versuchen Sachen, unterschiedliche Sachen zu schieben, sagen, hey, virtuelle Realität, muss dieses sein oder muss jenes sein. Aber um ehrlich zu sein, es ist alles nur Geräusche. Es gibt viele unterschiedliche Dinge und wir arbeiten nur an dem, was nicht da ist. Nicht visuelle Realität und nicht virtuelle Realität. Und das heißt, wenn ihr denkt, ihr müsst da ein Kopfding haben, um virtuelle Realität zu erstellen, dann denke ich da anders. Und ich bin an diese Frage wieder und wieder gekommen und ich habe realisiert, dass es verändert darüber, wie wäre eine virtuelle Realitätserfahrung für die Blinde und können, kann diese Erfahrung überhaupt die visuelle Kultur herausfordern. Und das hat dazu geführt, dass ich diesen unendlichen Anschauobserver gebaut. Das ist eine virtuelle Realitätserfahrung für die Blinden. Und als ich dieses Projekt anfing, dachte ich, okay, ich mache eine Virtualisierung für Blinde, aber kann von Sehenden auch erfahren werden können. Und Leute sagen, hey, du bist verrückt. Also, jetzt werden wir in viele Folien gehen, wo nur Text drauf steht, weil ich habe das Gefühl, dass ich ein weniger visuellen Anspruch habe von jetzt. Also, es muss viel erforscht werden. Es gibt ein Limit zu deiner Liebe. Forscher. Ja, da war diese Realisation. Und ich wollte mit einem, ich bin zu einem blinden Targefgang in den Niederlanden und die haben dort eine Non-profit Organisation. Und die bringen Leute in einen Dunkelraum. Und das ist eine Multisensorversion von dem Glimps, den ihr gerade erfahren habt während dieser Präsentation. Sie hatten diese mehreren Räume, wo man hingeht und es gibt kein Licht, die Augen versuchen, die ersten paar Minuten der Nacht zu suchen. Und dann werden sie einfach müde, die ganzen Zeit sich darauf zu fokussieren, nicht zu suchen. Und dann gibt man auf. Und man fängt an, die anderen Sensorik zu benutzen. Die ganzen Kräfte, die man hat, entdeckt man dann, die über die Sicht hinaus geht. Und ich habe da fünf Tage mit ihnen gelebt. Tag und Nacht. Und dann habe ich wirklich so viel gelernt. Und was ich im Endeffekt gelernt habe, davon war, dass diese Leute toll sind. Jani und Tina gehen über Feuer und bringen Leute bei, wie man über Kohlen geht. Sie bringen Leute über Jahre nach. Und der andere ist ein Hacker, er baut Amateurfunkgeräte und mehrere Linux-Geräte. Und sein Schnaps ist sehr gut. Während sie ihre blinde Erfahrung mit mir geteilt haben, habe ich ihnen mit den blinde Virtualerität-Erfahrungen gemacht. Und ich sage, ich nehme die besten Audio-Sachen und zeige sie. Und sie sagen mir, das ist gut, das ist schlecht. Und ehrlich gesagt gibt es überhaupt keine UX-Erfahrung in virtualer Realität. Es gibt keine Sprachminüs, keiner denkt darüber nach. Es hat mich sehr traurig gemacht. Es gibt eine große Möglichkeit, eine Veränderung herbeizuziehen. Und während ich mit ihnen zusammengearbeitet habe, habe ich wirklich eine Idee für mein Stück bekommen. Der Hintergrund, über den wir reden. Sie sagen, was ist, wenn wir diese Gruppe hätten von Untergrundhackern, die versuchen wollen, diese visuelle Kultur über den Haufen zu schmeißen. Und das erschien in mir weiter zu laufen. Und das bringt mich wirklich zu dieser Geschichtsart, die ich erzählen möchte. Ihr könnt das kaum sehen, das ist cool, das ist in Ordnung. Das ist dieses grundlegende Bild, das unsere Weg zeigt. Es ist traurig, es ist eine unbekannte Figur. Und ihr könnt seit in diese Gruppe eingeladen, diese Gruppe von Hackern, die versuchen werden, diese großen Kräfte der Gesellschaft zu umgehen. Und sie benutzen Vibrationskräfte, um dies zu tun. Sie stellen diese üblichen Wege zu benutzen. Sie benutzen Eco-Lokation, um sich fortzusehen. Sie benutzen molekulare Bewegungen und zu teleportieren. Und sie benutzen, dadurch, dass sie die sektronische Schifte, das wird auch unter der Erde, können sie Bewegungen über ihnen erkennen und können auch Sachen erkennen, wo Geräusche, visuelle Sachen interpretieren können. Und das sind Sachen, über die wir geredet haben. Und es wurde Teil des Spieles. Und wir konnten uns ein Teil von denen schon in die Erfahrung inkludieren. Eco-Lokation zum Beispiel. Wir haben Frequenzmatch, wo man unterschiedliche Materien draufziehen kann. Und dann passt die Frequenz, und es kann explodieren, neue Wege in dieser Untergrund öffnen. Und was die Erklärung wirklich ist, ist, dass man eine zweite Erklärung, eine Metaerklärung Geschichte hat. Wie kann das eine wirkliche Gesellschaft von blinden Hackern inkludieren, die möglicherweise, einfach nur diese Erfahrung und diese Kunst. Wie können wir sich die spezifischen Installationen nehmen, die in einem speziellen Ort, in einem speziellen gesellschaftlichen Event uns online bringen und diese Zusammenführung von am Ende der Erfahrung ist jemand in der Erklärung Teil dieser Gruppe. Und wenn man diese Erfahrung wieder verlässt, dann hat man vielleicht ein Text auf dem Handy, wo der Link zu der Wegseite ist, die jetzt Zugang zu dieser Gesellschaft ist. Diese Interaktion war ein Teil der Idee. Ist es möglich, eine Gruppen-Community-Plattform, die nur Audio ist, mit dem man aber auch rumkommt, wo man als Blinder navigieren kann? Das sind einige dieser Ideen, über die wir in diesem Projekt nachdenken. Die technische Seite ist relativ interessant. Ich habe zusammengearbeitet mit einem Audio-Designer, der sich speziell in Raumbasiertem Ton spezialisiert hat. Mit dem haben wir den Bereich definiert. Wir benutzen Audio-Vals, das ist ein Standard-Sound-Engine für Unity und Unreal. Aufgrund des Plug-ins können wir die Echtzeit-Spielgemometrie definieren und können Audio-Reflektionen zeigen. Wir schauen sehr stark darauf an, wie realistisch sich das für Blinder an. Ist das akzeptabel? Ist das realitätsnah? So weit ist es sehr fragwürdig. Wir fragen uns, ist Technologie so weit, ist das etwas, wo wir weiter forschen müssen, wo wir mehr nachschauen müssen, wo wir neue Forschungsinstitute nehmen, dazu ziehen müssen, um zu diesem Punkt zu kommen. Wir arbeiten mit Unity und anfänglich werden wir darauf fokussiert, es auf Kopfhörer zu basieren. Aber mit einem ausreichenden, kleinen Markt für diesen Headset, die Blinder-Benutzer wirklich Zugang haben, ist möglich, dass man Zugang hat, dass man sowohl auf Computer-Benutzer als auch auf Benutzer von Mobilgeräten in Weisberg ins ZD ist, in beiden zu veröffentlichen und dadurch flexibel zu sein. Das sind die vielen unterschiedlichen Ideen, über die wir nachdenken. Kann eine reine Audio-Version existieren, können wir Erfahrungen machen, die wir weiternehmen, wo ein Installationsformat dabei entsteht. Es sind alles unterschiedliche Ideen. Das ist ein Projekt, das sich weiterentwickelt. Das ist das Team, das wir haben. Das ist Joni und Tina und Katar und Chris, der das Ganze weithält und die ganze Interaktion hat zusammen mit mir. Das Ziel war, dass man Blinde in die Möglichkeiten gibt und mehr über unsere Sensorik erklärt, die über die Sicht hinausgeht. Wir hoffen, dass wir immer noch ein Zeichen von der Stärke, der Dominanz von visueller Kultur ist. Und wie diese visuelle Kultur die Menschen stark anspricht und wie man das umgeht. Und in einer größeren Idee ist es, dass ich eine Sprache für Blinde erstellen möchte mit massiver Technologie und wo das der nächste Schritt ist, wie wir mit Computer für die nächsten 10 Jahre interagieren. Ich würde es lieben, wenn das eine mögliche Aufwegruf ist, dass das jetzt gemacht werden muss, bevor weitere Projekte herauskommen, wovor ein neuer Hardware entwickelt wird, dass diese Zyklus da ist. Und ja, eine Gesellschaft, eine Gruppe erstellen zwischen blinden Hackern, der in der realen Welt ist, wo sie anonym diskutieren müssen, wo sie vielleicht sogar ein paar der Techniken zusammen agieren können, wo auch die Geschichte stammt. Und ja, ich habe ein Video. Und das werde ich jetzt zeigen. Das ist ein Video von einem frühen Prototypen. Unsere Mitglieder finden uns normalerweise, aber du bist anders. Du bist hier für was Besonderes. Ich weiß, ihr fragt euch, warum wir alle hier sind. Wir haben nie eine Stimme gehabt. Wir sind immer nur Nachgedanke und wir sind machtlos. Und bis jetzt haben wir das geglaubt, aber das ist kein Problem, weil es jetzt unsere Anhänge gibt. Und die haben uns unsichtbar gemacht. Das heißt, die haben uns noch nie mit uns gerechnet. Wir fangen mit den feinsten Staaten an. Und da werden wir eindringen. Und wir werden andere wie uns finden. Und werden größere Initiativen über die Welt beschleunigen. Das war das Video. Ich bin froh und offen für Fragen. Und ich habe ein paar Fragen für euch, weil ich denke, dass einige von euch schlau sind als ich. Ich frage euch, ob jemand erfahrt. Ob jemand Ton zum Herken verwendet hat. Und ob es einen Forscher gibt, der unserem Projekt helfen könnte, den ich nicht kenne. Habt ihr darüber nachgedacht, dass man aktuell, soweit ich weiß, für eine große Installation braucht? Das heißt, man kann diese Erfahrung nicht zu Hause haben, wenn man einfach nur ... Für eine visuelle Erfahrung kann man einfach ein Headset kaufen. Aber gibt es ein Audio-Virtualität Headset? Das ist etwas, wo ich es mit Oculus gesprochen habe. Um die Sensoren, die sie haben, zu erweitern, dass man die ... dass die Kopfverfolgungen einsetzen können. Wenn man in einer Amazonischen Welt ist, dann hört das Ding, in welche Richtung man den Kopf dreht oder wo man sich bewegt. Aber die haben mich weggeschickt und haben da nicht weiter darüber nachgedacht. Aber es ist etwas, worüber ich nachdenke. Und deshalb habe ich auch erwähnt, ob man vielleicht ... Audio-Realism-Bibliotheken ... und wo man die mit dem Telefon scannen kann. Das heißt, die Leute scannen den Raum mit ihrem Telefon und bekommen davon Audio und die kriegen Sprach-Erkennung, um ihre Leute durch den Raum zu führen, weil die nämlich mit ihrem Telefon vertraut sind und damit interagieren. Vielen Dank für den Vortrag. Es war sehr interessant. Ich habe ein paar Erfahrungen damit, durch 3D-Geräusche, 5D-Geräusche zu lesen in der Musik. Es kann mit einem normalen Kopfverfolg gemacht werden. Und die Frage ist ... ich glaube, es ist auch nicht entwickelt. Es ist ein verändliches Projekt. Hast du jemanden darüber nachgedacht, etwas zu machen und was blinde Menschen lernen können, wie man wirklich die Realität zuhören kann? Ein paar Wege, wie man ... so zu bringen, wie man auf Geräusche wasserachtet. Die waren nur normale Kopfhörer verbraucht. Ich meine, Augen zu machen und die Geräusche um mich herum höre Geräusche. Die Idee ... die Idee wird eine Erfahrung, wo dich der Typ einem die Haare schert. Das ist eine sehr interessante Erfahrung. Ja, das ist eine interessante Idee. Ob man ein ausbildendes Element hat. Und ich mag es, dass du den Rasierer erwähnt hast. Das war neben den anderen Sachen mein Favorit. Das war wirklich eindruckend. Mein Aurol hat seinen Platz ein räumliches Audio. Die haben versucht, das zu erklärt, aber es gibt ein psychologisches Phänomen. Psychologically fix us out. Das bewegt uns in einer Art und Weise, die ist wirklich beeindruckend. Watch the barber shop for audio experience on YouTube. Wenn ihr die Erfahrung noch nie auf YouTube gesehen habt. Was ist das Equipment für Haptics? Ja, das, was wir benutzt haben, ist der normale Oculus Touch Controller. Wir haben uns für Förderung beworben, um mit anderen Sachen auszupieren. Aber wir haben mit Hardlight gesprochen. Hardlight war ein ganz körperer Anzug. Für Gefühle. Aber die sind leider pleite gegangen. Und jetzt schaue ich in was Einfaches. Ein Armwand, was Viprationen erzeugt, die die ganze Hand bewegen. Dann fühlt man was. Und das mit dem Ultra Sound, das sieht auch sehr toll aus. Hast du Erfahrung mit Haptics? Ja, mit Capture Vaters gespielt. Die Illusion auf eurem Haut erzeugt, wenn man das Gefühl hat, dass man durch die Luft gezogen wird. Es gibt einen Psychologen, der da mit blinden Leuten arbeitet, instantibog. Der hat viele verrückte Erfahrungen. Es ist ein Vibrationsmotor, es ist sehr schwer, das zu erklären. Dann zieht es ein durch die Luft, man kann verdammt coolen Zeug damit machen. Im Rims and Tiber kannst du einfach googeln. Ja, das ist toll, danke. Es gibt Fragen aus dem Internet, IRC, jemand freie... eine spezielle Realität machen. Ja, natürlich. Das ist, warum ich idealerweise... das ist eine Installation. Da integrieren wir auch echte Objekte. Vielleicht kann man auch Geschmack schicken. Das habe ich mit der Augenbinde gemacht. Vieles hängt davon ab, wie zugänglicher wird, vor allem mit den haptischen Sachen. Und die Geräte einfach weitere Verwaltung finden. Mikrofon 2. Hallo, vielen Dank. Ein sehr spannendes Projekt. Ich würde sehr gerne zusammenarbeiten, wie du eventuell hast, wie du mit anderen Leuten zusammenarbeitest. Seid ihr in einem Ort? Ein bisschen über das Zusammenarbeit reden. Ja, natürlich. Wir hatten die anfängliche Idee. Und ich habe Joni und Dina das erzählt. Und die haben mit dem Konzept... sind weitergerannt mit dem Konzept. Und dann haben wir Kader davon erzählt und die hat die Virtual Reality-Erfahrung für die Blinden gemacht vor ein paar Jahren. Und dann haben wir hier Entwicklung gestartet. Er wohnt in San Francisco, also haben wir über das Internet zusammengearbeitet. Und Chris habe ich aus Atlanta gekannt. Und den habe ich auch mit reingezogen in das Projekt. Und ich bin zu diesen verschiedenen Orten gereist, um dort Hackathons zu haben. Und wir haben so viel daran gearbeitet, wie wir können. Die nächste Frage, again, für Mikrofon 2. Wer ist über Forschung geredet, heißt, die Idee, bei deinem Projekt kämpfen können. Wahrscheinlich kälte das schon, aber sicher zu sein. Es gibt eine existierende Gruppe von Audiospielen, die Leute, die das machen. Michael Urbanek, der da forscht. Vielleicht wäre das auch etwas halt für dich. Ja, danke. Ich werde Ihnen nachschauen. Okay, any other questions? Do you have new questions from the Internet? No questions. Do you have new questions from the audience? Hi. I just want to actually get us to do this one more time. Vielleicht können wir das noch... ...if you guys are up for it. Aber wache, wenn ihr so weit seid. So this time, as we close our eyes... Nicht mehr, wenn wir unsere Augen schließen, ist es wichtig, dass wir einen Moment uns nehmen und uns versuchen, sich vorzustellen, wie wir waren, als wir das letzte Mal erfahren haben. Und ich möchte dieses Gefühl und dieses Zuhören und das Riechen und das Schmecken und versuchen, eine imaginäre Welt um uns herum zu erstellen, die dieses Gefühl hat, so real wie möglich zu sein. Thank you so much for your time and all your everything. Vielen Dank für Ihre Zeit. Und für alles, ja, vielen Dank für Ihre Aufmerksamkeit.