 So, ich beginne mit Ben Sr. zu Ihnen. Er ist eine bedrohliche Forscherin und Inventor. Er hat ein Thema. Ich freue mich wirklich auf das Allkongress, um zu sehen, wie wir es sehen, und vor allem zu sehen, wie der Brunnen funktioniert. Es geht nicht um die Augen. Willkommen zu dem Talk Hacken, wie wir sehen, von Benjamin Sr. Wir sind Flo und Franz T. Und wir freuen uns über Feedback zu den Übersetzungen auf Twitter unter dem Hashtag C3T. Benjamin Sr. ist ein unabhängiger Wissenschaftler und wird jetzt diesen Vortrag halten. Hallo, everybody. Hallo, alle. Ich würde mit ein paar Dank sagen, dass ich hier sein kann und ich bin auch sehr dankbar, dass ihr alle hier seid. So, ich werde darüber reden, wie man hacken kann, wie man sieht. Ich widme das beim Sohn Arthur. Ihnen würde dieses Projekt nie gestartet sein. Und ich widme es auch all den vielen Freiwilligen, die ihre Energie, ihre Zeit und ihre Erfahrungen bereitgestellt haben, ohne die dieses Projekt nicht möglich gewesen wäre. Dies ist über Schwachsichtigkeit. Ihr kennt vielleicht Leute mit Schwachsichtigkeit. Das sind Leute, bei denen ein Auge nach außen oder nach innen fällt. Es muss nicht immer sein. Manchmal ist es nur manchmal, wenn man müde ist. Manchmal schaltet es auf die andere Seite. Manchmal ist es das andere Auge, das einfach zur Seite fällt. Also ich möchte einmal eine Frage. Wer hier in den Zuschauern hat Schwachsichtigkeit, melden sich ein paar. So, bevor wir darüber reden wollen, was wir hacken wollen, müssen wir erstmal unterstehen, was es ist, was wir hacken wollen. Was heißt das? Es klingt sehr offensichtlich, wir sehen mit unseren Augen, aber nicht wirklich. Wir sehen durch unsere Augen in unserem Gehirn. Das möchte ich euch einmal klarmachen. Seltsam ist, dass das Gehirn eigentlich am Rückseite des Auges start. Die einzige Stelle, wo das Gehirn außerhalb des Auges startet, der schützenden Hülle des Kopfes ist, ist das Auge. Der Verrückte ist, da sind 100 mal so viele Gehirnzellen, also im Rückseite des Auges, als es Aktionen gibt, die Signale zurück in das Rest des Gehirns bringen. Das Auge nimmt nicht nur Licht aus, sondern auch aus, was wir tun. Das Auge ist das Auge. Manche Rezeptoren sind für bestimmte Wellenlängen spezialisiert oder unter bestimmten Lichtbedingungen. Andere Feuern, wenn einige Rezeptoren eine Kontrast erkennen, also ein paar Sensoren, dann ist das Auge. Das Auge nimmt nicht nur Licht aus, sondern auch aus, wenn einige Rezeptoren eine Kontrast erkennen, also ein paar Sensoren stellen Helligkeit fest, andere Dunkelheit, dann feuern sie. Andere erkennen die Bewegung von Licht oder über die Rezeptoren, insbesondere, wenn sie eine Lichtfälle über die Rezeptoren bewegt. Das gibt es eine hochstrukturierte Daten, die etwa 10 Megawit pro Sekunde entsprechen, die dann über den Sehnerv überleitet werden. Wenn sie im Gehirn ankommen sind, diese vielen Daten, vielen kleinen Fragmente der Wahrnehmung völlig kontextfrei an. Und das Gehirn sortiert sie dann so, kombidiert sie mit den anderen Sinnen des Körpers, um daraus Sinn daraus zu machen, um die Umwelt erklären zu können. Bewegst du dich oder bewege ich mich? Und dann wird all dieses zusammengesetzt, sodass du bewusst wahrnehmen kannst, dass du bewusst die Dinge wahrnehmen kannst, auf die du deiner Wahrnehmung fokussieren musst, sodass du erkennen kannst, und dass deine Augen die Objekte, für die du dich interessiert, verfolgen können. Das sind eine der Teile, die den visuellen Cortex ausmacht. Diese sind ja buchstäblich neurale Netzwerke, das sind neurale Klassifikatoren. Und dieses Ganze funktioniert unbewusst. Es verarbeitet diese ganzen vielen Fragmente und leitet diese ganzen Sachen unbewusst weiter, bis dahin, wo man dann schließlich der Wahrnehmung bewusst wird. Da gibt es diese vielen kleinen Netze, die interagieren miteinander, diese Ausgaben dieser Klassifikatoren fließen hin und her, und suchen einen Suchraum ab und versuchen, ein wahrscheinliches Ergebnis zu finden. Was ist es, worauf du wahrscheinlich hin ist? Das sind nur Werte. Kann man das erfahren? Ja, man kann. Wir haben an diesen Kongressen, oder auf früheren Kongressen gesehen, wie neurale Netzwerke, Klassifiziere mit neutralen Netzwerken angegriffen werden können, sodass sie die falsche Klassifikation machen. Und optische Täuschungen sind genau das, sind genau solche Angriffe auf die Klassifizieren, außer dass sie nicht auf ein computerneutraler Netzwerk arbeiten, sondern auf unserem Gehirn. Man kann das auf verschiedenen Abstraktionsniveaus machen. Es gibt so viele verschiedene optische Illusionen. Ich zeig euch ein paar, nur um den Punkt zu betreuen. Guck auf den Testzentrum von einem dieser Kreise und dann fangen die anderen wahrscheinlich an zu rotieren. Außer, dass sie natürlich nicht rotieren, ist es komplett fest. Das verwirrt den Klassifizierer der Rotation erkennt. Das hier ist ein Bild aus den 1890ern und der Künstler hat das extra 2 deutlich gemacht. Man kann es aus einer Ente erkennen oder man kann es auch aus einem Hasen erkennen. Aber was lustig ist, man kann es nicht als beides gleichzeitig erkennen. Man kann es versuchen, wenn man will, man schaltet schnell und hin und her, aber das macht immer eine Entscheidung, entweder es ist eine Ente oder es ist ein Hase. Aber nie beides an der gleiche. Hier haben wir noch eine Illusion. Das sieht aus wie Berge über einem See, aber da ist überhaupt kein See. Das ist eine weiße Mauer an der Rand des Gartens. Das ist das, wo wir zum Beispiel Magier täglich arbeiten, solche Täuschungen. Lass uns darüber zurückkommen, was heißt es mit zwei Augen zu sehen. In jedes Auge sieht ein flaches Bild der Welt und das Gehirn bringt das zusammen. In Primaten und im ganzen Haufen Fleischfressentieren hat es sich so entwickelt, dass die Augen an der Vorderseite des Schädels sind und beide nach vorne gucken. Das gibt eine große Überschneidung zwischen dem Seefeld der beiden Augen. Das erlaubt es den Tieren, die Entfernung abzuschätzen. Das ist ziemlich wichtig für Primaten. Warum arbeitet das? Auf einer physikalisch läuft es, funktioniert es, weil die Augen horizontalen Abstand haben. Jedes Auge hat ein etwas anderes Blick auf die Welt. Man kann die beiden Bilder oben übereinander leben und man sieht, dass diese Bilder vorne ein Überlapp haben, diese Parallaxe. Wenn du einen VR-Headset hast oder einen Stereoskop, dann gibt es ein rechtes und ein linkes Bild. Wenn man übereinander, kann man diese Überschneidung sehen und diese Äste würden herausspringen aus dem Bild, weil sie die Schaltkreise für die Tiefenerkennung schriggern. Das ist sehr wichtig für Schwachsichtigkeit. Das ist etwas, was man in den ersten Wochen oder Monaten des Lebens lernt. Wenn man ein Baby in der Krippe sieht, das war mit einem Teddybär oder so, fängt es an, mit den Augen in alle möglichen Richtungen zu gucken. Und es lernt mit der Zeit, beide Augen auf ein Ding zu gucken und es lernt mit beiden Augen gleichzeitig eine Sache zu betrachten. Und es sieht, wenn es genau darauf funktioniert, ist diese Parallaxe verschwunden. Und in der gleichen Zeit entwickelt das Gehirn ein Gefühl für Entfernung. Es fühlt den Input aus den Augenmuskeln und es weiß, wie weit es ist, wenn die Arme sind oder wie lange es braucht, da hinzukrabbeln und setzt das Gehirn zusammen und gibt ein Gefühl von Entfernung. So nimmt das Gehirn die Bilder zusammen und sagt, ah ja, so weit ist es ungefähr. Und das wird ja parallelisiert. Wenn man an dem Objekt vorbei guckt, also wenn ihr einen Finger vor euch halt und ihr guckt auf mich zum Beispiel, dann seht ihr, dass ihr euren Finger doppelt seht. Und wenn ihr herum geht oder durch den Dschungel läuft und werdet ihr vor allem Tiger verfolgt, dann seht ihr verschiedene Parallaxen von den Dingen um euch herum und es gibt euch ein Gefühl von Tiefe für den Raum, den ihr euch aufwaltet. Wie passiert das? Das passiert sehr, sehr früh in dem visuellen Verarbeitungssystem. Die Signale von den Augen werden an das Ende des Gehirns in diesen V1 Cortex geroutet und da fängt das meiste von der Verarbeitung an. Da findet man diese ukulären Dominanzzurollen. Diese Streifen signalisieren die Eingaben. Millionen davon, die hellen Streifen signifizieren den Input von einem Auge und die hellen von dem anderen. Und wenn man hinein guckt, sieht man da diese Überlappung, das nennt man eine Hyperseule. Das ist eine seltsame Struktur, die man in der Abgehörn findet. Das ist ein multidimensionaler Klassifizierer. Es klassifiziert Orientierung und Farbe und ähnliche Strukturen klassifizieren in anderen Teilen des Gehirns Geräusche und Berührungen. Und der oberen Anfang der Hyperseule geht um mehr größere Abstände in dem Eingabe von dem Auge, werden verglichen, um zu schauen, wo was sich ändert oder was gleich ist, wo dann der Ergebnis ist, auch diese Dinge sind das gleiche oder diese Dinge sind anderes? Woher kommt diese Schachsichtigkeit? Viele Sachen können falsch gehen während der frühen Zeit des Lebens. Gehen können nicht ordentlich editiert werden. Es können Gifte in der Umgebung sein, die Mutter kann nicht ordentlich sein. Und es gibt viele Möglichkeiten, die bei den Augen was schiefläuft. Ich kann zu viel Flüssigkeiten im Auge, zu wenig Flüssigkeit im Auge, optisch anerbst, kann Probleme haben. Das Gehirn kann die falsche Form haben. Gleichzeitig können die Babys in der Gebärmutter 3 bis 400 neue Neuronen entwickeln. Und bei vielen von den Situationen ist das das selbe Ergebnis. Ein Input ist sehr anders zum anderen Auge. Jetzt haben wir diese Situation, wie dieses Gehirn, die Bilder nicht mehr zusammenbringen können. Es ist nicht mehr ausreichend oder genug Ähnlichkeiten. Das heißt, dass sie doppelt, wie z.B. wenn man sehr, sehr besoffen ist. Von einem Evolutionssituationen, wenn ein Affe nicht ganz klar denkt, dann wird er gegessen. Und es gibt halt diesen Plan B, das nennt sich am Lypropia. Wenn das Gehirn nicht so ganz klar ist, was passiert, dann wird eins der Augen unterdrückt. Das heißt, man sieht klar, aber man hat keine tiefen Erkennung. Und man sieht nur einen Teil von seiner Umgebung. Und wo passiert das? Naja, viele unterschiedliche Theorien. Es ist nicht wirklich bekannt. Einige der neuesten Hypothesen sind, dass es spezielle Bereiche gibt, die schauen, ob das die beiden relativ ähnlich sind. Und feststellen, wenn sie, oh, das sieht ganz komplett anders aus, ich schalte mich einfach aus. Die haben halt diesen frühen Bereich des Gehirns, der ganz am Anfang ist. Das heißt, die Augen funktionieren, die Daten kommen dahin und dann werden sie unterbunden. Das heißt, sie gehen nur weiter in einer sehr schwächeren Form. Der nächste Schritt ist, oder die nächste Konsequenz, ist häufig Strabismus. Das heißt, diese schwache Auge hat diese Unterdrückung und dann die schwache Auge. Wenn die das Auge in eine Richtung abdriftet, ist es auch nicht relativ klar, warum das passiert. Es kann sein, weil diese Augen die ganze Zeit hin und her kämpfen mit Muskeln auf wilden Seiten. Das heißt, wenn es positioniert ist, dann wird es nicht bewegt sich einfach hin und her. Und vielleicht ist eine Muskelgruppe einfach stärker. Das heißt, entweder nach rechts gezogen oder vielleicht ist es auch, weil das Gehirn wirklich ein Signal bekommen würde, dass so anders ist wie möglich oder wenn es einfacher auszufiltern ist. Das Problem ist, dass Evolution noch nicht über Augenärzte wusste. Das ist das tollste Tage, haben wir Augenärzte, die Laser ins Auge schießen und Linsen austauschen und alle mögliche magischen Sachen. Aber Evolution hat diesen Zurücksetzungsschalter nicht eingebaut. Das heißt, wir können nicht neu starten. Das heißt, sobald wir das originale Problem gelöst haben, schaut das eine Auge immer noch in die Ecke und ist ausgeschaltet. Die Frage ist jetzt, wie lösen wir dieses original, logisch evolutionäre Problem? Ich möchte erst beim Perle der Konsequenzen reden. Also die persönlichen Konsequenzen von Augen, die haben da, ist, dass sie keine Tiefe erkennen können. Das heißt, sie können einfach häufiger stolpern oder fallen. Das ist einfach Stress. Sie sind häufiger weniger detailorientiert, wen sie ihren Körper benutzen. Die Leute, die entteilt ihrer als Gesichtssituation sind, sind nicht so klar, wer in sozialen Situationen was sagt. Und das ist einfach noch ein weiteres Stressidee im Teil. Es ist ein Problem, wenn man sich hässlich fühlt. Das ist problematisch, wenn man Leute, die nicht wissen, ob sie, ob du sie anschaust oder jemand anderen, Stress und Stress und Stress. Das ist kein, das ist ein großes Problem. Soziale Logie reden wir, zoologisch reden wir über 7 Millionen Leute pro Jahr, die einen Nachteil haben. Es ist nicht unbedingt notwendig, wenn wir das darüber tun können. Und weil es überall ist und 74 Prozent der Welt weniger als 10 Dollar pro Tag haben, haben viele Leute keine Option. Neurologisch, was sind denn die Konsequenzen? Wir haben, wir sind mit den ganzen Strukturen geboren, um die Augen zusammenzuführen. Wir haben die ganzen Strukturen, die dazu sorgen, dass wir schauen. Wir haben mit der tiefen Echerung, wir sind können, aber das ist alles nicht ordentlich verbunden. In den ersten, frühen Phasen des Lebens haben wir das nicht zusammenbauen können. Das ist ein System, das ist einfach nicht, sondern es soll funktioniert. Und der schönsten Fall, wenn einer der beiden, die im Ende dieser Gruppe keine Interpret hat, können es sein, dass sie mit der Zeit reduzieren. Das heißt, an Stellen von Streifen haben wir diese punktuellen Inseln, das kann zu Blindheit führen. So was passiert jetzt? Ihr könnt vielleicht einen Visionen, einen Sichttherapisten treffen. Das ist wie Sprachtherapisten. Die können ja eine Stimme wieder, wenn ein Gehirnproblem existierte. Aber das ist sehr selten, dass man so eine Person findet. Es gibt ungefähr 2.000 in der Welt, 1.000 davon in Amerika und sie können mehr als 400 Dollar pro Stunde bezahlen. Das heißt, außer man ist reich und hat eine gute Versicherung, kommt man da einfach nicht rein. Das ist 100-mal wahrscheinlich ein Obmantologist zu treffen. Und in den letzten 100 Jahren haben sie Patching und Operationen gefordert. Die Patching ist die Idee, dass man das schlake Auge abschaltet und mit einem auf Liebe überdeckt und das schwachere Auge besorgen lässt. Das hat zwar ein paar Vorteile, das heißt, die beider sollen, müssen benutzt werden. Aber wenn man das zu viel macht, dann sagt das Gehirn, hey, ich möchte nur ein Auge benutzen. Was machst du? Du möchtest das Auge benutzen lassen? Das ist in Ordnung. Und scheidet auf das andere Auge um. Und selbst wenn das nicht passiert, man trainiert nur diese einäugige Version zu sehen. Man trainiert nicht die Koordination zwischen den beiden Augen, wo die ganzen anderen Sachen hinzukommen, die tiefen Erkennung und so weiter. Ein paar Kinder haben Glück, ein paar Kinder durch Patching von ein paar Stunden kriegen irgendwie diese Situation und sie können die beideäugige Gesicht wiederbekommen. Aber das ist nicht passiert nicht immer. Die andere Option, soweit Optimologer sind, ist, dass man die Augenmuskeln ein bisschen zusammenschiebt, dass die Situation, wo das Auge normalerweise ist, ungefähr in der Mitte des Lichtes ist. Es ist nur kosmetisch. Das bedeutet nicht, dass es wertlos ist, aber das führt, dass man sich besser fühlen kann, aber das führt nicht dazu, dass das Gehirn wieder gerade erarbeitet. Wir kriegen nicht die Beideugigkeit wieder zurück. Aber es ist eine Möglichkeit, weil wenn die Augen ungefähr gerade sind, bedeutet es, dass man selbst durch die billigsten virtuellen Realitäts-Headsets durchschauen kann. Diese Headsets machen etwas Nützliches. Es ist weniger über die virtuelle Realität, sondern mehr die Möglichkeit, dass man jedes Auge unabhängig voneinander gezielt ansprechen kann. So, was wäre, wenn nachdem die physikalischen Probleme gelöst sind, wenn wir an dieser Sperre vorbeihacken können. Wir wissen, dass diese Klassifizierer im Gehirn, diese optischen Dominanzsäulen, lernen können, dass sie lernen können durch trainieren. Können wir Umgebungen bauen, die unbewusst diese binokulare Sehen wieder herstellen können. Jetzt kommen wir zu dem, was wir gemacht haben. Wir haben sehr grundlegende Experimente gemacht, sehr grundlegende Hypothesen, einfache Hypothesen, die über anektotische Beobachtungen basiert sind. Das sind Beobachtungen, die wir bei der Entwicklung gemacht haben. Jedes Mal, wenn wir mit einem neuen Personen mit Schwachsichtigkeit gearbeitet haben, haben wir neue Dinge erkennt. Vier, fünf Dinge haben wir erkannt, die sich geändert haben, die anders waren. Das war ein konstanter Lernprozess. Also, lass uns paar Dinge falsifizieren. Die erste Hypothese, also die übergreifende Hypothese ist das Pakt. Es macht irgendwas. Wir wollen falsifizieren die Hypothese, dass es nichts tut. Also, die Hypothese ist ein Teilnehmer kann beide Augen nicht gleichzeitig benutzen. Die klassische Test ist, dass die Leute nur mit einem Auge zur Zeit sehen können. Zuerst haben wir diese Suppression bestimmen. Also, lass uns darüber reden, was die Person im Headset sieht. Die eine Auge sieht Pfeile, die nach rechts zeigen, die andere Pfeile, die nach links zeigen. Normalerweise wird das Gehirn versuchen, okay, ich sehe hier einen Ding, und man sieht diese komische, überlappende Struktur. Und wenn man das Leuten zeigt mit normaler Schwachsichtigkeit, dann sehen sie nur die Pfeile, die nach rechts zeigen oder nur Pfeile, die nach links zeigen, weil sofort eine Auge supprimiert wird. So, Unterhypothese. Ein Teilnehmer in der Studie kann die Supprimierung nicht abschalten, um mit beiden Augen zu sehen. Nun, wir haben das getestet. Was machen wir? Blinker. Das rechte Auge sieht Pfeile oben, und das linke Auge sieht oben nichts. Das andere Auge sieht unten Pfeile nach rechts, und das erste Auge wieder unten nichts. Und wenn man das übernaht, sieht man, sieht er tatsächlich Pfeile in beide Richtungen. Das andere Auge ist, was nicht möglich sein, aber das ist nicht so nützlich, weil wir wollen, dass Leute beide Augen benutzen, um die gleichen Dinge zu gucken und nicht halt, um auch verschiedene Dinge zu gucken. Was wir erreichen wollen, ist, dass beide optische Dominanz zu säulen, ein gleich intensives Bild sehen. Also ist die nächste Hypothese ein Teilnehmer in der Studie, der kann nicht mit beiden Augen gucken, während Supprimierung aktiv ist. So, beim ersten Versuch hatten die Signale für beide Augen, haben die gleiche Intensität. Das linke Auge ist ein Pfeil nach links, das rechte Auge sieht ein Pfeil nach rechts und im Gehirn wird es als sechser Stern gesehen. Wenn das linke Auge unterdrückt, supprimiert wird, sieht der Teilnehmer ein Pfeil nach rechts. So wie kann man diese Signale gleich machen? Nun, wir können einfach, dass die Intensität des Signals von dem rechten Auge schwächer machen. Der Benutzer guckt einfach nach oben oder nach unten und die Positionierung macht das eine oder das andere Auge die Intensität schwächer. Und es gibt immer irgendwo einen Punkt, wo der Teilnehmer plötzlich diese einander überlappenden Strukturen sehnt, von diesen Pfeilen, die in der gegensatzte Richtung zeichen. Das heißt, wir haben diese Supprimierung, ein Brutforce-Weg gefunden, um an dieser Supprimierung vorbeizukommen. Das ist ein Trick, den wir in anderen Umgebungen benutzen. Wir denken also, wir haben diese Hypothese widerlegt. Wir haben gezeigt, dass wir diese Supprimierung abschalten können, dass wir an die vorbeikommen können. Warum war es dann in den ursprünglichen physikalischen Testen so, dass sie immer gezeigt haben, dass es nicht möglich ist? Ich glaube, dass dieser physikalischen Test, da gibt es immer Verwirrungen. Es gibt immer einen Hintergrund, es gibt einen Boden und eine Wand und eine Decke. Und das gibt genug Eingaben für die Augen, dass dieser Konflikt getriggert wird und dass das eine Auge supprimiert wird. Wenn es einen Head-Zeit aufhat, ist das komplett anders, weil es diesen ganzen Hintergrund nicht gibt. So, die nächste Unterhypothese ist, auch wenn wir mit beiden Augen sehen können, dass er nicht die Bilder von beiden Augen fusionieren kann, solange er schwachsichtig ist und schielt. So, wie kommen wir zum Strabismus? Ein Auge ist falsch ausgerichtet. Was man im Head-Set macht, wir können einfach das komplette Universum drehen, so dass es richtig vor dem falsch ausgerichteten Auge steht. Einfach. So, jetzt ist das gleiche Objekt, egal wo es ist, erscheint das gleiche Objekt an der gleichen Position an der Retina. Und so, wie man das Gehirn erkennen kann, das ist beide an der gleichen Position. Ja, also der Teilnehmer hat das Head-Set um. Also wir haben tatsächlich verschiedene Versionen für Kinder und für Erwachsene und in verschiedenen Versionen. Aber das ist normales Sting. Also wir haben einen Kreis, der ist gelb unten und der andere ist blau oben. Und der eine bleibt da. Einer ist fix im Wahrdehmung, also relativ zum Auge und der andere wird festgehalten in absoluten Positionen und das erlaubt es dem Teilnehmer, den Kopf zu bewegen, bis die beiden sich halt überlappen. Und das erlaubt uns genau zu wissen, wie die Fehlstellung des Auges ist. Und wir wissen, andere ist, wir wissen in dem Moment, wo die zusammenkommen, wissen wir, dass das Gehirn die beiden Bilder fissioniert, weil sie unmögliche Farben zeigt. Weil sie gelb, gelb und schwarz in der einen Hälfte des Kreises und auf den anderen Ende blau und schwarz an der anderen Stelle und das Gehirn weiß nicht, was diese Farbe ist und es fängt an zu schimmern in der Wahrnehmung und der Teilnehmer sagt, wuhu, das ist aber eine lustige Farbe. Also wir haben falsifiziert, zumindest für einige Leute und ich denke, es ist besser als nur für einige Leute. Wir können grundlegende Fusion erreichen, was eine beschränkte Form von zweieugigem Sehen ist und das scheint ziemlich stabil und präzise zu sein. Okay, wir haben diese Prämierung überwunden, wir können die Fehlstellung des Auges kompensieren, können wir uns noch weiter in diese optischen Dominanz-Kombin-Reihen kommen. Können wir es schaffen, dass wir tatsächlich Tiefe sehen können? Also lass uns die Hypothese falsifizieren, dass wir das nicht können. Das hier ist ein Beispiel, das basiert auf einem klassischen Test, wo man diese Rauten hat und wir benutzen diesen Parallaxeneffekt, indem wir einfach einen der Kreise ein wenig verschieben. Das macht alles, wenn man mit 3D-Bildern macht, man verschiebt einfach Teile, um den Offset diese Parallaxe zu kriegen. Ja, also wir haben diese Dings und wir wählen zufällig ein Kreis aus und verschieben ihn zufällig um immer weniger und fragen den Betrachter, welcher dieser Kreise aus dem Bildschirm herauszuspringen scheint. Und wir haben festgestellt, dass fast die ursprünglichen Tests gezeigt haben, dass die meisten Teilnehmer überhaupt keine tiefen Wahrnahmen haben, können sie tatsächlich hier, wenn sie unter diesen Tests sehen, dass einer dieser Kreise herausspringt. Also es wieder auch die Situation, dass einem klassischen Test einfach der Hintergrund des Raumes dazu so viel Störbwirkung hat, dass einfach der Test nicht falsche negative produziert. Wir haben auch bei einigen Leuten, die hier leben und die es häufiger zurückgekommen, dass sie sehr schnelle Fortschritte machen bei dieser Wahrnehmung. Und das scheint zu bedeuten, dass wir wahrscheinlich tatsächlich irgendetwas aktivieren, dass irgendetwas passiert im Gehirn. Also wir haben diese Prämierung überwunden, wir haben die Fehlstellung ausgestellt, wir haben Fusionierung und Tiefenwahrnehmung und Parallaxenwahrnehmung irgendwie gekriegt. Die Person nimmt das Headset ab, das Auge guckt weiter in die falsche Richtung und die Prämierung schaltet sofort an und das Patient ist wieder da, wo er war. Also was ist der Punkt von dem Ganzen? Das ist jetzt, wo der innovative Kram reinkommt und das ist der harte Teil. Können wir es hinkriegen, dass wir die Augen von einer Person wieder gerade werden? Vielleicht sogar gerade zu bleiben. Also wir hatten viele schlechte Anfänge, viele Ideen, die einfach nicht funktioniert haben und dann haben wir die einfache Idee. Und dann hatten wir die Idee, dass es ein unterschwelliger Prozess ist und das ist uns also ein solchen Versuchen. Das Ziel, das wir Fusionen beinhalten wollen, wird irgendwann das einfach überschreiben. Selbst wir haben das hier gemacht. Wir benutzen die Kameras von uns, das da vorne geht und es inkludiert das, was rauskommt mit dem Auge. Wir nehmen, wenn es Schiff sieht und wir nehmen die Lichtunterschiede und die Person kann generell beide, beide Bilder zusammenschieben. Sie können sich bewegen und sie können ihre Augen benutzen und es auch beide gerade werden. Was dann, was wir dann machen, ist, dass wir sie langsam die beiden, die Bilder langsam gerade ziehen. Sehr, sehr langsam. Und keiner, keiner mit dem wir das bisher ausprobiert haben, hat das bemerkt. Selbst als sie es ihnen gezeigt haben, kannst du das fühlen, kannst du spüren, dass es gerade ist. Es ist komplett im Unterbewusstsein. Sie können immer noch das Gelbe und die grüne Schicht sehen. Das ist der Meinung der anderen Auge. Aber sie behalten diese Fusion und es wird alles gerade und gerade. Und irgendwann, ja, funktioniert. Ist das Auge dann auch wieder gerade? Ich denke, das ist ein Bedeutung. Es gibt viele andere Sachen, die wir ausprobieren wollen. Wir machen das schon, wenn man Videos schaut. Das heißt, es könnte super für Kinder sein. Kinder schaut fünf Minuten seinen Lieblingskarten anzuschauen. Warum nicht 3D-Videos? Sie können das mit Spielen integrieren. Ich habe eine Liste, die so lang wie mein Arm ist. Man sagt, ich baue möchte, um die Robusten zu verbessern, um das wirklich, dieses System zu trainieren kann. Weil wir wissen, dass es funktionieren kann. So, grundlegend. Die Augenfähigkeit, Eisgills macht nicht gar nichts. Es hat einen Effekt. Und das ist nicht eine schlechte Grundlage, um weiterzubauen. Die Frage ist, wie effektiv ist das und für wen? Weil jeder mit einem schwachen Auge, es gibt so viele Unterschiede, Probleme, haben ziemlich leicht unterschiedliche Sichtweisen auf die Welt. Das heißt, wir müssen darunterbrechen den unterschiedlichen Symptome und versuchen, was passiert, mit welcher Gruppe von Menschen. Und die große Frage ist, mit Übungen. Wir hatten noch nicht ein Kit, was wir mit nach Hause nehmen konnten, aber wir sind fast da. Mit Übungen. Vielleicht kommt irgendwann ein Tag, wo die Augen gerade sind. Gehören hat überhaupt kein Problem damit. Es ist gewohnt. Wir nehmen den Kopfheadset ab und es funktioniert. Hey, ja, das ist super. Ich bin es gewohnt. Und das ist unser Ziel. 2019 haben wir unser Ziel, diese Sache zu validieren. Mit einer internen Studie, wir haben eine Universitätsgruppe in Gießen, die damit arbeiten möchte, weil wir suchen noch mehr. Wir suchen noch mehr Leuten, die mitmachen. Wir suchen noch weitere Forscher, die involviert sein wollen. Und das führt dazu, das zu einem größeren Bild. Können wir etwas bauen, was diese Progression weiter schiebt? In den letzten 100 Jahren haben Leute sich das Ganze angeschaut und ich habe diesen Traum schon seit ein paar Jahren. Wenn dieses Open-Soft-Software wäre, und es ist Open-Soft-Software, wäre es nicht toll, wenn es die Standard-Plattform für Forschung werden würde, weil Forscher hätten mehr Freiheiten, das System umzubauen und müssten nicht irgendwelche kommerziellen Lizenzen beachten. Sie hätten die Flexibilität und die Komponenten voneinander zu benutzen und interoperativ zu sein. Ganz wichtig haben sie eine bessere Wiederholbarkeit, weil anstelle zu erklären, was ich in einem Paper gemacht habe, können sie ein Bau, die Software teilen. Das ist, was wir benutzen können. Das bedeutet, dass dasselbe Software Psychologen, Optimologen, Neurowissenschaftler, jeder von denen können unterschiedliche Ansichten mitbringen. Und Langlebigkeit ist auch wichtig. Wenn das Quellen offen ist, dann muss es nicht notwendigerweise sterben, wenn eine Firma Pleite geht. Und das bringt mich weiter, die viel größere Idee dahinter. Ich glaube, das kann und sollte das größte Wissenschaftsprojekt mit normalen Menschen sein. Das größte, was den Progress zurückgezogen hat, ist die große Gruppe und die kleinen Gruppengrößen und die großen Kosten. Man sieht die Menschen nur alle paar Monate, sie hatten einen schlechten Tag und sie waren hungrig oder müde und deswegen lief es besonders gut oder besonders schlecht. Was ist, wenn wir hunderttausende auf das Zuhause benutzen können? Was ist, wenn wir klassische Spielifikation und Spieltests unterschiedliche Bereiche zu testen und suchen, nach Hause zu finden, wer es besser funktioniert mit welchen Gruppen von Symptomen? Lass uns Spielifikationen für eine gute Sache benutzen anstelle von schlechten Sachen. Das würde bedeuten, dass professionelle eine, einfach nur die können sehr genau spezifischen Symptomen fokussieren und mit ihren teuren Maschinen, die wir überhaupt nicht haben und der ganze Rest können sie die Umgebung, die den besten Impact haben und den schlechtesten Impact und sich herauszufinden, warum? Sie haben einen besseren Zugriff darauf auf dieses Verhalten. Ich möchte kurz ein bisschen über das Framework reden. Die Anwendung, die ich euch gezeigt habe, versucht uns zu helfen, was im Framework ist und das ist noch sehr früh und sehr jung, aber es geht in die richtige Richtung. Also die Anwendung ist sehr einfach zu modifizieren. Wir können neue Umgebungen stellen oder entfernen. Das hier ist wahrscheinlich der wichtigste Teil. Es gibt eine Kamera da drinnen. Das ist die Lazy-Kamera, weil man kann jegliches Unity-Game nehmen, die diese Kamera einbauen und es weiß über die Augenverschiebung und wie man den Augen gerade macht und mit dem richtigen Datenobjekt zu reden und die Sachen über Daten zu speichern um Veränderungen festzustellen. Diese Kamera hat diese Microcontroller die weiter war es sind und die lassen ein Forscher in Echtzeit diese Sachen zu ändern, was der Mensch sieht, die Inhalte zu sehen und Konflikte hinzufügen oder die Lichtunterschiede hinzufügen oder unterschiedliche Hoch- oder Niedrigkonzentrative sich und wir haben diese Ansicht, die bei Websites funktioniert. Jeder darüber kann man sehen, was im Headset funktioniert und diese Umgebungen verändern. Sie können die Parameter ändern, über ihr eigenes Gerät machen. Das heißt, man braucht nicht mehr Leute, die selber kommen. Man muss nicht mehr im selben Land sein und zu terletzt um die Kosten zu reduzieren haben wir das ganze Gesten-Kontrollsystem gebaut das nicht die normalen VR-Insets benutzen mit Menüs und so weiter. Wenn man eh nicht weiß, was die Augen machen und man möchte auch nicht ändern, was die Leute sehen es geht alles darum links und rechts zu schieben das Ziel ist, dass es so billig ist dass man alles braucht das Handy, was man eh schon hat und das Headset in das man das Telefon stecken kann. Okay, nächstes Jahr in die Weite Welt das ist ein Ziel ich hoffe, dass eine kleine Revolution startet und ich hoffe, dass es die Optimologen und die Visionstherapisten und die Neurowissenschaftler zusammenbrägt und wir hoffen, dass das um die ganze Welt geht und wir hoffen, dass wir eine Organisation bauen können die nicht nur irgendwann aufhört weiterzutrehen ich hoffe, dass wir etwas haben können dass das Wertigkeit hat und das weiter länger hält und das alles funktioniert nicht wenn wir das gar nicht zu einem Telefon fangen können so mit für das hier machen das ist warum ich hier bin euch bitte, wir brauchen einfach mehr Menschen mit mehr Fähigkeiten wir brauchen Ideen und Herangehensweisen wo wir zwei Kameras drin haben wir haben ein styroskopisches Sicht der Welt das heißt, wir können auch rumgehen mit dem Headset und die wirkliche Tiefe erkennen wir brauchen Kameras, die nach innen sehen aber wir brauchen die für ein paar Dollars und nicht tausende an Dollars ich habe ein paar Ideen aber ich brauche Leute mit Fähigkeiten Leute, die was machen können rechts wir werden ein paar Probleme mit ein paar Leuten in Konflikt geraten grafische Designer Spieleentwickler alles Mögliche wenn ihr irgendwelche Zeit habt wenn das interessant für euch ist wenn ihr da involviert sein wollt dann schau euch mal iSkills.org da gibt es ein paar Liste wo ihr sagen könnt was ihr machen könnt und zu guter Letzt möchte ich Danke sagen für die Organisationen die uns dabei geholfen haben soweit zu kommen und insbesondere möchte ich den Prototyp ansprechen weil der uns Geld gegeben hat die sind super die bezahlen 40 Open Source Projekte pro Jahr und sie geben einem Geld und sie gehen ihn weg und schaut euch die mal vielleicht an Also, vielen Dank Danke so much Ben Danke Ben Ja, ich freue mich dass du iTracking angeschaut hast und ich habe gesehen, dass es aktuell so kosten hat ich frag mich was es wirklich verbessert außer die Konfigurationsprozesse zu vereinfachen Im Moment fokussiere ich mich darauf etwas zu machen dass Leute zu Hause einfach machen können und ich jeden Tag jeden Tag durch diesen Liberierungsprozess zu gehen das muss man machen um zu sehen, ob es Verbesserung gegeben hat oder nicht um einfach, um rauszuwitten wie einfach die momentane Präverungsverhältnis ist und wie die Augen ausrichtung ist um das zu machen geht man durch einen Schritt nach dem anderen geht bis man und das den nächsten dann freischaltet und das sollte ein ganz einfacher Schritt, einfacher Prozess sein damit man es schnell machen kann Beantwortest du die Frage Mikrofon 2 Ja, tolles Vortrag ist die reduziert die Kamera die Performance des Spiels ist diese Kamera in dem Spiel reduziert das die Qualität der Performance in dem Spiel Ich bin mir nicht so sicher dass ich die Frage verstehe Nein, es sollte es nicht sein Können diese Methoden benutzt werden um Leute die auseinanderlaufende Auge während eines ein Faktor ist Das würde ich gerne wissen Hallo Die Frage ist Du hast gesagt, dass Leute eine Operation haben wenn sie die Situation wie sieht es danach aus eine Position oder welche neuen Probleme erstellt das wozu führt das Es löst das Problem nicht außer wenn man das Problem so definiert dass es ein kosmetisches Problem ist Man kann bis zu 6 Mal das Auge operieren bis die Muskeln so weit abgeschnitten sind dass man nichts mehr machen kann Es gibt also vermutlich auch ein Feedback-Prozess das einfach das Gehirn möchte dass das Auge in eine Richtung guckt Die Operation verkürzt einfach die Muskeln so dass die Ruheposition des Auges nicht zum Zentrum gezogen wird und ich denke es hat teilweise damit zu tun dass meisten Augenärzte wirklich glauben dass nach einem sehr jungen Alter keine Hoffnung mehr gibt und ich glaube dass inzwischen ist klar wiederlegt wurde von den Neurologen dass das Gehirn sehr lange plastisch bleibt und dass das Änderungen möglich sind aber das ist einfach was die Institutionen halt machen wohin sich die Institutionen entwickelt haben dass sie Augenoperation machen und was wir machen damit unsere Technologien dazukommen so der Augenoperation dass es halt nicht nur die kosmetische sondern auch tatsächlich die volle Funktionalität wiederherstellt Fragen aus dem Internet Nein, also nur von 2 Bitte Ich habe 2 Fragen Zum einen, ich habe Alternativenschromosismus funktioniert die Anwendung damit weil ich kann die Intersection Ich weiß von diesen Testen dass ich normalerweise die Bilder sehe Das sehe ich, das sehe ich Vielen Dank Zweitens habe ich immer ein Problem Leuten zu erklären, was es bedeutet wenn man keine tiefen Idee hat Das heißt, wenn ich sehe ja alles aber ich sehe immer 2 Dinge und ich sehe das Hey, ich habe keine Sterevision und dann versuche ich immer zu sagen Hey, mein Auge zu machen und jetzt siehst du den Unterschied und manche Leute sehen den Unterschied und manche sehen ihn nicht gibt es da vielleicht so ein Test wo Leute erklären können was passiert, wenn man keine Stereovision hat Also ich würde mich gerne nochmal mit dir unterhalten Du bist ja die 3. Person mit alternierendem Strabismus gestern habe ich mit Strabiern darüber geredet mit alternierender Strabismus und davor Cliff und alternierender Strabismus scheint eine komplett andere Sache zu sein, ein komplett anderes Spiel Es scheint auch das zu sein wo wir den schnellsten Fortschritt zu machen können Nun Ich kann keine Versprechen machen und ich kann nicht nicht nicht Ja, das einzige was dir wirklich helfen kann ist dein eigenes Gehirn und wir haben keinen definitiven Probe das was wir machen tatsächlich helfen können und was ich dir versprechen kann ist, du wirst eine sehr interessante Erfahrung haben Und hast du ein paar Tricks wenn man es sehen sollte die mit beiden Augen sehen wie es ist mit nur einem Auge zu sehen Nun ich glaube du hast etwas das Panorama Vision heißt also Panorama sehen dein Gehirn weiß dass die Augen in verschiedene Richtungen guckt und es erweitert dein Sichtfeld einfach weiter indem es die beiden Bilder nebeneinander wie bei zwei Monitoren zusammen verbinden wenn man Kraftfahrer ist aber das ist nichts was Leute mit normalen Sehen erfahren können wir könnten vielleicht ein Bild generieren wir könnten den Kamera Input nehmen und das dann auf diese Panoramaartige Gesicht Seefeld Monopolisieren unterdrückten Teil in der Mitte ist das nicht klar Vielen Dank für den Vortrag ich frag mich du hast ein Programm das die Auge im Headset bewegt was ist wenn man das Headset wegnimmt nachdem es gerade ausgerichtet wurde nun was passiert das ist also sehr neu wir haben das doch nicht dass Leute das nach Hause genommen haben das über verlängere Zeit nehmen was passiert ist wenn die Augen schon zusammen das Headset abnehmen dann bleiben die Augen für einen kleinen Moment noch weiterhin parallel ausgerichtet aber die Frage ist was passiert nach nachdem das längere Zeit gemacht worden ist was es gibt schafft man es den Effekt robuster zu machen können wir die Fähigkeit der Leute verbessern dass sie die Augen zusammenhalten können microphone 2 bitte zwei bitte danke für diesen Vortrag während deines Experimenten habt du nicht also wenn ich es richtig verstehe was du nicht in der Lage gegen die unterlegenden Situation zu arbeiten was auch immer problematisch mit dem Auge ist du hast ein paar Erfahrungen damit was ist wenn jemand in Operation hatte um diese grundlegende Problemen zu reduzieren und wie habt ihr Erfahrungen mit das kann nur funktionieren wenn es möglich ist dieses zu Grunderlegende Problem zu verhandeln dass es häufig so was einfacher ist dass die Person eine Brille trägt das Ursache ist ein Auge ist fernsichtiger als das andere und einzige Möglichkeit dass das rauszufinden ist das Leute die Leute diese Technik zur Verfügung zu stellen und auch genau zu erklären und auch wie die Geschichte dahinter ist um daraus zu finden wie es arbeiten kann Hallo zwei kurze Fragen die erste ist glaubst du das die Anwendung hilfreich wäre wenn man eine Augeoperation hatte würde das weiterhin helfen und die andere ist es ist hilfreicher wenn man mit der Anwendung vor der Operation ist oder besser erwarten wenn jemand älter ist und dann mit der App machen weil die Anwendung die es relativ früh operiert wird ich zögere etwas zu konkrete Dinge zu sagen bevor wir überhaupt die Versuche gemacht haben und also was ich denke es ist sicherlich sinnvoll zu versuchen weil die die Operation ändert nur die Augenposition und das ist immer immer auch besser weil man kann durch die Linse des Hatsets gucken wenn man zu stark ein Strabismus hat dann kann man einfach eine andere Linse vorbei und dann funktioniert das Ganze natürlich nicht würde man ein neues Hatset brauchen wo die Augen wo die Linsen unterschiedlich sind ich bin in Seoul gewesen mit LG über ein Hatset mit einem vollen Gesichtfeld gearbeitet und das ist so ein open hardware anymore ja, die Antwort ist patentiert es ist ein offensichtlich ein sehr gutes Patent und sie denken darüber nach und sie machen tatsächlich alles richtig sie haben flexible OLED Displays und sie denken darüber nach wie man die Linsen so anordnen kann dass man das sehen kann im momentanen Hatset wie die Linsen und man bewegt den Kopf und sie haben dieses Patent und sie haben ein Großteil der Probleme herausgefunden die gelöst werden müssen deshalb hoffe ich, dass es in ein paar paar Jahren nur ist, dass Samsung dieses Hatset herausbringt und dass wir es vielleicht für unsere Zwecke benutzen können und dann wahrscheinlich 1.000 Fragen direkt nach dir ich nehme das Mikrofon 1 hat dir die Hypophese getestet dass die normalen Teste fehlenschlagen aufgrund der Backgrounds weil ihr könnt euch auch sehr einfach Hintergrund hinzufügen wir sind nun nur ein Projekt von Freiwilligen wir haben nicht die Ressourcen und Zeit und das der Unterschied zwischen dem was wir machen wollen und was wir machen können ist unendlich groß wenn jemand diese Frage beantworten möchte gerne mach bei uns mit das SDK zu benutzen weil es viele Spielerentwickler gibt die da mit schon arbeiten habt ihr mal darüber nachgedacht das ist grundlegend wie man diese ganzen Plattformen zusammenbringen kann die virtuellen Hatsets und es gibt dieser Standardisierungsprozess vom W3C das heißt wenn man eine Schicht runter geht kann man eine viel größere Gruppe bekommen wenn man alles zusammenbringt wir haben darüber nachgedacht aber ich habe entschlossen pragmatisch zu sein Unity ist das dominierende die dominierende Environment das fast alle Entwickler benutzen es geht nicht nur um die Sprache und die Kapitalität sondern auch die Assets die Bibliotheken die Größe der Community die Fähigkeiten die Leute haben wir wollten es so zugänglich und pragmatisch und zuverlässig machen wir haben die Community genommen die Zeit zu verzeigen ob es eine gute Idee war oder nicht aber es ist ein guter Vorschlag wir haben auch weitere Freiläge vielen Dank für diesen tollen Vortrag und die Vorstellung vielen Dank, dass wir jetzt im ersten Vortrag am letzten Tag des Konkurs gekommen sind vielen Dank und bis zum nächsten Mal