Meine Projekte,
in Bewegung.
Zwei Minuten im Werk: Simulationen, Signale, Teilchen und Sprache in Bewegung.
Englischer Ton. Untertitel sind in allen zehn Sprachen der Website verfügbar. Übersetzungen erfolgen maschinell.
Lesen Sie das Transkript
00:01 Hallo zusammen, ich bin Michael und besuche das Abschlussjahr der Kehillah High School.
00:05 Das ist mein persönliches Portfolio. Ich möchte einige Projekte vorstellen.
00:10 Es beginnt an einem See.
00:11 Dies ist der Sailbot-Simulator der Schule, der auf einem PC mit Autopilot-Steuerung läuft.
00:16 Darunter berechnet der Code die auf das Boot wirkenden Kräfte, bewegt es um einen kleinen Schritt und wiederholt den Vorgang.
00:21 Bewegung bedeutet, den Zustand mit jedem Zeitschritt zu aktualisieren.
00:24 Danach folgte eine Untersuchung im Unterricht, hier mit ihrem ursprünglichen Protokoll.
00:27 Stellt man einen Graphen als Matrix dar und multipliziert diese mit sich selbst, zählt jede Zahl die Wege zwischen zwei Punkten.
00:33 Das Grundgerüst von Sign-Translator ist ein solcher Graph.
00:37 Die einfache Fourier-Transformation dauert bei 8.000 Abtastwerten fast 9 Sekunden.
00:42 Teilt man das Signal in zwei Hälften und rechnet rekursiv, braucht die FFT nur 26 Millisekunden.
00:48 Später zeigte ein solches Spektrum: Der von Sign-Translator erzeugte Kopf zitterte doppelt so stark wie der einer echten gebärdenden Person.
00:55 Das nächste Projekt war reine Kunst: 75.000 Partikel, bewegt durch die erkannten Punkte der Hände.
01:01 Dieselben Orientierungspunkte wurden später zu einem der Datenpfade im Sign-Translator.
01:06 All diese Neugier führte mich zu Sign-Translator.
01:09 Linien von zwei Kameras treffen sich an jedem Gelenk und bestimmen dessen Position im dreidimensionalen Raum.
01:14 Die konstante Knochenlänge half, den Fehler der Brennweite von über 40 % auf unter 1 % zu senken.
01:20 Die Bewegung wird in Codes wie ein Vokabular komprimiert. Ein Transformer erzeugt diese Codes aus englischem Text.
01:27 Dann scheiterte fast alles.
01:28 Modelle für ganze Sätze vermittelten nicht mehr Bedeutung als eine stillstehende Figur.
01:32 Eines bestand alle 95 Bewegungstests und konnte trotzdem keinen Satz vermitteln.
01:38 Nun generiert das System jedes Wort separat und fügt die Clips zusammen.
01:43 Wörter, die es nicht kennt, verschwinden einfach.
01:45 Um es zu bewerten, liest ein Modell die Bewegung zurück ins Englische.
01:49 Ohne Bewegung liegt der Wert bei 2,05, für erzeugte Bewegung bei 2,4 und für echte Gebärdensprache bei etwa 4.
01:55 Eine kleine Verbesserung, aber ein Anfang.
01:57 Danke fürs Zuschauen.
Die Wiedergabe konnte nicht gestartet werden. Probieren Sie die Videosteuerung aus oder laden Sie das Video herunter.
Hinter den Demonstrationen.
Der Film zeigt Experimente und laufende Arbeiten. Erkunden Sie die Projektseiten nach Methoden, Kontext und Einschränkungen.
Mehr von meinem Videokanal.
YouTube