PORTFOLIOFILM / 02:00

Meine Projekte,
in Bewegung.

Zwei Minuten im Werk: Simulationen, Signale, Teilchen und Sprache in Bewegung.

Video herunterladen

Englischer Ton. Untertitel sind in allen zehn Sprachen der Website verfügbar. Übersetzungen erfolgen maschinell.

Lesen Sie das Transkript

00:01 Hallo zusammen, ich bin Michael und besuche das Abschlussjahr der Kehillah High School.

00:05 Das ist mein persönliches Portfolio. Ich möchte einige Projekte vorstellen.

00:10 Es beginnt an einem See.

00:11 Dies ist der Sailbot-Simulator der Schule, der auf einem PC mit Autopilot-Steuerung läuft.

00:16 Darunter berechnet der Code die auf das Boot wirkenden Kräfte, bewegt es um einen kleinen Schritt und wiederholt den Vorgang.

00:21 Bewegung bedeutet, den Zustand mit jedem Zeitschritt zu aktualisieren.

00:24 Danach folgte eine Untersuchung im Unterricht, hier mit ihrem ursprünglichen Protokoll.

00:27 Stellt man einen Graphen als Matrix dar und multipliziert diese mit sich selbst, zählt jede Zahl die Wege zwischen zwei Punkten.

00:33 Das Grundgerüst von Sign-Translator ist ein solcher Graph.

00:37 Die einfache Fourier-Transformation dauert bei 8.000 Abtastwerten fast 9 Sekunden.

00:42 Teilt man das Signal in zwei Hälften und rechnet rekursiv, braucht die FFT nur 26 Millisekunden.

00:48 Später zeigte ein solches Spektrum: Der von Sign-Translator erzeugte Kopf zitterte doppelt so stark wie der einer echten gebärdenden Person.

00:55 Das nächste Projekt war reine Kunst: 75.000 Partikel, bewegt durch die erkannten Punkte der Hände.

01:01 Dieselben Orientierungspunkte wurden später zu einem der Datenpfade im Sign-Translator.

01:06 All diese Neugier führte mich zu Sign-Translator.

01:09 Linien von zwei Kameras treffen sich an jedem Gelenk und bestimmen dessen Position im dreidimensionalen Raum.

01:14 Die konstante Knochenlänge half, den Fehler der Brennweite von über 40 % auf unter 1 % zu senken.

01:20 Die Bewegung wird in Codes wie ein Vokabular komprimiert. Ein Transformer erzeugt diese Codes aus englischem Text.

01:27 Dann scheiterte fast alles.

01:28 Modelle für ganze Sätze vermittelten nicht mehr Bedeutung als eine stillstehende Figur.

01:32 Eines bestand alle 95 Bewegungstests und konnte trotzdem keinen Satz vermitteln.

01:38 Nun generiert das System jedes Wort separat und fügt die Clips zusammen.

01:43 Wörter, die es nicht kennt, verschwinden einfach.

01:45 Um es zu bewerten, liest ein Modell die Bewegung zurück ins Englische.

01:49 Ohne Bewegung liegt der Wert bei 2,05, für erzeugte Bewegung bei 2,4 und für echte Gebärdensprache bei etwa 4.

01:55 Eine kleine Verbesserung, aber ein Anfang.

01:57 Danke fürs Zuschauen.

WEITER ERKUNDEN

Hinter den Demonstrationen.

Der Film zeigt Experimente und laufende Arbeiten. Erkunden Sie die Projektseiten nach Methoden, Kontext und Einschränkungen.

Mehr von meinem Videokanal.

YouTube