Mes projets,
en action.
Deux minutes à l'intérieur de l'œuvre : simulations, signaux, particules et langage en mouvement.
Audio en anglais. Les sous-titres sont disponibles dans les dix langues du site ; les traductions sont assistées par machine.
Lire la transcription
00:01 Bonjour à tous, je suis Michael, élève en dernière année au lycée Kehillah.
00:05 Ceci est mon portfolio personnel et je vais parcourir quelques projets avec vous.
00:10 Cela commence sur un lac.
00:11 Il s'agit du simulateur Sailbot de l'école fonctionnant sur un PC avec pilotage automatique.
00:16 En dessous, le code calcule les forces exercées sur le bateau, le déplace d'un petit pas et répète.
00:21 Le mouvement n'est qu'une mise à jour d'état sur une horloge.
00:24 Ensuite est venue une recherche menée en cours, présentée ici dans son journal brut.
00:27 Si on représente un graphe par une matrice et qu’on la multiplie par elle-même, chaque nombre compte les chemins entre deux points.
00:33 Le squelette de Sign-Translator est un graphe de ce type.
00:37 La transformée de Fourier simple prend près de 9 secondes sur 8 000 échantillons.
00:42 Lorsque vous divisez le signal en deux et effectuez une récursion, la FFT ne prend que 26 millisecondes.
00:48 Plus tard, ce type de spectre a révélé que la tête générée par Sign-Translator tremblait deux fois plus que celle d’une personne signant réellement.
00:55 Le projet suivant était purement artistique : 75 000 particules déplacées par les points de repère des mains.
01:01 Ces mêmes points de repère sont devenus plus tard l'un des chemins de données dans Sign-Translator.
01:06 Toute cette curiosité m'a conduit à Sign-Translator.
01:09 Les lignes issues de deux caméras se croisent à chaque articulation, ce qui donne sa position en 3D.
01:14 La longueur constante des os a permis de ramener l’erreur sur la distance focale de plus de 40 % à moins de 1 %.
01:20 Le mouvement est comprimé en codes, comme un vocabulaire, qu’un Transformer génère à partir de l’anglais.
01:27 Puis presque tout a échoué.
01:28 Les modèles générant des phrases entières ne transmettaient pas plus de sens qu’une figure immobile.
01:32 L’un a réussi les 95 tests de mouvement, sans pour autant parvenir à transmettre une phrase.
01:38 Désormais, le système génère chaque mot séparément et assemble les clips ensemble.
01:43 Les mots qu'il ne connaît pas disparaissent tout simplement.
01:45 Pour le noter, un modèle relit le mouvement en anglais.
01:49 L’absence de mouvement obtient 2,05, le mouvement généré 2,4, et la vraie langue des signes environ 4.
01:55 C'est un gain mince, mais c'est un début.
01:57 Merci d'avoir regardé.
La lecture n'a pas pu démarrer. Essayez les commandes vidéo ou téléchargez la vidéo.
Derrière les manifestations.
Le film montre des expériences et des travaux en cours. Explorez les pages du projet pour connaître les méthodes, le contexte et les limites.
Plus d'informations sur ma chaîne vidéo.
YouTube