Lennart Eing M.Sc.
Research Assistant
Chair for Human-Centered Artificial Intelligence
Forschungsinteressen
- Multimodale neuronale Netze
- Selfsupervised Learning
- Deep Learning
- Few-Shot Learning
Abschlussarbeiten
Alle angebotenen Abschlussarbeiten k?nnen auf Englisch oder Deutsch geschrieben werden, allerdings wird Englisch vorgezogen. Themen sind nur grobe Vorschl?ge und k?nnen auf Absprache auch ver?ndert werden.
?
- Geb?rdensprachenübersetzung mithilfe von V-JEPA und Large Language Models: Geb?rdensprachen sind vollumf?ngliche Sprachen, die weltweit von einer gro?en Anzahl von Menschen verwendet werden. Sie bestehen aus einer Vielzahl verschiedener Kommunikationskan?le wie Geb?rden, Gesichtsausdruck, K?rperhaltung, Blickrichtung, etc. Fortschritte im Sprachverst?ndnis in den letzten Jahren lassen vermuten, dass maschinelle Methoden auch einen gro?en Forschritt im Verst?ndnis von Geb?rdensprachen machen k?nnten. Dies erweist sich allerdings der deutlich schwereren Modalit?t "Bild" und der geringen Menge an verfügbaren Trainingsdaten als schwierig.
V-JEPA ist ein verh?ltnism??ig neues Video-Foundation Modell von der Firma Meta. Es zeigt herausragende F?higkeiten im Verst?ndnis von Video in einer gro?en Menge verschiedener Aufgaben. Dies ist aufgrund von Unsupervised Pretraining m?glich. Aber eignet sich V-JEPA für die Geb?rdensprachübersetzung? Dies gilt es in dieser Arbeit herauszufinden.