Die Bioingenieure an der UCLA haben ein handschuhähnliches Gerät entworfen, das die amerikanische Gebärdensprache über eine Smartphone-Anwendung in Echtzeit ins Englische übersetzen kann.
Die Taubstummen aus ihrer Isolation zu befreien.
Das Leben in dieser Welt ist eine Herausforderung für die Taubstummen. Es gibt nur wenige Orte, die als einladend angesehen werden können. Menschliche Interaktion ist auch deshalb schwierig, weil viele Menschen die Gebärdensprache nicht beherrschen. Glücklicherweise gibt es Menschen, die sich dafür einsetzen, die Welt zu einem besseren Ort zu machen.
Wir hoffen, dass dies Menschen, die die Gebärdensprache verwenden, die Möglichkeit gibt, direkt mit anderen zu kommunizieren, ohne dass jemand anders übersetzen muss », sagte Jun Chen, Assistenzprofessor für Bioingenieurwesen an der Samueli School of Engineering der UCLA und leitender Forscher der Forschung. « Darüber hinaus hoffen wir, dass es mehr Menschen helfen kann, selbst Gebärdensprache zu lernen ».
Wie funktioniert es?
Das System umfasst ein Paar Handschuhe mit dünnen, dehnbaren Sensoren, die die Länge jedes der fünf Finger haben. Diese Sensoren, die aus elektrisch leitenden Drähten bestehen, erfassen Handbewegungen und Fingerabdrücke, die Buchstaben, Zahlen, Wörter und Sätze darstellen.
Das Gerät wandelt dann die Fingerbewegungen in elektrische Signale um, die an eine am Handgelenk getragene, münzgroße Leiterplatte gesendet werden. Die Karte überträgt diese Signale drahtlos an ein Smartphone, das sie mit einer Geschwindigkeit von etwa einem Wort pro Sekunde in Sprache übersetzt.
Ein leichtes und kostengünstiges Gerät.
Die Forscher fügten auch Klebesensoren auf den Gesichtern der Tester, zwischen den Augenbrauen und auf einer Seite des Mundes hinzu, um Gesichtsausdrücke zu erkennen, die Teil der amerikanischen Gebärdensprache sind.
Ältere Handheld-Systeme, die Übersetzungen aus der amerikanischen Gebärdensprache anboten, waren durch schwerfällige und schwere Geräte eingeschränkt oder waren unbequem zu tragen, sagte Chen. Das vom UCLA-Team entwickelte Gerät besteht aus leichten, kostengünstigen Polymeren, die haltbar und dehnbar sind. Die elektronischen Sensoren sind auch sehr flexibel und preiswert.
Anpassungen müssen noch vorgenommen werden.
Um das Gerät zu testen, arbeiteten die Forscher mit vier gehörlosen Menschen, die amerikanische Gebärdensprache verwenden. Die Träger wiederholten jede Handbewegung 15 Mal. Ein angepasster Lernalgorithmus wandelte diese Gesten in die Buchstaben, Zahlen und Wörter um, die sie darstellten.
Das System erkannte 660 Zeichen, darunter jeden Buchstaben des Alphabets und Zahlen von 0 bis 9. Die UCLA hat ein Patent auf die Technologie angemeldet. Ein auf dieser Technologie basierendes Geschäftsmodell würde zusätzliches Vokabular und eine noch schnellere Übersetzungszeit erfordern, sagte Chen. Ihre Forschungsergebnisse werden auf der Website Nature Electronics veröffentlicht.