Schüler aus Russland gewann den Wettbewerb von Google für die Entwicklung des übersetzers mit der Gebärdensprache

Kann ich helfen, um Gehörlose Menschen Ihre Gedanken automatisch zu übersetzen , die Sie zeigen, in Worte? So fragte sich der russische Grader Daniel Kasanzew der Ekaterinburger Lyceum. Die Entscheidung, dieses Problem zu klären Daniel führte zum Sieg in einer der Kategorien des Wettbewerbs für junge Wissenschaftler Science Fair 2019. Er entwickelte ein System, das interpretieren kann Gebärdensprache und Gebärdensprachdolmetscher ersetzen.

Wie angegeben , Kazantsev ein Auswahlverfahren unter tausenden von anderen Teilnehmern des Wettbewerbs und wurde zu einer der 24 Finalisten aus 14 Ländern der Welt. Schließlich erhielt er die Auszeichnung der Lego Education Builder für die Entwicklung eines Dolmetschers der Gebärdensprache.

Alle Finalisten des Wettbewerbs. Daniel ganz Links

Was ist Elektromyographie?

In der Grundlage der Entwicklung des Jungen Russischen Genies ist die Elektromyographie, die bestimmt elektromechanischen Aktivität der Muskeln unter Berücksichtigung der sich wandelnden Position der Hände und Finger. In diesem Fall wird jede Bewegung der Extremität erzeugt winzige elektrische Signale, die berücksichtigt werden können, und dann übersetzen Sie in für den Computer verständliche Befehle. Insbesondere wird diese Technologie für die Steuerung von künstlichen Prothesen.

Lesen Sie auch:

Aber der russische Schuljunge entwickelte Technologie Elektromyographie-System, das kann übersetzt die elektrischen Signale der Muskeln in Worte.

Blauen und weißen Kreuze Standorte der Anordnung der Elektroden, die sowohl die elektrischen Impulse der Muskeln

Wie funktioniert Gebärdensprache übersetzer

Das Gerät besteht aus einer Manschette, die auf dem Unterarm getragen. Auf der Manschette montiert 24 Elektroden, von denen jeder liest bestimmte elektrische Signale der Muskeln des Unterarms. Darüber hinaus verwendet einen speziellen Sensor, der die Position des Unterarms in den Raum. Auf der Basis dieser Signale gebildet einzigartigen «Fingerabdruck» des Zustands jedes einzelne Teil der Bürste im Raum.

Alle erfassten Signale werden verstärkt und gefiltert von überschüssigem elektromagnetisches Rauschen, und dann durch die Leitungen übertragen werden, auf eine externe . Diese Mikrocomputer digitalisiert die Signale von den sensoren und Elektroden, dann sendet Sie an eine leistungsfähige Compute-Server mit einem speziell ausgebildeten neuronales Netz. Es ist durch нейросети erfolgt eine Interpretation (übersetzung in Worte) Daten über die elektrischen Signale, die für jede sprachliche Geste.

Wie wurde die überprüfung der gesten des Dolmetschers

Die Überprüfung des Systems Daniel verbrachte auf sich selbst und die beiden anderen Probanden. Als Grundlage für die übersetzung verwendet er gesten und 5 der beliebten Gebärdensprache ASL (American Sign Language).

Hello (Hallo); Yes (ja) und No (Nein); Please (bitte); I love you (ich Liebe dich)

Für die überprüfung der Wirksamkeit des Systems für jede Gestenerkennung verwendet 10 versuche. Wie gibt der Autor die Entwicklung, die Anlage könnte zeigen 92,6 Prozent Genauigkeit bei der Erkennung.

In der Tabelle markierten Teilnehmer des Experimentes, die Namen der gesten, die erkannt werden soll das System, sowie die Anzahl der Gläubigen positives

Video-Validierung-Technologie können Sie die Karte unten:

Daniel stellt fest, weiterhin autonom über сурдопереодчиком. Es gibt einige Punkte, die noch nicht erlauben, verwenden Sie es als eine fertige Lösung. Zum Beispiel jetzt kann das System übersetzt nur einzelne gesten. Aber noch nicht in der Lage, die formung der erhaltenen Worte des Satzes. So jetzt das System kann nicht als vollständiger Ersatz für Gebärdensprachdolmetscher. Die Lösung dieser Frage wird eine der zukünftigen Aufgaben der Jungen Wissenschaftler.

Lesen Sie auch:

Darüber hinaus ist die elektronische сурдопереводчик erfordert ständigen Zugang zu einem leistungsfähigen вычислительному Server mit neuronales Netz, das erzeugt das erkennen von sprachlichen gesten und übersetzt Sie in Worte. Aber der Autor stellt fest, dass die moderne Speed-Datenübertragung über mobiles Internet ermöglicht einen ständigen Zugriff auf den Server und dadurch teilweise kompensieren diesen Nachteil. Der Autor untersucht auch die Möglichkeit, das Gerät kompakter werden, indem man die Fläche der Elektroden bis 7 Zentimeter.

In der Regel darauf hingewiesen, dass bei der Fertigstellung dieser Technologie, Sie können mit jedem жестовым Wörterbuch. Dabei ist vom Benutzer nicht benötigen keine spezielle Ausbildung, um den Einsatz eines solchen Systems.

Ausführlicher mit der Entwicklung von Daniel Kasanzew zu finden .

Wenn Sie Interesse an Neuigkeiten der Wissenschaft und Technologie, abonnieren Sie unseren Feed . Dort finden Sie exklusive Inhalte, die nicht auf der Website veröffentlicht wurden!