Computer leert gebarentaal vertalen

Image AMSTERDAM - Voor gebruikers die het al een hele prestatie vinden dat hun computer gesproken tekst herkent, werkt de Boston University aan de overtreffende trap: een computer die gebarentaal kan vertalen. Een groep onderzoekers werkt aan elektronisch woordenboek voor gebarentaal. Er bestaan al wel woordenboeken waarmee valt uit te zoeken hoe een geschreven woord in gebarentaal moet worden uitgedrukt, maar er is nog geen dictionaire die het kunstje andersom flikt. Het is een Catch-22: je kunt alleen een teken in gebarentaal dat je niet kent opzoeken in een woordenboek als je weet wat het
betekent.

Om zo’n ‘gebarenvertaler’ te maken, zet een team van onderzoekers aan de Boston University meerdere doventolken voor een batterij camera’s terwijl ze de 3000 begrippen uit de American Sign Language uitbeelden. De camera’s – die de tolk van voren en van de zijkanten filmen – leggen ook gezichtsuitdrukkingen vast.

De wetenschappers analyseren de beelden, bepalen het begin en einde van een gebaar en leggen het vast in een visuele database waarmee computers gebaren moeten herkennen.

Het probleem bij gebarentaal is dat de grammatica driedimensionaal is opgebouwd. In gesproken taal gaan we af op de woordvolgorde, in gebarentaal bepaalt de positie van handen en vingers, de beweging ervan, de handvorm en lipbewegingen, gezichtsuitdrukkingen en andere lichaamtaal wat er wordt gezegd. Verbuigingen en vervoegingen komen in gebarentaal op een heel andere manier tot stand. Gebarentaal kent, net als het Russisch, ook geen lidwoorden.

De Amerikanen hopen dat hun werk de ouders van dove kinderen helpt de betekenis van onbekende gebaren te achterhalen. Maar ze werken ook aan een Google-voor-doven, zodat dove mensen met gebarentaal zoekopdrachten kunnen invoeren.

Voor dat laatste moet nog wel wat werk worden verzet, zegt een van de onderzoekers in Technology Review, het blad van het Massachusetts Institute of Technology (MIT). Gebarentaalherkenning gaat een computer nog wel aardig af in een studio met gevoelige camera’s en een geheel lege achtergrond. Maar gebruikers thuis zullen kwalitatief minder sterke camera’s hebben, misschien werken in gedempt licht en tegen een rommelige achtergrond.

Bron: De Volkskrant

Agenda Activiteiten

do 09 mei 2024
HEMELVAARTSDAG GESLOTEN
do 09 mei 2024 - 19:00 - 22:00
SWeDoRo (ontspanning) elke donderdagavond open
vr 10 mei 2024 - 19:00 - 23:45
Eurohaven (Klaverjas)
do 16 mei 2024 - 19:00 - 22:00
SWeDoRo (ontspanning) elke donderdagavond open
za 18 mei 2024 - 12:00 - 17:00
Amman (Ontspanning)
do 23 mei 2024 - 19:00 - 22:00
SWeDoRo (ontspanning) elke donderdagavond open
do 23 mei 2024 - 19:00 - 23:00
ALV SWeDoRo
vr 24 mei 2024 - 19:00 - 23:45
Eurohaven (Klaverjas)
za 25 mei 2024 - 12:00 - 18:00
DCR - Doven Computerclub Rijnmond
do 30 mei 2024 - 19:00 - 22:00
SWeDoRo (ontspanning) elke donderdagavond open

LOGO LSF 2023

logo MCS banner klein