Kan AI gesproken Mandarijn in realtime vertalen naar Amerikaanse gebarentaal ?

Vertaalsystemen voor gebarentaal vormen al lang een uitdaging vanwege de visuele en gebarenmatige aard van ASL in vergelijking met gesproken taal. Recente AI-systemen combineren nu computervisie met generatieve modellen om deze kloof te overbruggen. De integratie van bewegingsregistratie en taalmogelijkken maakt dynamische vertaling tussen modaliteiten mogelijk. Deze mogelijkheid verandert de toegankelijkheid voor dove gemeenschappen in live situaties.

Op dit moment zijn er verschillende technologieën en onderzoeksprojecten gericht op het ontwikkelen van systemen die gesproken talen in realtime kunnen vertalen naar gebarentalen. Het vertalen van gesproken Mandarijn naar Amerikaanse Gebarentaal (ASL) in realtime is echter een complexe taak vanwege de verschillende grammaticale structuren en woordenschat van deze twee talen. Verschillende studies hebben het gebruik van machine learning en computervisie onderzocht om gebarentaal te herkennen en te interpreteren, evenals spraakherkenningstechnologieën om gesproken Mandarijn te verwerken. Deze systemen omvatten vaak een combinatie van automatische spraakherkenning, machinaal vertalen en het genereren van gebarentaal met behulp van avatars of robots. Hoewel er aanzienlijke vooruitgang is geboekt, bevinden realtime vertalingssystemen die gesproken Mandarijn nauwkeurig en betrouwbaar naar ASL kunnen vertalen zich nog in de beginfase van ontwikkeling. Onderzoekers blijven werken aan het verbeteren van de nauwkeurigheid en snelheid van deze systemen, evenals het aanpakken van de uitdagingen van het vastleggen van de nuances en contextuele informatie van zowel gesproken als gebarentalen. Ondanks deze uitdagingen hebben ontwikkelingen op dit gebied het potentieel om de communicatie tussen Mandarijnsprekenden en ASL-gebruikers aanzienlijk te verbeteren. De ontwikkeling van dergelijke technologieën vereist samenwerking tussen experts op het gebied van taalkunde, informatica en techniek.

+- administered 13 mei 2026 · Bron: IEEE — https://ieeexplore.ieee.org/, National Institute on Deafness and Other Communication Disorders — https://www.nidcd.nih.gov