Poate AI să traducă vorbirea mandarină în limbajul american al semnelor în timp real ?

Traducerea limbajului semnelor a reprezentat întotdeauna o provocare datorită naturii vizuale și gestuale a ASL în comparație cu limbile vorbite. Sistemele recente de inteligență artificială combină acum viziunea computerizată cu modele generative pentru a depăși această barieră. Integrarea captării mișcărilor și a modelelor lingvistice permite traducerea dinamică între modalități. Această capacitate transformă accesibilitatea pentru comunitățile surde în contexte live.

În prezent, există diverse tehnologii și proiecte de cercetare axate pe dezvoltarea sistemelor care pot traduce limbile vorbite în limbile semnelor în timp real. Totuși, traducerea limbii mandarine vorbite în Limba Americană de Semne (ASL) în timp real este o sarcină complexă datorită structurilor gramaticale și vocabularului distincte ale acestor două limbi. Mai multe studii au explorat utilizarea învățării automate și a viziunii computerizate pentru a recunoaște și interpreta limbajul semnelor, precum și tehnologiile de recunoaștere a vorbirii pentru a procesa mandarina vorbită. Aceste sisteme implică adesea o combinație de recunoaștere automată a vorbirii, traducere automată și generare a limbajului semnelor folosind avatare sau roboți. Deși s-au înregistrat progrese semnificative, sistemele de traducere în timp real care pot traduce cu precizie și fiabilitate mandarina vorbită în ASL se află încă în faze incipiente de dezvoltare. Cercetătorii continuă să lucreze la îmbunătățirea preciziei și vitezei acestor sisteme, precum și la abordarea provocărilor legate de captarea nuanțelor și a informațiilor contextuale ale ambelor limbi, vorbită și semn. În ciuda acestor provocări, progresele în acest domeniu au potențialul de a îmbunătăți semnificativ comunicarea între vorbitorii de mandarină și utilizatorii de ASL. Dezvoltarea unor astfel de tehnologii necesită colaborarea dintre experți în lingvistică, știința calculatoarelor și inginerie.

+- administrat la 13 mai 2026 · Sursă: IEEE — https://ieeexplore.ieee.org/, National Institute on Deafness and Other Communication Disorders — https://www.nidcd.nih.gov