Lo studente sviluppa l'intelligenza artificiale che traduce il linguaggio dei segni in tempo reale
Indice
Nell’attuale scenario tecnologico, su nessun argomento si specula tanto sulle innovazioni quanto sull’intelligenza artificiale. È nel mezzo di questo scenario competitivo che Gabriel Sales, studente di statistica alla UFF, di Rio de Janeiro, emerge come un visionario guidando un progetto di intelligenza artificiale che traduce il linguaggio dei segni. Il suo progetto mira a superare le barriere comunicative tra persone non udenti e udenti, offrendo un modo efficace per trascrivere la lingua dei segni in portoghese in tempo reale.
Secondo Gabriel, l’obiettivo principale di questa intelligenza artificiale è rivoluzionare il modo in cui le persone sorde comunicano, fornendo accessibilità, indipendenza e opportunità per la comunità. Il progetto, ancora in fase di sviluppo, dimostra di essere in grado di interpretare i segnali delle persone sorde nei video, traducendoli istantaneamente in portoghese.
Come funziona l’intelligenza artificiale per le persone sorde?
Il progetto utilizza tre distinte intelligenze artificiali per raggiungere il suo obiettivo. La prima AI è responsabile di catturare i punti chiave del corpo, mappandoli sui fotogrammi di un video. Questi dati vengono quindi inviati alla seconda AI, un classificatore che identifica il segnale specifico inviato. L'ultima intelligenza artificiale entra in azione per contestualizzare i segnali identificati, trasformando l'elenco dei segnali previsti in un messaggio leggibile e comprensibile in portoghese.
Il potenziale di questo progetto è vasto. In generale, tutta la comunicazione tra persone sorde e persone con difficoltà nell'interpretare la Bilancia verrebbe semplificata in una traduzione simultanea che risolverebbe il rumore nel dialogo. Se efficace, la tecnologia potrebbe risolvere diversi problemi di comunicazione che colpiscono circa 10 milioni di cittadini non udenti in Brasile, circa il 5% della popolazione brasiliana, secondo IBGE.
Tuttavia, Gabriel Sales deve affrontare sfide nel suo progetto, come limitazioni di hardware e risorse per la raccolta di dati essenziali. Cerca contributi per acquisire un computer più potente, telecamere di alta qualità e risorse per far avanzare la ricerca e lo sviluppo del progetto, attraverso un vakinha in linea.
Il progetto guidato esclusivamente da Gabriel Sales non riflette solo la sua passione per la tecnologia, ma evidenzia anche il potere dell'intelligenza artificiale nel creare soluzioni innovative con un significativo impatto sociale. Pubblicare video sui tuoi aggiornamenti AI su Instagram, @projeto_ia_libras, Gabriel ha già guadagnato più di 86,1 mila follower, oltre a migliaia di visualizzazioni sui suoi post.
Intervista al creatore dell'intelligenza artificiale
Per comprendere meglio la funzionalità di questa intelligenza artificiale nella trascrizione in tempo reale di dialoghi che coinvolgono il linguaggio dei segni, abbiamo intervistato il programmatore e ideatore del progetto, lo studente di statistica Gabriel Sales.
Chi è il programmatore e studente di statistica dell'UFF dietro il progetto? E come sei arrivato a questa idea?
Gabriele Vendite: Mi chiamo Gabriel, vengo da Rio de Janeiro. Sono uno studente appassionato di tecnologia. Ho avuto il mio primo computer quando avevo dieci anni e da allora mi sono avvicinato a questo settore dell'informatica. Ho iniziato a studiare programmazione da quando avevo dodici anni e ho progredito fino ad approdare alla scienza dei dati. Quando ho scoperto la zona ho pensato che fosse davvero interessante, soprattutto la parte dell'intelligenza artificiale, dove i robot pensano in modo quasi umano, quindi mi ha lasciato molto affascinato. E così ho iniziato a studiare queste cose. Sono entrato alla facoltà di statistica dell'UFF, poiché la statistica è una base importante per la scienza dei dati. E ho iniziato il mio viaggio in quest’area dell’intelligenza artificiale.
Ho iniziato ad approfondire l'intelligenza artificiale, ho iniziato a realizzare diversi piccoli progetti. E poi ho seguito un corso sulla Bilancia nel mio college, nel primo semestre dell'anno scorso, e sono rimasta molto affascinata dalla storia dell'insegnante, perché era sorda ed è riuscita a diventare medico, nonostante tutte le difficoltà di cui ha parlato nella sua storia.
Così ho iniziato a pensare a cosa avrei potuto fare di interessante e inclusivo per questa comunità, per aiutarla. E poi sono partito da un’idea di intelligenza artificiale che potesse classificare gli alfabeti della Bilancia. Tipo: lettera a, lettera b, lettera c, ecc. Tutto questo tramite video. Quella è stata la mia prima idea, il mio primo test per vedere quanto sarebbe stato difficile, quanto sarebbe stato complesso, e poi mi sono evoluto, ho iniziato ad aggiungere segnali robusti e a migliorare la conoscenza dell'intelligenza artificiale.
Come definisci il tuo progetto? Cosa intendi cambiare con esso nella realtà attuale, soprattutto per i non udenti?
Gabriele Vendite: L'obiettivo principale è rivoluzionare la comunicazione tra persone sorde e udenti, perché tra queste persone esiste un'enorme barriera. Perché bisogna necessariamente conoscere la Bilancia per poter comunicare con le persone sorde, quindi avendo questo sistema di intelligenza artificiale si può abbattere un po' questa barriera. Possiamo applicarlo nelle aziende, nel servizio al cliente, nell’accessibilità digitale. Il cliente sordo va lì e può dire chiaramente quello che vuole. Se vuole comprare qualcosa, se ha bisogno di assistenza particolare, senza affidarsi a un interprete Libra, tutto può essere fatto digitalmente con l’intelligenza artificiale.
Anche negli ospedali, in situazioni di emergenza, dove la persona ha bisogno di cure rapide e talvolta non hai qualcuno che sappia parlare la Bilancia, giusto? A volte è necessario conoscere il suo gruppo sanguigno, è necessario sapere se ha qualche malattia o qualcosa del genere, e con questo sistema anche questo sarebbe possibile.
Anche nell'istruzione, per insegnare alla Bilancia, questo sistema educativo sarà molto efficiente nel testare l'accuratezza degli studenti, se eseguono i segni correttamente, se stanno imparando bene. E anche per gli insegnanti sordi, che non tutti hanno la capacità di parlare, perché ci sono alcuni sordi che possono sviluppare la capacità di parlare, ma non tutti possono, il sistema sarebbe utile anche in questo caso. Quindi ci sono diverse applicazioni che si possono fare.
Come descrivi come funziona questa intelligenza artificiale?
Gabriele Vendite: Ci sono tre IA. Uno per catturare i punti chiave del corpo, in modo da mappare l'intero corpo della persona, il viso, la spalla, il gomito, le mani, le dita e questo nel corso dei fotogrammi, perché dobbiamo farlo su video . Quindi questa mappatura verrà eseguita nel corso dei fotogrammi. Successivamente verrà passato a un classificatore. Classificherà questi dati, dai punti chiave del corpo, e ti dirà quale opzione è.
E l’ultima intelligenza artificiale è creare il contesto dei segnali. Quindi dopo aver mappato il corpo, dopo aver classificato di quale segno si tratta, metterà insieme l'elenco dei segni previsti e lo trasformerà in un messaggio, un messaggio naturale, leggibile e comprensibile. Quindi questa IA assemblerà il contesto dei segnali che sono già stati previsti dalla seconda IA.
Nel complesso, il tuo progetto è unico o hai progetti simili che coinvolgono l'intelligenza artificiale per assistere le persone sorde in questo modo?
Gabriele Vendite: Ci devono essere sicuramente progetti simili. Ma nessuno di essi è andato avanti, forse a causa della mancanza di investimenti in Brasile. Le persone finiscono per andare fuori dal paese, soprattutto a causa del facile accesso alla tecnologia. Ma non so se verranno sviluppati (altri progetti), potrebbero esserci dei prototipi.
In questo caso, per te, qual è la differenza più grande del tuo progetto?
Gabriele Vendite: La capacità di crescere, può crescere molto facilmente con investimenti ed essere sviluppata più velocemente... La differenza principale è che superiamo la barriera comunicativa per le persone sorde, poiché ciò aiuterà nell'istruzione, nell'economia, nella cultura e nella politica.
Di cosa avrai bisogno per rendere il progetto scalabile?
Gabriele Vendite: Ho bisogno di dati, perché l'intelligenza artificiale ha bisogno di video per essere addestrata... È come insegnare a un bambino, bisogna mostrare qual è il segnale e ripeterlo più volte finché non capisce. E anche le attrezzature per processarli tutti, poiché creeremo un Big Data in questo modo
Quali sono i tuoi prossimi passi con il progetto?
Gabriele Vendite: È da un po' che cerco un'azienda partner, ce n'è una che mi sta aiutando con il mio sito web. E ora sto cercando una partnership con alcune persone influenti in questo mercato, magari per aprire una startup, trovare investitori e poi poter scalare più facilmente. L'idea è quella di vendere alle aziende che desiderano avere l'accessibilità digitale per offrirla ai propri clienti.
Come proteggi la tua IA dal “plagio”?
Gabriele Vendite: Quando si parla di intelligenza artificiale, è difficile plagiare. Puoi fare qualcosa di simile, ma lo stesso, è molto difficile. È come se Elon Musk creasse un'intelligenza artificiale simile a ChatGPT, può farlo, ma entrambi avranno risposte diverse. Perché ciò che interferisce con questo sono i dati disponibili, e in libbre sono scarsi. Sono necessari investimenti nella raccolta dati.
Quali test ti sottoponi per capire che l’AI sta interpretando correttamente i segnali in libbre?
Gabriele Vendite: Sto eseguendo test in tempo reale, emettendo diversi segnali per verificarne l'accuratezza. La poca conoscenza in sterline che ho imparato durante le materie universitarie, la applico e guardo video su Internet per sviluppare la formazione sull'intelligenza artificiale.
Vedi anche:
Fonti: Milne, Forbes e Click intelligente.
Recensito da Glaucone Vitale il 18/1/24.
Scopri di più su Showmetech
Iscriviti per ricevere le nostre ultime novità via e-mail.
