Soluția REVOLUȚIONARĂ pentru persoanele cu deficiențe de vedere. Cum funcționează aplicația premiată la cea mai mare competiție de robotică din Europa

Inovație. Tehnologie. Responsabilitate. Sunt trei cuvinte care conturează perfect povestea lui Theodor Grumeza, doctorand la Universitatea de Vest din Timișoara, Facultatea de Matematică și Informatică, un om care demonstrează că drumul deschis de inovație și tehnologie poate schimba la propriu viețile unor oameni. 

Vorbim despre proiectul SoundSight al echipei Smart::Bits, pe care Theodor o coordonează și care reprezintă o soluție revoluționară destinată persoanelor cu deficiențe de vedere, conceput pentru a le oferi o autonomie mai mare și accesibilitate sporită în activitățile cotidiene, precum mersul la cumpărături.

SoundSight este mai mult decât un simplu dispozitiv asistiv. Cum funcționează

Acesta integrează tehnologii avansate, pentru a răspunde nevoilor persoanelor cu deficiențe de vedere. Sistemul constă într-o cameră video montată pe o pereche de ochelari 3D, conectată la un Raspberry Pi 5 echipat cu un modul AI.

Toate componentele, inclusiv o baterie de dimensiuni compacte, sunt integrate într-o carcasă personalizată, de asemenea imprimată 3D.

Feedback-ul este livrat în timp real prin căști Bluetooth, oferind utilizatorului informații esențiale, precum citirea codurilor de bare sau detectarea datelor de expirare ale produselor, printr-un flux video live.

Secretul din spatele acestei inovații constă în utilizarea modelului lingvistic de mari dimensiuni Meta LLAMA 2, combinat cu tehnici avansate de procesare a imaginilor.

„SoundSight este un pas mic, dar hotărât către o societate mai incluzivă”

Theodor Grumeza, coordonatorul echipei Smart::Bits, spune că proiectul SoundSight reprezintă, pe lângă utilitatea lui, și depășirea unor bariere greu de trecut în România lui 2024. Proiectul este rezultatul unui efort comun al ideilor împărtășite și al colaborării susținute.

„Pentru mine, acest proiect reprezintă mai mult decât o realizare tehnologică, este oportunitatea de a aduce un impact pozitiv real în viețile oamenilor care se confruntă cu dificultăți zilnice de a realiza activități care nouă ni se par firești. Cred că SoundSight nu înseamnă doar accesibilitate și autonomie pentru persoanele cu deficiențe de vedere, ci și speranța că pot depăși bariere care par de netrecut.

Timpul petrecut pentru a crea și dezvolta acest dispozitiv, efortul și munca depuse sunt total justificate și îmi susțin convingerea că inovația este mult mai importantă atunci când este pusă în slujba oamenilor. În spatele fiecărui proiect de succes stă o echipă unită, iar acest lucru a fost cu atât mai evident în cadrul echipei Smart::Bits Robotics. Fiecare membru al echipei a contribuit cu pasiunea, cunoștințele și dedicarea sa, iar acest proiect este rezultatul unui efort comun, al ideilor împărtășite și al colaborării susținute.

Este un «reminder» constant că niciun proiect important și cu impact nu poate fi realizat de unul singur. Realizările vin din efortul comun, din încrederea reciprocă și din bucuria de a lucra alături de oameni care împărtășesc aceeași viziune. Acest proiect este un argument al determinării noastre de a transforma lumea în bine, un pas mic, dar hotărât către o societate mai incluzivă pentru cei care au cea mai mare nevoie de sprijinul nostru.

Suntem mândri și recunoscători pentru premiile primite și aprecierea celor din jur, dar, pentru noi, cea mare satisfacție va fi atunci când vom vedea SoundSight folosit de cei care au nevoie”, a mărturisit Theodor Grumeza, pentru Gândul.

SoundSight, premiat la RoboChallenge

Proiectul Smart::Bits a fost premiat la RoboChallenge, cea mai mare competiție de robotică din Europa, unde inovația și funcționalitatea dispozitivului au impresionat juriul.

Theodor Radu Grumeza este liderul echipei Smart::Bits, un grup de studenți talentați de la Universitatea de Vest din Timișoara. Împreună, aceștia au realizat trei proiecte inovatoare:

• SoundSight – sistemul care transformă informațiile vizuale în feedback audio pentru persoanele cu deficiențe de vedere.
• SpotFinder – un sistem bazat pe senzori care ajută utilizatorii să găsească cel mai apropiat loc de parcare disponibil.
• MediTrack – un dozator automatizat de medicamente, adaptabil în funcție de necesitățile specifice ale utilizatorului.

Echipa este formată din: Daniel Miron, Bogdan Bozga, Răzvan Iovescu, Richard Baczur, Alexandru Beca, Thomas Lazăr, Răzvan Țînca, Tania Giurovici, Marijus Musta, Andrei Vițan, Matei Albu, Alina Roșoga, Teodora Mircea și Flavius Grădinariu.

Prin talentul și dedicarea sa, Theodor Radu Grumeza demonstrează că tehnologia nu este doar un instrument, ci o punte către incluziune și independență. Inovația nu cunoaște limite, iar tinerii cercetători din România dovedesc acest lucru din plin.

Care este scopul proiectul SoundSight

Persoanele cu deficiență de vedere se confruntă adesea cu provocări semnificative în activitățile de zi cu zi, precum cumpărăturile, în special în identificarea produselor, citirea datelor de expirare și accesarea informațiilor despre valoarea nutrițională și conținutul de alergeni.

Acest studiu introduce SoundSight, un dispozitiv de sprijin și asistență, conceput pentru a îmbunătăți accesibilitatea și autonomia persoanelor cu deficiență de vedere când merg la cumpărături.

SoundSight integrează o cameră montată pe o pereche de ochelari imprimați 3D, conectată prin cablu la un Raspberry Pi 5 echipat cu un modul AI și o baterie, toate închise într-o carcasă personalizată imprimată 3D. Feedback-ul audio este livrat prin intermediul căștilor Bluetooth, oferind utilizatorului informații într-un timp real.

Noutatea acestui studiu constă într-o integrare a modelului lingvistic de mari dimensiuni Meta LLAMA 2 cu tehnici de procesare a imaginilor pentru scanarea codurilor de bare și detectarea datelor de expirare dintr-un flux video live.

Am utilizat soluții tradiționale și moderne de recunoaștere optică a caracterelor (OCR). O fază de validare filtrează și verifică datele extrase pentru a asigura acuratețea acestora. Această abordare permite SoundSight să ofere feedback audio despre denumirile produselor, datele de expirare, valorile nutriționale și conținutul de alergeni.

Prin valorificarea modelelor lingvistice de mari dimensiuni și a metodelor de OCR rafinate, SoundSight îmbunătățește experiența de cumpărături pentru persoanele cu deficiență de vedere, permițându-le să participe mai independent la activitățile cotidiene. Am dezvoltat acest proiect împreună cu echipa Smart::Bits Robotics de la Facultatea de Matematică și Informatică”, potrivit informațiilor oferite pentru Gândul de Theodor Grumeza.

Poveștile și realizările copiilor și tinerilor remarcabili din România, în catalogul  excelenței

Theodor s-a înscris în campania națională „100 de tineri pentru dezvoltarea României”, organizată de Fundația Dan Voiculescu pentru Dezvoltarea României. Această inițiativă își propune să promoveze și să susțină tineri excepționali care contribuie la transformarea României prin ideile și proiectele lor.

Prin înscrierea în campania națională „100 de tineri pentru dezvoltarea României”, MultiTouchCNME își propune să inspire generațiile viitoare și să arate că educația poate fi cheia schimbării.

Campania, desfășurată de Fundația Dan Voiculescu pentru Dezvoltarea României, aduce în prim-plan povești de succes care redefinesc standardele educației în România, iar povestea echipei MultiTouchCNME este una dintre cele mai luminoase exemple ale acestei schimbări.

Campania „100 de Tineri pentru Dezvoltarea României” urmărește descoperirea a 100 de copii și tineri talentați și performanți pe care să îi premieze în cadrul unei gale a excelenței. În catalogul excelenței românești vor fi incluși olimpici internaționali, câștigători ai unor concursuri internaționale și naționale (medalii de aur, argint și bronz). Campania va prezenta modele de inspirație, ilustrând cu mândrie diversitatea talentelor din întreaga țară.

CITEȘTE ȘI:

POVESTEA uimitoare a tânărului care la 15 ani vorbește zece limbi și este premiat de societăți de elită. ”Trăiesc prin fiecare limbă pe care o învăț”

POVESTEA mongolei îndrăgostite de România care îi ajută pe copii să facă rapid calcule de milioane. ”Le dă credința că sunt buni la matematică”

POVESTEA primului copil care a trecut toate nivelurile de SOROBAN. Cum l-a ajutat pe Filip aritmetica mentală japoneză în recuperarea creierului

Invenție REVOLUȚIONARĂ. Povestea tinerilor care transformă Pet-uri în plastic pentru imprimante 3D. „Totul pornește de la o sticlă”

POVESTEA micului pictor care a impresionat New York-ul, cu lucrarea care ilustrează Mănăstirea Radu-Vodă. „Dumnezeu lucrează prin oameni”