Ingyenes alkalmazás segít a látássérülteken

Vak és gyengénlátó emberek mindennapjainak megkönnyítését tűzte ki célul a Huawei.

A Facing Emotions elnevezésű nemzetközi társadalmi felelősségvállalási projektjében arra kereste a cég választ, hogyan segíthet a mesterséges intelligencia a vak és gyengénlátó embereknek többet érzékelni a körülöttük lévő világból.

Nemzetközi látássérült szervezetek bevonásával olyan applikációt hoztak létre, amely képes az emberi arcon megjelenő érzelmeket leolvasni, majd a látássérült felhasználók számára hanggá alakítani azokat. Hiszen az érzelmek kifejezésének egyik legnyilvánvalóbb és legfontosabb eszköze az arcmimika, észlelése azonban nehézséget okoz a vakok és gyengénlátók számára.

Fontos, hogy az app nem igényel internetkapcsolatot, s jelen időben, azonnal segít.

Hatékony értelmezés másodpercek alatt

Az applikáció a Mate 20 Pro készülék kamerarendszerét és a mesterséges intelligenciát hívja segítségül: az arcfelismerő algoritmusok azonosítják az egyes mimikai elemeket és kielemzik a szemek, az orr, a szemöldök és a száj, valamint azok egymáshoz viszonyított helyzetét, melyek alapján másodperceken belül elkülönítik a hét alapérzelemre jellemző gesztusokat.

A készülék ezt követően a hét alapérzelemhez (boldogság, szomorúság, félelem, undor, meglepődés, düh, megvetés) különböző hangulatú dallamokat társít, amelyet valós időben, offline módban továbbít a felhasználók fülhallgatójára.

Az applikáció segítségével az érzelmek olyan apró részletei is megfigyelhetők, amelyeket a vak és gyengénlátó emberek nem lennének képesek pusztán a partner hangsúlyozásából, hanglejtéséből kikövetkeztetni. A felhasználók a fülükben lévő vezeték nélküli fülhallgatón keresztül jellegzetes zenei motívumokat hallhatnak, amelyekből egyszerűen megállapíthatják, beszélgetőpartnerük éppen szívből mosolyog-e rájuk, vagy zavarban van-e az adott szituációban, esetleg szomorúság tükröződik az arcán.

A zeneszerző is látássérült

A Facing Emotions applikáció fejlesztésekor több látássérültekkel foglalkozó szervezettel is szoros együttműködésben dolgoztak, hogy a lehető legjobb megoldást kínálják az érintett csoportoknak, és olyan segítséget nyújtsanak, amely ténylegesen hasznosíthatóvá teszi az alkalmazást a mindennapokban.

A vak és gyengénlátó közösség képviselői a fejlesztés teljes ideje alatt részt vettek a tesztfolyamatokban, így a Huawei fejlesztői csapatával közösen alkották meg az alkalmazás funkcióit, színvilágát és az érzelmekre utaló hangokat.

“A hangok természetüknél fogva képesek érzelmet kifejezni. Nagyon fontos szempont volt, hogy a konvertált dallamok rövidek, tömörek és egyszerűek legyenek. A keletkezett zenei motívumokat vak és gyengénlátó emberek csoportja tesztelte és értékelte aszerint, hogy azok mennyire egyszerűen felismerhetők és emlékezetesek a felhasználó, valamint környezete számára”, mondta Tomasz Bilecki, a Facing Emotions zeneszerzője, aki maga is látássérült.

Intenzív hazai együttműködés a nemzetközi projekttel

Az alkalmazásfejlesztési folyamat során arra is fény derült, hogy a látássérült emberek olyan megoldásokat igényelnek, amelyekhez nincs szükség a kezükre, hiszen azok elfoglaltak a botok és egyéb kisegítő eszközök használatával.

Ezért a kampány részeként a díjnyertes tervező, Janek Kochanski speciális 3D-s nyomtatott, nyakba akasztható telefontokot fejlesztett a Mate 20 Pro számára, amely megkönnyíti az alkalmazás és az okoskészülék használatát.

A nemzetközi projekt keretében jövő januárban Magyarországon új együttműködés veszi kezdetét: a Huawei Technologies Hungary kezdeményezésére, vak és gyengénlátó szervezetek, illetve látássérültek segítése iránt elkötelezett hírességek bevonásával hívják fel a figyelmet az érzékenyítés fontosságára.

A Facing Emotions applikáció kizárólag Huawei Mate 20 Pro okoskészülékeken elérhető, már ingyenesen letölthető a Google Play Áruházból.