Mobilní aplikace bMyVision v2.0 - 2025

Kód výsledku v IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F46747885%3A24220%2F25%3A00014677" target="_blank" >RIV/46747885:24220/25:00014677 - isvavai.cz</a>

Výsledek na webu

<a href="https://speechlab.tul.cz/bmyvision/" target="_blank" >https://speechlab.tul.cz/bmyvision/</a>

DOI - Digital Object Identifier

—

Jazyk výsledku

čeština

Název v původním jazyce

Mobilní aplikace bMyVision v2.0 - 2025

Popis výsledku v původním jazyce

Program bMyVision v2.0 je mobilní aplikace, která byla navržena a vytvořen na Technické univerzitě v Liberci v roce 2025 pro nevidomé osoby na mobilních telefonech iPhone od firmy Apple. Program je vytvořen v programovacím jazyku Swift pro operační systém iOS. Mobilní telefony značky iPhone byly vybrány, jelikož převážná většina nevidomých osob, které jsme oslovili, a které nám pomáhají s testováním a vývojem aplikace, používají mobilní telefony iPhone s operačním systémem iOS, na kterém je defaultně vytvořená asistenční podpora pro nevidomé osoby. Aplikace bMyVision 2.0 představuje pokročilý nástroj určený především pro zrakově postižené uživatele, který využívá moderní metody počítačového vidění a umělé inteligence. Aplikace umožňuje v reálném čase rozpoznávat přibližně 80 různých objektů v okolním prostředí. Díky tomu aplikace poskytuje uživateli okamžitou zpětnou vazbu o jeho okolí a zvyšuje jeho orientaci v prostoru. Součástí řešení je také detekce a identifikace známých osob, které si uživatel předem uloží do databáze aplikace. Tato funkce umožňuje snadnější sociální interakci a orientaci v přítomnosti konkrétních lidí. Další významnou komponentou je optické rozpoznávání textu (OCR), které je propojeno s technologií převodu textu na řeč (TTS), což umožňuje uživateli poslouchat čtený text z různých zdrojů, například z dokumentů nebo obalů výrobků. Aplikace rovněž dokáže detekovat přechody pro chodce a odhadnout vzdálenost uživatele od nich, čímž přispívá k bezpečnějšímu pohybu ve veřejném prostoru. V oblasti potravin nabízí systém schopnost rozpoznat přítomnost plísně na produktech, což pomáhá předcházet zdravotním rizikům. Dále aplikace umožňuje detekci a identifikaci mincí a bankovek, čímž usnadňuje manipulaci s hotovostí. Uživatelé mohou také využít funkci vyhledávání data spotřeby na obalech potravin, což zvyšuje jejich samostatnost při nakupování a kontrole potravin. Unikátní součástí aplikace je detekce psích exkrementů v okolí, která pomáhá zabránit nechtěnému kontaktu, nebo naopak umožňuje jejich nalezení v případě, že uživatel pečuje o asistenčního psa. Celkově aplikace bMyVision 2.0 integruje více funkcionalit do jednoho komplexního systému, který významně zvyšuje kvalitu života zrakově postižených osob. Díky kombinaci detekce objektů, rozpoznávání textu a inteligentních asistenčních funkcí představuje inovativní řešení v oblasti asistivních technologií. Celý program je vyvíjen jako multilinguální, kde v nastavení systému lze vybrat, zda má systém s nevidomou osobou komunikovat česky nebo anglicky. V budoucnu bude možné přidávat další jazyky.

Název v anglickém jazyce

Mobile application bMyVision v2.0 – 2025

Popis výsledku anglicky

The bMyVision v2.0 program is a mobile application that was designed and developed at the Technical University of Liberec in 2025 for blind users on Apple iPhone mobile devices. The program is created in the Swift programming language for the iOS operating system. iPhone devices were chosen because the vast majority of blind individuals we contacted—and who assist us with testing and development of the application—use iPhones with the iOS operating system, which includes built-in accessibility support for visually impaired users. The bMyVision 2.0 application represents an advanced tool primarily intended for visually impaired users, utilizing modern methods of computer vision and artificial intelligence. The application enables real-time recognition of approximately 80 different objects in the surrounding environment. As a result, it provides the user with immediate feedback about their surroundings and improves spatial orientation. The solution also includes detection and identification of familiar persons, whom the user can store in the application‘s database in advance. This feature facilitates easier social interaction and orientation in the presence of specific individuals. Another important component is optical character recognition (OCR), which is integrated with text-to-speech (TTS) technology, allowing the user to listen to text read aloud from various sources, such as documents or product packaging. The application can also detect pedestrian crossings and estimate the user’s distance from them, contributing to safer movement in public spaces. In the area of food, the system offers the ability to detect the presence of mold on products, helping to prevent health risks. The application also enables detection and identification of coins and banknotes, facilitating cash handling. Users can additionally use a feature for locating expiration dates on food packaging, increasing their independence when shopping and checking food items. A unique feature of the application is the detection of dog excrement in the surrounding environment, which helps prevent unwanted contact or, conversely, allows it to be located if the user is caring for an assistance dog. Overall, the bMyVision 2.0 application integrates multiple functionalities into one comprehensive system that significantly improves the quality of life of visually impaired individuals. Through a combination of object detection, text recognition, and intelligent assistive functions, it represents an innovative solution in the field of assistive technologies. The entire program is being developed as multilingual, allowing users to choose in the system settings whether the application communicates in Czech or English. Additional languages will be possible to add in the future.

Druh

R - Software

CEP obor

—

OECD FORD obor

10201 - Computer sciences, information science, bioinformathics (hardware development to be 2.2, social aspect to be 5.8)

Projekt

—

Návaznosti

O - Projekt operacniho programu

Rok uplatnění

2025

Kód důvěrnosti údajů

S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Interní identifikační kód produktu

ITE_SW_2025_01

Technické parametry

Aplikace bMyVision 2.0 představuje pokročilý nástroj určený především pro zrakově postižené uživatele, který využívá moderní metody počítačového vidění a umělé inteligence. Aplikace umožňuje v reálném čase rozpoznávat přibližně 80 různých objektů v okolním prostředí. Díky tomu aplikace poskytuje uživateli okamžitou zpětnou vazbu o jeho okolí a zvyšuje jeho orientaci v prostoru. Součástí řešení je také detekce a identifikace známých osob, které si uživatel předem uloží do databáze aplikace. Tato funkce umožňuje snadnější sociální interakci a orientaci v přítomnosti konkrétních lidí. Další významnou komponentou je optické rozpoznávání textu (OCR), které je propojeno s technologií převodu textu na řeč (TTS), což umožňuje uživateli poslouchat čtený text z různých zdrojů, například z dokumentů nebo obalů výrobků. Aplikace rovněž dokáže detekovat přechody pro chodce a odhadnout vzdálenost uživatele od nich, čímž přispívá k bezpečnějšímu pohybu ve veřejném prostoru. V oblasti potravin nabízí systém schopnost rozpoznat přítomnost plísně na produktech, což pomáhá předcházet zdravotním rizikům. Dále aplikace umožňuje detekci a identifikaci mincí a bankovek, čímž usnadňuje manipulaci s hotovostí. Uživatelé mohou také využít funkci vyhledávání data spotřeby na obalech potravin, což zvyšuje jejich samostatnost při nakupování a kontrole potravin. Unikátní součástí aplikace je detekce psích exkrementů v okolí, která pomáhá zabránit nechtěnému kontaktu, nebo naopak umožňuje jejich nalezení v případě, že uživatel pečuje o asistenčního psa. Celkově aplikace bMyVision 2.0 integruje více funkcionalit do jednoho komplexního systému, který významně zvyšuje kvalitu života zrakově postižených osob. Díky kombinaci detekce objektů, rozpoznávání textu a inteligentních asistenčních funkcí představuje inovativní řešení v oblasti asistivních technologií. Celý program je vyvíjen jako multilinguální, kde v nastavení systému lze vybrat, zda má systém s nevidomou osobou komunikovat česky nebo anglicky. V budoucnu bude možné přidávat další jazyky. Kontaktní osoba Josef Chaloupka (josef.chaloupka@tul.cz).

Ekonomické parametry

Program je vyvíjen pro nevidomé osoby. Výsledek tak nemá ekonomické parametry, které by se daly snadno vyčíslit, ale má velkou společenskou relevanci pomoci zrakově postiženým osobám.

IČO vlastníka výsledku

46747885

Název vlastníka

Technická univerzita v Liberci