Universal software for immersive telepresence (VR-ORCTRL)

Result code in IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F00216305%3A26620%2F26%3A0201228" target="_blank" >RIV/00216305:26620/26:0201228 - isvavai.cz</a>

Result on the web

<a href="https://www.vut.cz/vav/vysledky/detail/201228" target="_blank" >https://www.vut.cz/vav/vysledky/detail/201228</a>

DOI - Digital Object Identifier

—

Result language

čeština

Original language name

Univerzální software pro imerzivní teleprezenci (VR-ORCTRL)

Original language description

Univerzální software pro imerzivní teleprezenci (VR-ORCTRL) představuje softwarový systém pro pokročilé dálkové ovládání mobilních robotických prostředků s využitím imerzivního zobrazení ve virtuální realitě. Software byl vyvinut jako univerzální operátorské rozhraní umožňující intuitivní řízení robotických systémů a současně poskytující operátorovi rozšířený situační přehled. VR-ORCTRL umožňuje zobrazování video streamů a telemetrických dat robotu v imerzivním prostředí VR helmy, podobně jako se zobrazuje na klasické operátorské obrazovce. Systém je navržen tak, aby podporoval souběžný běh imerzivní VR teleprezence se standardní teleprezencí přes obrazovku operátorské stanice, a operátor tak měl možnost plynulé přepínat mezi imerzivním a standardním režimem bez změny ovládacích prvků. Z tohoto důvodu zůstává ovládání robotu realizováno standardními vstupními zařízeními operátorské stanice, zatímco tento SW ve VR helmě slouží jako zobrazovací a interakční rozhraní. To umožňuje flexibilní nasazení v různých podmínkách a současně zachování provozní spolehlivosti. Software integruje vizualizaci senzorických dat, mapových podkladů, plánování tras a správu autonomních funkcí robotu. Umožňuje zobrazovat obraz z více senzorů včetně RGB a termální kamery, podporuje datovou fúzi a zobrazení polohy robotu na mapě. Součástí systému jsou rovněž nástroje pro plánování trajektorií, definici automatizovaných akcí a monitorování stavu robotu v reálném čase. Architektura VR-ORCTRL je modulární a navržena pro integraci s robotickými platformami využívajícími middleware ROS. Systém je koncipován jako univerzální software využitelný pro různé typy mobilních robotů a teleprezenčních aplikací, včetně bezpečnostních, průmyslových a inspekčních scénářů. Výsledkem je flexibilní operátorské rozhraní zvyšující efektivitu, ergonomii a bezpečnost dálkového řízení robotických systémů.

Czech name

Univerzální software pro imerzivní teleprezenci (VR-ORCTRL)

Czech description

Univerzální software pro imerzivní teleprezenci (VR-ORCTRL) představuje softwarový systém pro pokročilé dálkové ovládání mobilních robotických prostředků s využitím imerzivního zobrazení ve virtuální realitě. Software byl vyvinut jako univerzální operátorské rozhraní umožňující intuitivní řízení robotických systémů a současně poskytující operátorovi rozšířený situační přehled. VR-ORCTRL umožňuje zobrazování video streamů a telemetrických dat robotu v imerzivním prostředí VR helmy, podobně jako se zobrazuje na klasické operátorské obrazovce. Systém je navržen tak, aby podporoval souběžný běh imerzivní VR teleprezence se standardní teleprezencí přes obrazovku operátorské stanice, a operátor tak měl možnost plynulé přepínat mezi imerzivním a standardním režimem bez změny ovládacích prvků. Z tohoto důvodu zůstává ovládání robotu realizováno standardními vstupními zařízeními operátorské stanice, zatímco tento SW ve VR helmě slouží jako zobrazovací a interakční rozhraní. To umožňuje flexibilní nasazení v různých podmínkách a současně zachování provozní spolehlivosti. Software integruje vizualizaci senzorických dat, mapových podkladů, plánování tras a správu autonomních funkcí robotu. Umožňuje zobrazovat obraz z více senzorů včetně RGB a termální kamery, podporuje datovou fúzi a zobrazení polohy robotu na mapě. Součástí systému jsou rovněž nástroje pro plánování trajektorií, definici automatizovaných akcí a monitorování stavu robotu v reálném čase. Architektura VR-ORCTRL je modulární a navržena pro integraci s robotickými platformami využívajícími middleware ROS. Systém je koncipován jako univerzální software využitelný pro různé typy mobilních robotů a teleprezenčních aplikací, včetně bezpečnostních, průmyslových a inspekčních scénářů. Výsledkem je flexibilní operátorské rozhraní zvyšující efektivitu, ergonomii a bezpečnost dálkového řízení robotických systémů.

Type

R - Software

CEP classification

—

OECD FORD branch

20204 - Robotics and automatic control

Project

<a href="/en/project/TQ03000946" target="_blank" >TQ03000946: Immersivity and automation of unmanned ground vehicles</a><br>

Continuities

P - Projekt vyzkumu a vyvoje financovany z verejnych zdroju (s odkazem do CEP)

Publication year

2025

Confidentiality

S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Internal product ID

VR-ORCTRL

Technical parameters

- Univerzální software pro imerzivní teleprezenci a dálkové ovládání mobilních robotických systémů. - Podpora zobrazení v komerčních VR helmách a současně na klasické operátorské obrazovce. - Plynulé přepínání mezi VR a standardním režimem bez změny ovládacích prvků. - Zobrazení video streamů z robotu v reálném čase včetně podpory RGB a termálních kamer. - Podpora datové fúze senzorických dat a vícerežimového zobrazení (barevné, termální, kombinované). - Vizualizace polohy robotu na mapových podkladech s využitím přesné GNSS lokalizace. - Implementace plánování tras, správy trajektorií a definice automatizovaných akcí. - Modulární softwarová architektura kompatibilní s ROS a rozšiřitelná o další senzory a robotické platformy. - Real-time přenos telemetrie, stavových dat a diagnostických informací. - Podpora ergonomického ovládání včetně mapování pohybu hlavy operátora pro řízení kamerové hlavice. - Ověření funkčnosti experimentálním provozem a integrací s mobilní robotickou platformou v reálném prostředí.

Economical parameters

- Zvýšení přidané hodnoty robotických systémů díky integraci pokročilého imerzivního ovládání a vizualizace. - Možnost samostatného licencování softwaru VR-ORCTRL pro různé robotické platformy. - Potenciál zvýšení tržeb z prodeje softwarových licencí a integrací do robotických systémů. - Rozšíření exportního potenciálu díky univerzálnosti a kompatibilitě s běžnými VR zařízeními a ROS. - Snížení nákladů na vývoj proprietárních operátorských rozhraní díky univerzálnímu řešení. - Zvýšení efektivity práce operátora a snížení personálních nákladů při dlouhodobém nasazení. - Možnost škálování řešení na více robotických jednotek bez zásadního navýšení nákladů. - Využitelnost v bezpečnostních, průmyslových a inspekčních aplikacích s vysokým komerčním potenciálem.

Owner IČO

00216305

Owner name

Vysoké učení technické v Brně