Univerzální software pro imerzivní teleprezenci (VR-ORCTRL)

Kód výsledku v IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F00216305%3A26620%2F26%3A0201228" target="_blank" >RIV/00216305:26620/26:0201228 - isvavai.cz</a>

Výsledek na webu

<a href="https://www.vut.cz/vav/vysledky/detail/201228" target="_blank" >https://www.vut.cz/vav/vysledky/detail/201228</a>

DOI - Digital Object Identifier

—

Jazyk výsledku

čeština

Název v původním jazyce

Univerzální software pro imerzivní teleprezenci (VR-ORCTRL)

Popis výsledku v původním jazyce

Univerzální software pro imerzivní teleprezenci (VR-ORCTRL) představuje softwarový systém pro pokročilé dálkové ovládání mobilních robotických prostředků s využitím imerzivního zobrazení ve virtuální realitě. Software byl vyvinut jako univerzální operátorské rozhraní umožňující intuitivní řízení robotických systémů a současně poskytující operátorovi rozšířený situační přehled. VR-ORCTRL umožňuje zobrazování video streamů a telemetrických dat robotu v imerzivním prostředí VR helmy, podobně jako se zobrazuje na klasické operátorské obrazovce. Systém je navržen tak, aby podporoval souběžný běh imerzivní VR teleprezence se standardní teleprezencí přes obrazovku operátorské stanice, a operátor tak měl možnost plynulé přepínat mezi imerzivním a standardním režimem bez změny ovládacích prvků. Z tohoto důvodu zůstává ovládání robotu realizováno standardními vstupními zařízeními operátorské stanice, zatímco tento SW ve VR helmě slouží jako zobrazovací a interakční rozhraní. To umožňuje flexibilní nasazení v různých podmínkách a současně zachování provozní spolehlivosti. Software integruje vizualizaci senzorických dat, mapových podkladů, plánování tras a správu autonomních funkcí robotu. Umožňuje zobrazovat obraz z více senzorů včetně RGB a termální kamery, podporuje datovou fúzi a zobrazení polohy robotu na mapě. Součástí systému jsou rovněž nástroje pro plánování trajektorií, definici automatizovaných akcí a monitorování stavu robotu v reálném čase. Architektura VR-ORCTRL je modulární a navržena pro integraci s robotickými platformami využívajícími middleware ROS. Systém je koncipován jako univerzální software využitelný pro různé typy mobilních robotů a teleprezenčních aplikací, včetně bezpečnostních, průmyslových a inspekčních scénářů. Výsledkem je flexibilní operátorské rozhraní zvyšující efektivitu, ergonomii a bezpečnost dálkového řízení robotických systémů.

Název v anglickém jazyce

Universal software for immersive telepresence (VR-ORCTRL)

Popis výsledku anglicky

The universal software for immersive telepresence (VR-ORCTRL) represents a software system for advanced remote control of mobile robotic platforms using immersive visualization in virtual reality. The software was developed as a universal operator interface enabling intuitive control of robotic systems while simultaneously providing the operator with enhanced situational awareness. VR-ORCTRL enables the display of video streams and robot telemetry data in an immersive VR headset environment, similar to the display on a conventional operator screen. The system is designed to support the simultaneous operation of immersive VR telepresence together with standard screen-based telepresence at the operator station, allowing the operator to seamlessly switch between immersive and standard modes without changing control elements. For this reason, robot control remains implemented through standard operator station input devices, while the VR software serves as a visualization and interaction interface within the headset. This allows flexible deployment in various conditions while maintaining operational reliability. The software integrates visualization of sensor data, map layers, route planning, and management of the robot’s autonomous functions. It enables visualization of data from multiple sensors, including RGB and thermal cameras, supports data fusion, and displays the robot’s position on a map. The system also includes tools for trajectory planning, definition of automated actions, and real-time monitoring of the robot’s status. The VR-ORCTRL architecture is modular and designed for integration with robotic platforms using ROS middleware. The system is conceived as universal software applicable to various types of mobile robots and telepresence applications, including security, industrial, and inspection scenarios. The result is a flexible operator interface that increases the efficiency, ergonomics, and safety of remote control of robotic systems.

Druh

R - Software

CEP obor

—

OECD FORD obor

20204 - Robotics and automatic control

Projekt

<a href="/cs/project/TQ03000946" target="_blank" >TQ03000946: Imerzivita a automatizace pozemních bezpilotních prostředků</a><br>

Návaznosti

P - Projekt vyzkumu a vyvoje financovany z verejnych zdroju (s odkazem do CEP)

Rok uplatnění

2025

Kód důvěrnosti údajů

S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Interní identifikační kód produktu

VR-ORCTRL

Technické parametry

- Univerzální software pro imerzivní teleprezenci a dálkové ovládání mobilních robotických systémů. - Podpora zobrazení v komerčních VR helmách a současně na klasické operátorské obrazovce. - Plynulé přepínání mezi VR a standardním režimem bez změny ovládacích prvků. - Zobrazení video streamů z robotu v reálném čase včetně podpory RGB a termálních kamer. - Podpora datové fúze senzorických dat a vícerežimového zobrazení (barevné, termální, kombinované). - Vizualizace polohy robotu na mapových podkladech s využitím přesné GNSS lokalizace. - Implementace plánování tras, správy trajektorií a definice automatizovaných akcí. - Modulární softwarová architektura kompatibilní s ROS a rozšiřitelná o další senzory a robotické platformy. - Real-time přenos telemetrie, stavových dat a diagnostických informací. - Podpora ergonomického ovládání včetně mapování pohybu hlavy operátora pro řízení kamerové hlavice. - Ověření funkčnosti experimentálním provozem a integrací s mobilní robotickou platformou v reálném prostředí.

Ekonomické parametry

- Zvýšení přidané hodnoty robotických systémů díky integraci pokročilého imerzivního ovládání a vizualizace. - Možnost samostatného licencování softwaru VR-ORCTRL pro různé robotické platformy. - Potenciál zvýšení tržeb z prodeje softwarových licencí a integrací do robotických systémů. - Rozšíření exportního potenciálu díky univerzálnosti a kompatibilitě s běžnými VR zařízeními a ROS. - Snížení nákladů na vývoj proprietárních operátorských rozhraní díky univerzálnímu řešení. - Zvýšení efektivity práce operátora a snížení personálních nákladů při dlouhodobém nasazení. - Možnost škálování řešení na více robotických jednotek bez zásadního navýšení nákladů. - Využitelnost v bezpečnostních, průmyslových a inspekčních aplikacích s vysokým komerčním potenciálem.

IČO vlastníka výsledku

00216305

Název vlastníka

Vysoké učení technické v Brně