Embedded SW library for detecting people and animals for automotive use

Result code in IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F68407700%3A21230%2F23%3A00373238" target="_blank" >RIV/68407700:21230/23:00373238 - isvavai.cz</a>

Result on the web

<a href="https://gitlab.workswell.cz" target="_blank" >https://gitlab.workswell.cz</a>

DOI - Digital Object Identifier

—

Result language

čeština

Original language name

Embedded SW knihovna pro detekci osob a zvířat pro automotive využití

Original language description

Softwarová knihovna implementovaná v jazyce C/C++ pro zajištění detekce definovaných objektů v silničním provozu v termovizním obrazu či video streamu. Knihovna je založena na plaftormě YOLOv8, která mimo jiné definuje strukturu použité neuronové sítě pro vlastní detekci objektů (např. automobilů, osob, cyklistů, apod.). Natrénování neurové sítě bylo provedeno na dostatečně obsáhlém datasetu. Správná funkce byla ověřena na PC, stejně tak na platformě MTM využívající FPGA Zynq UltraScale+. Průměrný čas na zpracování jednoho snímku je závislý na použitém rozlišení. Pro monitoring vytížení jednotlivých jader CPU byla použit nástroj SYSSTAT. Testovány byly celkem tři datasety s různým rozlišením.

Czech name

Embedded SW knihovna pro detekci osob a zvířat pro automotive využití

Czech description

Softwarová knihovna implementovaná v jazyce C/C++ pro zajištění detekce definovaných objektů v silničním provozu v termovizním obrazu či video streamu. Knihovna je založena na plaftormě YOLOv8, která mimo jiné definuje strukturu použité neuronové sítě pro vlastní detekci objektů (např. automobilů, osob, cyklistů, apod.). Natrénování neurové sítě bylo provedeno na dostatečně obsáhlém datasetu. Správná funkce byla ověřena na PC, stejně tak na platformě MTM využívající FPGA Zynq UltraScale+. Průměrný čas na zpracování jednoho snímku je závislý na použitém rozlišení. Pro monitoring vytížení jednotlivých jader CPU byla použit nástroj SYSSTAT. Testovány byly celkem tři datasety s různým rozlišením.

Type

R - Software

CEP classification

—

OECD FORD branch

10201 - Computer sciences, information science, bioinformathics (hardware development to be 2.2, social aspect to be 5.8)

Project

<a href="/en/project/FW03010247" target="_blank" >FW03010247: High Sensitive and Scalable Microbolometer Thermal Imaging Module with AI processing and High Resolution Sensor</a><br>

Continuities

P - Projekt vyzkumu a vyvoje financovany z verejnych zdroju (s odkazem do CEP)

Publication year

2023

Confidentiality

C - Předmět řešení projektu podléhá obchodnímu tajemství (§ 504 Občanského zákoníku), ale název projektu, cíle projektu a u ukončeného nebo zastaveného projektu zhodnocení výsledku řešení projektu (údaje P03, P04, P15, P19, P29, PN8) dodané do CEP, jsou upraveny tak, aby byly zveřejnitelné.

Internal product ID

FW03010247-V10

Technical parameters

Zdrojový kód napsaný v jazyce C/C++ využívající framework YOLOv8. Lze ji portovat na různé hardwarové vestavné platformy, testy proběhly na OS Ubuntu a Petalinux v případě platformy Zynq UltraScale+. V případě rozlišení 320 x 320 zpracování jednoho snímku se podařilo dosáhnout času 190ms, což odpovídá obnovovací obrazová frekvence 5,3 FPS.

Economical parameters

Software knihovna vytvořená v jazyce C/C++, primárně není určena pro přímý prodej, počítá se s nasazením v zařízeních firmy Workswell pro zvýšení konkurence schopnosti vlastních produktů, které obsahuji hardware s dostatečným výpočetním výkonem. V případě zájmu přímý nákup je možný, nicméně cena se stanoví na základě způsobu licencování a pro každý obchodní případ samostatně. Výsledek je ve spoluvlastnictví firmy Workswell. s.r.o. a ČVUT v Praze. Podíly obou partnerů jsou dány Smlouvou o využití výsledků projektu.

Owner IČO

68407700

Owner name

České vysoké učení technické v Praze