HiSS-Cube: Hierarchical Semi-Sparse Cube

Result code in IS VaVaI
<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F67985815%3A_____%2F21%3A00617868" target="_blank" >RIV/67985815:_____/21:00617868 - isvavai.cz</a>
Result on the web
<a href="https://ascl.net/2503.001" target="_blank" >https://ascl.net/2503.001</a>
DOI - Digital Object Identifier
—

Result language
angličtina
Original language name
HiSS-Cube: Hierarchical Semi-Sparse Cube
Original language description
Hierarchical Semi-Sparse Cube (HiSS-Cube) framework provides highly parallel processing of combined multi-modal multi-dimensional big data. The package builds a database on top of the HDF5 framework which supports parallel queries. A database index on top of HDF5 can be easily constructed in parallel, and the code supports efficient multi-modal big data combinations. The performance of HiSS-Cube is bounded by the I/O bandwidth and I/O operations per second of the underlying parallel file system, it scales linearly with the number of I/O nodes and can be extended to any kind of multidimensional data combination and information retrieval.nn
Czech name
—
Czech description
—

Project
—
Continuities
I - Institucionalni podpora na dlouhodoby koncepcni rozvoj vyzkumne organizace

Publication year
2021
Confidentiality
S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Internal product ID
HiSS-Cube
Technical parameters
Program v jazyce Python 3, vyžaduje běh na velkém paralelním clusteru spodporou MPI a paralelního HDF5. Dokumentace a analýza s příklady výsledků je v podobě Jupyter notebooků
Economical parameters
Program inovativním způsobem vytváří řídkou datovou kostku pro kombinované obrázky a spektra z velkých přehlídek oblohy. Kostka je optimalizována na rychlé paralelní zpracovaní a strojové učení. Byl popsán a použit ve dvou recenzovaných článcích.
Owner IČO
68407700
Owner name
Fakulta informačních technologií ČVUT v Praze

Similar results(10)