DeepSpot - Multilingual technology for spotting and instant alerting
Project goals
The aim of this project is to develop a multilingual software platform that will be able to instantly search for keywords, phrases, topics, visual phenomena or entities, based on the clients‘ requirements, in multimedia (audio or audiovisual) data. When deployed in online mode, this will mean virtually instantaneous detection of required objects with the possibility of informing the client immediately or sending aggregate information. This deployment will be used predominantly in continuous monitoring of multimedia, TV, radio and Internet channels. The offline mode will be used in the processing of audiovisual databases or archives, such as call centers, where the search time is the main priority and has to be only a fraction (e.g. a thousandth) of the file duration.
Keywords
multilingual speech processingkeyword spottingmultimediadeep neural networksmachine learning
Public support
Provider
Technology Agency of the Czech Republic
Programme
Programme of applied research and experimental development EPSILON
Call for proposals
EPSILON 3 (STA02017TH030)
Main participants
NEWTON Technologies, a.s.
Contest type
VS - Public tender
Contract ID
TH03010018 - Smlouva o poskytnutí podpory
Alternative language
Project name in Czech
DeepSpot - Multilingvální technologie pro detekci a včasné upozornění
Annotation in Czech
Cílem projektu je vyvinout multilingvální softwarovou platformu, která bude schopna velmi rychle vyhledávat klienty žádaná slova, fráze, témata, případně určité jevy a obrazové entity v multimediálních (audio nebo audiovizuálních) datech. Při nasazení v online režimu to bude znamenat prakticky okamžitou detekci těchto objektů s možností buď bezprostředního informování zákazníka, nebo zasílání agregované informace. Toto nasazení se předpokládá hlavně při kontinuálním sledování multimediálních zdrojů, televizních, rozhlasových a internetových kanálů. Offline režim bude využíván při požadavcích na zpracování audiovizuálních databází nebo archívů, např. u call center, kde je hlavní prioritou doba nutná k vyhledávání, která musí být pouhým zlomkem (např. tisícinou) trvání vlastních dokumentů.
Scientific branches
R&D category
AP - Applied research
OECD FORD - main branch
20206 - Computer hardware and architecture
OECD FORD - secondary branch
20205 - Automation and control systems
OECD FORD - another secondary branch
10201 - Computer sciences, information science, bioinformathics (hardware development to be 2.2, social aspect to be 5.8)
AF - Documentation, librarianship, work with information
BC - Theory and management systems
BD - Information theory
IN - Informatics
JC - Computer hardware and software
JD - Use of computers, robotics and its application
Completed project evaluation
Provider evaluation
U - Uspěl podle zadání (s publikovanými či patentovanými výsledky atd.)
Project results evaluation
These are preliminary data, the project evaluation hasn´t proceeded yet.
Solution timeline
Realization period - beginning
Jan 1, 2018
Realization period - end
Dec 31, 2021
Project status
U - Finished project
Latest support payment
Feb 28, 2021
Data delivery to CEP
Confidentiality
C - Předmět řešení projektu podléhá obchodnímu tajemství (§ 504 Občanského zákoníku), ale název projektu, cíle projektu a u ukončeného nebo zastaveného projektu zhodnocení výsledku řešení projektu (údaje P03, P04, P15, P19, P29, PN8) dodané do CEP, jsou upraveny tak, aby byly zveřejnitelné.
Data delivery code
CEP22-TA0-TH-U
Data delivery date
Jun 30, 2022
Finance
Total approved costs
29,765 thou. CZK
Public financial support
17,764 thou. CZK
Other public sources
0 thou. CZK
Non public and foreign sources
12,001 thou. CZK
Recognised costs
29 765 CZK thou.
Public support
17 764 CZK thou.
0%
Provider
Technology Agency of the Czech Republic
OECD FORD
Computer hardware and architecture
Solution period
01. 01. 2018 - 31. 12. 2021