Deep learning in psychotherapy: Machine learning applied on therapeutic session recordings
Project goals
We aim to develop a program (demonstrator - DeepPsy) able to automatically transcribe audio recordings of psychotherapeutic sessions and consequently analyze both audio recordings and transcripts with a goal to provide psychotherapists with a feedback about the session. The feedback will be based on visualization of the basic metrics of the acoustic and textual aspects of speech used in the sessions (such as speech rate of therapists and clients, total speech duration of participants, intonation) as well as on language techniques used by therapists (such as paraphrases, reflections, type of questions). A functional demonstrator will be available for the Czech community of psychotherapists to use.
Keywords
Psychotherapy processFeedback-Informed TreatmentRoutine Outcome MonitoringRoutine Process Monitoring, Automatic Speech RecognitionUnsupervised Adaptation of Speech Recognition systemDiarizationNatural Language ProcessingMachine Learning
Public support
Provider
Technology Agency of the Czech Republic
Programme
Programme for funding of applied research in social sciences and humanities, experimental development, and innovation ETA
Call for proposals
ÉTA 3 (STA02019TL030)
Main participants
Vysoké učení technické v Brně / Fakulta informačních technologií
Contest type
VS - Public tender
Contract ID
TL03000049 - Smlouva o poskytnutí podpory
Alternative language
Project name in Czech
Deep learning v psychoterapii: Strojová analýza nahrávek terapeutických sezení
Annotation in Czech
Vytvořit program (demonstrátor - DeePsy), který dokáže automaticky přepsat audio nahrávky psychoterapeutických sezení a následně bude schopen audio nahrávky a přepisy analyzovat s cílem poskytovat psychoterapeutům zpětnou vazbu o proběhlém sezení. Zpětná vazba bude založena na vizualizaci základních metrik akustických a textových aspektů nahrávek (jako je rychlost řeči terapeutů a klientů, celková délka řeči účastníků, intonace) a také jazykových nástrojů používaných terapeuty (jako jsou parafráze, reflexe, nebo různý typ otázek). Pro českou komunitu psychoterapeutů (sdružených například v České asociaci pro psychoterapii nebo České psychoterapeutické společnosti ČLS JEP) bude k dispozici po ukončení projektu funkční demonstrátor, který budou moci využívat.
Scientific branches
R&D category
AP - Applied research
OECD FORD - main branch
50101 - Psychology (including human - machine relations)
OECD FORD - secondary branch
10201 - Computer sciences, information science, bioinformathics (hardware development to be 2.2, social aspect to be 5.8)
OECD FORD - another secondary branch
20202 - Communication engineering and systems
AF - Documentation, librarianship, work with information
AN - Psychology
BC - Theory and management systems
BD - Information theory
IN - Informatics
JW - Navigation, connection, detection and countermeasure
Completed project evaluation
Provider evaluation
V - Vynikající výsledky projektu (s mezinárodním významem atd.)
Project results evaluation
This is an innovative and challenging project that addressed a topic with a high degree of research uncertainty. The project is a great example of interdisciplinary cooperation. The created system can be further developed and the possibilities of use can be expanded. Overall, it can be stated that it offers the possibility of evaluating psychotherapeutic work, which has not yet been available in the Czech Republic.
Solution timeline
Realization period - beginning
May 1, 2020
Realization period - end
Aug 31, 2023
Project status
U - Finished project
Latest support payment
Feb 28, 2023
Data delivery to CEP
Confidentiality
C - Předmět řešení projektu podléhá obchodnímu tajemství (§ 504 Občanského zákoníku), ale název projektu, cíle projektu a u ukončeného nebo zastaveného projektu zhodnocení výsledku řešení projektu (údaje P03, P04, P15, P19, P29, PN8) dodané do CEP, jsou upraveny tak, aby byly zveřejnitelné.
Data delivery code
CEP24-TA0-TL-U
Data delivery date
Jun 28, 2024
Finance
Total approved costs
11,140 thou. CZK
Public financial support
8,894 thou. CZK
Other public sources
0 thou. CZK
Non public and foreign sources
2,238 thou. CZK
Recognised costs
11 140 CZK thou.
Public support
8 894 CZK thou.
0%
Provider
Technology Agency of the Czech Republic
OECD FORD
Psychology (including human - machine relations)
Solution period
01. 05. 2020 - 31. 08. 2023