Asking Questions: an Innovative Way to Interact with Oral History Archives

Kód výsledku v IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F49777513%3A23520%2F23%3A43969529" target="_blank" >RIV/49777513:23520/23:43969529 - isvavai.cz</a>

Výsledek na webu

<a href="https://www.isca-speech.org/archive/interspeech_2023/svec23_interspeech.html" target="_blank" >https://www.isca-speech.org/archive/interspeech_2023/svec23_interspeech.html</a>

DOI - Digital Object Identifier

<a href="http://dx.doi.org/10.21437/Interspeech.2023" target="_blank" >10.21437/Interspeech.2023</a>

Jazyk výsledku

angličtina

Název v původním jazyce

Asking Questions: an Innovative Way to Interact with Oral History Archives

Popis výsledku v původním jazyce

The paper describes our initial effort to use Transformer-based neural networks for understanding and presenting oral history archives. Such archives of interviews often contain large passages of the interviewee’s speech. Our approach automatically generates relevant questions, which enrich such monotonous parts and allows the listener to better orient in the interview. The generated questions also allow for finding interesting parts of the interview without changing the original meaning of the testimony. We present our working pipeline consisting of a Wav2Vec speech recognizer, BERT-based punctuation detection, T5 asking questions model and BERT-based semantic continuity model.

Název v anglickém jazyce

Asking Questions: an Innovative Way to Interact with Oral History Archives

Popis výsledku anglicky

The paper describes our initial effort to use Transformer-based neural networks for understanding and presenting oral history archives. Such archives of interviews often contain large passages of the interviewee’s speech. Our approach automatically generates relevant questions, which enrich such monotonous parts and allows the listener to better orient in the interview. The generated questions also allow for finding interesting parts of the interview without changing the original meaning of the testimony. We present our working pipeline consisting of a Wav2Vec speech recognizer, BERT-based punctuation detection, T5 asking questions model and BERT-based semantic continuity model.

Druh

D - Stať ve sborníku

CEP obor

—

OECD FORD obor

20205 - Automation and control systems

Projekt

<a href="/cs/project/GA22-27800S" target="_blank" >GA22-27800S: Využití vícemodálních Transformerů pro přirozenější hlasový dialog</a><br>

Návaznosti

P - Projekt vyzkumu a vyvoje financovany z verejnych zdroju (s odkazem do CEP)

Rok uplatnění

2023

Kód důvěrnosti údajů

S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Název statě ve sborníku

Proceedings of the Annual Conference of the International Speech Communication Association, INTERSPEECH

ISBN

—

ISSN

2308-457X

e-ISSN

—

Počet stran výsledku

2

Strana od-do

3679-3680

Název nakladatele

International Speech Communication Association

Místo vydání

New York

Místo konání akce

Dublin, Ireland

Datum konání akce

20. 8. 2023

Typ akce podle státní příslušnosti

WRD - Celosvětová akce

Kód UT WoS článku

—