Revamping the SLTev Tool for Evaluation of Spoken Language Translation

Kód výsledku v IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F00216208%3A11320%2F24%3A10492690" target="_blank" >RIV/00216208:11320/24:10492690 - isvavai.cz</a>

Výsledek na webu

<a href="https://verso.is.cuni.cz/pub/verso.fpl?fname=obd_publikace_handle&handle=RHpPOzcsdE" target="_blank" >https://verso.is.cuni.cz/pub/verso.fpl?fname=obd_publikace_handle&handle=RHpPOzcsdE</a>

DOI - Digital Object Identifier

<a href="http://dx.doi.org/10.14712/00326585.028" target="_blank" >10.14712/00326585.028</a>

Jazyk výsledku

angličtina

Název v původním jazyce

Revamping the SLTev Tool for Evaluation of Spoken Language Translation

Popis výsledku v původním jazyce

This article describes recent improvements of SLTev, a tool for automatic evaluation of machine translation, speech recognition and speech translation systems. The changes include the implementation of the COMET score for evaluation of machine translation and spoken language translation outputs as well as a fix for the problematic delay calculation for repeated words which favoured longer segments. Additionally, the system outputs of the IWSLT 2022 shared task have also been evaluated using SLTev and a comparison study with another speech evaluation toolkit, SimulEval, has been done

Název v anglickém jazyce

Revamping the SLTev Tool for Evaluation of Spoken Language Translation

Popis výsledku anglicky

This article describes recent improvements of SLTev, a tool for automatic evaluation of machine translation, speech recognition and speech translation systems. The changes include the implementation of the COMET score for evaluation of machine translation and spoken language translation outputs as well as a fix for the problematic delay calculation for repeated words which favoured longer segments. Additionally, the system outputs of the IWSLT 2022 shared task have also been evaluated using SLTev and a comparison study with another speech evaluation toolkit, SimulEval, has been done

Druh

J_ost - Ostatní články v recenzovaných periodicích

CEP obor

—

OECD FORD obor

10201 - Computer sciences, information science, bioinformathics (hardware development to be 2.2, social aspect to be 5.8)

Projekt

—

Návaznosti

I - Institucionalni podpora na dlouhodoby koncepcni rozvoj vyzkumne organizace

Rok uplatnění

2024

Kód důvěrnosti údajů

S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Název periodika

The Prague Bulletin of Mathematical Linguistics

ISSN

0032-6585

e-ISSN

1804-0462

Svazek periodika

Neuveden

Číslo periodika v rámci svazku

121

Stát vydavatele periodika

CZ - Česká republika

Počet stran výsledku

10

Strana od-do

5-14

Kód UT WoS článku

—

EID výsledku v databázi Scopus

—