@inproceedings{galibert-etal-2016-comparaison,
title = "Comparaison de listes d`erreurs de transcription automatique de la parole : quelle compl{\'e}mentarit{\'e} entre les diff{\'e}rentes m{\'e}triques ? (Comparing error lists for {ASR} systems : contribution of different metrics)",
author = "Galibert, Olivier and
Kahn, Juliette and
Rosset, Sophie",
editor = "Danlos, Laurence and
Hamon, Thierry",
booktitle = "Actes de la conf{\'e}rence conjointe JEP-TALN-RECITAL 2016. volume 1 : JEP",
month = "7",
year = "2016",
address = "Paris, France",
publisher = "AFCP - ATALA",
url = "https://aclanthology.org/2016.jeptalnrecital-jep.15/",
pages = "128--136",
language = "fra",
abstract = "Le travail que nous pr{\'e}sentons ici s`inscrit dans le domaine de l'{\'e}valuation des syst{\`e}mes de reconnaissance automatique de la parole en vue de leur utilisation dans une t{\^a}che aval, ici la reconnaissance des entit{\'e}s nomm{\'e}es. Plus largement, la question que nous nous posons est {\textquotedblleft}que peut apporter une m{\'e}trique d'{\'e}valuation en dehors d`un score ?''. Nous nous int{\'e}ressons particuli{\`e}rement aux erreurs des syst{\`e}mes et {\`a} leur analyse et {\'e}ventuellement {\`a} l`utilisation de ce que nous connaissons de ces erreurs. Nous {\'e}tudions dans ce travail les listes ordonn{\'e}es d`erreurs g{\'e}n{\'e}r{\'e}es {\`a} partir de diff{\'e}rentes m{\'e}triques et analysons ce qui en ressort. Nous avons appliqu{\'e} la m{\^e}me m{\'e}thode sur les sorties de diff{\'e}rents syst{\`e}mes de reconnaissance de la parole. Nos exp{\'e}riences mettent en {\'e}vidence que certaines m{\'e}triques apportent une information plus pertinente {\'e}tant donn{\'e} une t{\^a}che et transverse {\`a} diff{\'e}rents syst{\`e}mes."
}
<?xml version="1.0" encoding="UTF-8"?>
<modsCollection xmlns="http://www.loc.gov/mods/v3">
<mods ID="galibert-etal-2016-comparaison">
<titleInfo>
<title>Comparaison de listes d‘erreurs de transcription automatique de la parole : quelle complémentarité entre les différentes métriques ? (Comparing error lists for ASR systems : contribution of different metrics)</title>
</titleInfo>
<name type="personal">
<namePart type="given">Olivier</namePart>
<namePart type="family">Galibert</namePart>
<role>
<roleTerm authority="marcrelator" type="text">author</roleTerm>
</role>
</name>
<name type="personal">
<namePart type="given">Juliette</namePart>
<namePart type="family">Kahn</namePart>
<role>
<roleTerm authority="marcrelator" type="text">author</roleTerm>
</role>
</name>
<name type="personal">
<namePart type="given">Sophie</namePart>
<namePart type="family">Rosset</namePart>
<role>
<roleTerm authority="marcrelator" type="text">author</roleTerm>
</role>
</name>
<originInfo>
<dateIssued>2016-07</dateIssued>
</originInfo>
<typeOfResource>text</typeOfResource>
<language>
<languageTerm type="text">fra</languageTerm>
</language>
<relatedItem type="host">
<titleInfo>
<title>Actes de la conférence conjointe JEP-TALN-RECITAL 2016. volume 1 : JEP</title>
</titleInfo>
<name type="personal">
<namePart type="given">Laurence</namePart>
<namePart type="family">Danlos</namePart>
<role>
<roleTerm authority="marcrelator" type="text">editor</roleTerm>
</role>
</name>
<name type="personal">
<namePart type="given">Thierry</namePart>
<namePart type="family">Hamon</namePart>
<role>
<roleTerm authority="marcrelator" type="text">editor</roleTerm>
</role>
</name>
<originInfo>
<publisher>AFCP - ATALA</publisher>
<place>
<placeTerm type="text">Paris, France</placeTerm>
</place>
</originInfo>
<genre authority="marcgt">conference publication</genre>
</relatedItem>
<abstract>Le travail que nous présentons ici s‘inscrit dans le domaine de l’évaluation des systèmes de reconnaissance automatique de la parole en vue de leur utilisation dans une tâche aval, ici la reconnaissance des entités nommées. Plus largement, la question que nous nous posons est “que peut apporter une métrique d’évaluation en dehors d‘un score ?”. Nous nous intéressons particulièrement aux erreurs des systèmes et à leur analyse et éventuellement à l‘utilisation de ce que nous connaissons de ces erreurs. Nous étudions dans ce travail les listes ordonnées d‘erreurs générées à partir de différentes métriques et analysons ce qui en ressort. Nous avons appliqué la même méthode sur les sorties de différents systèmes de reconnaissance de la parole. Nos expériences mettent en évidence que certaines métriques apportent une information plus pertinente étant donné une tâche et transverse à différents systèmes.</abstract>
<identifier type="citekey">galibert-etal-2016-comparaison</identifier>
<location>
<url>https://aclanthology.org/2016.jeptalnrecital-jep.15/</url>
</location>
<part>
<date>2016-7</date>
<extent unit="page">
<start>128</start>
<end>136</end>
</extent>
</part>
</mods>
</modsCollection>
%0 Conference Proceedings
%T Comparaison de listes d‘erreurs de transcription automatique de la parole : quelle complémentarité entre les différentes métriques ? (Comparing error lists for ASR systems : contribution of different metrics)
%A Galibert, Olivier
%A Kahn, Juliette
%A Rosset, Sophie
%Y Danlos, Laurence
%Y Hamon, Thierry
%S Actes de la conférence conjointe JEP-TALN-RECITAL 2016. volume 1 : JEP
%D 2016
%8 July
%I AFCP - ATALA
%C Paris, France
%G fra
%F galibert-etal-2016-comparaison
%X Le travail que nous présentons ici s‘inscrit dans le domaine de l’évaluation des systèmes de reconnaissance automatique de la parole en vue de leur utilisation dans une tâche aval, ici la reconnaissance des entités nommées. Plus largement, la question que nous nous posons est “que peut apporter une métrique d’évaluation en dehors d‘un score ?”. Nous nous intéressons particulièrement aux erreurs des systèmes et à leur analyse et éventuellement à l‘utilisation de ce que nous connaissons de ces erreurs. Nous étudions dans ce travail les listes ordonnées d‘erreurs générées à partir de différentes métriques et analysons ce qui en ressort. Nous avons appliqué la même méthode sur les sorties de différents systèmes de reconnaissance de la parole. Nos expériences mettent en évidence que certaines métriques apportent une information plus pertinente étant donné une tâche et transverse à différents systèmes.
%U https://aclanthology.org/2016.jeptalnrecital-jep.15/
%P 128-136
Markdown (Informal)
[Comparaison de listes d’erreurs de transcription automatique de la parole : quelle complémentarité entre les différentes métriques ? (Comparing error lists for ASR systems : contribution of different metrics)](https://aclanthology.org/2016.jeptalnrecital-jep.15/) (Galibert et al., JEP/TALN/RECITAL 2016)
ACL