Analyse d'une t\^ache de substitution lexicale : quelles sont les sources de difficult\'e ? (Difficulty analysis for a lexical substitution task)
Nous proposons dans cet article une analyse des r{\'e}sultats de la campagne SemDis 2014 qui proposait une t{\^a}che de substitution lexicale en fran{\c{c}}ais. Pour les 300 phrases du jeu de test, des annotateurs ont propos{\'e} des substituts {\a} un mot cible, permettant ainsi d{'}{\'e}tablir un gold standard sur lequel les syst{\e}mes participants ont {\'e}t{\'e} {\'e}valu{\'e}s. Nous cherchons {\a} identifier les principales caract{\'e}ristiques des items du jeu de test qui peuvent expliquer les variations de performance pour les humains comme pour les syst{\e}mes, en nous basant sur l{'}accord inter-annotateurs des premiers et les scores de rappel des seconds. Nous montrons que si plusieurs caract{\'e}ristiques communes sont associ{\'e}es aux deux types de difficult{\'e} (raret{\'e} du sens dans lequel le mot-cible est employ{\'e}, fr{\'e}quence d{'}emploi du mot-cible), d{'}autres sont sp{\'e}cifiques aux syst{\`e}mes (degr{\'e} de polys{\'e}mie du mot-cible, complexit{\'e} syntaxique).
Code (0)
등록된 구현이 없습니다.
Similar Papers 제목 키워드 기반
Approche lexicale de la simplification automatique de textes m\'edicaux (Lexical approach for the automatic simplification of medical texts)
Notre travail traite de la simplification automatique de textes. Ce type d{'}application vise {\`a} rendre des contenus difficiles {\`a} comprendre plus lisibles. {\`A} partir de trois corpus comparables du domaine m{\'e…
BACANAL: Short Length Random Walks For Lexical Analysis, Application to lexical substitution (BACANAL : Balades Al\'eatoires Courtes pour ANAlyses Lexicales Application \`a la substitution lexicale) [in French]
Cr\'eation et validation de signatures s\'emantiques : application \`a la mesure de similarit\'e s\'emantique et \`a la substitution lexicale (Creating and validating semantic signatures : application for measuring semantic similarity and lexical substitution)
L{'}int{\'e}gration de la notion de similarit{\'e} s{\'e}mantique entre les unit{\'e}s lexicales est essentielle dans diff{\'e}rentes applications de Traitement Automatique des Langues (TAL). De ce fait, elle a re{\c{c}}…
Semantic SimilaritySemantic Textual SimilarityCDGFr, un corpus en d\'ependances non-projectives pour le fran\ccais
Dans le cadre de l{'}analyse en d{\'e}pendances du fran{\c{c}}ais, le ph{\'e}nom{\`e}ne de la non-projectivit{\'e} est peu pris en compte, en majeure partie car les donne{\'e}s sur lesquelles sont entra{\^\i}n{\'e}s les …
Identifier et cat\'egoriser l'ambigu\"\it\'e dans les sp\'ecifications techniques de conceptions de syst\`emes (Identifying and classifying ambiguity in requirements)
Cette {\'e}tude s{'}inscrit dans le cadre d{'}une th{\`e}se Cifre avec Prometil 1 , une soci{\'e}t{\'e} qui commercialise un outil de d{\'e}tection automatique des erreurs dans les exigences, i.e. le contenu textuel des …