L'autoé valuation appuyé e sur l'outillage textomé trique dans l'enseignement de la traduction

L'autoévaluation appuyée sur l'outillage textométrique dans l'enseignement de la traduction JUN MIAO INALCO, Paris, France miaojun@miaojun.net ANDRÉ SALEM Paris 3, Paris, France Salem@msh-paris.fr RÉSUMÉ Dans un contexte d’enseignement de la traduction, nous comparons différentes traductions françaises d'un même texte original en anglais (ici, le discours d'investiture prononcé par le président Barack Obama en 2009). Certaines des traductions ont été réalisées par des traducteurs professionnels, d'autres par des outils automatiques, d'autres enfin par des apprenants traducteurs. Les outils textométriques permettent de mettre en évidence les similitudes et différences entre les traductions proposées. L'utilisation de l'alignement du corpus au niveau du paragraphe permet de construire un réseau de correspondances à partir desquelles les calculs textométriques produisent des résultats particulièrement intéressants. L'analyse verticale des traductions permet de localiser des portions du texte original que les traducteurs ont traitées de manière similaire. En utilisant cette même approche, on peut aussi localiser les fragments qui donnent lieu, à l'inverse, à des traductions différentes et explorer l'éventail des traductions proposées. Les ressources numérisées ainsi élaborées constituent une aide précieuse pour juger de la qualité du travail fourni par les apprenants. Elles leur fournissent, par ailleurs, un outil d'autoévaluation efficace. ABSTRACT In the context of teaching translation courses, different French translations of the same English original text (President Barack Obama’s 2009 inaugural address) are compared. The translations can be divided into those produced by professional translators, those produced by automated tools, and translation learners. Textometric tools allow us to explore the similarities and differences between translations. Using paragraph alignment makes it possible to build a comparison network from which the textometric calculations produce explicit results. The vertical analysis of translations highlights the portions of the original text which translators procedeed in the same way. Using this same approach, we can also, conversely, locate the fragments that leaded to different translations and explore the range of translations. The digital resources compiled during the process of comparison are invaluable for assessing the quality of translation work produced by learners. They also provide the latter with an effective selfassessment tool. MOTS-CLÉS/KEYWORDS Enseignement de la traduction, auto-évaluation, textométrie, corpus parallèles Translation teaching, self-assessment, textometrics, parallel corpora 1. Introduction Les méthodes de traitement automatique des corpus électroniques font désormais partie intégrante des cursus d'enseignement dans la plupart des départements universitaires qui se préoccupent de l'étude des textes. A côté des recherches qui concernent des corpus particuliers (voir Frérot 2010), on note l’apparition de nombreux logiciels1 d’aide à la traduction (ex. Trados, Déjà Vu, Wordfast, etc.). Ces logiciels évoluent continuellement pour tenter de s'adapter aux différentes tâches de traduction. Les outils de traduction automatique, encore très imparfaits, ont fait récemment des progrès importants. Ces progrès tiennent avant tout à un changement de stratégie qui s'est opéré dans la traduction du texte par les automates. Prenant le contrepied des méthodes qui tentaient de « comprendre » le texte pour le traduire ensuite, les logiciels modernes s'appuient sur l'existence de mémoires de traduction et sur d'immenses bases de données renfermant des traductions alignées, dont la qualité de a été vérifiée par des humains2. Ces nouvelles possibilités constituent une aide précieuse pour l'activité de traduction. Elles facilitent à la fois la recherche d'équivalents lexicaux, la mise en parallèle de tournures idiomatiques et, par là-même, la compréhension du texte source par les lecteurs non natifs. Les enseignants en traduction se doivent, de plus en plus, d'inclure dans leurs cours, des formations à l'utilisation de ces nouveaux outils. Il faut comprendre, et faire comprendre aux apprenants, que ces nouveaux outils ne sont pas à même de fournir des résultats satisfaisants dans toutes les situations de traduction, qu'ils proposent parfois des solutions complètement fautives. L'enseignement doit conduire les apprenants à distinguer par eux-mêmes, parmi toutes les possibilités de mise en correspondance offertes par les couples de langues, les solutions les plus appropriées au contexte dans lequel s'effectue leur activité de traducteur. Il est donc primordial qu’ils intègrent que la recopie pure et simple des résultats proposés par les machines ne peut constituer une solution acceptable dans toutes les situations. De nombreux chercheurs (Israël 1999 ; Lee-Jahnke 2001 ; Tercedor-Sánchez et al. 2005 ; Kiraly 2005 ; Valetopoulos 2012, etc.), soulignent l’importance de l’autoévaluation dans le cursus pédagogique. En contradiction avec les méthodes employées dans la période précédente, pour lesquelles la critique a posteriori, faite par les enseignants, constituait la base de la pédagogie, les méthodes nouvelles incitent les étudiants à développer leurs capacités d'autoévaluation. L'apprentissage vise avant tout à la réalisation d'une traduction de qualité. Le cas où l'étudiant recopie systématiquement une traduction préexistante dont la qualité est acceptable, traduit sans doute un manque d'investissement personnel dommageable pour la formation de l'étudiant. Par contre, la recopie systématique, par le biais de couper/coller portant sur de larges portions de traductions erronées, manifeste une insuffisance chez l’apprenant dans la compréhension et l’analyse du texte. Il est impératif de signaler ce problème à l’apprenant. Notre travail rend compte d'une expérience de confrontation entre des traductions effectuées par des apprenants, des traductions professionnelles et des traductions réalisées par des automates, dans le but de mettre au point des méthodes d'autoévaluation, utilisables par les étudiants. La confrontation a été réalisée à l'aide d’outils textométriques utilisés en liaison avec des méthodes d'analyse traductologique plus traditionnelles. Les ressources numérisées, constituées à cette occasion, permettent aux étudiants de mieux cerner la variété des différents procédés de traduction utilisés dans le corpus et d'évaluer par eux-mêmes le travail qu'ils ont fourni. 2. Confronter des traductions Suite au projet pionnier d’ICLE (International Corpus of Learner English) mené par Sylviane Granger à l’Université Louvain-La-Neuve depuis 1990, plusieurs groupes d'enseignantschercheurs ont collecté des traductions d'apprenants afin d’étudier les problèmes rencontrés par ces derniers au cours de leur apprentissage de l’anglais (Granger 1998). Notons par exemple, l’examen des traductions de Waddington (2001), le travail pédagogique de Lee-Jahnke (2001), des projets Student Translation Archive (Bowker & Bennison 2003), ENTRAD (Florén 2006) et Russian Translation Learner Corpus (Sosnia 2006). Ces travaux tentent d'identifier les difficultés fréquemment rencontrées par les apprenants, dans le but d’améliorer le contenu et le matériel d’enseignement du domaine. Masschelein et Verschueren (2005) fournit une recherche intéressante et solide sur l’évaluation formative qui s'oriente vers un apprentissage semi-autonome de la traduction. A l’aide d’un logiciel (Markin), ces chercheurs évaluent les exercices des étudiants avec plus de 90 codes (positifs et négatifs) selon des critères de l’évaluation préalablement définis. De manière similaire, à travers des extraits de textes comptant environ 350 mots chacun et des annotations faites à partir d'une typologie prédéfinie des erreurs, le projet européen MeLLANGE (Castagnoli et al. 2009) entreprend de cerner les problèmes de traduction dans un environnement de corpus multilingues. Popescu-Belis et al. (2002) comparent de leur part la traduction automatique, les traductions des étudiants et les traductions professionnelles. L'objectif est de mettre en évidence, au sein de ces traductions, des types d'erreurs, assortis de mesures statistiques, et de montrer la corrélation entre la distribution des erreurs et les notes attribuées à chaque traduction. Dans les recherches mentionnées ci-dessus, on peut dégager des points suivants : – les enseignants occupent souvent un rôle central dans l’évaluation, les étudiants suivant leurs commentaires ; – le processus d’annotation des usages (erronés ou acceptables) est un travail coûteux en temps et les critères d’évaluation sont souvent complexes ; – durant le temps de formation, il est difficile, pour les apprenants de : maîtriser simultanément l’utilisation des outils informatiques, la réalisation des différents exercices de traduction, tout en mettant à profit les évaluations données par les enseignants ; – les textes abordés dans les exercices de traduction constituent souvent des extraits, difficiles à relier avec l’intégralité du texte ; – la plupart des efforts se concentrent sur les erreurs commises par les étudiants, au détriment de la recherche de possibilités de traduction optimales ; – les remises en contexte partielles, réalisées dans la plupart des logiciels (ex.WordSmith, AntConc, etc.), ne donnent pas de vision globale du texte, ceci est cependant indispensable pour avoir une idée de l’organisation du texte. Dans l'enseignement de la traduction, il est important d'apprendre aux étudiants à juger de la qualité d'une traduction et à développer leurs capacités d’auto-évaluation. La comparaison collective des différentes traductions, réalisées par un groupe d'apprenants à partir d'un même texte-source, nous semble constituer une activité intéressante pour aborder ces questions. La comparaison inclut également des traductions proposées par des traducteurs professionnels, ainsi que des traductions réalisées par des procédures automatisées. Notre programme d’enseignement ainsi conçu doit, tout à la fois, permettre aux apprenants de prendre conscience de leurs erreurs récurrentes, leur signaler des solutions de traduction auxquelles ils n'avaient pas songé lors de la réalisation de leur propre traduction, leur signaler aussi les erreurs grossières couramment commises par les automates de traduction afin d'accroître, leurs facultés d'autoévaluation. Pour traiter ces corpus de traduction, nous utilisons ici les méthodes de la textométrie. La textométrie rassemble une série de méthodes statistiques qui permettent d’opérer des réorganisations formelles de la séquence textuelle et des analyses statistiques portant sur leur vocabulaire. L’analyse des spécificités (Lafon 1980, 1984) articulée avec l’analyse factorielle des correspondances (Bénzécri 1973, 1977, 1981, etc.) permet de dresser des typologies à partir des textes et de repérer les formes que chacun d'entre eux emploie, ou sous-emploie, de manière privilégiée (voir plus loin les sections 3.1 et 4.1). La plupart de ces méthodes sont implémentées dans le logiciel Lexico3 (réalisé par l’équipe universitaire SYLED-CLA2T, sous la direction du professeur André Salem, à l’Université Paris 3). Parmi d'autres logiciels de textométrie. Lexico3 implémente également une méthode de cartographie textuelle qui fournit une localisation visuelle des occurrences de chaque unité textuelle étudiée dans l’ensemble du corpus (Lamalle et Salem 2002). On utilise cette approche cartographique pour la détection des accords et discordances entre différentes traductions. 2.1. Les documents rassemblés Dans un cursus de formation à la traduction (master première année - G1, deuxième année G2), donné à l’Institut National des Langues et Civilisations Orientales (INALCO) à Paris, nous avons enseigné devant deux groupes d'étudiants, aux origines langagières et culturelles diverses. Les cours portaient sur la traduction pragmatique, principalement liée au couple anglais-français pour les exemples. Par ailleurs, pour stimuler les intérêts des étudiants, nous les encourageons à découvrir eux-mêmes les phénomènes du domaine à l’aide des outils informatiques. Afin de permettre aux étudiants de constituer un corpus textométrique de taille réduite, nous avons opté pour un texte court : le discours d’investiture d'Obama en 2009 (2417 occurrences/tokens). Les étudiants disposaient, par ailleurs, de cinq traductions françaises de ce même texte, publiées dans la presse : Le Monde, Libération, La Croix, RFI et Maison Blanche3, ainsi que de traductions en ligne, réalisées par des automates Google Translation, Systran, Reverso4. Après une initiation des deux groupes d'apprenants aux traitements textométriques des corpus (une dizaine d’heures, environ) comparant les cinq traductions professionnelles et le discours original, nous leur avons demandé de traduire par eux-mêmes le discours étudié en dehors des séances de cours et de noter, simultanément, les difficultés qu'ils rencontraient. Chaque étudiant a donc constitué un dossier comprenant : sa propre traduction et un rapport sur les principales difficultés rencontrées. Les différentes traductions produites par les étudiants ont intégré, par la suite, notre corpus d'étude. A l’aide de l’outil d’alignement (Alignator5), nous avons constitué un corpus aligné (i.e. dans lequel chaque paragraphe de chacune des traductions est mis en correspondance avec un paragraphe identifié du document orignal). Le corpus rassemble donc cinq grands types de documents : le document original, 4 traductions de ce document réalisées par des traducteurs professionnels, 3 traductions réalisées par des automates, 16 traductions effectuées par des apprenants de première année et 9 traductions effectuées par des apprenants de deuxième année. Malgré le nombre d’étudiants non homogène dans nos deux groupes (16 vs. 9), les méthodes textométriques telles que l’analyse des spécificités et l’analyse des facteurs de correspondances, basées sur le calcul probabiliste (voir ci-dessous), peuvent nous fournir des résultats pertinents. C'est ce corpus aligné, constitué de 34 textes (1 texte original + 33 traductions) que nous avons appelé : le corpus Obama1 (cf. tableau 1). TABLEAU 1 Les 34 textes du corpus Obama1 Groupes Nombre TS 1 texte source (en anglais) Barack Obama’s 2009 presidential inaugural address G0 3 traductions automatiques logiciels : Google, Systran et Reverso G1 G2 G3 16 9 5 étudiants groupe G1 étudiants groupe G2 traduction professionnelles réalisées par les étudiants de première année réalisées par les étudiants de deuxième année La Croix, Libération, Le Monde, RFI, Maison Blanche Lors de la correction des travaux, nous avons été amenés à nous poser deux séries de questions : a) Questions sur la comparaison des traductions : – En quoi les traductions professionnelles diffèrent-elles des traductions effectuées par des apprenants ? En quoi sont-elles meilleures ? – Peut-on distinguer des niveaux de compétence dans le travail de traduction en fonction de l'année d'apprentissage ? – Peut-on corréler le niveau de la traduction effectuée au niveau de maîtrise du français par chacun des étudiants ? – Le niveau des traductions automatiques permet-il de distinguer ces dernières traductions des traductions concurrentes réalisées par des humains ? b) Questions sur le recours à l'outil informatique dans l'évaluation des traductions : – Quelles sont les possibilités d'utilisation des outils informatiques dans ce type d’évaluation ? – Peut-on utiliser ces outils dans des programmes d'évaluation et d'autoévaluation lors du processus d'enseignement ? C'est pour tenter de répondre à ces questions que nous avons procédé à des analyses textométriques du corpus Obama1 à l'aide de l’outil Lexico3. 2.2. Les deux groupes d'apprenants Le groupe des étudiants de première année (G1) se partage en deux parties égales entre étudiants français et étudiants étrangers. Celui des étudiants de deuxième année (G2) ne compte qu'une seule étudiante dont le français est la langue maternelle, les autres étudiants étant originaires de cultures très diverses (arabophones, turcophones, etc.). Le cours est donné en français. La plupart des étudiants possèdent bien cette langue, du moins en ce qui concerne l’oral, à l'exception d'une étudiante qui éprouve des difficultés dans ce domaine. On note que la majorité des étudiants du groupe G1 possède un diplôme supérieur à la licence et que trois étudiants possèdent déjà un master. Les apprenants du groupe G2 sont presque tous titulaires d’un master. Afin d'établir une atmosphère de confiance dans le groupe, nous procédons à l'anonymisation des copies en remplaçant les noms des étudiants par des identificateurs de type xyL, où : –x –y –L indique l'année d'étude (1 ou 2) la nationalité de l’étudiant (1 - français ; 2- étranger) constitue un identificateur pour chacun des étudiants (A, B, C, …) Groupe 1 : 11A, 11C, 11D, …. Groupe 2 : 21A, 22B, 22C, … 3. Analyse quantitative du corpus Obama1 Durant le cours, nous calculons avec les étudiants les principales caractéristiques textométriques pour le document original, en anglais (cf. tableau 2), puis pour chacun des autres textes. TABLEAU 2 Principales caractéristiques du discours d’investiture de B. Obama (2009) Partie Occurrences formes Hapax N. Fmax Fmax Original 2417 927 645 122 the On note que le texte original est relativement court avec seulement 2417 occurrences (token) au total, dont 927 formes (types) sont des formes différentes. Les formes apparues une seule fois – hapax – atteignent 645. Dans ce texte, l’article défini the est la forme la plus fréquente (Fmax), avec 122 occurrences (voir la rubrique du N.Fmax). Les caractéristiques textométriques calculées à partir de chacun des textes ne sont pas toujours directement comparables lorsqu'il s'agit de textes rédigés dans des langues différentes (original anglais vs. traductions françaises, par exemple). Par contre, ces caractéristiques deviennent comparables pour des textes rédigés dans une même langue. La confrontation directe de caractéristiques textométriques calculées à partir de différentes traductions d'un même textesource va nous permettre de les comparer utilement. FIGURE 1 Principales caractéristiques textométriques pour chacune des 33 traductions <figure1_principales_caracteristiques.tif> Avant d’examiner les données quantitatives obtenues à partir des traductions, nous avons interrogé les étudiants sur les résultats qu'ils attendaient de cette comparaison. Leurs réponses s'accordaient en général sur l'idée qu'une bonne traduction doit posséder un vocabulaire plus riche (plus de formes différentes et plus d'hapax) qu'une traduction de qualité inférieure. Dans l’analyse comparée des principales caractéristiques textométriques (figure 1), nous constatons cependant, que le nombre des occurrences (marqué par les triangles), celui des formes différentes (marqué par les carrés) et celui des hapax (marqué par les étoiles), sont, à quelques exceptions près, assez proches. L'étudiant 12O, montre un vocabulaire plus pauvre ; la traduction du Monde, un vocabulaire plus riche. A ce niveau d'analyse, on relève peu de divergences entre les traductions automatiques et les traductions humaines. Cela est aussi le cas pour les traductions professionnelles et les traductions des étudiants. Les caractéristiques relatives aux deux groupes d'apprenants ne présentent que peu de différences entre elles. A l'intérieur du groupe des étudiants de première année, la variété semble un peu plus grande, en ce qui concerne le nombre des occurrences. Il est donc nécessaire d'approfondir les recherches avec des outils de comparaison plus élaborés. 3.1. Typologie sur les traductions L’analyse factorielle de correspondances (AFC) va nous permettre de mettre en évidence les principales oppositions pouvant exister dans le corpus des traductions. C’est une méthode statistique d’analyse des données mise au point par Jean-Paul Benzécri (1973, 1977, 1981, etc.), destinée au traitement des tableaux de données où les valeurs sont positives et homogènes comme les tableaux de contingence. Cette méthode opère une réduction de la complexité des données en fournissant une vue extrêmement synthétique des informations sur des correspondances entre les variables (non pas les valeurs absolues). Dans un corpus tel que le nôtre, nous obtenons des informations sur l’organisation du vocabulaire. La figure 2 suivante nous fournit une première typologie (au plan des facteurs 1 et 2) portant sur les différentes traductions. Pour établir cette typologie, nous avons construit un tableau constitué par les décomptes des occurrences des 1418 formes de fréquence supérieure à cinq dans les trente-trois traductions6. C'est ce tableau lexical que nous avons ensuite soumis à l'analyse. FIGURE 2 Typologie à partir des traductions françaises du corpus Obama1 <figure2_AFC.tif> On trouve, sur la figure 2, les principaux résultats issus de cette analyse. Les couleurs permettent de distinguer les différents types de traduction (traductions automatiques : gris foncé avec des lignes continues obliques ; apprenants de première année : gris clair ; apprenants de deuxième année : blanc ; traduction professionnelles : gris clair avec des lignes discontinues obliques). – Groupe A : les traductions automatiques Systran et Reverso, isolées dans le cadran inférieur gauche de la figure ; – Groupe B : dans le cadran inférieur droit, la traduction Google, entourée par plusieurs traductions d'étudiants ; – Groupe C : trois traductions professionnelles (le Monde, la Maison Blanche et le RFI) ainsi que la majorité des traductions G2 et certaines traductions G17, en haut à gauche de la figure. – Groupe D : deux traductions professionnelles sur le haut de la figure, (la Croix et Libération), autour desquelles viennent s'agréger plusieurs traductions produites par des étudiants. Au vu de ce qui précède, on peut avancer l'hypothèse que l'AFC aide à distinguer différents niveaux de traduction : les traductions automatiques, excepté celle de Google, apparaissent comme différentes des traductions humaines, les traductions professionnelles se retrouvent proches les unes des autres, dans le haut de la figure. Les étudiants, surtout ceux de première année (12J-12L-11E-12P-12K-11D-22C-22I), semblent s’être inspirés de la traduction fournie par Google, ceci est encore plus vraisemblable pour quelques étudiants dont le français n'est pas la langue maternelle. Les traductions des apprenants ayant obtenu les meilleures notes, se regroupent dans le cadran supérieur gauche de la figure. Il s’agit pour la plupart de travaux rendus par des étudiants de deuxième année, disposant souvent d’une certaine expérience de la traduction. Deux apprenants de première année, dont l'un admet avoir utilisé systématiquement la traduction fournie par Google translation pour réaliser la seconde partie de sa propre traduction, 12H et 11B, occupent une position centrale. En se référant à la position relative de chaque traduction étudiante par rapport aux traductions professionnelles, on peut supposer que les étudiants n’aient pas utilisé les mêmes ressources. L’étudiant 12M est plus proche de la Croix, 12N et 22G se rapprochent plutôt de Libération dont ils paraissent s'être largement inspirés pour la traduction de certaines parties; 12I et 22H ont plutôt utilisé les traductions de la Maison Blanche et de RFI7. De ce qui précède, nous voyons que l’AFC permet de dresser une première typologie des différentes traductions. L'analyse des emprunts massifs à d'autres traductions, présentes dans le corpus va nous permettre de questionner plus avant la qualité de chaque traduction. 3.2 Localisation des séquences répétées Face à une traduction réalisée dans un cadre pédagogique, l'enseignant doit pouvoir reconnaitre deux situations distinctes : 1) l'apprenant fournit des solutions de traduction qu'il a lui-même élaborées, en s'appuyant éventuellement sur des outils existants. Le résultat final traduit à la fois son niveau de compétence global et les difficultés qu'il a rencontrées dans cette expérience particulière; 2) l'apprenant utilise de manière systématique des solutions fournies par les logiciels de traduction automatique, ou par d'autres traductions préexistantes, ce qui ne permet de juger ni de son niveau propre, ni de ses progrès. II est donc important, dans le cadre de l'évaluation d'un travail de traduction, d'être à même de repérer, si possible par des moyens automatiques, le taux d'utilisation direct de traductions proposées par les traducteurs automatiques. Le calcul des segments répétés (cf. Salem 1986) fournit des solutions particulièrement adaptées à ce genre d'interrogation. Pour un texte donné, l'algorithme fournit la liste des séquences de plusieurs formes qui se trouvent répétées à l'identique dans plusieurs endroits du corpus. Dans le cas d'un corpus comme le nôtre qui rassemble des traductions effectuées par plusieurs types de traducteurs (professionnels, apprenants et automates), bien que le texte produit constitue la traduction d'un même texte source, il est très peu probable que des traducteurs distincts produisent de longues séquences parfaitement identiques. Ainsi, dans notre corpus, la duplication massive de la séquence : Je remercie le président Bush pour ses services rendus à la nation, ainsi que pour la générosité et la coopération dont il a fait preuve tout au long de cette (transition /passation de pouvoirs). L’original en anglais est : I thank President Bush for his service to our nation, as well as the generosity and cooperation he has shown throughout this transition. constituée de près de 30 occurrences qui apparaissent sans aucune altération dans onze des traductions du corpus, dont une fois dans la traduction fournie par l'automate Google, ne peut être considérée comme une simple coïncidence, pouvant résulter de travaux indépendants et simultanés. Si le sens présent dans le texte source était le même, les manières disponibles pour le rendre dans la langue cible étaient, à priori, relativement variées8. L'hypothèse de la recopie pure et simple par des moyens de duplication (copier/coller ou retranscription à partir d'un document déjà traduit) est beaucoup plus vraisemblable. Car notons que cette même séquence a été retenue par deux des cinq traducteurs professionnels (Le Monde et Libération). Le repérage de segments répétés (séquences de formes, répétées plusieurs fois dans le corpus de manière identique) permet de mettre en évidence des coïncidences entre différentes traductions. Le calcul de la proportion des séquences répétées communes à deux traductions censées avoir été réalisées de manière indépendante, peut nous aider à localiser des portions de texte dans lesquelles l'utilisation du couper/coller doit être considérée comme l'élément moteur de l'élaboration de la traduction : plus les séquences identiques sont longues, plus elles sont nombreuses, plus l'hypothèse d'une coïncidence accidentelle doit être écartée. FIGURE 3 Extrait de la localisation des segments répétés du corpus Obama1 <figure3_localisation_SR.tif> La figure 3, nous permet d'apprécier globalement les taux de duplication calculés à partir des différentes traductions9. On a constitué une unité (Tgen)10 qui rassemble toutes les occurrences situées au début d'une séquence de cinq formes, répétée cinq fois au moins dans le corpus. Une carte des sections a été établie pour le corpus. Les lignes horizontales foncées permettent d'isoler chacune des traductions dont l'identificateur est repérable sur la droite. Chaque carré représente un paragraphe aligné du corpus. Le calcul de spécificités (cf. plus loin section 4.1) permet d'apprécier l'abondance relative des séquences répétées sélectionnées dans chacune des sections du corpus. Une couleur claire traduit la simple présence du Tgen. Plus la couleur est foncée, plus l'abondance des segments répétés est jugée spécifique dans la section considérée et plus on peut considérer que la traduction présente de fortes similitudes avec d'autres traductions présente dans le corpus. La forte présence, dans la traduction Google de séquences communes à un grand nombre de traductions remises par les apprenants constitue une présomption supplémentaire du recours systématique à ce premier texte par certains apprenants, pour produire les traductions demandées. L'analyse de la localisation des répétitions segmentales permet de tirer plusieurs conclusions supplémentaires. On note que les segments sélectionnés pour constituer notre Tgen (longueur et fréquence supérieure ou égale à cinq) apparaissent plus fréquemment chez les apprenants étrangers de première année (12J, 12K, 12L, par exemple). Cependant, deux étudiants dont le français est la langue maternelle (11D et 11E) emploient également ces segments de manière massive. Ces dernières traductions sont celles que nous avions repérées autour de la traduction Google dans la typologie obtenue à l'aide de l'AFC (cf. section précédente). L'hypothèse se confirme qu'elles ont été produites à l'aide d'un recours systématique à l'utilisation de la fonctionnalité couper/coller. Cette même méthode permet également de vérifier que d'autres apprenants (11A, 11F et 12I, par exemple) n'ont eu recours à cette facilité qu'à de rares occasions. Comme nous l'avions signalé dans la section précédente, la traduction 11B (cf. Fig 2) présente des caractéristiques particulières. La localisation des séquences répétées délimite ici assez nettement deux zones différentes dans le travail de traduction (cf. Fig 3) : la première moitié présente peu de carrés foncés, ce qui souligne le caractère plutôt original de la traduction des paragraphes concernés. Dans la deuxième moitié, au contraire, la référence aux outils de traduction automatique, en l'occurrence Google translation, apparait avoir été massivement utilisée. L’affichage de la carte des sections permet un accès direct à chacun des paragraphes de chacune des traductions. On voit sur la figure 4 que la traduction fournie par l'apprenant 11E ne s'écarte que très faiblement de la traduction réalisée par le traducteur automatique Google translation tandis que la traduction 11F contient des corrections plus nombreuses, qui corrigent certaines erreurs de syntaxe, apparues dans la traduction automatique et manifestent une prise en charge plus importante du travail de traduction. A travers une discussion collective avec les apprenants, l’enseignant peut insister sur les passages qui ont posé le plus grand nombre de problèmes aux traducteurs, repérer les hésitations et les maladresses dans chaque traduction. Les étudiants, apprennent à identifier leurs faiblesses en comparant leur propres travail aux traductions après-coup. FIGURE 4 Traductions du paragraphe 26, fournies par Google translation et par les apprenants 11E et 11F11 <figure4_comparaison_para26.tif> 4. Analyse traductologique 4.1. Spécificités pour chaque groupe Nous allons tenter, dans cette dernière partie, de mieux caractériser les écarts entre les groupes de traductions obtenus à l'aide de l'AFC (section 3.1). L’analyse des spécificités, va nous permettre de dégager les formes et les segments les plus utilisés par chacun des types de traduction, regroupés en quatre groupes à partir des résultats de l'AFC. Nous commencerons par calculer les spécificités pour chacun de ces groupes, par rapport à l'ensemble du corpus12. Tous les écarts mis en évidence par la méthode des spécificités ne présentent pas le même intérêt pour caractériser les procédés spécifiques de traduction. Certains de ces écarts trouvent leur origine dans des problèmes technologiques, notamment dans des problèmes spécifiques à la traduction automatique, d'autres reflètent plus directement des stratégies de traduction individuelles ou encore la méconnaissance de certaines règles grammaticales par certains des apprenants. Différences entre traductions-machine et traductions humaines Certaines formes apparaissant préférentiellement dans les textes produits par la traduction automatique. C'est le cas, par exemple pour des forme comme : avant, pour, laissez, etc. Dans ces traductions, par exemple, la fréquence particulière de la forme avant trouve son origine dans la traduction systématique par les automates de la forme anglaise before par la forme française avant. Cette traduction est inadaptée, voire fautive dans certains cas. Ainsi : I stand here today humbled by the task before us est traduit automatiquement par : (a) Je me tiens ici aujourd'hui humilié par la tâche avant nous (Systran) (b) Je suis debout ici aujourd'hui humilié par la tâche avant nous (Reverso) Alors que dans une des traductions humaines, réalisée par le Monde par exemple, elle est traduite par : Je me tiens aujourd'hui devant vous avec un sentiment d'humilité, devant la tâche qui nous attend Différences entre traductions professionnelles et traductions d'apprenants Dans certains cas, des apprenants qui ne maîtrisent pas totalement la langue d’arrivée ont du mal à opter pour une solution appropriée. Ainsi, pour rendre l'expression turn back, dans la phrase: we refused to let this journey end, that we did not turn back nor did we falter, On trouve des variations entre les traductions : 01Google et : 11B, 11E, 12J, 12K, 12L, 12P, 21A et 22C 31Croix, 32Libération 33Le Monde 34RFI 35WH revenir/retourner en arrière tourner le dos détourner faire un demi-tour faire tourner Comme on le comprend, les traductions professionnelles font preuve d'une plus grande recherche et manifestent un plus grand souci d'expression littéraire, en utilisant des expressions telles que tourner le dos, faire un demi-tour. Une lecture comparative des listes des spécificités de chacun des groupes de traductions nous permet d’entrevoir des habitudes de traduction propres à chaque traducteur, le retour au contexte permet de cerner des écarts majeurs entre les traductions humaines réunies dans notre corpus. Ces écarts, qui concernent principalement des utilisations différentes des procédés grammaticaux et des procédés de mise en forme du texte peuvent être regroupés en six grandes catégories : 1) les déictiques (ex : on, les, ceci…) ; 2) les adverbes (ex : toute, même, simplement…) ; 3) les temps (ex : va, vont, laissez…) ; 4) les noms (ex : disponibilité, gouvernants, états, unis…) ; 5) les prépositions (ex : arrière, avant, pour…) ; 6) les notes (ex : ndlr). Dans ce qui suit, nous allons montrer quelques exemples d'utilisation différenciée de ces catégories chez les différents traducteurs. Déictiques : Le pronom indéfini on est rarement utilisé dans les traductions professionnelles du discours de B. Obama qui a servi de texte-source. Il est nettement plus utilisé par les apprenants étrangers (en particulier : 12H et 22B) pour rendre le pronom we du texte original. That we are in the midst of crisis is now well understood. […] Nous savons maintenant fort bien que nous sommes en crise. (Le Monde) On est désormais bien conscient qu'on traverse une crise (22B) L’emploi du pronom we est relativement fréquent dans le texte original, dans la mesure où le discours est construit autour de la première personne du pluriel13. Le transfert du pronom défini de la première personne du pluriel en pronom indéfini (on) est opéré systématiquement par l’étudiant 22B. Ce dernier tente d'éviter les répétitions du pronom nous et semble céder à une habitude de langage, courante chez les jeunes générations, d'utiliser le pronom indéfini (FonsecaGréber et Waugh 2003, Thomas 2015). Adverbes : l’adverbe toute est peu utilisé par les apprenants étrangers de première année. En revanche, il l'est fréquemment par Systran et les apprenants 11G et 22B. Les traductions automatiques de l’anglais au français, utilisent fréquemment l’adverbe tout (et ses flexions), pour rendre all et throughout. Dans les traductions humaines, cet emploi est plus contrôlé et dépend de l’intensité que le traducteur veut rendre dans sa propre production. Voyons un exemple : Original 02Systran 21I 34RFI 35WH I stand here today humbled by the task before us, grateful for the trust you have bestowed, mindful of the sacrifices borne by our ancestors. I thank President Bush for his service to our nation, as well as the generosity and cooperation he has shown throughout this transition. Je me tiens ici aujourd'hui humilié par la tâche avant nous, reconnaissant pour la confiance que vous avez accordée, conscient des sacrifices soutenus par nos ancêtres. Je remercie le président Bush de son service à notre nation, aussi bien que la générosité et la coopération qu'il a montrée dans toute cette transition. Je suis ici aujourd'hui pour vous avouer mon plein engagement envers la tâche qui nous incombe, toute ma reconnaissance de la confiance que vous m'avez faite et mon respect envers les sacrifices de nos ancêtres. Je remercie Président Bush pour le travail qu'il a fait pour notre pays, ainsi que pour sa générosité et sa coopération pendant cette transition. Je suis là devant vous humble face aux tâches qui nous attendent, reconnaissant de votre confiance et attentif aux sacrifices de nos ancêtres. Je remercie le président Bush, pour ses services rendus à la nation, ainsi que pour toute la générosité et la coopération qu'il a montrées lors de toute cette période de transition. Je me présente devant vous aujourd'hui en toute humilité face à la tâche qui nous attend, reconnaissant de la confiance que vous m'avez accordée et conscient des sacrifices consentis par nos ancêtres. * je remercie le président * bush des services rendus à notre nation, ainsi que de la générosité et de la coopération dont il a fait preuve durant toute la transition. Systran utilise toute pour traduire throughout dans le texte original, lorsque dans la même partie citée, nous constatons cet adverbe utilisé à divers endroits chez les traducteurs humains. L’étudiant 12I met toute devant le nom reconnaissance pour traduire l’adjectif grateful, alors que RFI souligne la générosité et le temps période. Cependant, la Maison Blanche met l’accent sur l’humilité de moi en tant que président. Temps : dans notre corpus, les trois formes du verbe aller : va, vont et allons ne concernent que le futur proche. La traduction du Monde les utilise seize fois alors que le RFI ne les utilise jamais ; La Maison Blanche s'en sert une seule fois ; la Croix et Libération l'utilisent, respectivement, cinq et six fois. Parmi les traductions automatiques, seul Google recourt au futur proche, alors que Systran et Reverso l’évitent complètement. Dans les traductions des étudiants, on ne note pas de distinction nette entre les étudiants des deux années ou entre étudiants français et étrangers. Noms : l’étudiant de première année 11C traduit systématiquement America par Etats-Unis d’Amérique alors que les autres utilisent principalement la forme l’Amérique. Mais lorsqu’il s’agit d’un appel ou d’une invocation, la traduction de ce mot peut varier. Par exemple, dans une des phrases de la conclusion de B. Obama : America, in the face of our common dangers, in this winter of our hardship, let us remember these timeless words. Le nom propre America a été rendu par Etats-Unis dans Libération, mais par l'adresse chers concitoyens dans la traduction Maison Blanche. Ceci laisse transparaître une stratégie d’écriture visant à impliquer plus directement le destinataire. Prépositions : la préposition pour apparait fréquemment dans les traductions automatiques Systran et Reverso, du fait d’une traduction systématique de to, for, so that…par cette préposition française. Certaines des traductions produites par des apprenants (par exemple, 12L et 22H) ainsi que la traduction du Monde semblent également marquer une préférence pour cette préposition. Il en résulte que ces traductions, ont tendance à sous-utiliser d'autres prépositions telles que de et à. Notes : l’acronyme ndlr signifie note de la rédaction. Il apparaît exclusivement dans Libération, à deux endroits : une fois pour introduire des précisions sur la base militaire de Khe Sanh (Vietnam), l’autre pour donner des précisions qui concerne le pays natal du père du président Obama (le Kenya). Ces deux notes reflètent la préoccupation du traducteur pour son lectorat français. Dans un ordre d'idées comparable, l’emploi par les étudiants de l'article contracté au, de la préposition dans, des articles définis le ou la, devant la forme Khe Sanh, laisse, avant tout, transparaître un manque d'information sur la nature exacte et l'histoire de ce lieu. 4.2. Analyse verticale des traductions Au cours de notre démarche qui vise à étudier les différentes façons de traduire un texte, le calcul des spécifiés nous permet de repérer les écarts les plus importants dans les variations de traductions. Les concordances et les méthodes de cartographie textuelle nous permettent de localiser facilement les contextes qui manifestent ces variations de manière remarquable. Pour une même séquence (paragraphe, phrase, segment répété), il est alors possible d'analyser de manière synthétique les variations produites par les différents traducteurs. Nous appelons analyse verticale ce type d'approche qui peut être centré sur chacun des différents problèmes rencontrés lors de la traduction du texte source. La matérialisation des écarts mis en évidence par le calcul des spécificités, sous forme de soulignage des séquences textuelles correspondant à une même portion du texte source permet de visualiser de manière particulièrement suggestive les convergences et les discordances qui existent entre les différentes traductions d'un même texte. TABLEAU 3 La première phrase du discours de B. Obama (2009) et ses cinq traductions professionnelles Original 31Croix 32Liber 33Monde 34RFI 35WH My fellow citizens: I stand here today humbled by the task before us, grateful for the trust you have bestowed, mindful of the sacrifices borne by our ancestors. Mes chers concitoyens, Je me tiens devant vous, mesurant humblement la tâche qui nous incombe, reconnaissant pour la confiance que vous avez témoignée, conscient des sacrifices consentis par nos ancêtres. Mes chers concitoyens, Je me tiens devant vous, mesurant humblement la tâche qui nous incombe, reconnaissant pour la confiance que vous avez témoignée, conscient des sacrifices consentis par nos ancêtres. Chers compatriotes, je me tiens aujourd'hui devant vous avec un sentiment d'humilité, devant la tâche qui nous attend, de reconnaissance pour la confiance que vous m'avez manifestée, gardant à l'esprit les sacrifices consentis par nos ancêtres. Je suis là devant vous humble face aux tâches qui nous attendent, reconnaissant de votre confiance et attentif aux sacrifices de nos ancêtres. Mes chers concitoyens : Je me présente devant vous aujourd'hui en toute humilité face à la tâche qui nous attend, reconnaissant de la confiance que vous m'avez accordée et conscient des sacrifices consentis par nos ancêtres. L'examen vertical des traductions professionnelles permet d'explorer les possibilités de traduction offertes par les deux langues et de nous concentrer sur les choix effectués par les différents traducteurs. Dans l’ordre, nous posons plusieurs questions aux étudiants : comment traduire l’appel dans un discours politique ? Quelle est la façon usuelle de le faire en français ? Quelle ponctuation utilise-t-on ? Comme rendre en français le verbe et l’indication de location de I stand here ? Comment traduire le sens figuré de la localisation contenue dans the task before us ? Est-il toujours obligatoire de traduire un adverbe temporel du texte de départ (today) ? Comment rendre dans la langue cible la musicalité du texte original qui résulte du la mise en parallèle des sentiments : humbled by…grateful for…mindful of… ? … Après avoir analysé ensemble les traductions réalisées par les traducteurs professionnels, il est intéressant d'examiner les traductions fournies par les apprenants. L'exemple de la forme française face, dont la répartition irrégulière parmi les traductions des apprenants est mise en évidence par le calcul des spécificités, nous fait découvrir que pour rendre le sens figuré de la localisation exprimé dans le segment the task before us /la tâche qui nous attend, on peut utiliser plusieurs procédés : devant, face à, utiliser le pluriel face aux tâches, recourir au participe présent mesurant, lequel permet de réaliser un parallélisme sonore avec reconnaissant…conscient…. TABLEAU 4 Plusieurs traductions de la séquence the task before us dans la première phrase du discours de B. Obama (2009) Original 31Croix 32Liber 33Monde 34RFI 35WH the task before us mesurant humblement la tâche qui nous incombe face à la tâche qui nous attend devant la tâche qui nous attend face aux tâches qui nous attendent face à la tâche qui nous attend 21A 22B 22C 22D 22E 22F 22G 22H 22I devant la tâche qui nous attend face à la tâche qui nous attend face à la tâche qui nous attend devant la tâche que nous avons à accomplir mesurant la tâche qui nous attend devant la tâche qui nous attend face à la tâche qui nous attend devant la tâche qui nous attend devant la tâche qui nous attend Cette approche permet de faire prendre conscience aux apprenants qu'il existe plusieurs façons de rendre le sens d'un segment lorsqu'on le traduit d’une langue à l’autre. Par delà l'indispensable conservation du sens, une traduction qui prend en compte des éléments de sonorités manifeste un travail de plus élaboré. A travers de telles comparaisons, les apprenants intègrent naturellement l'idée de l’évaluation et se familiarisent avec les techniques de la traduction. De cette manière, ils développent également une méthode d’apprentissage qui peut leur servir dans les futures études. 5. Conclusion Dans le cadre de l'enseignement de la traduction, la confrontation de plusieurs traductions d’un même texte original permet à l'enseignant de présenter différentes possibilités de traduction et d'inciter les élèves à distinguer différents niveaux de traduction. A travers ce type d'observation, les apprenants peuvent développer leur sens de l'évaluation du travail de traduction et parvenir à une autoévaluation du travail qu'ils ont fourni. Les analyses que nous avons effectuées à l'aide des méthodes textométriques sur trois séries de traduction d'un même texte (des traductions fournies par les apprenants, des traductions professionnelles et des traductions réalisées par des automates) ont montré leurs similitudes dans l'emploi des verbes et des adjectifs, les variations portant plutôt sur l’emploi des mots-outils (prépositions, adverbes, déictiques, etc.). Nous avons pu évaluer les difficultés spécifiques éprouvées par les apprenants dont la langue de travail n’était pas la langue maternelle. Les outils textométriques nous ont permis d'explorer, avec une grande efficacité, la variété des traductions rassemblées dans le corpus. L'utilisation de l'alignement du corpus en paragraphes permet de construire un réseau de comparaisons sur lesquels les calculs textométriques peuvent ensuite s'appuyer pour produire des résultats particulièrement explicites. La représentation des différents textes réunis dans le corpus sous forme de cartes des sections alignées permet de visualiser des phénomènes de répartition qui attirent alors l'attention de l'analyste. Les méthodes d'analyse statistique (AFC, localisation des segments répétés, analyse de spécificités), permettent de mettre en évidence des traits d’écriture propres à chacun des groupes de traductions. Les méthodes de la textométrie peuvent aider les enseignants à comprendre les procédés employés lors des traductions effectuées par les apprenants. Ils permettent de repérer les problèmes que ceux-ci ont rencontrés, de percevoir leurs hésitations. Enfin, l'examen vertical des traductions permet de localiser les portions du texte original qui ont reçu un traitement uniforme de la part des différents traducteurs. Grâce à cette même approche, nous pouvons également localiser les fragments du texte original ayant donné lieu à des traductions particulièrement variées et explorer l'éventail des possibilités attestées dans le corpus. Lors de l'analyse comparative des traductions proposées par les étudiants, l'enseignant trouve l'occasion de mettre ces derniers en garde contre l'utilisation systématique du recours aux solutions proposées par les automates de traduction. En effet, ces traductions sont parfois fautives. Si l'on peut accepter qu'une traduction s'inspire très fortement de celles des solutions proposées par les automates de traduction qui se révèlent être acceptables au plan traductologique, la reproduction systématique, dans un même travail, des erreurs commises par ces automates témoigne à coup sûr d'une qualité insuffisante de la traduction proposée. A l'issue de ce travail, nous sommes convaincus que les enseignements de traduction trouveront une aide précieuse dans l'utilisation des méthodes textométriques appliquées aux corpus aligné multilingues. REMERCIEMENTS Les auteurs remercient sincèrement Kim Gerdes, Serge Fleury, Jean-Michel Daube, Mathieu Valette, Colette Laplace, Marianne Lederer, Sylvie Royer pour leurs aides précieuses et leurs conseils dans la réalisation de cet article. NOTES 1. Veuillez trouver les références à tous les logiciels mentionnés dans l’article dans la deuxième partie de la bibliographie. 2. A l’ opposé des procédures telles que des procédures telles que BLEU (Papineni et al. 2002), ROUGE (Lin 2004), NIST (http://www.nist.gov/itl/iad/mig/mt.cfm), qui visent à l'évaluation intrinsèque de la performance des programmes de traduction automatique, notre expérience se concentre sur l'étude des écarts entre divers types de traductions et la mise en place de systèmes d'autoévaluation destinés aux apprenants. 3. Le texte original a été prélevé sur le site du White House <https://goo.gl/MOVdwn>, et les cinq traductions françaises de : La Croix <http://goo.gl/qo0HYY> ; Libération (AFP) <http://goo.gl/ZPbYMj> ; Le Monde (traduit par Arianne Cobin-Favier) <http://goo.gl/h7cI3N> ; RFI (traduit par Chérif Ezzel) <http://goo.gl/h7HE9y> ; White House <http://goo.gl/vBz4L0> (fichiers téléchargés tous le 10 septembre 2012, et vérifiés et recouru à Google URL Shortener le 08 décembre 2015) 4. Nous avons obtenus leurs traductions automatiques le 25 novembre 2012. 5. Ce logiciel est conçu par Kim Gerdes, Paris 3 (pour plus d’informations sur ce logiciel, voir Gerdes 2008 et Gerdes et Miao 2008). 6. Un tableau lexical soumis à l’analyse factorielle des correspondances est un tableau de contingence : les différents types (i) de vocabulaire occupent les lignes du tableau, les différentes parties (j) du corpus les colonnes, et le nombre d’occurrences (Kij) correspond à celui de la forme i dans la partie j. A l’aide d’analyses statistiques et de graphiques, les facteurs variables du tableau seront mesurés et représentés par des proximités géométriques entre points-lignes et points-colonnes. Cette méthode rend particulièrement compte des principales oppositions qui sous-tendent le corpus : on s'appuie dans un premier temps sur la distance du chi-deux pour calculer la distance entre chacune des paires de textes constituant le corpus ; puis on décompose les distances sur une succession hiérarchisée d'axes factoriels à l'aide des pourcentages d'inertie. Les pourcentages d'inertie issus de notre analyse font apparaître la succession suivante : τ1 = 14 %, τ2 = 8 %, τ3 = 7 %, τ4 = 5 %... 7. Notons cependant que la traduction RFI et celle de 22H ont une position relativement particulière, elles se situent légèrement au-dessous de l’axe X. 8. On se souvient que les Exercices de style de Raymond Queneau (1947) présentent quatre-vingt-dix-neuf manières différentes de raconter une même histoire. 9. On consultera sur ces questions les travaux sur la notion de résonance textuelle (Salem 2004). 10. Le type généralisé Tgen permet de constituer des unités textométriques rassemblant les occurrences de formes graphiques différentes liées par une même propriété (Lamalle et al. 2003). Cette propriété est implémentée sous le nom de : Groupes de formes dans le logiciel Lexico3. 11. Pour obtenir l'édition des paragraphes dans l'état que nous présentons sur la figure 4, nous avons été amenés à transformer les résultats bruts fournis par le logiciel Lexico3. Nous avons utilisé le logiciel pour repérer la première occurrence de chacune des séquences de longueur supérieure ou égale à 5, répétées au moins 5 fois. Ce marquage nous a permis de souligner, dans un second temps, les répétitions et les altérations contenues dans les paragraphes étudiés. 12. Nous nous concentrerons ici sur les formes spécifiques majeures, les formes dont le coefficient de spécificité est supérieur à 4. H H H H 13. La forme we apparaît 62 fois dans le corpus, et toutes les formes du pronom de la première personne au pluriel (we, our, ours) occupent 61.9% de l’ensemble des pronoms utilisés. RÉFÉRENCES BENZECRI, Jean-Paul et coll (1973) : L'analyse des données. Tome 1 : La taxinomie, tome 2 : L'analyse des correspondances. Paris : Dunod. BENZECRI, Jean-Paul (1977) : Analyse discriminante et analyse factorielle. Les Cahiers de l'Analyse des Données. II (4) : 369-406. BENZECRI, Jean-Paul, et coll. (1981). Pratique de l'analyse des données : linguistique et lexicologie. Paris : Dunod. BOWKER, Lynne and BENNISON, Peter (2003) : Student translation archive: design, development and application. In : Federico Zanettin, Silvia Bernardini & Dominic Stewart, dir. Corpora in Translator Education. Manchester, UK & Northampton, MA : St Jerome, 103-117. CASTAGNOLI, Sara, CIOBANU, Dragoş, KUNZ Kerstin, et al. (2009): Designing a Learner Translator Corpus for Training Purposes. In : Natalie Kübler, dir. Corpora, Language, Teaching, and Resources : From Theory to Practice. Bern : Peter Lang. 221-248. FLOREN, Celia (2006) : ENTRAD, an English Spanish parallel corpus created for the teaching of translation. Paper presented at the 7th Teaching and Language Corpora conference (TaLC), Université Paris 7 Denis Diderot, Paris, 1-4 July 2006. FONSECA-GREBER Bonnie and WAUGH Linda R (2003): On the Radical Difference between the Subject Personal Pronouns in Written and Spoken European French. In : Pepi Leistyna, Charles F. Meyer, dir. Corpus Analysis: Language Structure and Language Use, 225-240. FREROT, Céline (2010) : Outils d'aide à la traduction: pour une intégration des corpus et des outils d'analyse de corpus dans l'enseignement de la traduction et la formation des traducteurs. Les Cahiers du GEPE, 2010 (2), Outils de traduction outils du traducteur ? Consulté le 7 juin 2012, <http://www.cahiersdugepe.fr/index1164.php>. GERDES, Kim (2008) : L'alignement pour les pauvres. In : Serge Heiden et Bénédicte Pincemin, éd. Actes des 9es Journées internationales d'Analyse statistique des Données Textuelles (JADT), Université de Lyon, Lyon, 12-14 mars 2008. Vol. 1. Lyon : Presses Université de Lyon, 527-538. GERDES, Kim et MIAO Jun (2008) : Donner accès à l'œuvre de Fu Lei. In : Xu Yun, éd. 傅雷的精神世界及其时 代意义 [Le monde spirituel de Fu Lei et sa signification dans le temps], Colloque international Fu Lei et traduction, traductions chinoises, Université de Nanjing, Nanjing, Chine, 15-18 mai 2008. Shanghai: 中西 书局, 351-366. GRANGER, Sylviane, dir. (1998) : Learner English on Computer. London & New York: Addison Wesley Longman. ISRAËL, Fortunato (1999) : Principes pour une pédagogie raisonnée de la traduction : le modèle interprétatif. In : Ivana Čeňková, Jana Králová-Kullová, dir. Folia Translatologica, Vol. 6, International Series of Translation Studies, Issues of Translation Pedagogy, Helsinki – Paris – Praque : Charles University, Faculty of Arts. 21-32. KIRALY, Don (2005) : A Social Constructivist Approach to Translator Education. Manchester : St. Jerome. LAFON, Pierre (1980) : Sur la variabilité de la fréquence des formes dans un corpus. Mots. 1(1) :127-165. LAFON, Pierre (1984) : Dépouillements et statistiques en lexicométrie. Genève/ Paris : Slatkine/Champion. LAMALLE Cédric, SALEM André. 2002. « Types généralisés et topographie textuelle dans l'analyse quantitative des corpus textuels ». In : Actes des 6es Journées internationales d'Analyse statistiques des Données Textuelles (JADT 2002), 13-15 mars 2002, Saint-Malo, France, pp. 403-412. LAMALLE, Cédric, MARTINEZ, William, SALEM, André (2003) : Lexico3 outils de statistique textuelle et Manuel d'utilisation. SYLED – CLA2T, Paris : Université de Paris 3. LEE-JAHNKE, Hannelore (2001) : Aspects pédagogiques de l’évaluation des traductions. Meta. 46(2) : 258-271. Consulté le 22 février 2015, <http://www.erudit.org/revue/meta/2001/v/n2/003447ar.html >. LIN, Chin-Yew (2004) : ROUGE: a Package for Automatic Evaluation of Summaries. In : Proceedings of the Workshop on Text Summarization Branches Out (WAS 2004), Barcelona, Spain, July 25-26, 2004. MASSCHELEIN, Danny, VERSCHUEREN, Walter (2005) : Vers un apprentissage semi-autonome du processus de la traduction. Meta. 50 (2) : 560-572. PAPINENI, Kishore, ROUKOS, Salim, WARD Todd and ZHU Wei-Jing (2002) : BLEU: a Method for Automatic Evaluation of Machine Translation. In : the 40th Annual meeting of the Association for Computational Linguistics (ACL), Philadelphia, US, July 2002. Philadelphia : 311–318. POPESCU-BELIS, Andrei (2002) : Constitution de banques de textes multilingues : un mécanisme fondé sur le standard XML. Cahiers du Rifal / Terminologies Nouvelles. 23 : (56-61). QUENEAU, Raymond (1947/2006) : Les exercices de style. Impression en 2006. Paris : Gallimard. SALEM, André (1986) : Segments répétés et analyse statistique des données textuelles. Histoire & Mesures. 1(2) : 5-28. SALEM, André (2004) : Introduction à la résonance textuelle. In : Gérald Purnelle et al. éd. Actes des 7es Journées internationales d'Analyse statistique des Données Textuelles (JADT), Université de Louvain, Louvain-laNeuve, Belgium, 10-12 mars 2004. Louvain-la-Neuve : Presse universitaires de Louvain, 986-992. SOSNIA, E.P. (2006) : Development and application of Russian Translation Learner Corpus. In : Corpus Linguistics, St. Petersburg, Russia, 10-14 October 2006. St. Petersburg : 365-373. TERCEDOR-SANCHEZ, Maria Isabel, LOPEZ-RODRIGUEZ, Clara Inés and ROBINSON, Bryan (2005) : Textual and Visual Aids for E-learning Translation Courses. Meta. 50 (4). Consulté le 14 avril 2014, <http://id.erudit.org/iderudit/019904ar>. THOMAS Alain. (2015). Nous/on : De la réalité linguistique à la salle de classe. Arborescences : revue d’études françaises. 2015 (5) : 136-138. VALETOPOULOS, Freiderikos (2012) : Quand les apprenants doivent observer leurs stratégies métacognitives : une analyse de corpus. Synergie Pologne. 2012 (9) : 37-47. WADDINGTON, Christopher. (2001) : Different Methods of Evaluating Student Translations : The Question of Validity. Meta. 46(2) : 311-325. Consulté le 5 février 2015, < https://www.erudit.org/revue/meta/2001/v46/n2/004583ar.pdf>. WILLIAMS, Malcolm. (2001) : The Application of Argumentation Theory of Translation Quality Assessment. Meta. 46 (2) : 326-344. Consulté le 5 février 2015, <http://www.erudit.org/revue/meta/2001/v46/n2/004605ar.pdf>. OUTILS MENTIONNES DANS L’ARTICLE (consultés ou utilisés durant 2012-2013) Outils de l’enseignement Markin : http://www.cict.co.uk/markin/index.php Outils de traitement de corpus AntConc : http://www.laurenceanthony.net/software/antconc/ Alignator : http://elizia.net/alignator/alignator.cgi Lexico3 : http://www.tal.univ-paris3.fr/lexico/ WordSmith : http://www.lexically.net/wordsmith/ Outils d’aide à la traduction Déjà Vu : http://www.atril.com/ Trados : http://www.sdl.com/fr/cxc/language/translation-productivity/trados-studio/ Wordfast : https://www.wordfast.net/ Outils de la traduction automatique Google Translation : https://translate.google.fr/ Reverso : http://www.reverso.net Systran : http://www.systran.fr/