Traducció automàtica estadística

La traducció automàtica estadística, designada a voltes per les expressions Stat MT o SMT (del anglés Statistical Machine Translation), és un paradigma de traducció automàtica a on es generen traduccions basades en models estadístics i de teoria de l'informació els paràmetros de la qual s'obtenen de l'anàlisis de corpus de texts bilingües. L'enfocament estadístic contrasta en els enfocaments tradicionals com la traducció automàtica basada en regles i la basada en eixemples.

Les primeres idees de la traducció automàtica estadística varen ser introduïdes per Warren Weaver en 1949 Tejedor,^[1] incloent les idees de l'aplicació de la teoria de l'informació de Claude Shannon. La traducció automàtica estadística va ser reintroducida en 1991 per investigadors de la Thomas J. Watson Research Center d'IBM^[2] i ha contribuït al resorgiment significatiu de l'interés per la traducció automàtica en els últims anys. Fins a 2016 va ser, en molt, el método de traducció automàtica més estudiat, sent substituido per l'aplicació de rets neuronals de traducció automàtica.

Ventages sobre atres métodos

Els beneficis de la traducció estadística sobre la traducció tradicional són:

Un millor us dels recursos
- Hi ha molt llenguage natural en format llegible per a màquines.
- Generalment, els sistemes SMT no estan adaptats a cap parell específic d'idiomes.
- Els sistemes de traducció basada en regles requerixen un desenroll manual de regles llingüístiques, lo que pot ser costós, i que a sovint no es generalisa a atres idiomes.
Traduccions més naturals

Bases

Les idees que hi ha darrere de la traducció automàtica estadística vénen de la teoria de l'informació. Essencialment, el document es traduïx en la provabilitat $p (e | f)$ de que una cadena $e$ de la llengua nativa (per eixemple, anglés) siga la traducció d'una cadena $f$ en la llengua estrangera (per eixemple, francés). Generalment, estes provabilitats es calculen utilisant tècniques d'estimació de paràmetros.

El Teorema de Bayes s'aplica a $p (e | f)$ , la provabilitat de que la cadena de l'idioma estranger produïxca la cadena nativa per a conseguir $p (e | f) \propto p (f | e) p (e)$ , a on el model de traducció $p (f | e)$ és la provabilitat de que la cadena nativa siga la traducció de la cadena estrangera, i el model de llengua $p (e)$ és la provabilitat de vore aquella cadena nativa. Matemàticament parlant, trobar la millor traducció $\tilde{e}$ es conseguix triant aquella que done la provabilitat més alta:

\tilde{e} = \arg \max_{e \in e^{*}} p (e | f) = \arg \max_{e \in e^{*}} p (f | e) p (e)

.

Per a una aplicació rigorosa d'este es tindria que realisar una busca exhaustiva per passar per totes les cadenes $e^{*}$ en l'idioma natiu. Realisar la busca eficient és el treball d'una màquina de decodificación de traducció, que utilisa la cadena estrangera, heurístiques i atres métodos per a llimitar l'espai de busca i, al mateix temps, mantindre una calitat acceptable. Este compromís entre calitat i temps d'us també es pot trobar en la tècnica de reconeiximent de veu.

Com els sistemes de traducció no són capaces d'almagasenar totes les cadenes natives i les seues traduccions, un document es traduïx típicament frase per frase, pero ni tan sols açò és suficient. Els models de llenguage solen aproximar-se per models de alisado de n-grama i els enfocaments similars s'han aplicat als models de traducció, pero existix una complexitat adicional per la llongitut de frase i de diferents órdens de paraules en els idiomes.

Els models de traducció estadística varen estar inicialment basats en paraulas, (Models 1-5 d'IBM Amagats de Markov Model de Stephan Vogel^[3] i el Model 6 de Franz-Joseph Och^[4]), pero es varen conseguir alvanços significatius en l'introducció de frases, basada en models.^[5] Un treball recent ha incorporat sintaxis o estructures cuasi-sintàctiques.^[6]

Vore també

Referències

↑ W. (1955). Traducció (1949). En: Traducció automàtica de les llengües, MIT Press, Cambridge, MA.
↑ P. Brown, S. Della Pietra, V. Della Pietra, i R. Mercer (1993). Les matemàtiques de la traducció automàtica estadística: estimació de paràmetros. Llingüística Computacional,19 (2 ), 263-311.
↑ S. Vogel, H. i Ney C. Tillmann. 1996. Basats en HMM Paraula Alliniació en Statistical Translation. En Coling '96: La 16 ª Conferència Internacional de Llingüística Computacional, pp. 836-841, Copenhague, Dinamarca.
↑ F. Och i Ney H. (2003). Una comparació sistemàtica dels diferents models estadístics d'alliniació. Llingüística Computacional, 29 (1) :19-51
↑ P. Koehn, F. J. Och, i Marcu D. (2003). frase estadístics basats traducció. En Actes de la Conferència Conjunta sobre tecnologies del llenguage humà i la Reunió Anual del Capítul d'Amèrica del Nort de l'Associació de Llingüística Computacional (HLT /> NAACL ).
↑ D. Chiang (2005). Un model jeràrquic basat en la frase de la traducció automàtica estadística. En Actes de la 43 Reunió Anual de l'Associació de Llingüística Computacional (ACL'05 ).

Referències

Este artícul conté una traducció derivada de «Traducción automática estadística» de Wikipedia en castellà publicada baix la Llicència de documentació lliure de GNU i la Llicència Creative Commons Reconeiximent-CompartirIgual 4.0 Internacional.

[1] W. (1955). Traducció (1949). En: Traducció automàtica de les llengües, MIT Press, Cambridge, MA.

[2] P. Brown, S. Della Pietra, V. Della Pietra, i R. Mercer (1993). Les matemàtiques de la traducció automàtica estadística: estimació de paràmetros. Llingüística Computacional,19 (2 ), 263-311.

[3] S. Vogel, H. i Ney C. Tillmann. 1996. Basats en HMM Paraula Alliniació en Statistical Translation. En Coling '96: La 16 ª Conferència Internacional de Llingüística Computacional, pp. 836-841, Copenhague, Dinamarca.

[H._Ney._2003-4] F. Och i Ney H. (2003). Una comparació sistemàtica dels diferents models estadístics d'alliniació. Llingüística Computacional, 29 (1) :19-51

[5] P. Koehn, F. J. Och, i Marcu D. (2003). frase estadístics basats traducció. En Actes de la Conferència Conjunta sobre tecnologies del llenguage humà i la Reunió Anual del Capítul d'Amèrica del Nort de l'Associació de Llingüística Computacional (HLT /> NAACL ).

[6] D. Chiang (2005). Un model jeràrquic basat en la frase de la traducció automàtica estadística. En Actes de la 43 Reunió Anual de l'Associació de Llingüística Computacional (ACL'05 ).

[1]

[2]

[3]

[4]

[5]

[6]