| Indicador | Valor |
|---|---|
| Total procesados | 20 |
| Incluidos | 14 |
| Excluidos | 6 |
| Tasa de inclusión | 70 % |
Cribado PRISMA — Evaluación de Calidad en Traducción
Revisión bibliográfica sistemática · Estudios de Traducción y Lingüística Aplicada
Criterios de búsqueda: publicaciones 2015–2024 · evaluación de calidad traductora (humana, automática o post-editada) · estudios empíricos, metodológicos o revisiones sistemáticas · combinación lingüística inglés y/o español.
1 Resumen del proceso de cribado
1.1 Distribución por motivo de exclusión
| Motivo de exclusión | N | IDs afectados |
|---|---|---|
| CE-1: Año fuera de rango (2012/2014) | 3 | ABS-004, ABS-013, ABS-017 |
| CE-3: Estudio sobre interpretación | 1 | ABS-018 |
| No evalúa calidad de traducción (CI-2) | 2 | ABS-008, ABS-020 |
2 Tabla de cribado — Formato estático
Guía de lectura: verde = incluido · rojo = excluido · puntuación de relevancia en azul (≥ 4) o naranja (3) sobre escala 1–5.
| ID | Título | Autores | Año | Decisión | Criterio aplicado | Rel. | Justificación |
|---|---|---|---|---|---|---|---|
| ABS-001 | Is Neural Machine Translation the New State of the Art? | Castilho, S.; Moorkens, J.; Gaspari, F.; C... | 2017 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad NMT) · CI-3 (empírico) · CI-4 (inglés) | 4 | Evaluación humana y automática de fluidez/adecuación en NMT vs SMT para EN-DE; relevante para formación de post-editores. |
| ABS-002 | Neural versus Phrase-Based Machine Translation Quality: a Case Study | Bentivogli, L.; Bisazza, A.; Cettolo, M.; ... | 2016 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad MT) · CI-3 (empírico) · CI-4 (inglés) | 4 | Análisis de errores con tipología fina en NMT y PBMT para EN-DE; propone marcos de evaluación actualizados. |
| ABS-003 | Pre-editing and post-editing in the age of neural MT | Guerberof Arenas, A. | 2019 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad MTPE) · CI-3 (empírico) · CI-4 (EN+ES) | 5 | Estudio empírico con 150 traductores profesionales EN>ES; mide esfuerzo de post-edición y detecta errores semánticos en NMT. |
| ABS-004 | Multidimensional Quality Metrics (MQM): A Framework for Declaring and Describing Translation Quality Metrics | Lommel, A.; Burchardt, A.; Uszkoreit, H. | 2014 | EXCLUIR | CE-1 (año fuera de rango: 2014) | 3 | Propuesta fundacional del marco MQM, pero publicada en 2014, fuera del período 2015-2024. |
| ABS-005 | What Level of Quality Can Neural Machine Translation Attain on Literary Text? | Toral, A.; Way, A. | 2018 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad NMT) · CI-3 (empírico) · CI-4 (inglés) | 4 | Evaluación humana y automática de NMT literario EN>Catalán; benchmark 25% aceptabilidad literaria vs. 78% periodístico. |
| ABS-006 | Assessing User Interface Needs of Post-Editors of Machine Translation | Moorkens, J.; O'Brien, S. | 2017 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. proceso post-edición) · CI-3 (empírico) · CI-4 (EN+ES) | 3 | Estudio eye-tracking + entrevistas con 12 traductores EN>ES; relevante para diseño de herramientas CAT y calidad del flujo MTPE. [Inclusión condicional: foco en UX, no en calidad de producto directamente.] |
| ABS-007 | Informative Manual Evaluation of Machine Translation Output | Popović, M. | 2020 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad MT) · CI-3 (empírico) · CI-4 (inglés) | 4 | Propone taxonomía jerárquica de errores MT con alta concordancia inter-anotador; aplicada a seis sistemas EN-DE. |
| ABS-008 | Assessing Machine Translation Literacy Among Translation Students | Sánchez-Gijón, P.; Torres-Hostench, O. | 2020 | EXCLUIR | CE (no cumple CI-2: no evalúa calidad de traducción sino alfabetización MT de estudiantes) | 2 | El estudio mide actitudes y conocimiento tecnológico, no evalúa calidad de output traducido; fuera del foco de inclusión. |
| ABS-009 | Post-editing of Machine Translation: Processes, Quality and Cognitive Effort | Vieira, L. N. | 2020 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad MTPE) · CI-3 (empírico) · CI-4 (inglés) | 5 | Estudio multi-método (keystroke, eye-tracking, TAP) con 20 traductores profesionales EN>PT; hallazgos clave sobre esfuerzo cognitivo en MTPE. |
| ABS-010 | The Economics of Machine Translation Post-Editing: A Systematic Review | Mariana, V.; Esperança, J. | 2021 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. productividad MTPE) · CI-3 (revisión sistemática) · CI-4 (inglés, inferencia) | 3 | Revisión sistemática de 47 estudios sobre productividad MTPE; identifica factores moderadores y llama a estandarizar metodologías. [Par lingüístico no especificado en abstract: se infiere inclusión de inglés.] |
| ABS-011 | Is Machine Translation Post-Editing Worth the Effort? A Survey of Research into Post-Editing and Effort | Koponen, M. | 2016 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. esfuerzo MTPE) · CI-3 (revisión/survey) · CI-4 (inglés) | 4 | Síntesis de 35 estudios empíricos sobre esfuerzo de post-edición (2009-2015); propone marco unificado de medición tridimensional. |
| ABS-012 | Toward Quality Assessment for Neural Machine Translation in Multilingual Settings | Castilho, S.; Resende, N.; Gaspari, F.; Wa... | 2021 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad NMT) · CI-3 (empírico) · CI-4 (inglés) | 5 | Evaluación de NMT en 12 pares lingüísticos con métricas automáticas + humana; propone protocolo híbrido para lenguas morfológicamente ricas. |
| ABS-013 | Skills and Profile of the New Role of the Translator as MT Post-Editor | Rico, C.; Torrejón, E. | 2012 | EXCLUIR | CE-1 (año fuera de rango: 2012) | 3 | Estudio relevante sobre competencias del post-editor, pero publicado en 2012, fuera del período 2015-2024. |
| ABS-014 | Large Language Models and Translation Quality Assessment: A Preliminary Study | Sun, S. | 2023 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad TQA con LLM) · CI-3 (empírico) · CI-4 (inglés) | 5 | Evaluación de GPT-4 y Claude como herramientas TQA frente a expertos humanos en 200 segmentos; pionero en uso de LLMs para evaluación de traducción. |
| ABS-015 | Creativity in Translation: Machine Translation as a Constraint for Literary Translators | Guerberof Arenas, A.; Toral, A. | 2022 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad literaria MTPE) · CI-3 (empírico) · CI-4 (EN+ES) | 4 | Estudio empírico con keystroke logs + entrevistas; mide impacto de NMT sobre creatividad léxica en traducción literaria EN>ES. |
| ABS-016 | Quantitative Fine-Grained Human Evaluation of Machine Translation Systems: A Case Study on English to Croatian | Klubička, F.; Toral, A.; Sánchez-Cartagena... | 2018 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad MT) · CI-3 (empírico) · CI-4 (inglés) | 4 | Evaluación humana fina (MQM adaptado) de 6 sistemas MT EN-Croata con 2.400 segmentos; alto rigor metodológico. |
| ABS-017 | Translation as Human-Computer Interaction | O'Brien, S. | 2012 | EXCLUIR | CE-1 (año fuera de rango: 2012) · CE-2 (artículo de posicionamiento sin datos empíricos) | 2 | Position paper teórico sobre HCI y traducción; excluido por año (2012) y por ausencia de datos empíricos. |
| ABS-018 | Interpretación remota en tiempos de pandemia: calidad percibida y estrés laboral | García Manzano, R. | 2022 | EXCLUIR | CE-3 (estudio sobre interpretación, no traducción escrita) | 1 | El estudio trata exclusivamente interpretación simultánea remota; fuera del ámbito de traducción escrita del presente cribado. |
| ABS-019 | Lost in Translation: Loss and Decay of Linguistic Richness in Machine Translation | Vanmassenhove, E.; Shterionov, D.; Way, A. | 2019 | INCLUIR | CI-1 (2015-2024) · CI-2 (eval. calidad lingüística MT) · CI-3 (empírico-corpus) · CI-4 (inglés) | 3 | Análisis de corpus paralelos (6 pares lingüísticos) sobre diversidad léxica y morfológica en MT; relevante para calidad de output y evolución lingüística. |
| ABS-020 | Quantitative Research Methods in Translation and Interpreting Studies | Mellinger, C.; Hanson, T. | 2017 | EXCLUIR | CE (no cumple CI-2: no trata evaluación de calidad de traducción; alcance metodológico general en T&I) | 2 | Revisión metodológica general de T&I; no focaliza en evaluación de calidad traductora y cubre también interpretación. |
3 Tabla de cribado — Formato interactivo
Usa los filtros por columna para explorar por decisión, año o relevancia. El botón Excel exporta la selección actual.
4 Visualización del cribado
5 Notas metodológicas
AdvertenciaDecisiones con reserva
ABS-006 (Moorkens & O’Brien, 2017): incluido con reserva. El foco es la interfaz de usuario del post-editor; la relación con evaluación de calidad traductora es indirecta. En un cribado más restrictivo podría reclasificarse como exclusión.
ABS-010 (Mariana & Esperança, 2021): incluido con inferencia
[inferencia]. El abstract no especifica pares lingüísticos. Se presupone presencia de inglés dado el contexto; verificar en texto completo.
TipPróximos pasos sugeridos
- Extracción de datos en los 14 artículos incluidos: pares lingüísticos, métricas de evaluación utilizadas, tamaño muestral.
- Segunda lectura de ABS-006 y ABS-010 para confirmar inclusión definitiva.
- Ampliación del corpus hacia 2010–2014 si se requiere contexto histórico (MQM: ABS-004; Rico & Torrejón: ABS-013).
Documento generado con Quarto · 19 de abril de 2026