1 Patrones funcionales-valorativos para el análisis de informes de arbitrajeDr. (C) Miguel Fuentes Cortés Contacto: https://www.researchgate.net/profile/Miguel_Cortes3 1 de Marzo 2017 Esta presentación es un primer acercamiento a la defensa de tesis de doctorado en lingüística de la PUC y parte del proyecto Fondecyt La interacción socio-discursiva en la construcción colectiva del conocimiento científico: la dinámica interna del proceso de evaluación por pares

2 Estructura de la presentaciónIntroducción/ justificación El Proceso de Evaluación por Pares (PEP) El Informe de Arbitraje (IA) Marco teórico- metodológico Objetivo de la presentación Metodología Resultados Análisis en proceso Bibliografía

3 Introducción / JustificaciónEl informe de arbitraje es un género clave para explicar la construcción colectiva del conocimiento científico Dado su carácter confidencial, los estudios empíricos de este género son escasos Su abordaje se ha realizado desde tres dimensiones: El contenido, las funciones y la valoración (polaridad evaluativa) Inexistencia de trabajos que profundicen en la relación entre los propósitos comunicativos y los elementos valorativos

4 El proceso de evaluación por paresAutor Editor el PEP se presenta como una interacción entre actores que poseen ciertos atributos sociales e intercambian textos con propósitos específicos: una actividad colectiva en la que los actores se coordinan epistémicamente para producir conocimiento. Esto se materializa en una práctica sociodiscursiva y sociotécnica, cuya finalidad principal es emitir un juicio o recomendación de publicación que, en definitiva, determina la producción, difusión y consumo del conocimiento científico. Evaluador 1 Evaluador 2

5 El informe de evaluaciónAtributos del Informe de evaluación como género discursivo: Es parte de la práctica discursiva el proceso de evaluación por pares Confidencial Carácter evaluativo (contiene la recomendación de publicación) Proporciona retroalimentación tanto al editor como al autor Su estructura está determinada por las instrucciones de la revista (Bolívar, 2008)

6 Marco teórico-metodológico1. Lingüística aplicada: “Análisis de género” Swales (1990; 2004). Análisis de los propósitos comunicativos. Da cuenta de la estructura funcional de los discursos. Problema: No presenta una descripción lingüística detallada de los recursos con que esos propósitos se materializan.

7 Resumen [El proceso de evaluación por pares es el mecanismo de evaluación por excelencia y el principal mecanismo de control de calidad en la mayoría de las disciplinas científicas.] (1) (PRESENTA ANTECEDENTES) [Al interior de este proceso el género “informe de arbitraje” constituye el género más importante, ya que, entre otras cosas, en él se materializa la interacción discursiva entre el autor, el editor y el evaluador.] (2) (DECLARA LA IMPORTANCIA DEL OBJETO DE ESTUDIO) [Estudiar este género es mirar detrás de la cortina de la evaluación científica, ya que se trata de un género oculto (Swales, 1996) que circula sólo entre autores, editores y evaluadores.] (3) (DECLARA LA IMPORTANCIA DEL OBJETO DE ESTUDIO) [Además, el análisis de este género académico desde una teoría del lenguaje que priorice su dimensión funcional y el lenguaje evaluativo permitiría identificar, entre otras cosas: los propósitos comunicativos, los recursos de evaluación crítica o negativa, los mecanismos de atenuación, los niveles de compromiso con voces propias y externas, y las instancias de gradación, entre otros elementos.] (DECLARA LA IMPORTANCIA DE LOS PROCEDIMIENTOS TEÓRICO- METODOLÓGICOS). (4) [En este contexto el objetivo de la presente tesis es comprender el funcionamiento del lenguaje en su dimensión funcional y evaluativa en un corpus de informes de arbitraje de la revista Onomázein.] (5) (PRESENTA EL OBJETIVO) [Teórico-metodológicamente y para el estudio funcional utilizo la noción de propósitos comunicativos (Swales, 1990, 2004) y para el estudio del lenguaje evaluativo ocupo las categorías del modelo de la valoración (Martin & White, 2005)] (6) (PRESENTA LA TEORÍA Y LA METODOLOGÍA) [Por su parte, el corpus consistió en 42 informes de arbitraje en español de la revista de Lingüística y Traducción de la Pontificia Universidad Católica de Chile Onomázein, entre los años 2008 y ] (7) (PRESENTA EL CORPUS) Ilustración de estableciendo el nicho y llenando el nicho

8 [The North American linguistic landscape provides rich opportunities for studies of language and dialect contact, not only between English and other languages, but also between the numerous dialects spoken in immigrant and minority language communities.] (1) (Antecedentes del objeto de estudio) [Contact between minority language dialects is particularly common in Latino communities, where dialect contact may be found even in the same household, as Potowski (2016) has shown in a study of MexiRicans, children of Mexican and Puerto Rican parents.] (2) (Antecedentes del objeto de estudio) [Other work documenting contact among Latino dialects includes Otheguy and Zentella’s (2012) study of NYC, Bayley et al.’s (2012) study of Puerto Ricans in Texas, and Ek’s (2005) work on a mixed Latino Pentecostal church in Los Angeles.] (3) (Presenta estudios asociados al objeto de estudio) [This talk outlines recent work on contact between dialects of minority languages and offers suggestions for research that will enrich our understanding of language and dialect contact while taking account of our increasing linguistic diversity.] (4) (Presenta el objetivo) Ilustración de estableciendo el nicho y llenando el nicho

9 Marco teórico-metodológicoEl modelo de la valoración: se ubica en la metafunción interpersonal del lenguaje. Estudia la presencia subjetiva y actitudes o evaluaciones de los hablantes/escritores y el posicionamiento que adoptan ante las voces propias y externas. Problema: El componente funcional de este modelo no es del todo operativo para la identificación de los segmentos en los que los propósitos comunicativos se materializan. A pesar de que en el modelo de la valoración existe esta la identificación de funciones sociales la segmentación que proponemos en este modelo creemos Que no coinciden con los complejos clausulares en que que se identifica la función en el modelo de la valoración. Esto influirá en el conteo de propósitos Y en descripciones linguísticas de carácter sintáctico por ejemplo. A differentiation of moves across an introduction is essentially arrived at intuitively, but can then

10 Felicidad Seguridad Afecto Satisfacción Inclinación NormalidadApreciación Juicio Balance Complejidad A C T I U D Afecto Felicidad Seguridad Satisfacción Inclinación Estima social Sanción social - Composición Relevancia Actualización Profundidad Normalidad Capacidad Tenacidad Veracidad Propiedad No tiene suficiente conocimiento Impacto El artículo es interesante La ACTITUD concierne a los significados que los hablantes atribuyen un valor o una evaluación a los participantes y los procesos, ya sea relacionados con respuestas emocionales o con sistemas de valores culturalmente determinados (White, 1999). La actitud se subdivide en tres sistemas: Afecto, Juicio y Apreciación. Como explican Martin y White (2005), el AFECTO corresponde a las emociones, el JUICIO a los asuntos de la ética y la APRECIACIÓN a la estética. Los dos primeros subsistemas se pueden aplicar a personas, mientras que el último, APRECIACIÓN, se restringe a productos, procesos y entidades. Existen numerosos errores ortográficos … otros puntos requieren una relectura para su comprensión Calidad La bibliografía es absolutamente pertinente La bibliografía es actualizada El autor nos ofrece una explicación excesivamente superficial

11 Monoglosia C O M P Negación R Contraexpectativa Refutación SEl artículo es interesante C O M P R S Negación Contraexpectativa no tiene suficiente conocimiento Refutación Proclamación Sin embargo, pero Contracción Acuerdo Pronunciamiento Respaldo ¿qué relación tiene el estudio de Levelt con el que presenta el autor? Debe contextualizar Heteroglosia Las secciones reflejan una estricta articulación de los contenidos El sistema de COMPROMISO se relaciona con la toma de posición respecto de los puntos de vista presentados en un texto. Se encarga de quién evalúa, esto es la fuente o el origen de las valoraciones que aparecen en el discurso (Martin y White, 2005). Incluye los recursos con los cuales el narrador se posiciona intersubjetivamente con respecto al texto propio u otros textos o discursos. En este contexto, las voces  como  posiciones  en  el discurso pueden  ser  más  o  menos monoglósicas y heteroglósicas. Las expresiones monoglósicas suelen ser cláusulas declarativas  afirmativas,  mientras que  las heteroglósicas  abren  un sistema mucho   más   complejo pues  apuntan al reconocimiento de posiciones alternativas.  La Heteroglosia puede  ser  codificada  por  medio de cláusulas mentales, verbales, entre otros recursos. Consideración Atribución Expansión Sugiero que incluya ejemplos Inserción Asimilación Cita directa Cita indirecta

12 Autenticidad Valor Especificidad Completitud Foco G R A D C I AtributoÓ N $ Atributo Intensificación - Proceso Fuerza Alta: Agregar algunas comas asociadas Media: Habría que hacer una diferenciación - Propuesta Una cosa Un proceso La GRADACIÓN corresponde al sistema que pone en escala de intensidad (bajo o alta) de los significados. Este sistema se subdivide en Fuerza y Foco. La Fuerza aumenta o disminuye la intensidad de los significados, mientras que el foco agudiza o suaviza los significados. Léxico-gramaticalmente se traduce en: intensificadores, amplificadores, y marcadores de actitud. El Foco funciona en marcos de agudeza y atenuación sobre recursos que no son graduables. Ejemplos de Foco serían: verdadero jugador, un completo desastre (White, 1999). Distancia Alcance Extensión Frecuencia Tiempo Cuantificación Espacio Tiempo Espacio

13 Objetivo de la presentaciónDescribir diversas formas en que se puede materializar la idea de patrón funcional-valorativo en el corpus de investigación

14 Metodología Corpus: 42 informes de arbitraje de la revista Onomázein, de artículos enviados entre los años 2008 y Aspectos éticos: procedimiento de enmascaramiento (el analista solo puede acceder a un número codificado del evaluador, por lo que no puede conocer la identidad de él).

15 Informe de arbitraje de la revista Onomázein1. El artículo muestra un dominio claro y preciso del área de trabajo, de los contenidos tratados y del metalenguaje utilizado. 2. Hay una clara definición de objetivos y método de exposición, los que son luego seguidos fielmente en el desarrollo del texto. 3. La bibliografía utilizada es apropiada y se encuentra citada de manera correcta. 4. Los términos metalingüísticos muy especializados o de uso poco extendido se encuentran definidos de manera apropiada, aunque sea brevemente. 5. La redacción es clara y el estilo es coherente con un trabajo científico. 6. Los títulos de secciones y subsecciones son apropiados (identifican partes claramente diferenciadas del artículo y son coherentes con los párrafos que introducen). 7. El resumen es claro y apropiado en relación con el texto. 8. El trabajo es un aporte a la disciplina o el modelo teórico en que se enmarca. III. RECOMENDACIONES IV. COMENTARIOS OPCIONALES

16 Unidad de análisis Unidad de análisis “Comentario”Idea o proposición que se manifiesta en una oración o cláusula subordinada Criterios: Sujeto y predicado Puede ser más de un sujeto y no puede ser más de un predicado Ejemplos: [La metodología y los objetivos son tediosos](1) [y muy extensos](2) (34 B) [Sin embargo, la organización de la información sobre la lengua y su complejidad morfológica, el poco dominio del tema y la poca familiaridad con el modelo, resultan en un artículo muy básico.] (1)(66 A) Estos cortes pretenden otorgar un criterio formal para determinar las marcas límites o boundary markers.

17 Noción de patrón y de patrones funcionales- valorativosPatrón Como elementos lingüísticos frecuentes y como secuencia de elementos lingüísticos Patrón funcional-valorativo Co-ocurrencia de los propósitos comunicativos con los elementos de la valoración

18 Procedimientos Etiquetaje de los propósitos comunicativos (BOTTOM UP)Identificación de Propósitos comunicativos más frecuentes en el corpus Análisis con el modelo de la Valoración para la descripción de los propósitos comunicativos más frecuentes En el primer pilotaje se privilegió el análisis de las distintas posibilidades en las redes sistémicas. Se realizaron modificaciones en el sistema de apreciación y graduación.

19 PROCEDIMIENTOS Etiquetaje en planilla word separando en cláusulasPROCEDIMIENTOS Etiquetaje en planilla word separando en cláusulas. Ejemplo de etiquetaje en word [66A]

20 Una vez todo etiquetado en word se pasó esta información a una planilla excell.

21 Ejemplo de grilla en excell

22 RESULTADOS

23 Zoom out

24 1181 Propósitos comunicativos

25 Gráfico 1: Porcentaje de presencia de los propósitos comunicativos

26 Tabla 1: Todos los propósitos comunicativos y su porcentaje de presenciaDescribe error 32% Solicita 19% Sugiere 15% Destaca Aspecto positivo 12% Corrige 6% Describe 4% Comentario ajeno Condiciona publicación 3% Evalúa el aporte 1% Evalúa pertinencia Recomienda publicación 0% Rechaza publicación Evalúa la organización

27 Describe error

28 ACTITUD en Describe error

29 Gráfico 2: Ocurrencia de categorías de ACTITUD en “Describe error”Contra lo afirmado por el autor, en español se reconocen casos de perífrasis formadas solo con verbos finitos. [19 B] VERACIDAD (-) El autor da por entendido que el lector comprende términos como géneros de hipertexto, acto perlocucionario, traducción verbal, traducción no verbal [35 B] CAPACIDAD (-) Lamentablemente, la mayor parte de las afirmaciones vertidas en esta parte del artículo parecen basarse en opiniones o juicios personales [74 B] FELICIDAD (-)

30 Gráfico 3: Ocurrencia de categorías de ACTITUD en “Describe error”METODOLOGÍA: no se explicita (53 A) algunos párrafos es necesario releerlos para entender qué quiere decir el autor.(35 B) Con todo, existen deficiencias que deben resolverse en el nivel teórico [19 B]

31 Patrón funcional-valorativo en DESCRIBE ERROR

32 Patrón gramatical Sujeto + negación + verbo en forma pasivaEjemplo: Algunas ideas no se desarrollan

33 Patrón Funcional Destaca aspecto positivo Destaca aspecto positivo Contraexpectativa + describe error Ejemplo: [En general el artículo es interesante] (1), [algunos puntos bien logrados] (2), pero [varios requieren un mejor desarrollo.](3) Prosodia valorativa Dominación

34 Describe error De forma directaEjemplo: el empleo adecuado o no del término ‘perífrasis verbal’ no depende del uso mayoritario del mismo, sino de los criterios que definen lo que se considera una perífrasis verbal. [19 B] Actitud: APRECIACIÓN: calidad: profundidad Compromiso: Heteroglosia: contracción: negación Gradación: Fuerza: intensificación: atributo: alto (mayoritario)

35 Describe error De forma modalizadaEjemplo: [“En general el artículo es interesante,](1) [algunos puntos bien logrados, ] (2) [pero varios requieren un mejor desarrollo”](3) Actitud: Apre. (+) Impacto (1) Apre. (+) Calidad. Profundidad(2) Apre. (-) Calidad. Profundidad (3) Compromiso: Heteroglosia. Contracción Dialógica. Contra-expectativa Gradación: Cuantificación: Cosa: Medio (algunos); Cuantificación: frecuencia. Alto (varios); intensificación. Proceso. Alto (mejor) Gosden (2001; 2003) y Paltridge (2015). God news v/s bad news

36 Voces de los árbitros Diplomática, evaluador negociador VOCESDirectiva, evaluador corrector Verbo “sugerir”, procesos mentales, flexión verbal en condicional ACTITUD por Apreciación [+/-] evocada por composición y calidad COMPROMISO por Consideración GRADACIÓN por Propuesta Medio Ejemplo: Se sugiere mitigar algunas aseveraciones [Propuesta: medio] La decisión entre tomar una voz u otra puede depender del estatus y cultura académica del evaluador, de la calidad del artículo Verbo “deber”, procesos materiales en infinitivo ACTITUD por Apreciación [-] inscrita. COMPROMISO por Heteroglosia: Contracción dialógica: Proclamación: Pronunciamiento. GRADACIÓN por Propuesta Alto Ejemplo: Como se trata de un texto teórico, se debe alivianar

37 Tensión entre la sugerencia y la solicitud: el caso del “debería”Debe realizar cambios mayores Certeza/obligación Cambie X por Y Modalidad deóntica el autor debería revisar, por lo menos, [Intensificación: proceso] la siguiente bibliografía en vez de “conceptos”, tal vez [propuesta: medio] debería decir “competencias” Se podría explicar Sugeriría agregar… Certeza/probabilidad Modalidad epistémica Esta tensión provoca un mensaje ambiguo en donde el mensaje puede confundirse entre la obligación o la sugerencia. Este problema fue identificado por Sabaj et al (2015) quien diseñó un protocolo de evaluación en donde se toma en cuente este factor. En este contexto, Omar en este nuevo protocolo se hace especial énfasis en distinguir órdenes directas de sugerencias. Paltridge (2015)

38 Análisis en proceso Profundizar en la modalización y modulación.

39 Análisis en proceso Cruzar patrones funcionales-valorativos con las siguientes variables: Contenido estructural del protocolo de evaluación (análisis de contenido) Tipo decisión Tipo de disciplina Estatus del evaluador

40 Primer esbozo de un modelo para alfabetizar en evaluación en lingüísticaHabilidades teóricas y textuales CONTENIDO: Teoría, dominio de los referentes y últimas investigaciones sobre el objeto de estudio, etc. Describe error FORMA: Estructura, redacción, objetivos, métodos, etc. Describe error Habilidades teóricas e interpersonales VIRTUDES DEL TRABAJO: Nunca hay un trabajo que sea 100% deficiente. Debemos mirar que detrás de una investigación hay tiempo invertido Destaca aspecto positivo RETROALIMENTACIÓN: Solidaridad fundamental y deber del maestro-investigador para la formación de nuevos científicos Solicita y sugiere

41 Desafío Lenguaje evaluativo Alfabetización críticaGenerar un juicio sobre algo necesita de pensamiento crítico.

42 Bibliografía Banks, D. (2012). How modality may function in some early issues of the philosophical transactions. Revista de Lingüística y Lenguas Aplicadas Freire, P. (1970). Pedagogía del oprimido. Ciudad de México: Siglo XXI. Hood, S. (2010). Appraising research. Evaluation in academic writing. Nueva York: Palgrave Macmillan. Martin, J. y White, P. (2005). Language of evaluation. Appraisal in English. Nueva York: Palgrave Macmillan. Motta-Roth, D. y Heberle, V. (2015). A short cartography of genre studies in Brazil. Journal of English for Academic Purposes (19) Paltridge, B. (2015). Referees’ comments on submissions to peer-reviewed journals: when is a suggestion not a suggestion? Studies in Higher Education (1) 106–122. Swales, J. (1990). Genre Analysis. English in academic and research setting. Cambridge: Cambridge University Press. Swales, J. (2004). Research Genres: Exploration and Aplications. Cambridge: Cambridge University Press. White, P. (1999). Un recorrido por la teoría de la valoración. [En línea:] appraisaloutline.pdf

43 Muchas gracias