Evaluaciones

Trabajo 1: Reporte de reproducibilidad

Este trabajo tiene como objetivo que los estudiantes apliquen los conceptos de reproducibilidad y ciencia abierta a un artículo científico de su elección. Para esto, deberán seleccionar un artículo publicado en una revista científica, preferentemente en el área de ciencias sociales, y realizar un reporte de reproducibilidad siguiendo las pautas que se detallan a continuación.

Pauta para el reporte

  1. Selección del artículo: Elijan un artículo científico publicado en una revista de ciencias sociales. El artículo debe ser de acceso abierto o estar disponible a través de la biblioteca de la universidad. También pondremos a disposición una lista de artículos sugeridos.
  2. Evaluación de reproducibilidad: Realicen un análisis detallado del artículo seleccionado, evaluando los siguientes aspectos:
    • Disponibilidad de datos: ¿El artículo proporciona acceso a los datos utilizados en el estudio? Si no es así, ¿qué dificultades se enfrentaron para obtener los datos?
    • Disponibilidad de código: ¿El artículo proporciona acceso al código utilizado para el análisis? Si es así, ¿cómo se puede acceder?
    • Documentación: ¿El artículo incluye una descripción clara de los métodos y procedimientos utilizados en el estudio? ¿Es suficiente para que otro investigador pueda replicar el estudio?
    • Transparencia: ¿El artículo proporciona información sobre los posibles conflictos de interés, financiamiento, y otros aspectos relacionados con la transparencia de la investigación?
  3. Análisis reproducible: Seleccionar un resultado específico del artículo (por ejemplo, una tabla de resultados o una figura) y tratar de reproducirlo utilizando los datos y el código proporcionados. Documentar el proceso de reproducción, incluyendo cualquier dificultad encontrada y cómo se resolvió.
  4. Conclusiones: Basándose en el análisis realizado, escriban una conclusión sobre el nivel de reproducibilidad del artículo seleccionado.
  5. Recomendaciones: Proporcionen recomendaciones para mejorar la reproducibilidad del artículo, si es necesario.
  6. Formato del reporte: El reporte debe tener una extensión de no más de 2500 palabras, estar escrito en un lenguaje claro y conciso, y seguir las normas de citación académica. El reporte debe estar disponible en Github, seguir la estructura IPO, y ser presentado en formato Quarto

Plantilla y avance

  • se pondrá a disposición una plantilla (template) para el reporte, que se podrá clonar y modificar para cada estudiante.
  • con fines de retroalimentación, se deberá enviar un reporte de avance el viernes 10 de abril, indicando:
  • articulo seleccionado (enviar link o pdf)
  • disponibilidad de datos y código
  • tabla o figura seleccionada para reproducir

Link al reporte de avance: https://forms.gle/YWcxt8wHekuXxgYu8

Importante
  • Los grupos que exceden los 3 integrantes deberán reproducir al menos dos gráficos y/o tablas.
  • Atender a la disponibilidad de series acumulativas de encuestas: a veces las encuestas están disponibles por separado para cada año, pero juntarlas no es simple y puede llevar mucho tiempo.
  • En caso de disponer del código de análisis original, reportar la fuente (es decir, cómo se obtuvo/de quién) y adjuntar al trabajo.
  • Considerar alternativa B de datos en caso de que los de la primera opción no estén disponibles. Si no se logra obtener los de la primera opción, se recomienda pasar a opción B a más tardar el viernes 17.
  • Si tienen problemas para conseguir los datos, informar hasta el jueves las principales complicaciones y eventuales solicitudes de apoyo.
  • Recordar que lo que es necesario y escencial para realizar el ejercicio son los datos. Se les recomienda intentar conseguir el código de análisis, pero si este no está disponible, seguir con el ejercicio de reproducibilidad atendiendo a lo que se informa en la metodología del reporte.

Revisión cruzada

Una vez entregados los reportes finales, se realizará una revisión cruzada entre los estudiantes, donde cada uno revisará el reporte de otro compañero y proporcionará retroalimentación constructiva sobre el análisis de reproducibilidad realizado.

Artículos / reportes sugeridos

La siguiente tabla reúne ejemplos de artículos y reportes que pueden servir como punto de partida para el Trabajo 1. La idea no es que funcionen como una lista cerrada, sino como referencias útiles para identificar trabajos con datos accesibles, análisis empíricos relativamente simples y una posibilidad razonable de evaluar su reproducibilidad.

Fuente Ejemplo Tipo de análisis Datos Por qué puede servir
CEP Encuesta CEP n°95, octubre 2025 Descriptivos, cruces, comparaciones de grupos Acceso abierto Buen ejemplo de reporte de opinión pública con tablas claras y variables políticamente sustantivas.
CEP Mejor, igual o peor: ¿Cómo cambiaron las percepciones de desigualdad con el estallido social? Descriptivos y comparación entre grupos Acceso abierto Útil para analizar transparencia, documentación y disponibilidad de insumos en un estudio temático.
ISSP The Perception of Social Inequality Around the Globe Comparación internacional, asociaciones y modelos simples Datos ISSP disponibles públicamente Buen punto de entrada para trabajos sobre desigualdad, actitudes y comparaciones entre países.
CASEN CASEN 2022: Baja la pobreza por ingresos y la pobreza multidimensional en Chile Descriptivos, comparaciones temporales y regionales Acceso abierto Muy útil como modelo de reporte aplicado con indicadores sociales, tablas y visualizaciones legibles.
ENUT Síntesis de resultados II ENUT 2023 Descriptivos y comparación por sexo, edad y situación laboral Acceso abierto Muy recomendable para temas de género, cuidados y trabajo no remunerado.
Latinobarómetro Informe Latinobarómetro 2024: La Democracia Resiliente Comparaciones entre países y en el tiempo Acceso abierto Muy útil para estudios de democracia, confianza y actitudes políticas en América Latina.
ELSOC Radiografía del cambio social: Análisis de Resultados Longitudinales Estudio Longitudinal Social de Chile ELSOC 2016-2023 Descriptivos longitudinales y asociaciones simples Información pública del estudio y reportes disponibles Muy buen ejemplo chileno para temas de confianza, cohesión, desigualdad y cambio social.
ISSP Work Orientations and Perceived Working Conditions across Countries: Results from the 2015 ISSP Survey Tablas descriptivas Información pública del estudio Recomendable para temáticas relacionadas a actitudes hacia el trabajo.
ISSP Todos Somos de Clase Media: Sobre el estatus social subjetivo en Chile Tablas descriptivas y asociaciones simples Información pública del estudio Buen ejemplo para temas actitudinales de clase.

En general, para este trabajo conviene privilegiar artículos o reportes que cumplan al menos dos de estas tres condiciones: datos accesibles, documentación suficiente del procedimiento analítico, y una tabla o figura que pueda intentarse reproducir con un esfuerzo razonable.

Trabajo 2: Reporte abierto

El objetivo de este trabajo es que los estudiantes apliquen los conceptos de ciencia abierta a un tema de su interés dentro del ámbito de las ciencias sociales. Para esto, deberán seleccionar un tema específico y desarrollar un reporte abierto siguiendo las pautas que se detallan a continuación. También pueden tomar algún trabajo realizado en el marco de alguna otra asignatura, siempre que se adapte a las pautas de este trabajo.

Pauta para el reporte (por definir)

Foro