Evaluaciones
Trabajo 1: Reporte de reproducibilidad
Este trabajo tiene como objetivo que los estudiantes apliquen los conceptos de reproducibilidad y ciencia abierta a un artículo científico de su elección. Para esto, deberán seleccionar un artículo publicado en una revista científica, preferentemente en el área de ciencias sociales, y realizar un reporte de reproducibilidad siguiendo las pautas que se detallan a continuación.
Pauta para el reporte
- Selección del artículo: Elijan un artículo científico publicado en una revista de ciencias sociales. El artículo debe ser de acceso abierto o estar disponible a través de la biblioteca de la universidad. También pondremos a disposición una lista de artículos sugeridos.
- Evaluación de reproducibilidad: Realicen un análisis detallado del artículo seleccionado, evaluando los siguientes aspectos:
- Disponibilidad de datos: ¿El artículo proporciona acceso a los datos utilizados en el estudio? Si no es así, ¿qué dificultades se enfrentaron para obtener los datos?
- Disponibilidad de código: ¿El artículo proporciona acceso al código utilizado para el análisis? Si es así, ¿cómo se puede acceder?
- Documentación: ¿El artículo incluye una descripción clara de los métodos y procedimientos utilizados en el estudio? ¿Es suficiente para que otro investigador pueda replicar el estudio?
- Transparencia: ¿El artículo proporciona información sobre los posibles conflictos de interés, financiamiento, y otros aspectos relacionados con la transparencia de la investigación?
- Análisis reproducible: Seleccionar un resultado específico del artículo (por ejemplo, una tabla de resultados o una figura) y tratar de reproducirlo utilizando los datos y el código proporcionados. Documentar el proceso de reproducción, incluyendo cualquier dificultad encontrada y cómo se resolvió.
- Conclusiones: Basándose en el análisis realizado, escriban una conclusión sobre el nivel de reproducibilidad del artículo seleccionado.
- Recomendaciones: Proporcionen recomendaciones para mejorar la reproducibilidad del artículo, si es necesario.
- Formato del reporte: El reporte debe tener una extensión de no más de 2500 palabras, estar escrito en un lenguaje claro y conciso, y seguir las normas de citación académica. El reporte debe estar disponible en Github, seguir la estructura IPO, y ser presentado en formato Quarto
Plantilla y avance
- se pondrá a disposición una plantilla (template) para el reporte, que se podrá clonar y modificar para cada estudiante.
- con fines de retroalimentación, se deberá enviar un reporte de avance el viernes 10 de abril, indicando:
- articulo seleccionado (enviar link o pdf)
- disponibilidad de datos y código
- tabla o figura seleccionada para reproducir
Link al reporte de avance: https://forms.gle/YWcxt8wHekuXxgYu8
- Los grupos que exceden los 3 integrantes deberán reproducir al menos dos gráficos y/o tablas.
- Atender a la disponibilidad de series acumulativas de encuestas: a veces las encuestas están disponibles por separado para cada año, pero juntarlas no es simple y puede llevar mucho tiempo.
- En caso de disponer del código de análisis original, reportar la fuente (es decir, cómo se obtuvo/de quién) y adjuntar al trabajo.
- Considerar alternativa B de datos en caso de que los de la primera opción no estén disponibles. Si no se logra obtener los de la primera opción, se recomienda pasar a opción B a más tardar el viernes 17.
- Si tienen problemas para conseguir los datos, informar hasta el jueves las principales complicaciones y eventuales solicitudes de apoyo.
- Recordar que lo que es necesario y escencial para realizar el ejercicio son los datos. Se les recomienda intentar conseguir el código de análisis, pero si este no está disponible, seguir con el ejercicio de reproducibilidad atendiendo a lo que se informa en la metodología del reporte.
Revisión cruzada
Una vez entregados los reportes finales, se realizará una revisión cruzada entre los estudiantes, donde cada uno revisará el reporte de otro compañero y proporcionará retroalimentación constructiva sobre el análisis de reproducibilidad realizado.
Artículos / reportes sugeridos
La siguiente tabla reúne ejemplos de artículos y reportes que pueden servir como punto de partida para el Trabajo 1. La idea no es que funcionen como una lista cerrada, sino como referencias útiles para identificar trabajos con datos accesibles, análisis empíricos relativamente simples y una posibilidad razonable de evaluar su reproducibilidad.
| Fuente | Ejemplo | Tipo de análisis | Datos | Por qué puede servir |
|---|---|---|---|---|
| CEP | Encuesta CEP n°95, octubre 2025 | Descriptivos, cruces, comparaciones de grupos | Acceso abierto | Buen ejemplo de reporte de opinión pública con tablas claras y variables políticamente sustantivas. |
| CEP | Mejor, igual o peor: ¿Cómo cambiaron las percepciones de desigualdad con el estallido social? | Descriptivos y comparación entre grupos | Acceso abierto | Útil para analizar transparencia, documentación y disponibilidad de insumos en un estudio temático. |
| ISSP | The Perception of Social Inequality Around the Globe | Comparación internacional, asociaciones y modelos simples | Datos ISSP disponibles públicamente | Buen punto de entrada para trabajos sobre desigualdad, actitudes y comparaciones entre países. |
| CASEN | CASEN 2022: Baja la pobreza por ingresos y la pobreza multidimensional en Chile | Descriptivos, comparaciones temporales y regionales | Acceso abierto | Muy útil como modelo de reporte aplicado con indicadores sociales, tablas y visualizaciones legibles. |
| ENUT | Síntesis de resultados II ENUT 2023 | Descriptivos y comparación por sexo, edad y situación laboral | Acceso abierto | Muy recomendable para temas de género, cuidados y trabajo no remunerado. |
| Latinobarómetro | Informe Latinobarómetro 2024: La Democracia Resiliente | Comparaciones entre países y en el tiempo | Acceso abierto | Muy útil para estudios de democracia, confianza y actitudes políticas en América Latina. |
| ELSOC | Radiografía del cambio social: Análisis de Resultados Longitudinales Estudio Longitudinal Social de Chile ELSOC 2016-2023 | Descriptivos longitudinales y asociaciones simples | Información pública del estudio y reportes disponibles | Muy buen ejemplo chileno para temas de confianza, cohesión, desigualdad y cambio social. |
| ISSP | Work Orientations and Perceived Working Conditions across Countries: Results from the 2015 ISSP Survey | Tablas descriptivas | Información pública del estudio | Recomendable para temáticas relacionadas a actitudes hacia el trabajo. |
| ISSP | Todos Somos de Clase Media: Sobre el estatus social subjetivo en Chile | Tablas descriptivas y asociaciones simples | Información pública del estudio | Buen ejemplo para temas actitudinales de clase. |
En general, para este trabajo conviene privilegiar artículos o reportes que cumplan al menos dos de estas tres condiciones: datos accesibles, documentación suficiente del procedimiento analítico, y una tabla o figura que pueda intentarse reproducir con un esfuerzo razonable.
Trabajo 2: Reporte abierto
El objetivo de este trabajo es que los estudiantes apliquen los conceptos de ciencia abierta a un tema de su interés dentro del ámbito de las ciencias sociales. Para esto, deberán seleccionar un tema específico y desarrollar un reporte abierto siguiendo las pautas que se detallan a continuación. También pueden tomar algún trabajo realizado en el marco de alguna otra asignatura, siempre que se adapte a las pautas de este trabajo.