Consolidacin de un Sistema Nacional de Evaluacin Estandarizada

Consolidación de un Sistema Nacional de Evaluación Estandarizada: Alineación de SABER 11° Octubre de 2013

Contenido Antecedentes - El “examen del ICFES” Desarrollo de la evaluación estandarizada Estudios de Soporte de la propuesta ¿Qué se busca con la alineación de SABER 11? Modificaciones Necesarias Nueva Estructura de SABER 11 - Resultados que producirá la nueva prueba SABER 11 Descripción de las pruebas

Antecedentes – El “examen del ICFES” Examen de selección para ingreso a la universidad, creado en 1968. Entre 1968 y 2000 se construye con distintas pruebas de conocimientos y aptitudes (habilidades). Obligatorio desde 1980. Utilizado para supervisar los resultados de los colegios.

Antecedentes – El “examen del ICFES” 1. Usos oficiales del examen Selección • Admisión a IES • Nivelación, prevención de la deserción • Distinciones • Becas 2. Monitoreo de los resultados educativos • Clasificación de colegios – Definición de cupos de ampliación de tarifas a colegios privados • Asignación de recursos a los municipios

Antecedentes – El “examen del ICFES” Reestructuración de 2000 En 2000, tiene lugar una reforma de fondo del examen: se conforma un examen orientado a evaluar competencias, a partir de la experiencia adquirida en las evaluaciones de educación básica en los años 90. Esta orientación corresponde a la tendencia mundial en evaluación desde la última década del siglo pasado. Su adopción para el examen de final del bachillerato, junto con la de modelos psicométricos de respuesta al ítem para procesar los resultados, sitúa desde entonces a Colombia en la vanguardia de la evaluación de la educación en Latinoamérica.

Antecedentes – El “examen del ICFES” Formato del examen actual El formato de aplicación es el mismo desde antes del 2000: – La prueba se diligencia en su totalidad en papel con lápiz. – Las preguntas son todas cerradas (de opción múltiple) Antes de 2005, -la duración era de 3 sesiones de medio día cada una. -cada prueba constaba de 35 preguntas. En 2005, para resolver dificultades logísticas, -se reduce el tiempo de aplicación a un día (dos sesiones). -se reduce la extensión de cada prueba a 24 preguntas.

Antecedentes – El “examen del ICFES” Estructura del examen actual El examen actual (desde 2000) tiene una estructura por pruebas que corresponde a las áreas curriculares de secundaria: § § § § § Lenguaje Matemáticas Biología Física Química Historia y Geografía -> Sociales (2006) Filosofía Idiomas -> Inglés (2007) Profundizaciones e Interdisciplinares En el 2003 el MEN adopta unos Estándares de Educación Básica y Media. Se ajustan las pruebas para responder a esos Estándares.

Antecedentes – El “examen del ICFES” Resultados que produce el examen actual Resultados individuales Puntaje para cada una de las pruebas Puntaje y niveles en sub-escalas para cada una de las pruebas: componentes y competencias § Puesto frente al conjunto total de evaluados. § § Resultados institucionales (colegios) § § Promedios y distribuciones en los niveles de sub-escalas Clasificación de los colegios

Antecedentes – Desarrollo de la evaluación estandarizada de la educación • Evaluación de la Educación Básica – – Las primeras evaluaciones se dieron en los años 90. Se han aplicado sistemáticamente en 5 to y 9 no desde 2002. Tienen un diseño completo desde 2009. Desde 2012 se incorpora 3 ro y se anualiza • Evaluación de Educación Superior – Se ha desarrollado desde 2003 • Colombia ha participado en evaluaciones internacionales desde 1995. En PISA desde 2006. • En 2009, la Ley 1324, convierte al ICFES en el “Instituto Colombiano para la Evaluación de la Calidad de la Educación”.

Antecedentes – Desarrollo de la evaluación estandarizada de la educación Responsabilidades con respecto a los Exámenes de Estado Ministerio de Educación ICFES Establece propósitos y Diseña las efectos de las evaluaciones, aplica, evaluaciones, así analiza y devuelve como lo que debe ser resultados evaluado (reportes) CESU es organismo asesor Participan expertos y docentes MEN, SECRETARIAS INSTITUCIONES Fomentan, diseñan e implementan programas de mejoramiento

El Sistema Nacional de Evaluación Estandarizada SABER 11° S CIA S N ETE NALE P M CO FESIO PRO ICAS F Í C E ESP S A I C EN SABER 5° SABER 3° PET COM DADANAS IU C S IA C N E PET COMPETENCIAS BÁSICAS PRIMERA INFANCIA PRIMARIA SECUNDARIA BÁSICA MEDIA TÉCNICA PROFESIONAL TECNOLÓGICA UNIVERSITARIA PROFESIONAL GENÉRICAS SABER 9° SABER PRO POSGRADOS

Antecedentes – Desarrollo de la evaluación de la educación El Sistema Nacional de Evaluación Estandarizada - Sistema de Evaluación de competencias de los estudiantes - Produce mediciones institucionales (colegio, municipio, programa…) que permiten hacer seguimiento a la evolución. - Produce clasificaciones en niveles de desempeño que describen el desarrollo de las competencias de los estudiantes. - Especificación del objeto de evaluación según el modelo basado en evidencias

Antecedentes – Desarrollo de la evaluación de la educación El Sistema Nacional de Evaluación Estandarizada 3° 5° Lenguaje 9° 11° PRO Lenguaje Lectura Crítica Matemáticas R. Cuantitativo PC Mat. y Est. Ciudadanas Inv. C. Sociales (Esp) Naturales P. Científico (Esp) Inglés R. Cuantitativo Com. Escrita

Antecedentes – Desarrollo de la evaluación de la educación Decreto 869 de 2010: reglamentación del examen Objetivos del examen SABER 11 • Selección, nivelación y prevención de la deserción en Educación Superior. • Monitoreo de la calidad de los establecimientos, a partir de los Estándares. • Informar para la estimación del valor agregado de la Educación Media y de la Educación Superior.

Antecedentes – Limitaciones del examen actual Limitaciones que afectan el cumplimiento de los objetivos - El bajo número de preguntas por módulo impide alcanzar niveles satisfactorios de precisión en las mediciones individuales (reporte OECD). - No se miden sistemáticamente Competencias Genéricas. No se evalúan las Competencias Ciudadanas ni el componente Ciencia, Tecnología y Sociedad, que están incluidos en los Estándares. Se evalúa Filosofía aunque no hace parte de los Estándares.

Estudios de soporte de la propuesta ü ü ü Encuesta de pertinencia de las competencias y conocimientos incluidos para la selección de ingreso a la Educación Superior Encuesta de prioridades de la educación media Encuesta oficinas de admisión IES Análisis de la capacidad predictiva del desempeño en educación superior Análisis de los Estándares de Educación Media para el ajuste o diseño de las especificaciones de los diferentes módulos Alineación internacionales

Estudios de soporte de la propuesta ü ü ü ü Informe BM-OECD Validación por parte de expertos internacionales Validación por parte de expertos nacionales Elaboración de especificaciones correspondientes a Competencias Ciudadanas Desarrollo de capacidad de calificación preguntas abiertas Aplicaciones experimentales de las nuevas pruebas Foro de educación

¿Qué se busca con la alineación? ü Consolidar un sistema nacional de evaluación estandarizada de la educación ü Potenciar el uso de las mediciones de las evaluaciones ü ü Poder monitorear el desarrollo en cada nivel Apoyar una articulación general de la educación

¿Qué se busca con la alineación? ü Introducir mejoras en la evaluación de 11° que faciliten el cumplimiento de los objetivos del examen ü Mejorar alineación con estándares ü Mejorar la precisión de los resultados ü Reducir el efecto de preparación artificial

¿Qué modificaciones son necesarias? 1. Incorporar explícitamente la medición de Competencias Genéricas. 2. Reducir el número de pruebas de manera que las queden puedan tener más preguntas. 3. Especificar de los contenidos a evaluar. 4. Incluir preguntas abiertas.

¿Qué modificaciones son necesarias? 1. Incorporación explícita de la medición de Competencias Genéricas. • Alineación con SABER PRO. • Alineación con Estándares. • El desarrollo de competencias genéricas en el colegio es fundamental para el éxito en Educación Superior y para la vida como ciudadano. – Los resultados en competencias genéricas predicen mejor el rendimiento en Educación Superior. – Las competencias genéricas son transferibles entre contextos y necesarias para saber aprender.

¿Qué modificaciones son necesarias? 2. Reducción del número de pruebas de manera que las queden puedan tener más preguntas. Esto se consigue mediante • La fusión de pruebas en torno a las competencias que evalúan en común, por ejemplo: - Indagación científica se evalúa en Biología, en Física y en Química. - Lectura crítica se evalúa en Lenguaje y en Filosofía. - Interpretación de fuentes, Pensamiento Social y Reflexión Crítica se evalúan en Sociales y en Ciudadanas • La eliminación de las profundizaciones y de los módulos interdisciplinares.

Nueva Estructura de SABER 11 Estructura de 5 pruebas 3° 5° Lenguaje R. Cuantitativo 9° Lenguaje 11° Lectura Crítica PRO Lectura Crítica Matemáticas R. Cuantitativo PC Mat. y Est. Ciudadanas Sociales y Ciudadanas Inv. C. Sociales (Esp) Naturales P. Científico (Esp) Inglés Com. Escrita

¿Qué modificaciones son necesarias? 3. Especificación de los contenidos a evaluar. • En los últimos años el ICFES ha avanzado en esta tarea. • Unificación del modelo de especificación basado en evidencias. • La especificación y su divulgación reducen las inequidades que se dan entre quienes acceden a mecanismos de entrenamiento y quienes no.

¿Qué modificaciones son necesarias? 4. La inclusión progresiva de preguntas abiertas • Reduce el efecto del entrenamiento artificial. • Reduce el ruido que generan las respuestas al azar.

Resultados que producirá la nueva prueba de SABER 11 Resultados Individuales Antes Individuales Puntajes específicos Puntajes y Niveles Ahora Lenguaje Matemáticas Biología Física Química Sociales Filosofía Inglés Profund. / Interd. • • • Componentes Competencias • • • Lectura Crítica Matemáticas Razonamiento Cuantitativo Ciencias Naturales Ciencias Sociales Competencias Ciudadanas Inglés El decil en el que se encuentra cada estudiante. Niveles de desempeño (a partir de 2015). Se contempla reportar también: Quintil sub-poblaciones (E. g. sordos; ciegos) Puntajes compuestos. Ciencias Naturales y Razonamiento cuantitativo Lectura Crítica, Sociales y Competencias Ciudadanas Totales Puesto • • Puesto en aplicación Global en escala histórica

Resultados que producirá la nueva prueba de SABER 11 Resultados Individuales Antes Institucionales Agregados • • Promedios Clasificación de colegios Ahora • • Promedios de los puntajes individuales de sus estudiantes Distribuciones por deciles Distribuciones por niveles de desempeño (a partir de 2015) Promedios y distribuciones en sub-escalas, p. e. Biología, Física, Química y CTS Numérico, Métrico, Geométrico, Aleatorio y Variacional Clasificación de colegios

Nueva Estructura de SABER 11 Matemáticas La prueba actual evalúa Razonamiento Cuantitativo y contenidos no genéricos de matemáticas de media. No se introducen cambios significativos. Se divide en dos partes que se diferencian por sus contenidos: • Razonamiento Cuantitativo ü Está alineada con SABER PRO. ü Evalúa contenidos genéricos de las matemáticas. • Matemáticas (de Educación Media) ü Cubre los estándares. ü Está alineada con SABER 3, SABER 5 y SABER 9.

Nueva Estructura de Matemáticas SABER 11 Las competencias evaluadas en las pruebas de matemáticas del examen se ajustan con el fin de alinearlas con las evaluadas en la prueba de Razonamiento cuantitativo de Saber-pro, de la siguiente manera: ü Interpretación: Se refiere a la capacidad de comprender y producir representaciones de información cuantitativa y objetos matemáticos en términos numéricos, gráficos, diagramas, y esquemas. Incluye extraer información y comparar representaciones. Presentación de datos, representación gráfica y tabular de funciones y relaciones. Comunicar información cuantitativa y resultados matemáticos.

Nueva Estructura de Matemáticas SABER 11 ü Formulación y ejecución: Abarca desde el diseño hasta la ejecución de estrategias para el análisis o resolución de problemas que involucren información cuantitativa y objetos matemáticos. Implica modelar de forma abstracta situaciones reales, escoger y realizar procedimientos. Igualmente, evaluar modelos, comprender sus limitaciones, y ubicar o evaluar el resultado de un procedimiento o un cálculo en el contexto de un problema.

Nueva Estructura de Matemáticas SABER 11 ü Argumentación: Se refiere a la capacidad del evaluado de justificar afirmaciones a partir de las propiedades matemáticas o de la conceptualización de un modelo o un procedimiento. Verbalización de procedimientos y de propiedades de objetos matemáticos. Comunicar el razonamiento cuantitativo y matemático.

Nueva Estructura de Matemáticas SABER 11 Conocimientos genéricos Dimensión Contenidos Números racionales (las fracciones pueden representarse como razones, con decimales, o en términos de porcentajes). Operaciones aritméticas y composición de operadores (suma, resta, multiplicación y división). Orden de números e intervalos. Relaciones lineales. Gráficas estadísticas. Conversión de magnitudes físicas en el Sistema Internacional. Desigualdad triangular y teorema de Pitágoras. Proporcionalidad directa e inversa. Relaciones probabilísticas entre eventos complementarios o independientes. Promedio y rango estadístico. Conteos que utilizan principios de suma y multiplicación. Perímetros, áreas y volúmenes. Intersección, unión e inclusión entre conjuntos. Sistemas de coordenadas cartesianas bidimensionales Razonamiento cuantitativo Conocimientos no genéricos Sistemas de coordenadas cartesianas tridimensionales y polares. Propiedades de figuras geométricas simples (polígonos, pirámides, esferas) y teoremas de proporcionalidad de la geometría (Tales). Relaciones entre rectas, ángulos y medida angular. Características, propiedades y representaciones (algebraicas, gráficas y tabulares) de funciones polinómicas, racionales, exponenciales, trigonométricas, logarítmicas y radicales. Relaciones trigonométricas. Medidas de tendencia central y dispersión. Combinaciones y permutaciones. Sucesiones y límites. Matemáticas de media

Nueva Estructura de Lectura crítica SABER 11 ü Agrupa las pruebas actuales de Lenguaje y de Filosofía. • • La prueba de filosofía actual evalúa competencias relacionadas con la lectura crítica, se distingue por servirse de un tipo particular de textos. La nueva prueba evalúa competencias relacionadas con la lectura de diferentes textos, incluyendo textos filosóficos. ü Se encuentra alineada con SABER PRO. ü Se encuentra alineada parcialmente con las pruebas de Lenguaje de SABER 3, SABER 5, y SABER 9. ü Cubre los Estándares.

Nueva Estructura de Lectura crítica SABER 11 Las competencias que se van a evaluar son las siguientes: 1. Identifica y entiende los contenidos explícitos de un texto. ü Identifica las eventos, ideas, afirmaciones y demás elementos locales de un texto. ü Entiende los componentes explícitos de un texto: las palabras, las oraciones, las formas gramaticales básicas. 2. Comprende cómo se articulan las partes de un texto para darle un sentido global. ü Comprende la manera como se relacionan los elementos locales de un texto. ü Comprende la organización semántica y la estructura formal de un texto. Reflexiona a partir de un texto y evalúa su contenido. ü Relaciona el texto contenidos que no se encuentran en el texto. ü Reconoce estrategias discursivas y evalúa la validez y la veracidad del contenido presente en el texto. 3.

Nueva Estructura de Lectura crítica SABER 11 • • Con el fin de evaluar diferentes capacidades de lectura, es preciso considerar una buena variedad de textos. Los tipos de texto se dividen en textos continuos (que se leen de forma lineal y se organizan en oraciones y párrafos) y textos discontinuos (que no se leen de forma lineal y se organizan en matrices, cuadros, etc. ). Los textos que se pueden utilizar son los siguientes: ü Continuos: literario (novela, cuento, poesía, canción); expositivo; descriptivo; argumentativo; instructivo (manuales, reglamentos). ü Discontinuos: caricatura; etiqueta; infografía; tabla; diagrama; publicidad.

Nueva Estructura de SABER 11 Ciencias Naturales Articula las pruebas de Biología, de Física y de Química en torno a las competencias que evalúan en común. Se sirve de contextos específicos de cada una de las 3 áreas y de contextos mixtos. ü Cubre los estándares. ü Cubre lo evaluado actualmente en las pruebas de Biología, Física y Química. ü Incorpora el componente de Ciencia, Tecnología y Sociedad. ü Está alineada con SABER 5 y SABER 9 y parcialmente con el módulo de Pensamiento Científico de SABER PRO.

Nueva Estructura de Ciencias naturales SABER 11

Nueva Estructura de Ciencias naturales SABER 11 • Las competencias específicas en Ciencias Naturales buscan establecer la capacidad de los estudiantes de utilizar sus conocimientos básicos de las Ciencias Naturales para la comprensión y resolución de problemas. • También se evalúa la comprensión que tienen sobre las particularidades y alcances del conocimiento científico.

Nueva Estructura de Ciencias naturales SABER 11 a) Uso comprensivo del conocimiento científico: Capacidad para comprender y usar nociones, conceptos y teorías de las ciencias en la solución de problemas. Así como el establecer relaciones entre conceptos y conocimientos adquiridos sobre fenómenos que se observan con frecuencia. • Identificar las características de algunos fenómenos de la naturaleza basado en el análisis de información y conceptos propios del conocimiento científico. • Asociar fenómenos naturales conceptos propios del conocimiento científico.

Nueva Estructura de Ciencias naturales SABER 11 b) Explicación de fenómenos: Capacidad para construir explicaciones y comprender argumentos y modelos que den razón de fenómenos naturales. Así como el establecer la validez o coherencia de una afirmación o un argumento derivado de un fenómeno o problema científico. • Explicar cómo ocurren algunos fenómenos de la naturaleza basado en observaciones, en patrones y en conceptos propios del conocimiento científico. • Modelar fenómenos de la naturaleza basado en el análisis de variables, la relación entre dos o más conceptos del conocimiento científico y de la evidencia derivada de investigaciones científicas.

Nueva Estructura de Ciencias naturales SABER 11 c) Indagación: Capacidad para plantear preguntas y definir procedimientos adecuados para seleccionar e interpretar información relevante para dar respuesta a esas preguntas. Implica, entre otras cosas, plantear preguntas, hacer predicciones, identificar variables, realizar mediciones, organizar y analizar resultados, plantear conclusiones y comunicar apropiadamente sus resultados. • Comprender que a partir de la investigación científica se construyen explicaciones sobre el mundo natural. • Utilizar procedimientos para evaluar predicciones. • Observar y relacionar patrones en los datos para evaluar las predicciones. • Elaborar y proponer explicaciones para fenómenos de la naturaleza a partir de conocimientos científicos y de evidencias experimentales.

Nueva Estructura de Ciencias naturales SABER 11 a) Conocimientos del componente biológico. Involucra temáticas en homeóstasis en los seres vivos, la herencia y la reproducción, las relaciones ecológicas, la evolución y transformación de la vida en el planeta y la conservación de la energía. b) Conocimientos del componente físico. Involucra temáticas de la cinemática, la dinámica, la energía mecánica, las ondas, la energía térmica, el electromagnetismo, el campo gravitacional y la transformación y conservación de la energía. c) Conocimientos del componente químico. Involucra temáticas de los cambios químicos, el átomo, los tipos de enlace, propiedades de la materia, estequiometria, separación de mezclas, solubilidad, gases ideales y la transformación y conservación de la energía. d) Conocimientos del componente de Ciencia, Tecnología y Sociedad (CTS). Involucra temáticas interdisciplinares que el estudiante debe abordar con sus conocimientos y competencias en Ciencias. Las temáticas incluyen problemáticas globales como la deforestación, el efecto invernadero y la producción de transgénicos, o problemáticas locales como la explotación de recursos y el tratamiento de basuras. En estos casos no se asume un conocimiento previo de la problemática.

Nueva Estructura de SABER 11 Sociales y Competencias Ciudadanas Articula la evaluación de Sociales con la de Competencias Ciudadanas en torno a los conocimientos de la Constitución, el pensamiento social, la interpretación de fuentes, el análisis de perspectivas, el pensamiento sistémico y la reflexión crítica. ü ü Cubre los Estándares de ambas Competencias Ciudadanas está alineada con SABER 5, SABER 9 y SABER PRO.

Nueva Estructura de Competencias ciudadanas y Ciencias sociales SABER 11 Pensamiento Social • Comprender conceptos básicos de las ciencias sociales y establecer relaciones en el espacio y en el tiempo entre acontecimientos inscritos en procesos económicos, políticos y culturales fundamentales para la comprensión del presente. • Incluye los conceptos básicos o fundamentales de la Constitución política de Colombia como parte de la comprensión del presente, junto con el conocimiento de los fundamentos políticos, la estructura política, y el funcionamiento político de la sociedad actual, en diferentes niveles (la familia, el barrio, la localidad, la ciudad, el municipio, el departamento, el país, otros países, global).

Nueva Estructura de Competencias ciudadanas y Ciencias sociales SABER 11 Interpretación y análisis de perspectivas • Capacidad de reconstrucción y coordinación de perspectivas. Comprender e integrar diversas comprensiones de una misma realidad. • En la prueba se propone un análisis de documentos, de fuentes primarias, para evaluar la capacidad de relacionarlas con su contexto histórico y de analizar las perspectivas de distintos actores sociales sobre eventos históricos o hipotéticos. • Implica poder evaluar los usos de evidencias en argumentaciones y explicaciones históricas, es decir, poder analizar las posibilidades y limitaciones de una fuente y los usos de evidencias para apoyar argumentos o explicaciones históricas.

Nueva Estructura de Competencias ciudadanas y Ciencias sociales SABER 11 Pensamiento sistémico y reflexión crítica • Reconstruir y comprender el carácter sistémico de la realidad social (dimensional global-local, interdependiente, durable, transformable, estructurado). • Implica poder ubicar lo particular dentro de lo más general, moverse de lo general a lo particular y viceversa, y detectar y reconstruir lo que no es aparente o visible. • • Identificar relaciones de causa y consecuencia, relaciones de continuidad y transformación, articular dimensiones culturales, políticas, económicas, etc. Evaluar los usos, analizar las justificaciones y las consecuencias, de distintos modelos o planteamientos conceptuales de las ciencias sociales.