METODOLOGA PARA LA EVALUACIN DEL PROCESO DE ENSEANZA

METODOLOGÍA PARA LA EVALUACIÓN DEL PROCESO DE ENSEÑANZA APRENDIZAJE EN LA EDUCACION SUPERIOR POR COMPETENCIAS PROFESIONALES Mg. Lidia Lujan Acevedo

La evaluación de competencias es un proceso importante y complejo con varias etapas y procedimientos en cada una de ellas. Por ello es necesario establecer una metodología pertinente que permita la congruencia y consistencia de la evaluación a través de instrumentos válidos y confiables.

La metodología para la elaboración de instrumentos de evaluación de competencias consiste en elaborar una matriz de consistencia de todos los componentes de la norma de competencia, estableciendo indicadores que permitan elaborar los reactivos o preguntas según técnicas e instrumentos para el recojo de las evidencias requeridas.

CRITERIOS DE DESEMPEÑO • La evaluación por competencias se basa en criterios que son juicios técnicos y éticos que orientan el desempeño • Por lo tanto los criterios describen la calidad de los resultados de los desempeños, identifican los aspectos esenciales o críticos para el desempeño del elemento de competencia.

Expresión CRITERIOS DE DESEMPEÑO • Los criterios de desempeño se deben expresar con oraciones en las que se identifique claramente el: Desempeño crítico o el resultado crítico, y Enunciado evaluativo

EVIDENCIAS REQUERIDAS PARA LA EVALUACIÓN DE COMPETENCIAS • Pruebas claras y manifiestas de los conocimientos, habilidades, destrezas y actitudes que una persona posee y que determinan su competencia. • Evidencia significa demostrar o poner de manifiesto algo. Las evidencias como parte de los componentes de la competencia, refieren de manera precisa si el evaluado es capaz de realizar la función referida en la competencia de manera consistente. • ¿Por qué son valiosas? – – Demuestran el grado de alcance de la competencia Documentan la experiencia del evaluado. Conforman el portafolio del evaluado Son un insumo importante en el proceso de mejora

Los tipos de evidencias son: 1. De desempeño Son las habilidades, destrezas, conocimientos y actitudes aplicados en la ejecución de una función. 2. De Producto Es la demostración tangible, que resulta al ejecutar una función productiva, y su valoración se fundamenta en las condiciones del criterio de desempeño. 3. De Conocimiento Son los conocimientos que fundamentan la práctica; es el saber qué, por qué y para qué. Son teorías, principios, conceptos e información relevante que una persona aplica para lograr resultados en su desempeño laboral.

ELABORACIÓN DE INSTRUMENTOS PARA LA EVALUACION DE COMPETENCIAS El instrumento de evaluación es una herramienta destinada a documentar los aspectos a verificar y sus resultados, en relación con las habilidades, destrezas y conocimientos que poseen los estudiantes para desempeñar una función productiva, basándose en una norma de competencia. (SENA, Colombia).

Instrumentos de evaluación • Las evidencias de desempeño, son pruebas de la manera cómo el/la estudiante ejecuta los procedimientos y técnicas al realizar una función. Se evalúan principalmente mediante la observación sistemática basada en indicadores de desempeño que deben ser registradas rigurosamente; se puede complementar con entrevista y videos

Instrumentos de evaluación • Las evidencias de producto, son pruebas o productos específicos que dan cuenta de las finalidades de la competencia evaluada (resultado inmediato) en los que hay que considerar sus requerimientos de calidad

Instrumentos de evaluación • Las evidencias de conocimiento fundamentan la práctica; es el saber qué, por qué y para qué. Son teorías, principios, conceptos e información relevante que una persona aplica para lograr resultados en su desempeño.

Las técnicas evidencias más de usadas para desempeño recoger son: 1. la observación directa en ambiente real de trabajo, 2. la simulación de situaciones, 3. análisis de productos, análisis de documentos, y entrevistas.

Procedimiento para seleccionar las técnicas 1. Analizar globalmente las normas que componen la Carrera Profesional. 2. Analizar la norma de competencia y los elementos que la integran. 3. Estudiar los componentes normativos de cada elemento. • Identificar para cada evidencia requerida la(s) técnica(s) más adecuadas para su evaluación. • Precisar cuáles evidencias se pueden obtener en el ambiente real de trabajo, el sitio en que se pueden recoger, las que deben generarse por simulación u otras técnicas, y determine (si la norma no lo señala), las veces que se requiere ejecutar la misma actividad para recoger las evidencias. • Tener en cuenta aspectos claves: frecuencia, riesgo, complejidad, costos materiales.

Requisitos de los Instrumentos de evaluación • Validez: Un instrumento es considerado válido cuando sirve para evaluar lo que se pretende. En otras palabras: cuando la información que permite obtener es coherente con los criterios y evidencias de desempeño, de producto y de conocimiento estipulados en la norma. • Confiabilidad: Un instrumento es confiable cuando al ser aplicado por distintas personas para evaluar a un mismo postulante, se obtienen resultados semejantes en situaciones similares. Al ser utilizado por una persona para evaluar al mismo postulante, en diversas oportunidades, se obtienen resultados semejantes. • Representatividad: La relevancia de los distintos aspectos considerados en detrimento de los menos significativos. • Objetividad: independencia del juicio del evaluador en el registro de la información.

¿Quiénes elaboran los instrumentos de evaluación? a. Un equipo técnico conformado por expertos en la competencia correspondiente. b. Formados en la metodología de evaluación y certificación de competencias y • Formados en la elaboración de instrumentos de evaluación de competencias.

¿Cómo se elabora un instrumento de evaluación? • Identificando en la matriz de consistencia para la elaboración de instrumentos de evaluación, la técnica de evaluación y el tipo de instrumento según la evidencia a recoger.

Componentes del instrumento de evaluación 1. Información general para el proceso de evaluación 2. Introducción 3. Instrucciones de aplicación del instrumento. 4. Tabla de aplicación o cuerpo del instrumento. 5. Instrucciones para la calificación del instrumento. 6. Instrucciones para determinación del resultado. 7. Resultado 8. Retroalimentación al candidato. • Firmas correspondientes

Instrumentos de evaluación para el recojo de evidencias de desempeño y producto • La Lista de Chequeo Es un instrumento de evaluación que contiene una serie de enunciados afirmativos o interrogativos sobre los resultados (hechos, características o secuencia de acciones, entre otros) que debe demostrar una persona en su desempeño para ser considerada competente. Estos resultados están previstos en la norma de competencia y mediante la lista de chequeo se pretende constatar su presencia o ausencia.

Procedimiento de elaboración 1. Identificar los indicadores de desempeño establecidos en la matriz de consistencia para la elaboración de instrumentos de evaluación de competencias profesionales. 2. Según el orden secuencial de los indicadores redactar el reactivo (actividad del desempeño).

Recomendaciones: Tener muy en cuenta lo siguiente: 1. Los reactivos deben ser ordenados en la secuencia del proceso. 2. Los reactivos deben ser claramente observables. 3. Los reactivos deben ser explícitos, con redacción directa y precisa. 4. Los reactivos deben posibilitar sólo distinciones dicotómicas (SI/NO), (correcto /incorrecto). 5. La cantidad de reactivos es determinada por los indicadores de desempeño

INSTRUMENTO DE EVALUACIÓN DE CONOCIMIENTOS. CUESTIONARIO • El instrumento más utilizado para evaluar conocimientos es el cuestionario (CT) de preguntas. • Mateo (2000: 74) establece que suele entenderse por pregunta una declaración, asunto o tema sobre el que se va a evaluar. También se denomina ítem.

Estos pueden ser de dos tipos: • A) PRUEBAS DE DESARROLLO • Son aquellas en las que se solicita, a través de preguntas, el desarrollo por escrito de un discurso que evidencie el desarrollo de determinadas capacidades. Pueden ser de respuesta libre u orientada.

DIFICULTADES Una de las mayores dificultades de este tipo de pruebas es la calificación, pues pueden verse seriamente afectadas por la subjetividad del evaluador. Las siguientes sugerencias podrían contrarrestar tales efectos: Precisar en forma clara los aspectos que se tendrán en cuenta en la calificación y comunicarlos al evaluado antes del examen. Por ejemplo: exposición lógica de las ideas, concisión, adecuado uso de los conectores, entre otros. Explicitar claramente el tipo de respuesta (corta o de extensión libre). Dar pistas sobre lo que se espera que desarrolle el evaluado (que explique, que resuma, que presente contraejemplos, etc. ) Tener paciencia en la corrección y hacerlo respuesta por respuesta para manejar los mismos criterios de calificación. Este tipo de pruebas se puede utilizar para evaluar la interpretación de cuadros estadísticos, la comprensión lectora, el juicio crítico, la producción de textos, el manejo de información, entre otras capacidades.

Estos pueden ser de dos tipos: • LAS PRUEBAS OBJETIVAS Las pruebas objetivas son el tipo de pruebas escritas formadas por una serie de preguntas que sólo admiten una respuesta correcta y cuya calificación es siempre uniforme y precisa para todos los evaluados. Son las de uso más común debido a su facilidad de calificación y a la creencia de que eliminan toda posibilidad de subjetivismo. La clave para que las pruebas objetivas se conviertan en instrumentos eficaces de evaluación, es la calidad con que se elaboren pues de esa forma lograrán poner en juego un gran número de capacidades del evaluado.

Características objetivas: de las pruebas A)Objetiva La prueba conduce a mediciones independientes del evaluador. B)Confiable Arroja resultados consistentes. La prueba tiene precisión. C)Válida La prueba mide lo que pretende medir, es coherente a la competencia a evaluar.

Etapas para el desarrollo de la prueba escrita 1. - DISEÑO ¿Qué tipo de prueba va a ser? ¿Cuáles son los evaluación? (responden a competencia) 2. - ELABORACIÓN indicadores de los criterios de la ¿Cuál es mi tabla de especificaciones, cómo va a estar estructurado el instrumento? ¿Cómo se evaluará? Preguntas 3. - PILOTEO Casos prácticos Sometida a revisión por expertos. Aplicada en forma experimental. 4. - VALIDACIÓN 5. - CALIFICACIÓN Permite identificar y corregir dificultades y asegurase que van resultar replicables, precisas, completas, realistas y prácticas ¿Cómo se analizará que sea objetivo, valido y confiable? ¿Cuál será el criterio de calificación y la asignación de ésta?

Para la elaboración de este tipo de pruebas y potenciar sus beneficios podemos seguir Evitar aseveraciones muy generales. Evitar aseveraciones negativas Evitar oraciones demasiado largas y complejas. Evitar incluir dos ideas en una aseveración, a menos que se trate de apreciar una relación de causa a efecto. Si en la aseveración se incluye una opinión, debe indicarse a quién corresponde Calcular que las aseveraciones ciertas y las expresiones falsas tengan más o menos la misma longitud Para la elaboración de este tipo de pruebas y potenciar sus beneficios podemos seguir las siguientes recomendaciones:

TIPOS DE PRUEBAS OBJETIVAS DE RESPUESTA ALTERNATIVA Este tipo de pruebas plantean una serie de proposiciones que el evaluado debe marcar como verdaderas o falsas. Únicamente tendrá estas dos opciones para responder, de allí su nombre de respuesta alternativa. • Ejemplo: En relación a los procedimientos generales para la aplicación de los instrumentos de evaluación, según la guía de evaluación CONEAU, identifique las afirmaciones verdaderas y las falsas y marque la respuesta correcta. i. ii. El equipo evaluador debe estar conformado por un mínimo de dos evaluadores. ( ) Todos los instrumentos deben ser firmados por el postulante y al menos uno de los evaluadores. ( ) iii. La firma del postulante en el instrumento de evaluación es requisito para la apelación a que hubiere lugar. ( ) iv. Antes de comunicar los resultados intermedios y el resultado final de la evaluación, el equipo evaluador debe realizar una verificación de todo lo actuado. ( ) • a. V F F V b. V V V F c. V F V V d. V V F V

INDICADORES DE EVALUACIÓN • Son definidos como medidas objetivas de los sucesos del proceso que a su vez permiten evaluar si se está cumpliendo o no, o en qué medida, los criterios de evaluación que se han elaborado.

Ventajas Los indicadores de evaluación describen las habilidades, conocimientos, y actitudes, destrezas que se desean evaluar. Hacen observable a los criterios del elemento de competencia permitiendo valorar el desempeño del profesional con objetividad al recoger las evidencias. Permite la elaboración de instrumentos pertinentes. Permiten verificar el cumplimiento de los criterios de evaluación (condiciones de desempeño).

Estructura de un indicador • Capacidad específica (acción) que, generalmente, hace alusión a una operación mental. • Contenido hace posible el desarrollo de la capacidad específica. Responde a la pregunta ¿qué es lo que. . . (la capacidad específica)? La respuesta es el contenido. • Condición en el que se evidencia el desarrollo de la capacidad en productos tangibles. Ejemplo: • • • • Reconoce la organización del expediente del evaluado para el informe final de la evaluación, según pautas establecidas. ¿Qué hace el evaluado? Capacidad específica o acción= Reconoce ¿Qué reconoce el evaluado? Contenido=La organización del expediente del evaluado ¿Cuál es la condición/producto? Condición de calidad = según pautas establecidas para la organización de expediente del postulante a certificación