La mayoría de las evaluaciones requieren el uso de una herramienta de recopilación de datos: una encuesta u otro instrumento de recopilación de datos. Los evaluadores deben adoptar o adaptar las herramientas existentes o crear otras nuevas. Cualquiera de los métodos puede plantear desafíos: las herramientas que se han desarrollado para una evaluación pueden no ser adecuadas para otro, al menos no sin una modificación cuidadosa. Al mismo tiempo, la creación de nuevas herramientas requiere experiencia en medición y diseño de instrumentos.
¡Buena pregunta! Al considerar el uso de un instrumento, tenga en cuenta lo siguiente:
- ¿Qué mide el instrumento? Revise cómo los desarrolladores de instrumentos definen qué están midiendo. ¿Coincide exactamente con lo que quieres medir? También busque evidencia de validez de que el instrumento mida lo que propone medir. La evidencia de validez puede ser de revisiones de expertos, entrevistas en voz alta, análisis de factores y otras técnicas de validación.
- ¿Para qué audiencia se creó y probó el instrumento? Los instrumentos se crean para una audiencia en particular. Si su audiencia coincide con la que se diseñó un instrumento, genial. Si no, deberá hacer algunas pruebas para ver si el instrumento funciona para su audiencia antes de usarlo para una evaluación. Por ejemplo, una encuesta creada para adultos puede o no ser apropiada para los niños. No lo sabrás hasta que lo pruebes.
- ¿Para qué contexto o configuración es el instrumento? Un instrumento destinado a una configuración puede no funcionar bien en uno diferente. Por ejemplo, una encuesta desarrollada para medir una experiencia que los niños tienen en un aula escolar pueden no ser válidas para evaluar una experiencia que tienen dentro de un museo. Nuevamente, se requieren pruebas si se debe usar un instrumento en una nueva configuración.
- ¿Tengo la experiencia para poder juzgar la idoneidad y la calidad del instrumento? La experiencia con la evaluación y el diseño de instrumentos son necesarias para elegir con éxito y usar un instrumento «estar en el estante». Si no tiene esta experiencia, asegúrese de llamar a alguien que lo haga.
Los siguientes sitios web proporcionan herramientas e instrumentos que pueden usarse para evaluar la amplia gama de resultados abordados por proyectos de educación STEM informales, o que pueden servir como puntos de partida para la modificación.
- ¿Qué mide el instrumento? Revise cómo los desarrolladores de instrumentos definen qué están midiendo. ¿Coincide exactamente con lo que quieres medir? También busque evidencia de validez de que el instrumento mida lo que propone medir. La evidencia de validez puede ser de revisiones de expertos, entrevistas en voz alta, análisis de factores y otras técnicas de validación.
- ¿Para qué audiencia se creó y probó el instrumento? Los instrumentos se crean para una audiencia en particular. Si su audiencia coincide con la que se diseñó un instrumento, genial. Si no, deberá hacer algunas pruebas para ver si el instrumento funciona para su audiencia antes de usarlo para una evaluación. Por ejemplo, una encuesta creada para adultos puede o no ser apropiada para los niños. No lo sabrás hasta que lo pruebes.
- ¿Para qué contexto o configuración es el instrumento? Un instrumento destinado a una configuración puede no funcionar bien en uno diferente. Por ejemplo, una encuesta desarrollada para medir una experiencia que los niños tienen en un aula escolar pueden no ser válidas para evaluar una experiencia que tienen dentro de un museo. Nuevamente, se requieren pruebas si se debe usar un instrumento en una nueva configuración.
- ¿Tengo la experiencia para poder juzgar la idoneidad y la calidad del instrumento? La experiencia con la evaluación y el diseño de instrumentos son necesarias para elegir con éxito y usar un instrumento «estar en el estante». Si no tiene esta experiencia, asegúrese de llamar a alguien que lo haga.
El Centro para el Avance de la Educación Científica Informal (CAISE) cuenta con el apoyo de la National Science Foundation
(NSF) premia DRL-1612739 y DRL-1842633, con soporte previo bajo DRL-1212803 y DRL-0638981.
¿Cuáles son los instrumentos de la evaluación?
Es importante que los instrumentos de medición utilizados para fines de investigación se estandarizaran adecuadamente. La puntuación individual se puede comparar con las puntuaciones de otros en un grupo definido.
Las herramientas de evaluación sirven a una variedad de usos. Seleccionar una herramienta adecuada es la base para el resultado preciso de la evaluación.
Una herramienta de evaluación puede definirse como un medio sofisticado de diseñado de manera inteligente y científica para evaluar lo que se requiere.
Independientemente del tipo de herramienta utilizada o cómo se utilizarán los resultados de la evaluación, todos los tipos de evaluación deberían poseer ciertas características.
Las características más importantes de una buena herramienta de evaluación son
- Validez
- Fiabilidad
- Objetividad
- Usabilidad
La validez es la calidad del instrumento de recopilación de datos que permite medir lo que se supone que debe medir.
La validez se refiere al grado en que la prueba realmente mide lo que dice medir
- Validez
- Fiabilidad
- Objetividad
- Usabilidad
La fiabilidad se refiere a la consistencia de la medición, es decir, cuán consistentes son los resultados de la evaluación de una medición a otra.
La confiabilidad se refiere a la medida en que una prueba de evaluación es consistente en medir lo que pretende medir.
Si las mediciones no son consistentes en diferentes ocasiones o en diferentes muestras del mismo dominio de rendimiento, el evaluador puede tener poca confianza en los resultados.
¿Cuántos y cuáles son los instrumentos de evaluación?
Idea proporciona tres instrumentos principales para las calificaciones de la instrucción de los estudiantes. Estos instrumentos se presentan y se resumen a continuación. En este momento, el instrumento utilizado para evaluar un curso en FDU depende del estado de la facultad (por ejemplo, titular, seguimiento de tenencia, pista sin tenencia) y la longitud/tiempo del curso (por ejemplo, semestre tradicional versus no tradicional).
- El instructor presentó el material claramente y resumió los puntos principales.
- La calificación reflejó con precisión el rendimiento del estudiante.
- El instructor responde bien a las preguntas.
- Las preguntas del examen reflejan el contenido del curso.
- Las clases se reúnen regularmente y durante todo el período.
- Los materiales del curso (texto, lecturas, equipos…) fueron útiles.
Pregunta calificada en una escala de 1 (muy poco) a 7 (mucho):
- El instructor presentó el material claramente y resumió los puntos principales.
- La calificación reflejó con precisión el rendimiento del estudiante.
- El instructor responde bien a las preguntas.
- Las preguntas del examen reflejan el contenido del curso.
- Las clases se reúnen regularmente y durante todo el período.
- Los materiales del curso (texto, lecturas, equipos…) fueron útiles.
Pregunta calificada en una escala de 0 a 7 horas por semana:
- El instructor presentó el material claramente y resumió los puntos principales.
- La calificación reflejó con precisión el rendimiento del estudiante.
- El instructor responde bien a las preguntas.
- Las preguntas del examen reflejan el contenido del curso.
- Las clases se reúnen regularmente y durante todo el período.
- Los materiales del curso (texto, lecturas, equipos…) fueron útiles.
El instrumento de retroalimentación de diagnóstico es una herramienta integral que proporciona retroalimentación sumativa y formativa sobre el progreso de los estudiantes en los objetivos del curso relevante, los métodos de enseñanza del instructor y las impresiones generales del instructor y el curso.
Proporcionar una evaluación integral de la efectividad de la enseñanza
El instrumento de retroalimentación de diagnóstico se utiliza para evaluar:
- El instructor presentó el material claramente y resumió los puntos principales.
- La calificación reflejó con precisión el rendimiento del estudiante.
- El instructor responde bien a las preguntas.
- Las preguntas del examen reflejan el contenido del curso.
- Las clases se reúnen regularmente y durante todo el período.
- Los materiales del curso (texto, lecturas, equipos…) fueron útiles.
Artículos Relacionados:
