Loading...
Lecture 3 Test 1
Quiz by Anna Shapovalova
Customize this quiz to suit your class
Instantly translate to 100+ languages
Tag the questions with any skills you have. Your dashboard will track each student's mastery of each skill.
Give this quiz to my class
Who is Arthur likely to have been historically?
A Celtic/Roman leader who resisted Anglo-Saxon invasions
A French troubadour
A Norman king who conquered Britain
A fictional magician from the 15th century
Which of these is NOT part of the Arthurian legends?
Lancelot
Queen Guinevere
Merlin
Robin Hood
Who is Arthur likely to have been historically?
Which of these is NOT part of the Arthurian legends?
A medieval romance typically includes:
What manuscript preserves Sir Gawain and the Green Knight?
The term chivalry originates from the French word for:
Under the code of chivalry, knights swore to:
Courtly love in medieval romances often involved:
Who introduced the concept of courtly love to Britain?
The Green Knight in Sir Gawain and the Green Knight symbolizes:
What test does Sir Gawain face?
Which literary technique is prominent in Sir Gawain and the Green Knight?
Fabliaux typically feature:
Ballads originated from:
A key feature of English ballads is:
Robin Hood’s band was called:
Robin Hood primarily opposed:
Robin Hood’s closest companion was:
The Pearl Poet is named after:
Medieval romances reflect:
The refrain in ballads helped:
Control de lectura Capítulo I: Antes que nada… (Preguntas 1–50) 1. ¿Qué es una técnica de investigación? Respuesta: Procedimiento sistemático para recopilar y analizar información. 2. ¿Qué es un instrumento de investigación? Respuesta: Herramienta específica para recolectar y analizar datos. 3. Ejemplo de técnica de investigación. Respuesta: Encuesta. 4. Ejemplo de instrumento de investigación. Respuesta: Cuestionario. 5. ¿Qué diferencia hay entre técnica e instrumento? Respuesta: La técnica es el procedimiento; el instrumento es la herramienta. 6. ¿Qué diferencia hay entre método e instrumento? Respuesta: El método es el proceso completo; el instrumento es una parte de este. 7. ¿Para qué sirve un instrumento de investigación? Respuesta: Para recopilar datos precisos y confiables. 8. ¿Todos los instrumentos se validan? Respuesta: No, pero es recomendable. 9. ¿Qué es la validez de un instrumento? Respuesta: Capacidad para medir lo que se propone. 10. ¿Qué es la confiabilidad de un instrumento? Respuesta: Capacidad de obtener resultados consistentes. 11. ¿Qué es la validez de contenido? Respuesta: Cobertura adecuada del tema de estudio. 12. ¿Qué es la validez de criterio? Respuesta: Relación con otras medidas conocidas. 13. ¿Qué es la validez concurrente? Respuesta: Coincidencia con otros instrumentos similares. 14. ¿Qué es la validez predictiva? Respuesta: Capacidad para anticipar resultados futuros. 15. ¿Qué prueba mide confiabilidad? Respuesta: Prueba-retest. 16. ¿Qué tipo de análisis evalúa la estructura del instrumento? Respuesta: Análisis factorial. 17. ¿Qué diferencia hay entre instrumento cuantitativo y cualitativo? Respuesta: El cuantitativo mide en números; el cualitativo describe. 18. Ejemplo de instrumento cuantitativo. Respuesta: Escala de Likert. 19. Ejemplo de instrumento cualitativo. Respuesta: Entrevista abierta. 20. ¿Qué son los instrumentos mixtos? Respuesta: Combinan datos cuantitativos y cualitativos. 21. Ejemplo de instrumento mixto. Respuesta: Encuesta con preguntas cerradas y abiertas. 22. ¿Qué es la recolección de datos? Respuesta: Proceso de obtención de información. 23. Menciona una técnica de recolección de datos. Respuesta: Observación. 24. ¿Qué asegura la validez de un resultado? Respuesta: La precisión del instrumento. 25. ¿Qué asegura la confiabilidad de un resultado? Respuesta: La consistencia del instrumento. 26. ¿Qué técnica se basa en la percepción directa del investigador? Respuesta: Observación participante. 27. ¿Qué se usa para medir variables numéricas? Respuesta: Instrumentos cuantitativos. 28. ¿Qué permite una entrevista abierta? Respuesta: Ampliar las respuestas libremente. 29. ¿Cuál es el primer paso en el método científico? Respuesta: Identificación del problema. 30. ¿Qué garantiza que el instrumento mida igual en diferentes momentos? Respuesta: Confiabilidad. 31. ¿Qué tipo de instrumento se usa para comparar poblaciones? Respuesta: Cuestionario. 32. ¿Qué se necesita para aplicar bien un instrumento? Respuesta: Elegirlo adecuadamente según el objetivo. 33. ¿Qué puede incluir un instrumento? Respuesta: Escalas, fichas, pruebas. 34. ¿Qué hace el análisis estadístico en la validación? Respuesta: Evalúa la precisión y coherencia. 35. ¿Qué se busca con la recolección ética de datos? Respuesta: Respeto y confidencialidad. 36. ¿Qué implica la observación directa? Respuesta: Ver al sujeto en su entorno. 37. ¿Qué implica la observación indirecta? Respuesta: Uso de fotografías, grabaciones o planos. 38. ¿Qué se debe evitar en las preguntas del instrumento? Respuesta: Sesgo. 39. ¿Qué permite un instrumento validado? Respuesta: Resultados confiables. 40. ¿Qué garantiza la consistencia de los datos? Respuesta: Instrumentos estandarizados. 41. ¿Qué analiza el análisis de fiabilidad? Respuesta: La estabilidad de los resultados. 42. ¿Qué mide la validez de criterio? Respuesta: Relación con otros indicadores. 43. ¿Qué evalúa el análisis factorial? Respuesta: Coherencia entre los ítems. 44. ¿Qué significa que un instrumento sea fiable? Respuesta: Que da los mismos resultados en condiciones similares. 45. ¿Qué relación hay entre confiabilidad y validez? Respuesta: Ambas son necesarias para resultados útiles. 46. ¿Qué variable usan los instrumentos cuantitativos? Respuesta: Numéricas. 47. ¿Qué variable usan los instrumentos cualitativos? Respuesta: Narrativas o descriptivas. 48. ¿Qué tipo de instrumento es una prueba estandarizada? Respuesta: Cuantitativo. 49. ¿Qué diferencia hay entre validez concurrente y predictiva? Respuesta: La concurrente compara con otro instrumento; la predictiva anticipa resultados. 50. ¿Qué deben incluir los instrumentos mixtos? Respuesta: Elementos cualitativos y cuantitativos. ________________________________________ ¿Deseas que continúe con el siguiente bloque de 100 preguntas del Capítulo II (Técnicas de investigación) o prefieres ajustar el estilo, la cantidad o el formato? Tú dijiste: si continua para todos los bloques ChatGPT Plus Perfecto. Continuaremos con bloques de 100 preguntas y respuestas breves de control de lectura, basadas en el contenido del libro "Metodología de la investigación: Técnicas e instrumentos de investigación". ________________________________________ 📘 Capítulo II: Técnicas de investigación (Preguntas 51–150) 🔍 Observación (51–70) 51. ¿Qué es la técnica de observación? R: Método para registrar y analizar comportamientos en su entorno. 52. ¿En qué campos se utiliza la observación? R: Psicología, sociología, educación, antropología. 53. ¿Qué observa la técnica de observación? R: Conductas, actitudes, eventos. 54. ¿Qué tipos de observación existen? R: Participante y no participante. 55. ¿Qué implica la observación participante? R: El investigador se involucra en la actividad. 56. ¿Qué implica la observación no participante? R: El investigador no se involucra. 57. Ventaja de la observación directa. R: Recoge datos de primera mano. 58. ¿Qué sesgo puede tener la observación? R: Subjetividad del observador. 59. ¿Qué se recomienda para minimizar el sesgo? R: Técnicas rigurosas y sistemáticas. 60. ¿Es útil para actitudes y opiniones? R: Sí, porque observa comportamiento real. 🗳 Encuesta (71–90) 71. ¿Qué es una encuesta? R: Técnica para obtener información de un grupo. 72. ¿Cómo se aplican las encuestas? R: Cuestionarios presenciales, en línea o telefónicos. 73. ¿Qué tipo de datos recoge una encuesta? R: Cuantitativos o cualitativos. 74. ¿Cuál es el soporte común de una encuesta? R: Cuestionario. 75. ¿Qué requiere una encuesta cuantitativa? R: Datos numéricos y prueba de hipótesis. 76. ¿Qué debe tener el instrumento? R: Confiabilidad y validez. 77. ¿Cómo se procesan las preguntas abiertas? R: Se agrupan por categorías. 78. ¿Qué técnicas estadísticas se usan? R: Descriptiva e inferencial. 79. ¿Qué se recomienda para interpretar resultados? R: Tablas de frecuencia y gráficos. 80. ¿Qué ventajas tiene la encuesta? R: Rapidez, amplitud de muestra, análisis estadístico. 🗣 Entrevista (91–110) 91. ¿Qué es una entrevista? R: Técnica de interacción directa para recolectar datos. 92. ¿Cuántos tipos de entrevista hay? R: Estructurada, semiestructurada y no estructurada. 93. ¿Qué es una entrevista estructurada? R: Preguntas fijas en orden específico. 94. ¿Qué permite la entrevista no estructurada? R: Respuestas libres y espontáneas. 95. ¿Qué ventaja tiene la entrevista? R: Profundiza en opiniones. 96. ¿Qué sesgo puede haber en entrevistas? R: Subjetividad del entrevistador. 97. ¿Qué debe evitarse en una entrevista? R: Preguntas discriminatorias. 98. ¿Qué medio puede usarse para entrevistas? R: Teléfono, correo electrónico, plataformas online. 99. ¿Qué es una guía de entrevista? R: Documento con temas y preguntas clave. 100. ¿Qué papel tiene el entrevistador? R: Facilitar, escuchar y registrar sin sesgo. 📄 Análisis de documentos y discurso (111–130) 101. ¿Qué es el análisis documental? R: Revisión de textos escritos para obtener información. 102. ¿Qué documentos pueden analizarse? R: Informes, actas, libros, publicaciones. 103. ¿Qué aporta esta técnica? R: Evidencia histórica y comparativa. 104. ¿Qué se busca en el análisis? R: Patrones, coincidencias, contradicciones. 105. ¿Qué es el análisis de discurso? R: Estudio del lenguaje en contexto. 106. ¿Qué se analiza en el discurso? R: Palabras, significados, intenciones. 107. ¿Dónde se aplica esta técnica? R: Política, medios, educación, sociología. 108. ¿Qué método puede apoyar el análisis de discurso? R: Codificación temática. 109. ¿Qué debe evitarse en el análisis documental? R: Interpretación subjetiva. 110. ¿Cuál es una ventaja clave? R: Bajo costo y acceso a fuentes históricas. 🧪 Test, Historia de vida y Focus Group (131–150) 131. ¿Qué es un test? R: Prueba para evaluar habilidades o características. 132. ¿Qué tipo de test hay? R: Psicológicos, educativos, clínicos. 133. ¿Qué debe tener un buen test? R: Validez y confiabilidad. 134. ¿Qué es la historia de vida? R: Técnica cualitativa centrada en la experiencia personal. 135. ¿Qué recopila la historia de vida? R: Narración detallada de eventos significativos. 136. ¿Qué técnica la complementa? R: Entrevista. 137. ¿Qué permite el enfoque de historia de vida? R: Comprensión profunda del contexto. 138. ¿Qué es un grupo focal? R: Reunión de personas para discutir un tema. 139. ¿Cuántos tipos de focus group hay? R: Tradicional, en línea, mixto, doble, monógrafo. 140. ¿Qué función tiene el moderador? R: Guiar el diálogo sin influir en opiniones. 141. ¿Qué se hace con los resultados? R: Se graban, transcriben y analizan. 142. ¿Qué tipo de preguntas se usan? R: Abiertas. 143. ¿Para qué se usa un grupo focal? R: Conocer opiniones o reacciones sobre un tema. 144. ¿Qué ventaja tiene el focus group? R: Permite interacción y retroalimentación entre participantes. 145. ¿Qué debe evitarse en el grupo focal? R: Opiniones dominantes. 146. ¿Qué se debe definir antes del grupo focal? R: El problema de investigación. 147. ¿Cómo se elige a los participantes? R: Según criterios relacionados con el tema. 148. ¿Qué recursos se necesitan? R: Espacio, grabadora, guía, consentimiento. 149. ¿Qué tipo de análisis se aplica después? R: Análisis cualitativo del contenido. 150. ¿Qué permite conocer el grupo focal? R: Expectativas, percepciones y emociones del grupo. ________________________________________ ¿Deseas que continúe con el siguiente bloque (151–250) sobre el Capítulo III: Instrumentos de investigación? Puedo incluir cuestionario, rúbrica, fichas, escalas y más. Tú dijiste: si por su puesto ChatGPT Plus Perfecto. Aquí tienes el siguiente bloque: ________________________________________ 📘 Capítulo III: Instrumentos de investigación (Preguntas 151–250) 📝 Cuestionario (151–180) 151. ¿Qué es un cuestionario? R: Instrumento para recopilar información mediante preguntas. 152. ¿Para qué se usa el cuestionario? R: Recoger datos de una muestra o población. 153. ¿Qué debe tener un buen cuestionario? R: Preguntas claras, ordenadas y no sesgadas. 154. ¿Qué garantiza la confidencialidad? R: Protección de datos personales. 155. ¿Qué tipo de escalas se pueden usar en un cuestionario? R: Likert o diferencial semántico. 156. ¿Qué es un cuestionario dicotómico? R: Preguntas con dos opciones, como Sí/No. 157. ¿Qué es un cuestionario politómico? R: Preguntas con tres o más respuestas. 158. ¿Qué es una pregunta abierta? R: Pregunta sin respuestas predefinidas. 159. ¿Qué es una pregunta cerrada? R: Pregunta con opciones predeterminadas. 160. ¿Cuál es una ventaja del cuestionario? R: Permite recolectar datos de forma rápida. 161. ¿Qué limita un cuestionario cerrado? R: La profundidad de las respuestas. 162. ¿Cómo se aplica un cuestionario? R: En persona, por correo, en línea. 163. ¿Qué tipo de datos proporciona? R: Cuantitativos o cualitativos. 164. ¿Qué tipo de análisis requiere? R: Estadístico para los cuantitativos. 165. ¿Qué es una escala tipo Likert? R: Escala que mide el grado de acuerdo o frecuencia. 166. ¿Qué es una escala diferencial semántica? R: Escala que mide opiniones entre dos extremos. 167. ¿Qué debe evitar un cuestionario? R: Ambigüedad y doble sentido. 168. ¿Qué tipo de diseño debe tener? R: Coherente, lógico y temáticamente agrupado. 169. ¿Qué garantiza la validez del cuestionario? R: Que mida lo que debe medir. 170. ¿Qué asegura la confiabilidad? R: Resultados consistentes en diferentes momentos. 171. ¿Qué es un cuestionario de perfil? R: Recolecta información demográfica. 172. ¿Qué es un cuestionario de evaluación? R: Mide desempeño o progreso. 173. ¿Qué es un cuestionario de satisfacción? R: Evalúa percepción de usuarios o clientes. 174. ¿Qué se necesita para validar un cuestionario? R: Pruebas estadísticas y revisión de expertos. 175. ¿Qué es un cuestionario autoaplicado? R: Lo responde el participante sin ayuda. 176. ¿Qué tipo de escalas usa un cuestionario cuantitativo? R: Numéricas, como la escala Likert. 177. ¿Qué tipo de escalas usa un cualitativo? R: Preguntas abiertas o categóricas. 178. ¿Qué facilita la tabulación de datos? R: Preguntas cerradas. 179. ¿Qué mejora la profundidad del análisis? R: Preguntas abiertas. 180. ¿Qué se debe pilotar antes de aplicar? R: El cuestionario. ________________________________________ 📊 Rúbrica de evaluación (181–200) 181. ¿Qué es una rúbrica? R: Instrumento para evaluar con criterios definidos. 182. ¿Qué contiene una rúbrica? R: Categorías, niveles de logro y descripciones. 183. ¿Qué evalúa una rúbrica de desempeño? R: Calidad en la ejecución de una tarea. 184. ¿Qué evalúa una rúbrica de producto? R: El resultado final del trabajo. 185. ¿Qué evalúa una rúbrica de proceso? R: Los pasos seguidos para desarrollar una tarea. 186. ¿Qué evalúa una rúbrica de participación? R: Involucramiento en actividades grupales. 187. ¿Qué evalúa una rúbrica de habilidades? R: Capacidades como trabajo en equipo o creatividad. 188. ¿Cuál es una ventaja de la rúbrica? R: Claridad en los criterios de evaluación. 189. ¿Qué fomenta el uso de rúbricas? R: Transparencia y retroalimentación. 190. ¿Quién puede usar una rúbrica? R: Docentes, evaluadores o el propio estudiante. 191. ¿Qué debe evitarse en una rúbrica? R: Criterios vagos o subjetivos. 192. ¿Qué permite una rúbrica bien construida? R: Evaluación objetiva. 193. ¿Qué hace una rúbrica con los aprendizajes? R: Los evidencia y sistematiza. 194. ¿Qué relación tiene con la técnica de observación? R: Es un instrumento de esta técnica. 195. ¿Cómo deben ser los niveles de logro? R: Claros y diferenciados. 196. ¿Qué es un descriptor en una rúbrica? R: Definición específica de cada nivel. 197. ¿Qué se necesita para diseñar una rúbrica? R: Claridad de objetivos y criterios. 198. ¿Qué aporta una rúbrica al proceso de evaluación? R: Estandarización. 199. ¿Qué mejora en el estudiante una buena rúbrica? R: Comprensión de expectativas. 200. ¿Qué fortalece en el docente? R: Capacidad de evaluación justa. ________________________________________ En el siguiente bloque (251–350) incluiré: • Fichas de observación • Fichas de entrevista • Escalas de valoración • Pruebas objetivas • Fichas de análisis documental y de chequeo • Instrumentos mixtos ¿Continuamos con ese bloque ahora? Tú dijiste: continua ChatGPT Plus Perfecto. Continuamos con el siguiente bloque de 100 preguntas del Capítulo III: Instrumentos de investigación, ahora con los instrumentos restantes. ________________________________________ 📘 Capítulo III: Instrumentos de investigación (Preguntas 251–350) 👁 Ficha de observación (251–270) 251. ¿Qué es una ficha de observación? R: Instrumento para registrar comportamientos observados. 252. ¿Qué campos la utilizan? R: Educación, psicología, ciencias sociales. 253. ¿Qué se anota en la ficha? R: Comportamientos, fechas, contexto. 254. ¿Qué ventaja ofrece? R: Registro sistemático y objetivo. 255. ¿Qué puede limitar su efectividad? R: Mal diseño o sesgo del observador. 256. ¿Qué ayuda a reducir el sesgo? R: Categorías claras y criterios definidos. 257. ¿Qué tipo de ficha se usa para conducta? R: Ficha de observación de comportamiento. 258. ¿Qué ficha se usa en el aula? R: Ficha de desempeño o aprendizaje. 259. ¿Qué se observa en una ficha naturalista? R: Animales o personas en su entorno natural. 260. ¿Qué debe incluir una ficha? R: Fecha, hora, lugar, observación, observador. 🎙 Ficha de entrevista (271–290) 271. ¿Qué es una ficha de entrevista? R: Guía para registrar respuestas en una entrevista. 272. ¿Qué contiene? R: Datos del entrevistado, preguntas y respuestas. 273. ¿Qué tipos existen? R: Abierta, cerrada y semiestructurada. 274. ¿Qué garantiza su uso? R: Registro ordenado y coherente. 275. ¿Qué evita una ficha bien diseñada? R: Omisión o tergiversación de respuestas. 276. ¿Qué permite la ficha abierta? R: Respuestas libres y extensas. 277. ¿Qué exige la ficha estructurada? R: Preguntas fijas y respuestas codificadas. 278. ¿Qué se recomienda al aplicarla? R: Escuchar activamente y anotar con fidelidad. 279. ¿Qué instrumento acompaña esta ficha? R: Grabadora (opcional) para respaldo. 280. ¿Qué facilita el análisis posterior? R: Transcripción clara y segmentación por temas. 📁 Ficha de análisis de documentos (291–310) 291. ¿Qué es esta ficha? R: Herramienta para registrar información extraída de documentos. 292. ¿Qué documentos se pueden analizar? R: Informes, leyes, artículos, cartas. 293. ¿Qué datos se registran? R: Autor, fecha, tema, citas relevantes. 294. ¿Qué tipo de análisis se hace? R: Categorización temática y crítica. 295. ¿Qué ventaja tiene? R: Acceso a información histórica o institucional. 296. ¿Qué riesgo existe? R: Subjetividad en la interpretación. 297. ¿Qué tipo de fuente se recomienda? R: Confiable, actual y pertinente. 298. ¿Qué ayuda a validar el análisis? R: Triangulación con otros instrumentos. 299. ¿Qué debe evitarse? R: Inferencias sin fundamento. 300. ¿Qué mejora el rigor del análisis? R: Sistematización y codificación clara. 📈 Escala de valoración (311–330) 311. ¿Qué es una escala de valoración? R: Instrumento que mide el nivel de una variable. 312. ¿Qué tipo de respuestas tiene? R: Categorizadas (como "siempre, a veces, nunca"). 313. ¿Qué mide una escala tipo Likert? R: Frecuencia, acuerdo o intensidad. 314. ¿Qué ventaja tiene? R: Permite análisis cuantitativo de actitudes. 315. ¿Qué aspecto debe cuidar? R: Redacción clara y unidimensional de los ítems. 316. ¿Qué evita el uso de escalas numéricas? R: Ambigüedad en la interpretación. 317. ¿Qué permite una escala con 5 opciones? R: Neutralidad en la respuesta central. 318. ¿Qué se analiza con la escala? R: Tendencias y niveles de respuesta. 319. ¿Qué se requiere para su uso? R: Validación y confiabilidad estadística. 320. ¿Dónde se aplican comúnmente? R: Encuestas, evaluaciones educativas, psicología. 🧪 Prueba objetiva (331–340) 331. ¿Qué es una prueba objetiva? R: Instrumento con respuestas únicas correctas. 332. ¿Qué tipo de preguntas incluye? R: Opción múltiple, verdadero/falso, emparejamiento. 333. ¿Qué ventaja tiene? R: Facilita corrección automática. 334. ¿Qué se recomienda en su diseño? R: Claridad, precisión y nivel de dificultad adecuado. 335. ¿Qué mide esta prueba? R: Conocimientos específicos o habilidades. 336. ¿Qué evita una buena redacción? R: Ambigüedad y confusión en la respuesta. 337. ¿Qué se debe evitar en las opciones? R: Distractores poco plausibles. 338. ¿Qué se analiza después de aplicar? R: Resultados y patrones de error. 339. ¿Qué prueba puede validarla? R: Análisis de ítems. 340. ¿Qué fortalece su confiabilidad? R: Coherencia interna y revisión por pares. ✅ Ficha de comprobación (Check List) (341–345) 341. ¿Qué es una ficha de chequeo? R: Lista para marcar cumplimiento de aspectos observables. 342. ¿Qué se marca en ella? R: Presencia o ausencia de indicadores. 343. ¿Qué ventaja ofrece? R: Rapidez y claridad en la observación. 344. ¿Qué instrumento la usa? R: Observación directa o sistemática. 345. ¿Qué debe tener? R: Indicadores precisos y relevantes. ⚖️ Instrumentos mixtos (346–350) 346. ¿Qué son los instrumentos mixtos? R: Combinan preguntas cerradas y abiertas. 347. ¿Qué permiten analizar? R: Datos cuantitativos y cualitativos. 348. Ejemplo de instrumento mixto. R: Encuesta con escala Likert y preguntas abiertas. 349. ¿Qué ventaja tiene? R: Información más rica y contextualizada. 350. ¿Qué exige su análisis? R: Métodos estadísticos y análisis de contenido. ________________________________________ ¿Deseas que continúe con el último bloque (351–500) incluyendo temas integradores, aplicación práctica, validación, confiabilidad, análisis de resultados y ejemplos de uso de instrumentos según el texto? Tú dijiste: continua ChatGPT Plus Perfecto. A continuación te presento el bloque final de preguntas, del número 351 al 500, que abordan temas integradores, validación, confiabilidad, aplicación práctica, análisis de resultados y ejemplos de uso, siempre basados en el libro Metodología de la investigación: Técnicas e instrumentos de investigación. ________________________________________ 📘 Aplicación, validación, análisis y uso práctico (Preguntas 351–500) 🔬 Validación y confiabilidad (351–380) 351. ¿Qué es la validación de un instrumento? R: Proceso para asegurar que mide lo que debe medir. 352. ¿Qué es la confiabilidad de un instrumento? R: Estabilidad y consistencia de sus resultados. 353. ¿Qué prueba mide la confiabilidad en el tiempo? R: Prueba-retest. 354. ¿Qué mide el análisis de consistencia interna? R: Homogeneidad de los ítems. 355. ¿Qué técnica evalúa la estructura interna? R: Análisis factorial. 356. ¿Qué es la validez de contenido? R: Cubre adecuadamente el tema estudiado. 357. ¿Qué es la validez de criterio? R: Relación con resultados conocidos. 358. ¿Qué es la validez predictiva? R: Predice eventos futuros. 359. ¿Qué es la validez concurrente? R: Coincide con otros instrumentos similares. 360. ¿Qué tipo de validez se evalúa con expertos? R: Validez de contenido. 361. ¿Qué instrumento requiere validación previa? R: Cuestionario tipo escala. 362. ¿Qué implica validar empíricamente? R: Aplicar prueba piloto y analizar resultados. 363. ¿Qué se busca con la validación? R: Confianza en los resultados obtenidos. 364. ¿Cuándo se debe validar un instrumento? R: Antes de su aplicación definitiva. 365. ¿Qué garantiza la confiabilidad? R: Resultados estables en condiciones similares. 366. ¿Qué es un coeficiente alfa de Cronbach? R: Mide la consistencia interna de un instrumento. 367. ¿Qué valor mínimo es aceptable en el alfa? R: 0.70 368. ¿Qué instrumentos deben ser confiables? R: Todos los que se usen para tomar decisiones. 369. ¿Qué pasa si un instrumento no es válido? R: Los resultados pueden ser erróneos. 370. ¿Qué pasa si un instrumento no es confiable? R: Los resultados serán inconsistentes. 371. ¿Qué análisis combina confiabilidad y validez? R: Análisis factorial confirmatorio. 372. ¿Qué instrumento se prueba con análisis de ítems? R: Pruebas objetivas. 373. ¿Qué se debe revisar en cada ítem? R: Claridad, relevancia, comprensión. 374. ¿Qué asegura el juicio de expertos? R: Validez de contenido. 375. ¿Qué implica una prueba piloto? R: Aplicar el instrumento a una muestra pequeña. 376. ¿Qué se hace después de la prueba piloto? R: Ajustar ítems según resultados. 377. ¿Qué análisis requiere una escala Likert? R: Coeficiente de confiabilidad. 378. ¿Qué prueba compara instrumentos? R: Correlación entre instrumentos similares. 379. ¿Qué se usa para validar predictivamente? R: Regresión o correlación. 380. ¿Qué se hace si un ítem tiene baja correlación? R: Se modifica o elimina. ________________________________________ 🧪 Aplicación práctica y ejemplos (381–420) 381. ¿Qué instrumento se usa para medir actitudes? R: Escala de valoración tipo Likert. 382. ¿Qué técnica usa un cuestionario? R: Encuesta. 383. ¿Qué instrumento se usa para observar clase? R: Ficha de observación. 384. ¿Qué instrumento se usa en grupos focales? R: Guía o ficha de entrevista. 385. ¿Qué técnica requiere un moderador? R: Grupo focal. 386. ¿Qué instrumento se usa para analizar textos? R: Ficha de análisis de documentos. 387. ¿Qué técnica usa más la historia de vida? R: Entrevista a profundidad. 388. ¿Qué instrumento es útil en evaluaciones docentes? R: Rúbrica de desempeño. 389. ¿Qué técnica es mejor para explorar opiniones? R: Entrevista abierta. 390. ¿Qué instrumento permite codificación numérica? R: Cuestionario politómico. 391. ¿Qué técnica se usa para comparar poblaciones? R: Encuesta con escalas. 392. ¿Qué instrumento se usa en pruebas de ingreso? R: Test de rendimiento. 393. ¿Qué técnica permite estudiar interacciones sociales? R: Observación participante. 394. ¿Qué instrumento se usa en análisis cuantitativo? R: Escala Likert. 395. ¿Qué se usa para evaluar una presentación? R: Rúbrica de evaluación oral. 396. ¿Qué instrumento evalúa variables emocionales? R: Cuestionario con indicadores psicológicos. 397. ¿Qué técnica recoge experiencias de vida? R: Historia de vida. 398. ¿Qué técnica puede usarse en entornos educativos? R: Observación sistemática. 399. ¿Qué instrumento permite autoevaluación? R: Escala de valoración personal. 400. ¿Qué técnica usa entrevistas semiestructuradas? R: Investigación cualitativa. 401. ¿Qué se requiere antes de aplicar un test? R: Instrucciones claras y control de ambiente. 402. ¿Qué puede invalidar un instrumento? R: Preguntas sesgadas. 403. ¿Qué ayuda a mejorar la aplicación del instrumento? R: Capacitación del aplicador. 404. ¿Qué debe tener una ficha de chequeo? R: Indicadores observables y verificables. 405. ¿Qué técnica es útil para explorar lenguaje? R: Análisis de discurso. 406. ¿Qué instrumento puede tener preguntas dicotómicas? R: Cuestionario cerrado. 407. ¿Qué permite comparar datos entre grupos? R: Escalas estandarizadas. 408. ¿Qué instrumento se adapta mejor a encuestas en línea? R: Cuestionario digital. 409. ¿Qué se recomienda al transcribir entrevistas? R: Textualidad y fidelidad. 410. ¿Qué permite una ficha de entrevista semiestructurada? R: Flexibilidad y orientación temática. 411. ¿Qué mejora la claridad del instrumento? R: Revisión lingüística. 412. ¿Qué aporta la observación sistemática? R: Datos detallados con categorías previas. 413. ¿Qué se hace tras aplicar el instrumento? R: Sistematizar y analizar los datos. 414. ¿Qué técnica facilita la triangulación? R: Uso de múltiples instrumentos. 415. ¿Qué mejora la calidad de la recolección? R: Uso combinado de técnicas. 416. ¿Qué garantiza la ética en la aplicación? R: Consentimiento informado. 417. ¿Qué se debe hacer si un instrumento falla? R: Revisar y rediseñar. 418. ¿Qué evalúa una rúbrica de proceso? R: Etapas del trabajo realizado. 419. ¿Qué instrumento combina cuali y cuantitativo? R: Cuestionario mixto. 420. ¿Qué técnica permite identificar patrones narrativos? R: Historia de vida o discurso. ________________________________________ 🧩 Integración final y metacognición (421–500) 421. ¿Qué significa "triangular" instrumentos? R: Usar varios métodos para validar resultados. 422. ¿Qué se considera al seleccionar un instrumento? R: Tipo de variable y objetivo. 423. ¿Qué instrumento ayuda a recolectar percepciones? R: Encuesta con escala. 424. ¿Qué implica un análisis de contenido? R: Interpretar significados en narrativas. 425. ¿Qué se evalúa antes de usar un instrumento? R: Validez, confiabilidad y pertinencia. 426. ¿Qué técnica se basa en la interacción grupal? R: Focus group. 427. ¿Qué técnica requiere observador entrenado? R: Observación sistemática. 428. ¿Qué aporta una guía de observación? R: Foco en categorías clave. 429. ¿Qué permite la escala tipo Likert? R: Medir grados de opinión o actitud. 430. ¿Qué se busca con un test psicométrico? R: Medición objetiva de habilidades o rasgos. 431. ¿Qué técnica apoya mejor a estudios exploratorios? R: Entrevista abierta. 432. ¿Qué se mide con una rúbrica? R: Criterios previamente definidos. 433. ¿Qué se requiere para un test confiable? R: Condiciones estandarizadas. 434. ¿Qué instrumento aporta más control? R: Prueba objetiva. 435. ¿Qué técnica apoya la etnografía? R: Observación participante. 436. ¿Qué se obtiene del análisis de documentos? R: Datos históricos, legales o institucionales. 437. ¿Qué mejora la precisión del cuestionario? R: Redacción revisada por expertos. 438. ¿Qué puede invalidar un grupo focal? R: Falta de moderación efectiva. 439. ¿Qué hace el análisis de resultados? R: Organiza y da sentido a los datos. 440. ¿Qué herramienta puede usarse para codificación? R: Software cualitativo (ej. Atlas.ti, NVivo). 441. ¿Qué implica un enfoque mixto? R: Uso combinado de métodos cuantitativos y cualitativos. 442. ¿Qué instrumento recoge evidencia de aprendizaje? R: Rúbrica de evaluación. 443. ¿Qué instrumento se usa para describir un fenómeno? R: Entrevista abierta o historia de vida. 444. ¿Qué se debe hacer con los datos recogidos? R: Analizar, interpretar y presentar resultados. 445. ¿Qué garantiza un diseño metodológico sólido? R: Selección adecuada de técnicas e instrumentos. 446. ¿Qué instrumento recopila respuestas numéricas? R: Cuestionario con escala Likert. 447. ¿Qué técnica favorece la espontaneidad? R: Focus group. 448. ¿Qué permite contrastar hipótesis? R: Instrumentos cuantitativos validados. 449. ¿Qué técnica analiza lenguaje, poder e ideología? R: Análisis crítico del discurso. 450. ¿Qué instrumento evalúa competencias? R: Rúbrica por niveles. 451. ¿Qué se debe cuidar en preguntas sensibles? R: Ética y privacidad. 452. ¿Qué técnica combina lenguaje verbal y no verbal? R: Observación participante. 453. ¿Qué se hace tras recolectar los datos? R: Procesarlos y analizarlos. 454. ¿Qué significa codificar datos cualitativos? R: Agrupar por categorías. 455. ¿Qué elemento es común en todo instrumento? R: Claridad. 456. ¿Qué mejora la calidad de la investigación? R: Uso de instrumentos adecuados y validados. 457. ¿Qué instrumento es más flexible? R: Entrevista no estructurada. 458. ¿Qué técnica ayuda a generar hipótesis? R: Investigación cualitativa. 459. ¿Qué instrumento ofrece comparación directa? R: Cuestionario cerrado. 460. ¿Qué se requiere al aplicar una encuesta? R: Muestra representativa. 461. ¿Qué permite ver la evolución de datos? R: Aplicación longitudinal de instrumentos. 462. ¿Qué se recomienda antes de cada aplicación? R: Ensayo o prueba piloto. 463. ¿Qué tipo de escala se usa más en educación? R: Escala tipo Likert. 464. ¿Qué instrumento se adapta mejor a autoevaluación? R: Rúbrica o escala de valoración. 465. ¿Qué fortalece el rigor científico? R: Validación metodológica. 466. ¿Qué técnica requiere empatía del investigador? R: Historia de vida. 467. ¿Qué es un instrumento adaptado? R: Uno modificado para contexto específico. 468. ¿Qué es saturación en cualitativa? R: Cuando ya no emergen nuevos datos. 469. ¿Qué asegura la representatividad? R: Muestreo adecuado. 470. ¿Qué debe incluir el informe de instrumentos? R: Justificación, aplicación y validación. 471. ¿Qué debe revisarse después del análisis? R: Coherencia con los objetivos. 472. ¿Qué fortalece la ética de investigación? R: Transparencia en el uso de instrumentos. 473. ¿Qué indica la dispersión de respuestas? R: Variabilidad en opiniones. 474. ¿Qué técnica se recomienda para detectar discursos ocultos? R: Análisis crítico del discurso. 475. ¿Qué instrumento revela conocimientos previos? R: Test diagnóstico. 476. ¿Qué instrumento puede usarse al final del curso? R: Encuesta de satisfacción o evaluación. 477. ¿Qué técnica facilita comprender realidades complejas? R: Investigación cualitativa. 478. ¿Qué técnica complementa una encuesta? R: Entrevista a profundidad. 479. ¿Qué permite la mezcla de datos cuali y cuanti? R: Mayor comprensión del fenómeno. 480. ¿Qué se busca con un buen diseño instrumental? R: Datos útiles y relevantes. 481. ¿Qué se recomienda para redactar ítems? R: Precisión y simplicidad. 482. ¿Qué instrumento mide comportamientos observables? R: Ficha de observación. 483. ¿Qué técnica se centra en la experiencia subjetiva? R: Historia de vida. 484. ¿Qué aporta la codificación en investigación? R: Organización conceptual de datos. 485. ¿Qué técnica se basa en preguntas? R: Entrevista. 486. ¿Qué requiere una entrevista profunda? R: Tiempo, confianza y preparación. 487. ¿Qué instrumento ayuda a mejorar el aprendizaje? R: Rúbrica de retroalimentación. 488. ¿Qué mejora la presentación de resultados? R: Uso de gráficos, tablas y citas. 489. ¿Qué fortalece la interpretación de resultados? R: Marco teórico bien definido. 490. ¿Qué se debe tener para aplicar instrumentos en niños? R: Consentimiento de padres y lenguaje adecuado. 491. ¿Qué requiere analizar los datos de un cuestionario? R: Codificación, tabulación y análisis. 492. ¿Qué debe indicar cada instrumento? R: Propósito, población y modo de aplicación. 493. ¿Qué diferencia hay entre ficha y escala? R: La ficha registra hechos; la escala mide nivel. 494. ¿Qué instrumento permite evaluar procesos? R: Rúbrica de evaluación de proceso. 495. ¿Qué técnica usa registro audiovisual? R: Observación o entrevista grabada. 496. ¿Qué favorece una redacción efectiva de preguntas? R: Evitar tecnicismos y ambigüedad. 497. ¿Qué debe usarse para medir variables psicológicas? R: Test o escalas validadas. 498. ¿Qué instrumento se adapta al entorno virtual? R: Cuestionario digital. 499. ¿Qué instrumento permite medir satisfacción? R: Encuesta. 500. ¿Qué es un control de lectura? R: Evaluación para verificar comprensión de un texto.What is a rubric? A tool comprising a set of criteria (with possible levels of performance quality on the criteria) developed to assess learners’ work, from written to oral to visual. It is used tomeasureperformance,suchastheprocess of doing something (e.g.,playing a musical instrument, making a speech) or products of the learners’ work (e.g., concept map, laboratory report, bookshelf) (Brookhart, 2013). BENEFITS OF USING RUBRICS Support authentic assessment Reflects how well learners are able to apply knowledge inthe real-world context. Communicate expectations Gives learners an idea of what is expected of them. It is especially useful when the rubrics are communicated to the learners before they are assessed. Improve performance Explicit criteria and performance level descriptions allow learners to understand the desired performance. Learners are able to assess themselves by referring to the specific criteria and performance-level descriptions. Provide informative feedback Instructors are able to provide constructive feedback to learners on their weaknesses and strengths. Promote thinking andlearning 4 Provide informative feedback Instructors are able to provide constructive feedback to learners on their weaknesses and strengths. Learners are able to review and revise their work,thus reflecting on their learning experiences. Ensure fairness Learner performance assessed fairly given its objectivity. It helps avoid disputes between learners and instructors about the scores/grades achieved. TYPES OF RUBRIC ANALYTIC It consists of individual criterion with corresponding descriptor of performance. HOLISTIC It consists of performance descriptors that are placed together to refeclet to overalll performance. ANATOMY OF ANANALYTIC RUBRIC Rating scales with corresponding scores or weights The row represents the criteria for the desired performance, while the column represents the evaluation score. Under the rating scale (corresponding weights orscorescanbeassigned),theperformance descriptors are explicitly stated ANATOMYOF AHOLISTICRUBRIC Descriptions: It comprises the rating scale (corresponding weights or scores can be assigned) in the row while the combined desired performance descriptors are placed in the column. Description of the task The purpose of the assignment is to assess learner’s cognitive and analytic skills in applying knowledge gained and constructed throughout the course Diffusion of Innovation,bywatching the Surrogates movieand writing ananalytical review of the movie in the context of innovation diffusion.Iwant to provide learners with informative feedback on their cognitive and analytic skills such as the following: applying the concepts of innovation diffusion,making judgmentson the scenes related to innovation diffusion identified from the movie,selecting and critiquing theories of innovation diffusion and making connections between the theories,aswell asarguingand proposing necessary solutions to the problemss hown in the movie. ESTABLISHING ALTERNATIVEASSESSMENTINHIGHEREDUCATION VALIDITYAND RELIABILITYOF RUBRICS. Validity Measuring what is supossedto be measured. Reability Yielding consists results. Instruments that are used in the alternative assessment must be aligned to the learning outcomes and measure well what it intends to measure (valid) and produce consistent scores (reliable). The valid instrument will manifest the true ability (latent trait) of learners and permit appropriate inferences to be made about a specific group of people for specific purposes. TYPES OF VALIDITY FACE VALIDITY Simple form of validity thatapplies a superficial and subjective assessment whether the instrument measures what it is supposed to measure. CONTENT VALIDITY Refers to the extent to which the items on a measure assess the same content or how wellthe content material was sampled inthe measure. CONSTRUCT VALIDITY Refers to the extent to which the test may be said to measure a theoretical construct or trait. CONCURRENT VALIDITY Refers to the extent to which scores onanewmeasure are related to scores from a criterion measure administered at the same time. PREDICTIVE VALIDITY Refers to the uses of the scores from the new measure to predict performance on a criterion measure administered ata later time. STEPS TO CONSIDER WHEN ESTABLISHING CONTENT VALIDITY Calculate the level of expert agreeement for the content validity, get expert to verfy. Interview the expert ,make meta contentdata análisis from literatura. STEPS TO CONSIDER WHEN ESTABLISHING CONSTRUCCT VALIDITY Administer the instrument for alll learners, revise any item necccesay, run an apropriates statistical analiysis, administerthe instrument to learners as a pilot test . CONSTRUCTMAP Morepreciseconceptthan construct. Ranges from one extreme to another(fromhightolow,small tolarge,positivetonegative,or strongtoweak). Identifiesthepositionofthe respondentsinthisrange. Representativenessofsampling (questions and ability of respondents). EXAMPLEO FACONSTRUCTMAP:AFFECTIVE LEVELOF AFFECTIVE VARIABLES EXAMPLESOFITEMSIN MEASURINGTEAM WORKING SKILLS 5. Characterisation Learnersvolunteerstodothe groupworks. 4. Organisation Learners are willing to help others,althoughitisnottheir scopeoftask. 3. Valuing Learners respect other team members’opinionwhendoing thediscussion. 2. Responding Learnergivescooperationwhen neededingroupworks. 1. Receiving Learneracceptsthediversityof races and nationalities among groupmembers. EXAMPLEOFACONSTRUCTMAP:PSYCHOMOTOR LEVELOF PSYCHOMOTOR VARIABLES EXAMPLESOFITEMSIN MEASURING DIGITAL SKILLS 7.Origination Learnerscanmodifytheirowndevicesto performbetter. 6.Adaptation Learnerscansolveandtroubleshootthe problemwhileusingthecomputer. 5.ComplexOvertResponse Learnerscanusethecomputercompetently. 4.Mechanism Learners can use the computer independently,butstillmakeminorerrors. 3.GuidedResponses Learnerscanusethecomputer,butstill needguidance. 2.Set Learnersarereadytousethecomputer. 1.Perception Learnerscanobservehowtousecomputer. EXAMPLEOFACONSTRUCTMAP:COGNITIVE LEVELOF COGNITIV E VARIABLES EXAMPLESOFITEMS IN MEASURING THINKINGSKILLS 6. Creating Learners are able to suggest anewmodelorframeworkof learningdigitalcommunity. 5. Evaluating Learners are able to judge the impactofthescenariotowards educationperspective. 4. Analysing Learnerscandifferentiate the factsusingafew theories. 3. Applying Learnerscansolveproblems usingthefactsgiven. 2. Understanding Learnersareabletoexplainthe factsusingtheirownwords. 1. Remembering Learnersonlymemorisethe. Direction of Increasing “X” Learners Learners with high “X” Learners with mid range “X” Learners with low “X” Responses to Item Item response indicate highest level of X Item response indicate higher level of X Item response indicate lower level of X The construct map shows the lower ability students are in line with the lower level of items. This shows that when educators plan to develop an instrument, it Item response indicate lowest level of X Direction of Decreasing “X” is crucial to create an item difficulty thatrepresents learners’ ability. Learners’ ability Learners who engage in level characterisation Learners who engage in level organisation Learners who engage in level valuing Learners who engage in level responding Learners who engage in level receiving Direction of Decreasing“X” MEASURINGCONSTRUCTVALIDITY Unlike content validity, this construct validity can be analysed using statistical analysis. Use Exploratory FactorAnalysis [EFA], Confirmatory FactorAnalysis [CFA] or Unidimensionality to confirm all items are measuring the right construct and the raw variance explained for the latent variables is sufficient. Gap initem map also can show accuracy in construct validity. RELIABILITY The degree to which test scores are consistent over repeated administrations of the same/ equivalent test and therefore considered dependable and repeatable for an individual learner.A test thatproduces highly consistent and stable results (i.e. relative free from random error) is said to be highly reliable. TYPESOFRELIABILITY Test-retest demonstrates the stability of a measure over time 01 Internal consistency most of the items within a rating scale of a concept show consistency of scoring. Inter-rater the extent to which two or more independent raters are consistent in observing, recording and scoring data (should be 70% or higher agreement) 04 Intra-rater relies on one rater to rate an object or event twice (70% or higher of agreement) FACTORSAFFECTING VALIDITYANDHOWTO INCREASEVALIDITY? FACTORS AFFECTING VALIDITY HOWTO INCREASE VALIDITY? 1. Inaccuracy of items in measuringtheoutcomes 1. Vetting session to get reviewsfromtheexpert. 2. Pooritemsdevelopment 2. Followtheformatandtips indevelopinggooditems. 3. Unclearinstructions 3. Do pilot testing to measuretheusabilityof thetest. 4. Interveningevents 4. Controltheinternalthreats validityfactors. 5. Itemsdifficultyisnot suitableforthelearners 5. Create a construct map toensurethereisanitem thatrepresentslearners ability. FACTORS AFFECTING RELIABILIT Y HOWTOINCREASERELIABILITY? 1. TestLength 1. Thetestlengthshouldbeappropriate withtestdifficulty. 2. Test retest interval 2. Suggesteddurationisbetween3 weeksto2months. 3. Variability of scores 3. Doconstructmaptoensuretheitems aresuitablewithlearners’ability. 4. Guessing 4. Penalisetheguessinganswers.You alsocandetecteitherthelearnersare guessing or not using the statistical analysis named guessing analysis andpersonfitanalysis. 5. Inconsistency score from different raters 5. Appointtheratertomarkcertain questionsforalllearners(Thisalways happen when you have more than onesectionandhavemorethanone lecturer). CONCLUSION Coming back to the issue of validity and reliability in assessment, there is a need for educators to put an effort to ensurethattheitemsintheformofquestionsorinstructions arenotonlyclearbutalsoabletomeasurewhatitisintended tomeasurebasedontherelatedlearningoutcomes. Establishingvalidityandreliabilityofinstrumentscan provide educators with some indications of the quality of the measuring tools being used. Valid and reliable instruments enabletheeducatorstocontinuouslyusethemeasuringtools withoutreservation. Reliablenot valid Precisenot Accurate Reliableand valid Preciseand Accurate NotReliable butvalid NotPrecisebut Accurate NotReliable butNotvalid NotPrecisebut NotAccurate 94 We found you were making a quiz on the subject of "What is a rubric? A tool comprising a set of criteria (with possible levels of performance quality on the criteria) developed to assess learners’ work, from written to oral to visual. It is used tomeasureperformance,suchastheprocess of doing something (e.g.,playing a musical instrument, making a speech) or products of the learners’ work (e.g., concept map, laboratory report, bookshelf) (Brookhart, 2013). BENEFITS OF USING RUBRICS Support authentic assessment Reflects how well learners are able to apply knowledge inthe real-world context. Communicate expectations Gives learners an idea of what is expected of them. It is especially useful when the rubrics are communicated to the learners before they are assessed. Improve performance Explicit criteria and performance level descriptions allow learners to understand the desired performance. Learners are able to assess themselves by referring to the specific criteria and performance-level descriptions. Provide informative feedback Instructors are able to provide constructive feedback to learners on their weaknesses and strengths. Promote thinking andlearning 4 Provide informative feedback Instructors are able to provide constructive feedback to learners on their weaknesses and strengths. Learners are able to review and revise their work,thus reflecting on their learning experiences. Ensure fairness Learner performance assessed fairly given its objectivity. It helps avoid disputes between learners and instructors about the scores/grades achieved. TYPES OF RUBRIC ANALYTIC It consists of individual criterion with corresponding descriptor of performance. HOLISTIC It consists of performance descriptors that are placed together to refeclet to overalll performance. ANATOMY OF ANANALYTIC RUBRIC Rating scales with corresponding scores or weights The row represents the criteria for the desired performance, while the column represents the evaluation score. Under the rating scale (corresponding weights orscorescanbeassigned),theperformance descriptors are explicitly stated ANATOMYOF AHOLISTICRUBRIC Descriptions: It comprises the rating scale (corresponding weights or scores can be assigned) in the row while the combined desired performance descriptors are placed in the column. Description of the task The purpose of the assignment is to assess learner’s cognitive and analytic skills in applying knowledge gained and constructed throughout the course Diffusion of Innovation,bywatching the Surrogates movieand writing ananalytical review of the movie in the context of innovation diffusion.Iwant to provide learners with informative feedback on their cognitive and analytic skills such as the following: applying the concepts of innovation diffusion,making judgmentson the scenes related to innovation diffusion identified from the movie,selecting and critiquing theories of innovation diffusion and making connections between the theories,aswell asarguingand proposing necessary solutions to the problemss hown in the movie. ESTABLISHING ALTERNATIVEASSESSMENTINHIGHEREDUCATION VALIDITYAND RELIABILITYOF RUBRICS. Validity Measuring what is supossedto be measured. Reability Yielding consists results. Instruments that are used in the alternative assessment must be aligned to the learning outcomes and measure well what it intends to measure (valid) and produce consistent scores (reliable). The valid instrument will manifest the true ability (latent trait) of learners and permit appropriate inferences to be made about a specific group of people for specific purposes. TYPES OF VALIDITY FACE VALIDITY Simple form of validity thatapplies a superficial and subjective assessment whether the instrument measures what it is supposed to measure. CONTENT VALIDITY Refers to the extent to which the items on a measure assess the same content or how wellthe content material was sampled inthe measure. CONSTRUCT VALIDITY Refers to the extent to which the test may be said to measure a theoretical construct or trait. CONCURRENT VALIDITY Refers to the extent to which scores onanewmeasure are related to scores from a criterion measure administered at the same time. PREDICTIVE VALIDITY Refers to the uses of the scores from the new measure to predict performance on a criterion measure administered ata later time. STEPS TO CONSIDER WHEN ESTABLISHING CONTENT VALIDITY Calculate the level of expert agreeement for the content validity, get expert to verfy. Interview the expert ,make meta contentdata análisis from literatura. STEPS TO CONSIDER WHEN ESTABLISHING CONSTRUCCT VALIDITY Administer the instrument for alll learners, revise any item necccesay, run an apropriates statistical analiysis, administerthe instrument to learners as a pilot test . CONSTRUCTMAP Morepreciseconceptthan construct. Ranges from one extreme to another(fromhightolow,small tolarge,positivetonegative,or strongtoweak). Identifiesthepositionofthe respondentsinthisrange. Representativenessofsampling (questions and ability of respondents). EXAMPLEO FACONSTRUCTMAP:AFFECTIVE LEVELOF AFFECTIVE VARIABLES EXAMPLESOFITEMSIN MEASURINGTEAM WORKING SKILLS 5. Characterisation Learnersvolunteerstodothe groupworks. 4. Organisation Learners are willing to help others,althoughitisnottheir scopeoftask. 3. Valuing Learners respect other team members’opinionwhendoing thediscussion. 2. Responding Learnergivescooperationwhen neededingroupworks. 1. Receiving Learneracceptsthediversityof races and nationalities among groupmembers. EXAMPLEOFACONSTRUCTMAP:PSYCHOMOTOR LEVELOF PSYCHOMOTOR VARIABLES EXAMPLESOFITEMSIN MEASURING DIGITAL SKILLS 7.Origination Learnerscanmodifytheirowndevicesto performbetter. 6.Adaptation Learnerscansolveandtroubleshootthe problemwhileusingthecomputer. 5.ComplexOvertResponse Learnerscanusethecomputercompetently. 4.Mechanism Learners can use the computer independently,butstillmakeminorerrors. 3.GuidedResponses Learnerscanusethecomputer,butstill needguidance. 2.Set Learnersarereadytousethecomputer. 1.Perception Learnerscanobservehowtousecomputer. EXAMPLEOFACONSTRUCTMAP:COGNITIVE LEVELOF COGNITIV E VARIABLES EXAMPLESOFITEMS IN MEASURING THINKINGSKILLS 6. Creating Learners are able to suggest anewmodelorframeworkof learningdigitalcommunity. 5. Evaluating Learners are able to judge the impactofthescenariotowards educationperspective. 4. Analysing Learnerscandifferentiate the factsusingafew theories. 3. Applying Learnerscansolveproblems usingthefactsgiven. 2. Understanding Learnersareabletoexplainthe factsusingtheirownwords. 1. Remembering Learnersonlymemorisethe. Direction of Increasing “X” Learners Learners with high “X” Learners with mid range “X” Learners with low “X” Responses to Item Item response indicate highest level of X Item response indicate higher level of X Item response indicate lower level of X The construct map shows the lower ability students are in line with the lower level of items. This shows that when educators plan to develop an instrument, it Item response indicate lowest level of X Direction of Decreasing “X” is crucial to create an item difficulty thatrepresents learners’ ability. Learners’ ability Learners who engage in level characterisation Learners who engage in level organisation Learners who engage in level valuing Learners who engage in level responding Learners who engage in level receiving Direction of Decreasing“X” MEASURINGCONSTRUCTVALIDITY Unlike content validity, this construct validity can be analysed using statistical analysis. Use Exploratory FactorAnalysis [EFA], Confirmatory FactorAnalysis [CFA] or Unidimensionality to confirm all items are measuring the right construct and the raw variance explained for the latent variables is sufficient. Gap initem map also can show accuracy in construct validity. RELIABILITY The degree to which test scores are consistent over repeated administrations of the same/ equivalent test and therefore considered dependable and repeatable for an individual learner.A test thatproduces highly consistent and stable results (i.e. relative free from random error) is said to be highly reliable. TYPESOFRELIABILITY Test-retest demonstrates the stability of a measure over time 01 Internal consistency most of the items within a rating scale of a concept show consistency of scoring. Inter-rater the extent to which two or more independent raters are consistent in observing, recording and scoring data (should be 70% or higher agreement) 04 Intra-rater relies on one rater to rate an object or event twice (70% or higher of agreement) FACTORSAFFECTING VALIDITYANDHOWTO INCREASEVALIDITY? FACTORS AFFECTING VALIDITY HOWTO INCREASE VALIDITY? 1. Inaccuracy of items in measuringtheoutcomes 1. Vetting session to get reviewsfromtheexpert. 2. Pooritemsdevelopment 2. Followtheformatandtips indevelopinggooditems. 3. Unclearinstructions 3. Do pilot testing to measuretheusabilityof thetest. 4. Interveningevents 4. Controltheinternalthreats validityfactors. 5. Itemsdifficultyisnot suitableforthelearners 5. Create a construct map toensurethereisanitem thatrepresentslearners ability. FACTORS AFFECTING RELIABILIT Y HOWTOINCREASERELIABILITY? 1. TestLength 1. Thetestlengthshouldbeappropriate withtestdifficulty. 2. Test retest interval 2. Suggesteddurationisbetween3 weeksto2months. 3. Variability of scores 3. Doconstructmaptoensuretheitems aresuitablewithlearners’ability. 4. Guessing 4. Penalisetheguessinganswers.You alsocandetecteitherthelearnersare guessing or not using the statistical analysis named guessing analysis andpersonfitanalysis. 5. Inconsistency score from different raters 5. Appointtheratertomarkcertain questionsforalllearners(Thisalways happen when you have more than onesectionandhavemorethanone lecturer). CONCLUSION Coming back to the issue of validity and reliability in assessment, there is a need for educators to put an effort to ensurethattheitemsintheformofquestionsorinstructions arenotonlyclearbutalsoabletomeasurewhatitisintended tomeasurebasedontherelatedlearningoutcomes. Establishingvalidityandreliabilityofinstrumentscan provide educators with some indications of the quality of the measuring tools being used. Valid and reliable instruments enabletheeducatorstocontinuouslyusethemeasuringtools withoutreservation. Reliablenot valid Precisenot Accurate Reliableand valid Preciseand Accurate NotReliable butvalid NotPrecisebut Accurate NotReliable butNotvalid NotPrecisebut NotAccurate 94 ". Would you like to continue making it or start afresh?Lecture 3Lecture 3 : un , une , des ?Lecture 3 QuizLecture 3, Part ALecture 3, Part B