“Evaluación de Conceptos Clave: Sistema Armonizado y Sistema Tarifario Mexicano”

Evaluación de Conceptos Clave: Sistema Armonizado y Sistema Tarifario Mexicano

1.3.2 Multilingüismo individual: ¿somos todos multilingües? ¿Qué quiere decir ser bilingüe o ser multilingüe? Podríamos definir el bilingüismo o multilingüismo individual como la capacidad de una persona de hablar dos o más lenguas. Pero esta definición tiene varias carencias. Tradicionalmente, se pensaba que solo las personas que alcanzaban un dominio similar al de un nativo en cada una de las lenguas que hablaban podían considerarse «bilingües de verdad» o «multilingües de verdad». Pero, ¿qué ocurre con las personas que aprenden una lengua extranjera sin dominarla igual que su lengua materna? ¿Y las personas que son capaces de entender una lengua, tal vez la que se habla en su casa, pero no de hablarla con fluidez? ¿Y qué pasa con las personas que pueden hablar un idioma bastante bien, pero no saben escribir en ese idioma? ¿Y los que pueden leer y entender un texto en una lengua extranjera, pero no pueden comunicarse activamente en ella? Hoy sabemos que, aunque el dominio de dos (o más) lenguas como el de un nativo se pueda dar, en realidad es algo muy poco frecuente, ya que la inmensa mayoría de personas bilingües y multilingües no tienen el mismo grado de competencia en todas sus lenguas. De hecho, es muy común tener una lengua dominante o de preferencia, una lengua en la que una persona se desenvuelve con mayor fluidez o que prefiere en determinados ámbitos o situaciones. Imagínate a un niño que vive en el Reino Unido y habla ruso en casa con su familia e inglés en la escuela. Evidentemente, podrá hablar con más fluidez sobre algunos temas en ruso y sobre otros en inglés. ¿Significa eso que no es bilingüe? En absoluto, lo veremos enseguida. También es muy común, sobre todo entre las personas que han aprendido una segunda (o tercera) lengua más tarde, que una de las dos lenguas interfiera con la otra, algo que puede reflejarse en su acento, en ciertas estructuras gramaticales, en el vocabulario, etc. Imaginemos a un profesor universitario francés que lleva veinte años viviendo y trabajando en Inglaterra. Puede comunicarse con soltura en inglés tanto en situaciones formales como informales y ha publicado libros tanto en inglés como en francés. Sin embargo, sigue hablando en inglés con acento francés y, después de tantos años en Inglaterra, a veces le cuesta encontrar las palabras adecuadas cuando habla en francés. ¿Y qué pasa con esta persona? ¿La considerarías bilingüe? Continuo bilingüe. Las mayúsculas y el tamaño de letra más grande indican un mayor dominio de la lengua A o B. (A partir de Valdés 2014). Monolingüe lengua A Monolingüe lengua B A Ab Ab Ab Ab aB Ba Ba Ba Ba Ba B debe ser bonito ser bilingue 22 INCLUSIÓN, DIVERSIDAD Y COMUNICACIÓN ENTRE CULTURAS En la actualidad, muchos lingüistas consideran que el bilingüismo (o el multilingüismo) no es un estado que pueda alcanzarse con el tiempo, sino más bien un continuo, es decir, una progresión gradual entre dos extremos opuestos. En un extremo está el monolingüismo en la lengua A, y en el otro el monolingüismo en la lengua B. Cualquier individuo con competencias lingüísticas en ambas lenguas podría situarse entre esos dos polos. Dependiendo de su competencia y fluidez en cada lengua, se situaría más cerca de un extremo u otro del continuo. Por ejemplo, una persona con un gran dominio de una de las lenguas, pero con un dominio limitado de la otra, podría situarse en el polo Ab, mientras que una persona con un dominio de ambas lenguas similar al de un nativo se situaría en el medio, en el polo aB. La idea de un continuo bilingüe nos permite ver el bilingüismo como un proceso y tiene en cuenta el hecho de que el dominio de cualquiera de las dos lenguas puede cambiar con el tiempo. Es posible ganar competencias en una lengua, pero también perderlas. Según esta concepción más amplia del bilingüismo, incluso los estudiantes que se inician en una lengua extranjera podrían considerarse bilingües, aunque, por supuesto, al principio estarían bastante cerca de uno de los extremos monolingües del continuo. En cualquier caso, las personas bilingües y plurilingües se encuentran a menudo con tópicos o conceptos erróneos sobre lo que supone hablar y «vivir» en dos o más idiomas. Uno de los prejuicios más problemáticos es que la exposición a varias lenguas es perjudicial para el desarrollo del lenguaje en los menores. Antes se creía que los menores criados de forma bilingüe o multilingüe nunca lograrían aprender bien ninguna de las lenguas en cuestión. Por ello, docentes y pediatras desaconsejaban a los padres criar a sus hijos de forma bilingüe o multilingüe, y a menudo se les animaba a hablar con ellos en la lengua mayoritaria de su sociedad, aunque ellos mismos no dominaran esa lengua. Presionar a los familiares para que no hablen en su lengua materna con sus hijos plantea una serie SABÍAS QUE… el Día Internacional de la Lengua Materna se celebra el 21 de febrero? Fue declarado por la UNESCO en 1999 para sensibilizar sobre la diversidad lingüística y cultural y promover el multilingüismo. de problemas. Por ejemplo, los padres que hablan la lengua mayoritaria de su nueva sociedad como una lengua extranjera podrían transmitir a sus hijos patrones de pronunciación y gramática incorrectos. También se ha observado que los padres que se obligan a hablar a sus hijos en una lengua extranjera en la que no se sienten cómodos pueden comunicarse menos con ellos y ser incapaces de expresar sentimientos como la cercanía y el afecto de la forma en que lo harían en su lengua materna. Además, al no transmitir una lengua de herencia, los padres rompen el vínculo de sus hijos con los familiares que viven en el extranjero, puesto que los niños no podrán comunicarse con ellos por su cuenta. Por último, este enfoque dificulta la transmisión de las tradiciones y los valores culturales. Estas cuestiones suelen provocar problemas en la dinámica familiar que pueden ser difíciles de resolver más adelante. ¿De dónde viene la idea de la «confusión lingüística»? Uno de los principales motivos que llevan a pensar que la exposición a más de una lengua confunde a los niños es la observación de que los niños y niñas pequeños suelen combinar palabras de las distintas lenguas que hablan en una misma frase. Este fenómeno se denomina alternancia de código y es una etapa típica del desarrollo del lenguaje en los niños pequeños que se crían de forma bilingüe o multilingüe. 21/2 LENGUAS EN LA VIDA COTIDIANA 23 Sin embargo, la alternancia de código puede observarse en bilingües de cualquier edad cuando hablan con otros bilingües. Esto no significa que se confundan o sean incapaces de comunicarse correctamente en una sola lengua; es algo normal en el comportamiento lingüístico bilingüe. Llegados a este punto, es importante introducir el concepto «repertorio lingüístico». Un repertorio lingüístico incluye los recursos comunicativos de los que dispone un individuo o una comunidad de habla, es decir, las variedades lingüísticas escritas y habladas puede utilizar o que están presentes en una comunidad de hablantes. El repertorio lingüístico de las comunidades de hablantes monolingües suele estar formado por diferentes registros, estilos, dialectos, acentos, jergas y modismos. En las comunidades de habla bilingüe o multilingüe (por ejemplo, en entornos de migración o en países lingüísticamente diversos, como la India), el repertorio lingüístico no incluye solo diferentes variedades regionales, sociales y/o estilísticas en cada lengua por separado, sino también combinaciones de las diferentes lenguas habladas. Los bilingües pueden optar por cambiar y mezclar códigos en determinadas situaciones comunicativas, al igual que un hablante monolingüe puede utilizar un registro u otro en función del contexto y de con quién esté hablando. Sobre esta base, se podría incluso decir que, en sentido muy amplio, todos somos multilingües, ya que todos, monolingües y bilingües, debemos aprender a hacer malabarismos con las distintas variedades lingüísticas de nuestras sociedades. Anima a tus alumnos a realizar la actividad C para reflexionar sobre la importancia que tienen para ellos las diferentes lenguas, dialectos, acentos y ¿QUÉ PUEDO TRANSMITIR A MI ALUMNADO? · El bilingüismo o el multilingüismo no es un estado que pueda lograrse en un momento dado, sino un proceso en el que la competencia lingüística puede cambiar con el tiempo. · La mayoría de las personas bilingües y multilingües no tienen el mismo dominio de sus diferentes lenguas, y eso es algo completamente normal. · Según una concepción más amplia del bilingüismo y el multilingüismo, incluso los principiantes que aprenden una lengua extranjera podrían considerarse bilingües. · No hay que desalentar a los padres a hablar en su lengua materna con sus hijos e hijas, ya que es a través de ella como mejor pueden comunicarse, expresar sentimientos como la cercanía y el afecto, y transmitir su cultura y sus valores a la siguiente generación. En contextos de migración, los menores que dominan su lengua materna pueden mantener el contacto con los familiares que viven en el extranjero. · Las personas monolingües disponen de diferentes registros, estilos, dialectos, acentos, jergas y modismos. Las personas bilingües también pueden hacer uso de todos ellos, pero además es posible que mezclen y cambien de idioma cuando hablan con otros bilingües. Hacerlo es una parte natural y normal del comportamiento lingüístico de los bilingües y no significa que se confundan o sean incapaces de comunicarse correctamente en una sola lengua. 24 INCLUSIÓN, DIVERSIDAD Y COMUNICACIÓN ENTRE CULTURAS registros. Les resultará divertido comparar los resultados entre amigos y compañeros de clase. En la actividad D, los alumnos tendrán la oportunidad de hablar sobre la alternancia de código, de descubrir el significado de un texto escrito en muchas lenguas diferentes e incluso de crear su propio texto multilingüe. 1.4 CONCLUSIONES En este capítulo hemos presentado diferentes aspectos relacionados con las lenguas en el mundo y en nuestra vida cotidiana. Hemos explicado que las lenguas no son objetos estáticos, sino organismos vivos que interactúan y se relacionan entre sí y están en constante evolución. Las lenguas no solo transmiten mensajes, sino también los valores culturales y sociales de las personas que las hablan e incluso una forma de ver o entender el mundo. A pesar de lo que nos puedan hacer creer, el multilingüismo no es la excepción en el mundo, sino la norma. Por tanto, nuestra diversidad lingüística puede considerarse una forma más de biodiversidad, que también hay que proteger. En el capítulo 2 nos centraremos en los aspectos culturales de nuestras sociedades multiculturales y multilingües.

Aproximación al concepto de evaluación

EVALUACIÓN DIAGNÓSTICA (https://www.slideserve.com/heinrich/introducci-n-1-1-concepto-y-objetivos-de-la-contabilidad-1-2-usuarios-de-la-informaci-n-contable-1-3-las-cuentas-anu)

Matemáticas para IA Historia y evolución de la IA. Tipos y aplicaciones de la IA. Impacto de la IA en la sociedad y la economía. Conceptos de álgebra lineal y cálculo para la IA. Introducción a la estadística y la probabilidad. Programación en Python Fundamentos de la programación en Python. Estructuras de datos: listas, tuplas, diccionarios, conjuntos. Manipulación de datos con Numpy y Pandas. Introducción a Google Colab y Anaconda. Machine learning y deep learning Introducción al Machine Learning: clasificación, regresión y clustering. Algoritmos de Machine Learning. Introducción al Deep Learning: perceptrones multicapa, redes convolucionales y recurrentes. Uso de TensorFlow y Keras para implementar redes neuronales.

What is a rubric? A tool comprising a set of criteria (with possible levels of performance quality on the criteria) developed to assess learners’ work, from written to oral to visual. It is used tomeasureperformance,suchastheprocess of doing something (e.g.,playing a musical instrument, making a speech) or products of the learners’ work (e.g., concept map, laboratory report, bookshelf) (Brookhart, 2013). BENEFITS OF USING RUBRICS Support authentic assessment Reflects how well learners are able to apply knowledge inthe real-world context. Communicate expectations Gives learners an idea of what is expected of them. It is especially useful when the rubrics are communicated to the learners before they are assessed. Improve performance Explicit criteria and performance level descriptions allow learners to understand the desired performance. Learners are able to assess themselves by referring to the specific criteria and performance-level descriptions. Provide informative feedback Instructors are able to provide constructive feedback to learners on their weaknesses and strengths. Promote thinking andlearning 4 Provide informative feedback Instructors are able to provide constructive feedback to learners on their weaknesses and strengths. Learners are able to review and revise their work,thus reflecting on their learning experiences. Ensure fairness Learner performance assessed fairly given its objectivity. It helps avoid disputes between learners and instructors about the scores/grades achieved. TYPES OF RUBRIC ANALYTIC It consists of individual criterion with corresponding descriptor of performance. HOLISTIC It consists of performance descriptors that are placed together to refeclet to overalll performance. ANATOMY OF ANANALYTIC RUBRIC Rating scales with corresponding scores or weights The row represents the criteria for the desired performance, while the column represents the evaluation score. Under the rating scale (corresponding weights orscorescanbeassigned),theperformance descriptors are explicitly stated ANATOMYOF AHOLISTICRUBRIC Descriptions: It comprises the rating scale (corresponding weights or scores can be assigned) in the row while the combined desired performance descriptors are placed in the column. Description of the task The purpose of the assignment is to assess learner’s cognitive and analytic skills in applying knowledge gained and constructed throughout the course Diffusion of Innovation,bywatching the Surrogates movieand writing ananalytical review of the movie in the context of innovation diffusion.Iwant to provide learners with informative feedback on their cognitive and analytic skills such as the following: applying the concepts of innovation diffusion,making judgmentson the scenes related to innovation diffusion identified from the movie,selecting and critiquing theories of innovation diffusion and making connections between the theories,aswell asarguingand proposing necessary solutions to the problemss hown in the movie. ESTABLISHING ALTERNATIVEASSESSMENTINHIGHEREDUCATION VALIDITYAND RELIABILITYOF RUBRICS. Validity Measuring what is supossedto be measured. Reability Yielding consists results. Instruments that are used in the alternative assessment must be aligned to the learning outcomes and measure well what it intends to measure (valid) and produce consistent scores (reliable). The valid instrument will manifest the true ability (latent trait) of learners and permit appropriate inferences to be made about a specific group of people for specific purposes. TYPES OF VALIDITY FACE VALIDITY Simple form of validity thatapplies a superficial and subjective assessment whether the instrument measures what it is supposed to measure. CONTENT VALIDITY Refers to the extent to which the items on a measure assess the same content or how wellthe content material was sampled inthe measure. CONSTRUCT VALIDITY Refers to the extent to which the test may be said to measure a theoretical construct or trait. CONCURRENT VALIDITY Refers to the extent to which scores onanewmeasure are related to scores from a criterion measure administered at the same time. PREDICTIVE VALIDITY Refers to the uses of the scores from the new measure to predict performance on a criterion measure administered ata later time. STEPS TO CONSIDER WHEN ESTABLISHING CONTENT VALIDITY Calculate the level of expert agreeement for the content validity, get expert to verfy. Interview the expert ,make meta contentdata análisis from literatura. STEPS TO CONSIDER WHEN ESTABLISHING CONSTRUCCT VALIDITY Administer the instrument for alll learners, revise any item necccesay, run an apropriates statistical analiysis, administerthe instrument to learners as a pilot test . CONSTRUCTMAP Morepreciseconceptthan construct. Ranges from one extreme to another(fromhightolow,small tolarge,positivetonegative,or strongtoweak). Identifiesthepositionofthe respondentsinthisrange. Representativenessofsampling (questions and ability of respondents). EXAMPLEO FACONSTRUCTMAP:AFFECTIVE LEVELOF AFFECTIVE VARIABLES EXAMPLESOFITEMSIN MEASURINGTEAM WORKING SKILLS 5. Characterisation Learnersvolunteerstodothe groupworks. 4. Organisation Learners are willing to help others,althoughitisnottheir scopeoftask. 3. Valuing Learners respect other team members’opinionwhendoing thediscussion. 2. Responding Learnergivescooperationwhen neededingroupworks. 1. Receiving Learneracceptsthediversityof races and nationalities among groupmembers. EXAMPLEOFACONSTRUCTMAP:PSYCHOMOTOR LEVELOF PSYCHOMOTOR VARIABLES EXAMPLESOFITEMSIN MEASURING DIGITAL SKILLS 7.Origination Learnerscanmodifytheirowndevicesto performbetter. 6.Adaptation Learnerscansolveandtroubleshootthe problemwhileusingthecomputer. 5.ComplexOvertResponse Learnerscanusethecomputercompetently. 4.Mechanism Learners can use the computer independently,butstillmakeminorerrors. 3.GuidedResponses Learnerscanusethecomputer,butstill needguidance. 2.Set Learnersarereadytousethecomputer. 1.Perception Learnerscanobservehowtousecomputer. EXAMPLEOFACONSTRUCTMAP:COGNITIVE LEVELOF COGNITIV E VARIABLES EXAMPLESOFITEMS IN MEASURING THINKINGSKILLS 6. Creating Learners are able to suggest anewmodelorframeworkof learningdigitalcommunity. 5. Evaluating Learners are able to judge the impactofthescenariotowards educationperspective. 4. Analysing Learnerscandifferentiate the factsusingafew theories. 3. Applying Learnerscansolveproblems usingthefactsgiven. 2. Understanding Learnersareabletoexplainthe factsusingtheirownwords. 1. Remembering Learnersonlymemorisethe. Direction of Increasing “X” Learners Learners with high “X” Learners with mid range “X” Learners with low “X” Responses to Item Item response indicate highest level of X Item response indicate higher level of X Item response indicate lower level of X The construct map shows the lower ability students are in line with the lower level of items. This shows that when educators plan to develop an instrument, it Item response indicate lowest level of X Direction of Decreasing “X” is crucial to create an item difficulty thatrepresents learners’ ability. Learners’ ability Learners who engage in level characterisation Learners who engage in level organisation Learners who engage in level valuing Learners who engage in level responding Learners who engage in level receiving Direction of Decreasing“X” MEASURINGCONSTRUCTVALIDITY Unlike content validity, this construct validity can be analysed using statistical analysis. Use Exploratory FactorAnalysis [EFA], Confirmatory FactorAnalysis [CFA] or Unidimensionality to confirm all items are measuring the right construct and the raw variance explained for the latent variables is sufficient. Gap initem map also can show accuracy in construct validity. RELIABILITY The degree to which test scores are consistent over repeated administrations of the same/ equivalent test and therefore considered dependable and repeatable for an individual learner.A test thatproduces highly consistent and stable results (i.e. relative free from random error) is said to be highly reliable. TYPESOFRELIABILITY Test-retest demonstrates the stability of a measure over time 01 Internal consistency most of the items within a rating scale of a concept show consistency of scoring. Inter-rater the extent to which two or more independent raters are consistent in observing, recording and scoring data (should be 70% or higher agreement) 04 Intra-rater relies on one rater to rate an object or event twice (70% or higher of agreement) FACTORSAFFECTING VALIDITYANDHOWTO INCREASEVALIDITY? FACTORS AFFECTING VALIDITY HOWTO INCREASE VALIDITY? 1. Inaccuracy of items in measuringtheoutcomes 1. Vetting session to get reviewsfromtheexpert. 2. Pooritemsdevelopment 2. Followtheformatandtips indevelopinggooditems. 3. Unclearinstructions 3. Do pilot testing to measuretheusabilityof thetest. 4. Interveningevents 4. Controltheinternalthreats validityfactors. 5. Itemsdifficultyisnot suitableforthelearners 5. Create a construct map toensurethereisanitem thatrepresentslearners ability. FACTORS AFFECTING RELIABILIT Y HOWTOINCREASERELIABILITY? 1. TestLength 1. Thetestlengthshouldbeappropriate withtestdifficulty. 2. Test retest interval 2. Suggesteddurationisbetween3 weeksto2months. 3. Variability of scores 3. Doconstructmaptoensuretheitems aresuitablewithlearners’ability. 4. Guessing 4. Penalisetheguessinganswers.You alsocandetecteitherthelearnersare guessing or not using the statistical analysis named guessing analysis andpersonfitanalysis. 5. Inconsistency score from different raters 5. Appointtheratertomarkcertain questionsforalllearners(Thisalways happen when you have more than onesectionandhavemorethanone lecturer). CONCLUSION Coming back to the issue of validity and reliability in assessment, there is a need for educators to put an effort to ensurethattheitemsintheformofquestionsorinstructions arenotonlyclearbutalsoabletomeasurewhatitisintended tomeasurebasedontherelatedlearningoutcomes. Establishingvalidityandreliabilityofinstrumentscan provide educators with some indications of the quality of the measuring tools being used. Valid and reliable instruments enabletheeducatorstocontinuouslyusethemeasuringtools withoutreservation. Reliablenot valid Precisenot Accurate Reliableand valid Preciseand Accurate NotReliable butvalid NotPrecisebut Accurate NotReliable butNotvalid NotPrecisebut NotAccurate 94

We found you were making a quiz on the subject of "What is a rubric? A tool comprising a set of criteria (with possible levels of performance quality on the criteria) developed to assess learners’ work, from written to oral to visual. It is used tomeasureperformance,suchastheprocess of doing something (e.g.,playing a musical instrument, making a speech) or products of the learners’ work (e.g., concept map, laboratory report, bookshelf) (Brookhart, 2013). BENEFITS OF USING RUBRICS Support authentic assessment Reflects how well learners are able to apply knowledge inthe real-world context. Communicate expectations Gives learners an idea of what is expected of them. It is especially useful when the rubrics are communicated to the learners before they are assessed. Improve performance Explicit criteria and performance level descriptions allow learners to understand the desired performance. Learners are able to assess themselves by referring to the specific criteria and performance-level descriptions. Provide informative feedback Instructors are able to provide constructive feedback to learners on their weaknesses and strengths. Promote thinking andlearning 4 Provide informative feedback Instructors are able to provide constructive feedback to learners on their weaknesses and strengths. Learners are able to review and revise their work,thus reflecting on their learning experiences. Ensure fairness Learner performance assessed fairly given its objectivity. It helps avoid disputes between learners and instructors about the scores/grades achieved. TYPES OF RUBRIC ANALYTIC It consists of individual criterion with corresponding descriptor of performance. HOLISTIC It consists of performance descriptors that are placed together to refeclet to overalll performance. ANATOMY OF ANANALYTIC RUBRIC Rating scales with corresponding scores or weights The row represents the criteria for the desired performance, while the column represents the evaluation score. Under the rating scale (corresponding weights orscorescanbeassigned),theperformance descriptors are explicitly stated ANATOMYOF AHOLISTICRUBRIC Descriptions: It comprises the rating scale (corresponding weights or scores can be assigned) in the row while the combined desired performance descriptors are placed in the column. Description of the task The purpose of the assignment is to assess learner’s cognitive and analytic skills in applying knowledge gained and constructed throughout the course Diffusion of Innovation,bywatching the Surrogates movieand writing ananalytical review of the movie in the context of innovation diffusion.Iwant to provide learners with informative feedback on their cognitive and analytic skills such as the following: applying the concepts of innovation diffusion,making judgmentson the scenes related to innovation diffusion identified from the movie,selecting and critiquing theories of innovation diffusion and making connections between the theories,aswell asarguingand proposing necessary solutions to the problemss hown in the movie. ESTABLISHING ALTERNATIVEASSESSMENTINHIGHEREDUCATION VALIDITYAND RELIABILITYOF RUBRICS. Validity Measuring what is supossedto be measured. Reability Yielding consists results. Instruments that are used in the alternative assessment must be aligned to the learning outcomes and measure well what it intends to measure (valid) and produce consistent scores (reliable). The valid instrument will manifest the true ability (latent trait) of learners and permit appropriate inferences to be made about a specific group of people for specific purposes. TYPES OF VALIDITY FACE VALIDITY Simple form of validity thatapplies a superficial and subjective assessment whether the instrument measures what it is supposed to measure. CONTENT VALIDITY Refers to the extent to which the items on a measure assess the same content or how wellthe content material was sampled inthe measure. CONSTRUCT VALIDITY Refers to the extent to which the test may be said to measure a theoretical construct or trait. CONCURRENT VALIDITY Refers to the extent to which scores onanewmeasure are related to scores from a criterion measure administered at the same time. PREDICTIVE VALIDITY Refers to the uses of the scores from the new measure to predict performance on a criterion measure administered ata later time. STEPS TO CONSIDER WHEN ESTABLISHING CONTENT VALIDITY Calculate the level of expert agreeement for the content validity, get expert to verfy. Interview the expert ,make meta contentdata análisis from literatura. STEPS TO CONSIDER WHEN ESTABLISHING CONSTRUCCT VALIDITY Administer the instrument for alll learners, revise any item necccesay, run an apropriates statistical analiysis, administerthe instrument to learners as a pilot test . CONSTRUCTMAP Morepreciseconceptthan construct. Ranges from one extreme to another(fromhightolow,small tolarge,positivetonegative,or strongtoweak). Identifiesthepositionofthe respondentsinthisrange. Representativenessofsampling (questions and ability of respondents). EXAMPLEO FACONSTRUCTMAP:AFFECTIVE LEVELOF AFFECTIVE VARIABLES EXAMPLESOFITEMSIN MEASURINGTEAM WORKING SKILLS 5. Characterisation Learnersvolunteerstodothe groupworks. 4. Organisation Learners are willing to help others,althoughitisnottheir scopeoftask. 3. Valuing Learners respect other team members’opinionwhendoing thediscussion. 2. Responding Learnergivescooperationwhen neededingroupworks. 1. Receiving Learneracceptsthediversityof races and nationalities among groupmembers. EXAMPLEOFACONSTRUCTMAP:PSYCHOMOTOR LEVELOF PSYCHOMOTOR VARIABLES EXAMPLESOFITEMSIN MEASURING DIGITAL SKILLS 7.Origination Learnerscanmodifytheirowndevicesto performbetter. 6.Adaptation Learnerscansolveandtroubleshootthe problemwhileusingthecomputer. 5.ComplexOvertResponse Learnerscanusethecomputercompetently. 4.Mechanism Learners can use the computer independently,butstillmakeminorerrors. 3.GuidedResponses Learnerscanusethecomputer,butstill needguidance. 2.Set Learnersarereadytousethecomputer. 1.Perception Learnerscanobservehowtousecomputer. EXAMPLEOFACONSTRUCTMAP:COGNITIVE LEVELOF COGNITIV E VARIABLES EXAMPLESOFITEMS IN MEASURING THINKINGSKILLS 6. Creating Learners are able to suggest anewmodelorframeworkof learningdigitalcommunity. 5. Evaluating Learners are able to judge the impactofthescenariotowards educationperspective. 4. Analysing Learnerscandifferentiate the factsusingafew theories. 3. Applying Learnerscansolveproblems usingthefactsgiven. 2. Understanding Learnersareabletoexplainthe factsusingtheirownwords. 1. Remembering Learnersonlymemorisethe. Direction of Increasing “X” Learners Learners with high “X” Learners with mid range “X” Learners with low “X” Responses to Item Item response indicate highest level of X Item response indicate higher level of X Item response indicate lower level of X The construct map shows the lower ability students are in line with the lower level of items. This shows that when educators plan to develop an instrument, it Item response indicate lowest level of X Direction of Decreasing “X” is crucial to create an item difficulty thatrepresents learners’ ability. Learners’ ability Learners who engage in level characterisation Learners who engage in level organisation Learners who engage in level valuing Learners who engage in level responding Learners who engage in level receiving Direction of Decreasing“X” MEASURINGCONSTRUCTVALIDITY Unlike content validity, this construct validity can be analysed using statistical analysis. Use Exploratory FactorAnalysis [EFA], Confirmatory FactorAnalysis [CFA] or Unidimensionality to confirm all items are measuring the right construct and the raw variance explained for the latent variables is sufficient. Gap initem map also can show accuracy in construct validity. RELIABILITY The degree to which test scores are consistent over repeated administrations of the same/ equivalent test and therefore considered dependable and repeatable for an individual learner.A test thatproduces highly consistent and stable results (i.e. relative free from random error) is said to be highly reliable. TYPESOFRELIABILITY Test-retest demonstrates the stability of a measure over time 01 Internal consistency most of the items within a rating scale of a concept show consistency of scoring. Inter-rater the extent to which two or more independent raters are consistent in observing, recording and scoring data (should be 70% or higher agreement) 04 Intra-rater relies on one rater to rate an object or event twice (70% or higher of agreement) FACTORSAFFECTING VALIDITYANDHOWTO INCREASEVALIDITY? FACTORS AFFECTING VALIDITY HOWTO INCREASE VALIDITY? 1. Inaccuracy of items in measuringtheoutcomes 1. Vetting session to get reviewsfromtheexpert. 2. Pooritemsdevelopment 2. Followtheformatandtips indevelopinggooditems. 3. Unclearinstructions 3. Do pilot testing to measuretheusabilityof thetest. 4. Interveningevents 4. Controltheinternalthreats validityfactors. 5. Itemsdifficultyisnot suitableforthelearners 5. Create a construct map toensurethereisanitem thatrepresentslearners ability. FACTORS AFFECTING RELIABILIT Y HOWTOINCREASERELIABILITY? 1. TestLength 1. Thetestlengthshouldbeappropriate withtestdifficulty. 2. Test retest interval 2. Suggesteddurationisbetween3 weeksto2months. 3. Variability of scores 3. Doconstructmaptoensuretheitems aresuitablewithlearners’ability. 4. Guessing 4. Penalisetheguessinganswers.You alsocandetecteitherthelearnersare guessing or not using the statistical analysis named guessing analysis andpersonfitanalysis. 5. Inconsistency score from different raters 5. Appointtheratertomarkcertain questionsforalllearners(Thisalways happen when you have more than onesectionandhavemorethanone lecturer). CONCLUSION Coming back to the issue of validity and reliability in assessment, there is a need for educators to put an effort to ensurethattheitemsintheformofquestionsorinstructions arenotonlyclearbutalsoabletomeasurewhatitisintended tomeasurebasedontherelatedlearningoutcomes. Establishingvalidityandreliabilityofinstrumentscan provide educators with some indications of the quality of the measuring tools being used. Valid and reliable instruments enabletheeducatorstocontinuouslyusethemeasuringtools withoutreservation. Reliablenot valid Precisenot Accurate Reliableand valid Preciseand Accurate NotReliable butvalid NotPrecisebut Accurate NotReliable butNotvalid NotPrecisebut NotAccurate 94 ". Would you like to continue making it or start afresh?

Related quizzes

Related quizzes