Prueba cloze
Una prueba cloze (también prueba de eliminación de cloze o prueba de oclusión ) es un ejercicio, prueba o evaluación que consiste en una parte del idioma con ciertos elementos, palabras o signos eliminados (texto cloze), donde se le pide al participante que reemplace el elemento faltante.[1] Las pruebas de Cloze requieren la capacidad de comprender el contexto y el vocabulario para identificar el idioma correcto o la parte del discurso que pertenece a los pasajes eliminados. Este ejercicio se administra comúnmente para la evaluación del aprendizaje y la instrucción del idioma nativo y del segundo idioma.
La palabra cloze se deriva de cierre en la psicología de la Gestalt. El ejercicio fue descrito por primera vez por W. L. Taylor en 1953.[2]
Las palabras se pueden eliminar del texto en cuestión de forma mecánica (por ejemplo: cada enésima palabra) o de forma selectiva, dependiendo exactamente del aspecto que se pretenda evaluar. La metodología es objeto de una extensa literatura académica;[3] sin embargo, los profesores comúnmente diseñan pruebas ad hoc.
Ejemplos
[editar]Un profesor de idiomas puede dar el siguiente pasaje a los estudiantes:
Hoy fui al ___________ y compré leche y huevos. Sabía que iba a llover, pero olvidé llevar mi ________ y terminé mojándome en el camino.
Luego, se les pedirá a los estudiantes que llenen los espacios en blanco con las palabras que mejor completen el pasaje. El contexto en términos de lenguaje y contenido es esencial en la mayoría, si no en todas, las pruebas de cloze. El primer espacio en blanco está precedido por "el"; por lo tanto, debe seguir un sustantivo, un adjetivo o un adverbio . Sin embargo, una conjunción sigue al espacio en blanco; la oración no sería gramaticalmente correcta si hubiera algo más que un sustantivo en el espacio en blanco. Las palabras "leche y huevos" son importantes para decidir qué sustantivo poner en el espacio en blanco; "supermercado" es una posible respuesta; Sin embargo, dependiendo del estudiante, el primer espacio en blanco podría ser tienda, supermercado, tiendas, mercado o tienda de comestibles, mientras que el paraguas, la sombrilla o el impermeable podrían caber en el segundo. Un posible pasaje completo sería:
Hoy fui al supermercado y compré un poco de leche y huevos. Sabía que iba a llover, pero olvidé llevar mi paraguas y terminé mojándome en el camino.
Además del uso para probar la fluidez lingüística, una prueba de cloze también se puede emplear para comprobar el conocimiento de los hechos, por ejemplo:
________ es el catabolismo anaeróbico de la glucosa.
Las posibles respuestas incluirían entonces la fermentación del ácido láctico, la glucólisis anaeróbica y la respiración anaeróbica.
Evaluación
[editar]La definición de éxito en una prueba de cloze dada varía, según los objetivos más amplios detrás del ejercicio. La evaluación puede depender de si el ejercicio es objetivo (es decir, los estudiantes reciben una lista de palabras para usar en un cloze) o subjetivo (es decir, los estudiantes deben completar un cloze con palabras que harían una oración dada gramaticalmente correcta).
Vi a un hombre dejar su chaqueta en un charco para una mujer que cruzaba la calle. Pensé que era muy ______.
Dado el pasaje anterior, las respuestas de los estudiantes pueden variar según sus habilidades de vocabulario y sus opiniones personales. Sin embargo, la colocación del espacio en blanco al final de la oración restringe las posibles palabras que pueden completar la oración; después de un adverbio y terminando la oración, la palabra probablemente sea un adjetivo. Romántico, caballeresco o galante puede, por ejemplo, ocupar el espacio en blanco, así como tonto o cursi. Usando esas respuestas, un maestro puede pedir a los estudiantes que reflexionen sobre las opiniones extraídas del cloze dado.
Investigaciones recientes que utilizan el seguimiento ocular han postulado que los ítems de relleno en los que se ofrece una selección de palabras como opciones pueden evaluar diferentes tipos de habilidades de lectura según las habilidades lingüísticas de los participantes que toman la prueba.[4] Se sugiere que los examinados de menor capacidad se concentrarán más en la información contenida en las palabras que rodean inmediatamente el espacio en blanco, mientras que se cree que los examinados de mayor capacidad pueden usar más información global en su selección de una palabra para encajar en el espacio. Una serie de problemas metodológicos señalados por los investigadores con respecto al ítem abierto tipo cloze (los lectores deben proporcionar una palabra correcta de la memoria a largo plazo, cómo calificar las respuestas aceptables que no son el reemplazo exacto, etc.) pueden resolverse mediante el uso de elementos cloze de opción múltiple cuidadosamente diseñados. Mostow y asociados también demostraron cómo este enfoque es tanto práctico como informativo.[5]
Implementación
[editar]Además del empleo en las pruebas, la eliminación cloze se puede usar en el aprendizaje, particularmente en el aprendizaje de idiomas, pero también en el aprendizaje de hechos. Esto se puede hacer manualmente, por ejemplo, cubriendo secciones de un texto con papel o haciendo más visibles secciones del texto con un resaltador, luego cubriendo la línea con una regla de color en el color complementario (digamos, una regla roja para un resaltador verde) por lo que el texto resaltado desaparece; esto es popular en Japón, por ejemplo. La eliminación de Cloze también se puede utilizar como parte del software de repetición espaciada. Por ejemplo, las aplicaciones SuperMemo y Anki cuentan con la creación semiautomática de pruebas cloze.
La eliminación de Cloze también se puede aplicar a un organizador gráfico, en el que se presenta un diagrama, un mapa, una cuadrícula o una imagen y se deben usar pistas contextuales para completar algunas etiquetas.[6] En particular, al aprender un tema con muchas imágenes, como la anatomía, un usuario de Anki puede emplear una oclusión de imagen para descartar partes de una imagen.[7]
Comparación con otras metodologías de prueba
[editar]Glover, 1989 comparó diferentes formas de recuerdo y su efectividad después de que había pasado un cierto período de tiempo para que se olvidara lo ocurrido. Glover se refirió a las pruebas de cloze como recuerdo con claves, que resultó ser menos eficaz que las pruebas de recuerdo libre (se le dio una pista genérica al alumno, se esperaba que el alumno recordara todo lo que sabía), pero más eficaz que las pruebas de reconocimiento.[8]
Procesamiento natural del lenguaje
[editar]La prueba cloze se usa a menudo como una tarea de apreciación en el procesamiento de lenguajes naturales (NLP) para evaluar el rendimiento de los modelos de lenguaje entrenados.[9] Las tareas tienen algunas variantes diferentes, como predecir la respuesta del espacio en blanco con[10] y sin[11] proporcionar las opciones correctas, predecir la oración final de una historia o pasaje,[12] etc. La prueba cloze es empleada en BERT (Bidirectional Encoder Representations from Transformers) o Representación de Codificador Bidireccional de Transformadores, que es una técnica basada en redes neuronales para el pre-entrenamiento del procesamiento del lenguaje natural (PLN) desarrollada por Google.[13][14][15]
Véase también
[editar]- Competencia comunicativa
- Un ejemplo de actividad de prueba y práctica de un estudio piloto en una comunidad rural de América Latina.[16]
Referencias
[editar]- ↑ «Prueba cloze». Centro Virtual Cervantes. Consultado el 9-5-2023. «Las pruebas cloze están formadas por un texto del que han sido suprimidas una serie de palabras de forma mecánica y sistemática. La tarea del candidato consiste en deducir por el contexto la palabra eliminada y rescribirla. Para determinar si la palabra dada por el candidato es «correcta o incorrecta» el corrector de la prueba dispone de una plantilla de corrección con la que contrastará la opción del candidato. Este tipo de prueba está elaborada con ítems de respuesta dirigida y, por tanto es una prueba de corrección objetiva que se califica con referencia a la norma.»
- ↑ Taylor, W. L. (1953). «Cloze procedure: A new tool for measuring readability». Journalism Quarterly 30 (4): 415-433. doi:10.1177/107769905303000401.
- ↑ Sachs, J.; Tung, P.; Lam, R. (1997). «How to Construct a Cloze Test: Lessons from Testing Measurement Theory Models». Perspectives (City University of Hong Kong) 9.
- ↑ McCray, Gareth; Brunfaut, Tineke (November 2016). «Investigating the Construct Measured by Banked Gap-fill Items: Evidence from Eye-tracking». Language Testing 35: 51-73. doi:10.1177/0265532216677105.
- ↑ Mostow, J.; Huang, Y.-T.; Jang, H.-J.; Weinstein, A.; Valeri, J. and Gates, D. (2017). Developing, evaluating, and refining an automatic generator of diagnostic multiple-choice cloze questions to assess children’s comprehension while reading. Natural Language Engineering, 23, 245–294.
- ↑ Robinson, M. E. (1 de enero de 1974). «Cloze Procedure and Spatial Comprehension Tests». Area 6 (2): 137-142.
- ↑ «Image Occlusion Enhanced for Anki 2.1 (alpha) - AnkiWeb». ankiweb.net. Consultado el 7 de julio de 2020.
- ↑ Glover, John. «The "Testing" Phenomenon: Not Gone but Nearly Forgotten». Journal of Educational Psychology: 5, 6.
- ↑ «Question Answering in NLP».
- ↑ «Language Models as Knowledge Bases?». Empirical Methods in Natural Language Processing.
- ↑ Lewis, Patrick; Denoyer, Ludovic; Riedel, Sebastian (August 2019). «Unsupervised Question Answering by Cloze Translation». Facebook Research: 4896-4910. arXiv:1906.04980. doi:10.18653/v1/P19-1484.
- ↑ «Story Cloze Test and ROCStories Corpora».
- ↑ Martínez, Merche (5 de noviembre de 2019). «Google BERT: actualización para entender el lenguaje natural». Human Level. Consultado el 28 de julio de 2020.
- ↑ Zhongyang Li , Xiao Ding y Ting Liu (21 de mayo de 2019). «Story Ending Prediction by Transferable BERT» [Predicción del final de la historia por BERT transferible]. Consultado el 9-5-2023.
- ↑ Cathal Horan (19 de abril de 2023). «Unmasking BERT: The Key to Transformer Model Performance» [Desenmascarando BERT: la clave para el rendimiento del modelo de transformador]. Neptune.ai (en inglés). Consultado el 9-5-2023.
- ↑ Chireac, S-M.; Francis, N. & McClure, J. (2019). “Awareness of form and pattern in literacy assessment: Classroom applications for the first and second language.” The Reading Matrix, 19 (1), 20—34.
Enlaces externos
[editar]- Hanzeli, Victor E. (May 1977). «The Effectiveness of Cloze Tests in Measuring the Competence of Students of French in an Academic Setting». The French Review 50 (6): 865-874.
- McCray, Gareth; Brunfaut, Tineke (November 2016). «Investigating the Construct Measured by Banked Gap-fill Items: Evidence from Eye-tracking». Language Testing 35: 51-73. doi:10.1177/0265532216677105.