Detección de copia en pruebas del Estado
Este trabajo implementa la metodología de detección de copia en exámenes de múltiples opciones expuesta en Sotaridona, van der Linden y Meijer [2006] basada en el índice Kappa de Cohen. Presentamos los resultados de aplicar esta metodología a las pruebas del Estado ICFES 2009 II. Este es, en el cono...
- Autores:
-
Jara Pinzón, Diego
Riascos Villegas, Álvaro José
Romero, Mauricio
- Tipo de recurso:
- Work document
- Fecha de publicación:
- 2010
- Institución:
- Universidad de los Andes
- Repositorio:
- Séneca: repositorio Uniandes
- Idioma:
- spa
- OAI Identifier:
- oai:repositorio.uniandes.edu.co:1992/8170
- Acceso en línea:
- http://hdl.handle.net/1992/8170
- Palabra clave:
- Índice Kappa
Copia de respuestas
ICFES
Trampa
Exámenes de opción múltiple
Índice Kappa
Mediciones y pruebas educativas
Pruebas de conocimiento
C19, I20
- Rights
- openAccess
- License
- http://creativecommons.org/licenses/by-nc-nd/4.0/
| id |
UNIANDES2_82623bb346fecf7ba3a5cc1df45b0d85 |
|---|---|
| oai_identifier_str |
oai:repositorio.uniandes.edu.co:1992/8170 |
| network_acronym_str |
UNIANDES2 |
| network_name_str |
Séneca: repositorio Uniandes |
| repository_id_str |
|
| dc.title.none.fl_str_mv |
Detección de copia en pruebas del Estado |
| dc.title.alternative.none.fl_str_mv |
Detecting answer copying in standardized tests |
| title |
Detección de copia en pruebas del Estado |
| spellingShingle |
Detección de copia en pruebas del Estado Índice Kappa Copia de respuestas ICFES Trampa Exámenes de opción múltiple Índice Kappa Mediciones y pruebas educativas Pruebas de conocimiento C19, I20 |
| title_short |
Detección de copia en pruebas del Estado |
| title_full |
Detección de copia en pruebas del Estado |
| title_fullStr |
Detección de copia en pruebas del Estado |
| title_full_unstemmed |
Detección de copia en pruebas del Estado |
| title_sort |
Detección de copia en pruebas del Estado |
| dc.creator.fl_str_mv |
Jara Pinzón, Diego Riascos Villegas, Álvaro José Romero, Mauricio |
| dc.contributor.author.none.fl_str_mv |
Jara Pinzón, Diego Riascos Villegas, Álvaro José Romero, Mauricio |
| dc.subject.keyword.none.fl_str_mv |
Índice Kappa Copia de respuestas ICFES Trampa Exámenes de opción múltiple |
| topic |
Índice Kappa Copia de respuestas ICFES Trampa Exámenes de opción múltiple Índice Kappa Mediciones y pruebas educativas Pruebas de conocimiento C19, I20 |
| dc.subject.armarc.none.fl_str_mv |
Índice Kappa Mediciones y pruebas educativas Pruebas de conocimiento |
| dc.subject.jel.none.fl_str_mv |
C19, I20 |
| description |
Este trabajo implementa la metodología de detección de copia en exámenes de múltiples opciones expuesta en Sotaridona, van der Linden y Meijer [2006] basada en el índice Kappa de Cohen. Presentamos los resultados de aplicar esta metodología a las pruebas del Estado ICFES 2009 II. Este es, en el conocimiento de los autores, el primer estudio en la literatura colombiana que busca proveer de herramientas cuantitativas de carácter estadístico a los administradores de las pruebas del Estado (y posiblemente muchas otras) para detectar casos sospechosos de fraude. Con este apoyo se pueden generar alertas y priorizar investigaciones detalladas caso por caso. Desde el punto de vista de la literatura académica especializada, el aporte del trabajo es evaluar, con datos reales, las bondades del índice Kappa propuesto por los autores y que ellos validan con datos artificiales generados mediante la simulación de un modelo de respuesta nominal. En particular, los resultados ponen en evidencia que, si bien el índice es muy valioso en la práctica, éste adolece de problemas de especificación difíciles de superar utilizando datos reales. Esto alerta sobre la necesidad de progresar en la implementación de metodologías más apropiadas para complementar la labor de supervisión y monitoreo desarrollada por los administradores de tales exámenes. Adicionalmente, este trabajo tiene como objetivo parcial servir de motivación y dar un primer paso para ahondar en esta área del conocimiento. |
| publishDate |
2010 |
| dc.date.issued.none.fl_str_mv |
2010 |
| dc.date.accessioned.none.fl_str_mv |
2018-09-27T16:51:00Z |
| dc.date.available.none.fl_str_mv |
2018-09-27T16:51:00Z |
| dc.type.spa.fl_str_mv |
Documento de trabajo |
| dc.type.coarversion.fl_str_mv |
http://purl.org/coar/version/c_970fb48d4fbd8a85 |
| dc.type.driver.spa.fl_str_mv |
info:eu-repo/semantics/workingPaper |
| dc.type.coar.spa.fl_str_mv |
http://purl.org/coar/resource_type/c_8042 |
| dc.type.content.spa.fl_str_mv |
Text |
| dc.type.redcol.spa.fl_str_mv |
https://purl.org/redcol/resource_type/WP |
| format |
http://purl.org/coar/resource_type/c_8042 |
| dc.identifier.issn.none.fl_str_mv |
1657-5334 |
| dc.identifier.uri.none.fl_str_mv |
http://hdl.handle.net/1992/8170 |
| dc.identifier.eissn.none.fl_str_mv |
1657-7191 |
| dc.identifier.doi.none.fl_str_mv |
10.57784/1992/8170 |
| dc.identifier.instname.spa.fl_str_mv |
instname:Universidad de los Andes |
| dc.identifier.reponame.spa.fl_str_mv |
reponame:Repositorio Institucional Séneca |
| dc.identifier.repourl.spa.fl_str_mv |
repourl:https://repositorio.uniandes.edu.co/ |
| identifier_str_mv |
1657-5334 1657-7191 10.57784/1992/8170 instname:Universidad de los Andes reponame:Repositorio Institucional Séneca repourl:https://repositorio.uniandes.edu.co/ |
| url |
http://hdl.handle.net/1992/8170 |
| dc.language.iso.none.fl_str_mv |
spa |
| language |
spa |
| dc.relation.ispartofseries.none.fl_str_mv |
Documentos CEDE No. 15 Mayo de 2010 |
| dc.relation.repec.spa.fl_str_mv |
https://ideas.repec.org/p/col/000089/007093.html |
| dc.rights.uri.*.fl_str_mv |
http://creativecommons.org/licenses/by-nc-nd/4.0/ |
| dc.rights.accessrights.spa.fl_str_mv |
info:eu-repo/semantics/openAccess |
| dc.rights.coar.spa.fl_str_mv |
http://purl.org/coar/access_right/c_abf2 |
| rights_invalid_str_mv |
http://creativecommons.org/licenses/by-nc-nd/4.0/ http://purl.org/coar/access_right/c_abf2 |
| eu_rights_str_mv |
openAccess |
| dc.format.extent.none.fl_str_mv |
28 páginas |
| dc.format.mimetype.none.fl_str_mv |
application/pdf |
| dc.publisher.none.fl_str_mv |
Universidad de los Andes, Facultad de Economía, CEDE |
| publisher.none.fl_str_mv |
Universidad de los Andes, Facultad de Economía, CEDE |
| institution |
Universidad de los Andes |
| bitstream.url.fl_str_mv |
https://repositorio.uniandes.edu.co/bitstreams/fc698a68-b8ed-46a2-a892-1b9b751c5f95/download https://repositorio.uniandes.edu.co/bitstreams/a6e1ecb6-6106-4dbf-bea2-8ed18706aeb4/download https://repositorio.uniandes.edu.co/bitstreams/270e1df7-60e9-4cdd-b2a2-16c0b1e17910/download |
| bitstream.checksum.fl_str_mv |
8244124067f2d2162a0bf7fb237fbb5a 3198c0a158d61dccc06cc6fa09a014cf 76aae3240ec8065c58eafd942e1d1873 |
| bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 |
| repository.name.fl_str_mv |
Repositorio institucional Séneca |
| repository.mail.fl_str_mv |
adminrepositorio@uniandes.edu.co |
| _version_ |
1812133877195472896 |
| spelling |
Al consultar y hacer uso de este recurso, está aceptando las condiciones de uso establecidas por los autores.http://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Jara Pinzón, Diego05cdda94-4c03-4758-8f4b-d630cb74ab6b600Riascos Villegas, Álvaro José10110600Romero, Mauriciod63643dd-3340-4e4c-a638-03fc8e702a586002018-09-27T16:51:00Z2018-09-27T16:51:00Z20101657-5334http://hdl.handle.net/1992/81701657-719110.57784/1992/8170instname:Universidad de los Andesreponame:Repositorio Institucional Sénecarepourl:https://repositorio.uniandes.edu.co/Este trabajo implementa la metodología de detección de copia en exámenes de múltiples opciones expuesta en Sotaridona, van der Linden y Meijer [2006] basada en el índice Kappa de Cohen. Presentamos los resultados de aplicar esta metodología a las pruebas del Estado ICFES 2009 II. Este es, en el conocimiento de los autores, el primer estudio en la literatura colombiana que busca proveer de herramientas cuantitativas de carácter estadístico a los administradores de las pruebas del Estado (y posiblemente muchas otras) para detectar casos sospechosos de fraude. Con este apoyo se pueden generar alertas y priorizar investigaciones detalladas caso por caso. Desde el punto de vista de la literatura académica especializada, el aporte del trabajo es evaluar, con datos reales, las bondades del índice Kappa propuesto por los autores y que ellos validan con datos artificiales generados mediante la simulación de un modelo de respuesta nominal. En particular, los resultados ponen en evidencia que, si bien el índice es muy valioso en la práctica, éste adolece de problemas de especificación difíciles de superar utilizando datos reales. Esto alerta sobre la necesidad de progresar en la implementación de metodologías más apropiadas para complementar la labor de supervisión y monitoreo desarrollada por los administradores de tales exámenes. Adicionalmente, este trabajo tiene como objetivo parcial servir de motivación y dar un primer paso para ahondar en esta área del conocimiento.This paper implements the answer-copying detection methodology for multiple-choice tests developed in Sotaridona, van der Linden and Meijer [2006], based on Cohen's Kappa index. We present results of this methodology applied to the standardized test for college admissions in Colombia that took place in the second semester of 2009. This is, to the authors' knowledge, the first study in Colombia that seeks to provide quantitative tools, of statistical nature, to detect fraud. This paper also evaluates, with real data, the performance of the Kappa index proposed in the referenced paper, which had only been evaluated using simulated data generated with a nominal item response model. In particular, we find evidence that there are misspecification problems that are difficult to overcome when using real data. We hope this paper motivates further applied research in this field in Colombia.28 páginasapplication/pdfspaUniversidad de los Andes, Facultad de Economía, CEDEDocumentos CEDE No. 15 Mayo de 2010https://ideas.repec.org/p/col/000089/007093.htmlDetección de copia en pruebas del EstadoDetecting answer copying in standardized testsDocumento de trabajoinfo:eu-repo/semantics/workingPaperhttp://purl.org/coar/resource_type/c_8042http://purl.org/coar/version/c_970fb48d4fbd8a85Texthttps://purl.org/redcol/resource_type/WPÍndice KappaCopia de respuestasICFESTrampaExámenes de opción múltipleÍndice KappaMediciones y pruebas educativasPruebas de conocimientoC19, I20Facultad de EconomíaPublicationORIGINALdcede2010-15.pdfdcede2010-15.pdfapplication/pdf972073https://repositorio.uniandes.edu.co/bitstreams/fc698a68-b8ed-46a2-a892-1b9b751c5f95/download8244124067f2d2162a0bf7fb237fbb5aMD51TEXTdcede2010-15.pdf.txtdcede2010-15.pdf.txtExtracted texttext/plain42236https://repositorio.uniandes.edu.co/bitstreams/a6e1ecb6-6106-4dbf-bea2-8ed18706aeb4/download3198c0a158d61dccc06cc6fa09a014cfMD54THUMBNAILdcede2010-15.pdf.jpgdcede2010-15.pdf.jpgIM Thumbnailimage/jpeg3710https://repositorio.uniandes.edu.co/bitstreams/270e1df7-60e9-4cdd-b2a2-16c0b1e17910/download76aae3240ec8065c58eafd942e1d1873MD551992/8170oai:repositorio.uniandes.edu.co:1992/81702024-06-04 15:28:45.699http://creativecommons.org/licenses/by-nc-nd/4.0/open.accesshttps://repositorio.uniandes.edu.coRepositorio institucional Sénecaadminrepositorio@uniandes.edu.co |