Formative assessment practices in the EFL classroom

Este estudio de caso, realizado por un profesor de tiempo completo, analizó los hallazgos de las prácticas de evaluación formativa por parte de profesores de inglés en un instituto de idiomas, teniendo en cuenta los resultados de aprendizaje. El estudio fue llevado a cabo con 15 profesores experimen...

Full description

Autores:
Herrera-Gómez, Juan Camilo
Tipo de recurso:
Fecha de publicación:
2022
Institución:
Universidad Externado de Colombia
Repositorio:
Biblioteca Digital Universidad Externado de Colombia
Idioma:
spa
OAI Identifier:
oai:bdigital.uexternado.edu.co:001/14659
Acceso en línea:
https://bdigital.uexternado.edu.co/handle/001/14659
https://doi.org/10.57998/bdigital/handle.001.1319
Palabra clave:
Aprendizaje - Educación
Personal docente - Enseñanza
Actividades estudiantiles
Evaluación formativa
Inglés como segunda lengua
Resultados de aprendizaje
Cuestionarios
Orientación
Rights
openAccess
License
http://purl.org/coar/access_right/c_abf2
id uexternad2_c88225984a5715bcde6bdd7e7e8ec689
oai_identifier_str oai:bdigital.uexternado.edu.co:001/14659
network_acronym_str uexternad2
network_name_str Biblioteca Digital Universidad Externado de Colombia
repository_id_str
dc.title.eng.fl_str_mv Formative assessment practices in the EFL classroom
title Formative assessment practices in the EFL classroom
spellingShingle Formative assessment practices in the EFL classroom
Aprendizaje - Educación
Personal docente - Enseñanza
Actividades estudiantiles
Evaluación formativa
Inglés como segunda lengua
Resultados de aprendizaje
Cuestionarios
Orientación
title_short Formative assessment practices in the EFL classroom
title_full Formative assessment practices in the EFL classroom
title_fullStr Formative assessment practices in the EFL classroom
title_full_unstemmed Formative assessment practices in the EFL classroom
title_sort Formative assessment practices in the EFL classroom
dc.creator.fl_str_mv Herrera-Gómez, Juan Camilo
dc.contributor.advisor.none.fl_str_mv Núñez Pardo, Astrid
dc.contributor.author.none.fl_str_mv Herrera-Gómez, Juan Camilo
dc.contributor.jury.none.fl_str_mv Téllez Téllez, María Fernanda
dc.subject.lemb.none.fl_str_mv Aprendizaje - Educación
Personal docente - Enseñanza
Actividades estudiantiles
topic Aprendizaje - Educación
Personal docente - Enseñanza
Actividades estudiantiles
Evaluación formativa
Inglés como segunda lengua
Resultados de aprendizaje
Cuestionarios
Orientación
dc.subject.proposal.spa.fl_str_mv Evaluación formativa
Inglés como segunda lengua
Resultados de aprendizaje
Cuestionarios
Orientación
description Este estudio de caso, realizado por un profesor de tiempo completo, analizó los hallazgos de las prácticas de evaluación formativa por parte de profesores de inglés en un instituto de idiomas, teniendo en cuenta los resultados de aprendizaje. El estudio fue llevado a cabo con 15 profesores experimentados en un instituto de inglés. Los instrumentos empleados para recolectar la información fueron cuestionarios, entrevista en profundidad, y artefactos de los profesores. Los hallazgos encontrados revelaron que la falta de orientación adecuada frena el proceso de implementación de evaluación formativa. Adicionalmente, se evidenció que el uso de rubricas, si se aplican debidamente, apoyan las prácticas de evaluación formativa. Estos dos hallazgos se conectan al uso mecánico que los profesores le dan a este tipo de evaluación. Además, otros hallazgos hablan de puntos de vista conflictivos que existen en las prácticas de evaluación formativa; esto significa que algunos profesores creen que este tipo de evaluación no sirve y necesita la evaluación sumativa como complemento; mientras otros profesores creen firmemente en este tipo de evaluación. Finalmente, el último hallazgo habla de los resultados poco probables que los estudiantes obtienen por medio de la evaluación formativa. Los participantes en este estudio aseguraron que, por medio de esta evaluación, los estudiantes pasan a cursos superiores sin tener el nivel de inglés necesario.
publishDate 2022
dc.date.issued.none.fl_str_mv 2022
dc.date.accessioned.none.fl_str_mv 2024-03-11T12:51:14Z
dc.date.available.none.fl_str_mv 2024-03-11T12:51:14Z
dc.type.none.fl_str_mv Trabajo de grado - Maestría
dc.type.coarversion.none.fl_str_mv http://purl.org/coar/version/c_970fb48d4fbd8a85
dc.type.content.none.fl_str_mv Text
dc.type.driver.none.fl_str_mv info:eu-repo/semantics/masterThesis
dc.type.redcol.none.fl_str_mv http://purl.org/redcol/resource_type/TM
dc.type.version.none.fl_str_mv info:eu-repo/semantics/publishedVersion
status_str publishedVersion
dc.identifier.doi.none.fl_str_mv 10.57998/bdigital/handle.001.1319
dc.identifier.uri.none.fl_str_mv https://bdigital.uexternado.edu.co/handle/001/14659
https://doi.org/10.57998/bdigital/handle.001.1319
identifier_str_mv 10.57998/bdigital/handle.001.1319
url https://bdigital.uexternado.edu.co/handle/001/14659
https://doi.org/10.57998/bdigital/handle.001.1319
dc.language.iso.none.fl_str_mv spa
language spa
dc.relation.references.none.fl_str_mv Diaz, L. (2018). The Effect of Self and Peer Assessment Tools on Students’ Oral Performance. The role of teacher-developed materials in fostering English language skills. U. Externado de Colombia.
Núñez-Pardo, A., & Téllez-Téllez, M. F. (2020). Proposal for the research line materials development and didactics Ascribed to the Research Group: Critical Pedagogy and Didactics for Social Transformation. (Unpublished manuscript), School of Education. Universidad Externado de Colombia.
Núñez-Pardo, A., & Téllez-Téllez, M.F. (2021). Tracing the cultural component in teacher generated EFL materials. In A. Núñez-Pardo, & M.F. Téllez-Téllez (Eds.) Defying culture hegemony through teacher generated EFL materials, 37-126. Departamento de Publicaciones Universidad Externado de Colombia. https://bdigital.uexternado.edu.co/handle/001/4671
Núñez, A., Téllez, M. F., & Castellanos, J. (2017). Teacher–developed materials in a master’s programme in education with emphasis on English didactics. In A. Núñez, M. F. Téllez, & J. Castellanos (Eds.), The role of teacher-developed materials in fostering English language skills (pp. 13-56). Departamento de Publicaciones Universidad Externado de Colombia.
dc.rights.accessrights.none.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.none.fl_str_mv http://purl.org/coar/access_right/c_abf2
dc.rights.license.none.fl_str_mv Atribución-NoComercial-SinDerivadas 4.0 Internacional (CC BY-NC-ND 4.0)
dc.rights.uri.none.fl_str_mv https://creativecommons.org/licenses/by-nc-nd/4.0/
eu_rights_str_mv openAccess
rights_invalid_str_mv http://purl.org/coar/access_right/c_abf2
Atribución-NoComercial-SinDerivadas 4.0 Internacional (CC BY-NC-ND 4.0)
https://creativecommons.org/licenses/by-nc-nd/4.0/
dc.format.extent.none.fl_str_mv 111 páginas
dc.format.mimetype.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidad Externado de Colombia
dc.publisher.faculty.none.fl_str_mv Facultad Ciencias de la Educación
dc.publisher.place.none.fl_str_mv Bogotá
dc.publisher.program.none.fl_str_mv Maestría en Educación Modalidad Investigación con Énfasis en Didáctica del Inglés
publisher.none.fl_str_mv Universidad Externado de Colombia
institution Universidad Externado de Colombia
bitstream.url.fl_str_mv https://bdigital.uexternado.edu.co/bitstreams/a5181fd2-533d-42ed-b93c-22b9b637c251/download
https://bdigital.uexternado.edu.co/bitstreams/b2bb5887-28ec-4fc2-b5f1-4f804daf8682/download
https://bdigital.uexternado.edu.co/bitstreams/d21c1664-2d6c-4ad6-a493-afc8567aba70/download
https://bdigital.uexternado.edu.co/bitstreams/e2b06252-b7eb-4a99-9c51-c0056a35a048/download
https://bdigital.uexternado.edu.co/bitstreams/cebe4547-f6bb-45bf-be5d-bd6eeef64758/download
https://bdigital.uexternado.edu.co/bitstreams/9d6c1a2b-8618-4142-97a0-0270cc9ce611/download
https://bdigital.uexternado.edu.co/bitstreams/2a58f83c-30ec-4875-9441-7e62866d380d/download
bitstream.checksum.fl_str_mv c9b871af9d220cc8f209472e4ae1614a
b70a549ab20c765de00527cd692fa556
45f95ec1eced24afa40031e35f50db3d
2dbad9757d83600804fc5d1155ab654d
0c3eea52671646e46cec880b21471483
702645c2e02e8af657ab7a8628e107ff
2589d66b28ecfbe9a2d9249135d09248
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
MD5
MD5
MD5
repository.name.fl_str_mv Universidad Externado de Colombia
repository.mail.fl_str_mv metabiblioteca@metabiblioteca.org
_version_ 1812172934538592256
spelling Núñez Pardo, Astridvirtual::7443-1Herrera-Gómez, Juan CamiloTéllez Téllez, María Fernandavirtual::7444-12024-03-11T12:51:14Z2024-03-11T12:51:14Z2022Este estudio de caso, realizado por un profesor de tiempo completo, analizó los hallazgos de las prácticas de evaluación formativa por parte de profesores de inglés en un instituto de idiomas, teniendo en cuenta los resultados de aprendizaje. El estudio fue llevado a cabo con 15 profesores experimentados en un instituto de inglés. Los instrumentos empleados para recolectar la información fueron cuestionarios, entrevista en profundidad, y artefactos de los profesores. Los hallazgos encontrados revelaron que la falta de orientación adecuada frena el proceso de implementación de evaluación formativa. Adicionalmente, se evidenció que el uso de rubricas, si se aplican debidamente, apoyan las prácticas de evaluación formativa. Estos dos hallazgos se conectan al uso mecánico que los profesores le dan a este tipo de evaluación. Además, otros hallazgos hablan de puntos de vista conflictivos que existen en las prácticas de evaluación formativa; esto significa que algunos profesores creen que este tipo de evaluación no sirve y necesita la evaluación sumativa como complemento; mientras otros profesores creen firmemente en este tipo de evaluación. Finalmente, el último hallazgo habla de los resultados poco probables que los estudiantes obtienen por medio de la evaluación formativa. Los participantes en este estudio aseguraron que, por medio de esta evaluación, los estudiantes pasan a cursos superiores sin tener el nivel de inglés necesario.This qualitative case study, conducted by a full-time teacher, aimed to analyze what the teachers’ formative assessment practices in a private EFL institute revealed about English learning outcomes. The study was carried out with a group of fifteen senior English teachers at a language school. The information-gathering instruments were questionnaires, in-depth interviews, and teachers’ artifacts. Findings revealed that lack of proper orientation hinders the implementation process of formative assessment. Additionally, it was noticed that the use of rubrics, if properly applied, supports formative assessment practices. These two findings connect to the mechanical approach of teachers’ formative assessment practices. Moreover, other findings unveil conflicting views of formative assessment practices, meaning some teachers think this kind of assessment is useless and needs the aid of summative assessment, and other teachers believe in this practice inside their classrooms. Finally, the last finding connects to unreliable students’ learning outcomes because, as asserted by the participants, this kind of assessment does not reveal students’ real learning achievements, meaning students go from course to course without reaching the expected level of proficiency.MaestríaMagíster en Educación Modalidad Investigación con Énfasis en Didáctica del Inglés111 páginasapplication/pdf10.57998/bdigital/handle.001.1319https://bdigital.uexternado.edu.co/handle/001/14659https://doi.org/10.57998/bdigital/handle.001.1319spaUniversidad Externado de ColombiaFacultad Ciencias de la EducaciónBogotáMaestría en Educación Modalidad Investigación con Énfasis en Didáctica del InglésDiaz, L. (2018). The Effect of Self and Peer Assessment Tools on Students’ Oral Performance. The role of teacher-developed materials in fostering English language skills. U. Externado de Colombia.Núñez-Pardo, A., & Téllez-Téllez, M. F. (2020). Proposal for the research line materials development and didactics Ascribed to the Research Group: Critical Pedagogy and Didactics for Social Transformation. (Unpublished manuscript), School of Education. Universidad Externado de Colombia.Núñez-Pardo, A., & Téllez-Téllez, M.F. (2021). Tracing the cultural component in teacher generated EFL materials. In A. Núñez-Pardo, & M.F. Téllez-Téllez (Eds.) Defying culture hegemony through teacher generated EFL materials, 37-126. Departamento de Publicaciones Universidad Externado de Colombia. https://bdigital.uexternado.edu.co/handle/001/4671Núñez, A., Téllez, M. F., & Castellanos, J. (2017). Teacher–developed materials in a master’s programme in education with emphasis on English didactics. In A. Núñez, M. F. Téllez, & J. Castellanos (Eds.), The role of teacher-developed materials in fostering English language skills (pp. 13-56). Departamento de Publicaciones Universidad Externado de Colombia.info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Atribución-NoComercial-SinDerivadas 4.0 Internacional (CC BY-NC-ND 4.0)https://creativecommons.org/licenses/by-nc-nd/4.0/Aprendizaje - EducaciónPersonal docente - EnseñanzaActividades estudiantilesEvaluación formativaInglés como segunda lenguaResultados de aprendizajeCuestionariosOrientaciónFormative assessment practices in the EFL classroomTrabajo de grado - Maestríahttp://purl.org/coar/version/c_970fb48d4fbd8a85Textinfo:eu-repo/semantics/masterThesishttp://purl.org/redcol/resource_type/TMinfo:eu-repo/semantics/publishedVersionPublicationhttps://scienti.minciencias.gov.co/cvlac/visualizador/generarCurriculoCv.do?cod_rh=0000046108virtual::7443-1https://scienti.minciencias.gov.co/cvlac/visualizador/generarCurriculoCv.do?cod_rh=0000046132virtual::7444-1https://scholar.google.com/citations?view_op=list_works&hl=es&user=oXOxlBgAAAAJvirtual::7443-1https://scholar.google.com/citations?view_op=list_works&hl=es&user=mlZra0AAAAAJvirtual::7444-10000-0001-6176-4520virtual::7443-10000-0002-9010-1862virtual::7444-1e1edfd7f-731c-43b7-867b-b298bbb7bd0cvirtual::7443-1e1edfd7f-731c-43b7-867b-b298bbb7bd0cvirtual::7443-18ff6fcf7-6fee-49a2-b829-2a16da448b83virtual::7444-18ff6fcf7-6fee-49a2-b829-2a16da448b83virtual::7444-1ORIGINALCAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom.pdfCAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom.pdfTrabajo de gradoapplication/pdf2000345https://bdigital.uexternado.edu.co/bitstreams/a5181fd2-533d-42ed-b93c-22b9b637c251/downloadc9b871af9d220cc8f209472e4ae1614aMD51CAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom-Autorizacion.pdfCAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom-Autorizacion.pdfAutorizaciónapplication/pdf162879https://bdigital.uexternado.edu.co/bitstreams/b2bb5887-28ec-4fc2-b5f1-4f804daf8682/downloadb70a549ab20c765de00527cd692fa556MD52LICENSElicense.txtlicense.txttext/plain; charset=utf-86609https://bdigital.uexternado.edu.co/bitstreams/d21c1664-2d6c-4ad6-a493-afc8567aba70/download45f95ec1eced24afa40031e35f50db3dMD53TEXTCAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom.pdf.txtCAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom.pdf.txtExtracted texttext/plain104019https://bdigital.uexternado.edu.co/bitstreams/e2b06252-b7eb-4a99-9c51-c0056a35a048/download2dbad9757d83600804fc5d1155ab654dMD54CAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom-Autorizacion.pdf.txtCAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom-Autorizacion.pdf.txtExtracted texttext/plain10854https://bdigital.uexternado.edu.co/bitstreams/cebe4547-f6bb-45bf-be5d-bd6eeef64758/download0c3eea52671646e46cec880b21471483MD56THUMBNAILCAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom.pdf.jpgCAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom.pdf.jpgGenerated Thumbnailimage/jpeg5412https://bdigital.uexternado.edu.co/bitstreams/9d6c1a2b-8618-4142-97a0-0270cc9ce611/download702645c2e02e8af657ab7a8628e107ffMD55CAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom-Autorizacion.pdf.jpgCAC-spa-2022-Formative_assessment_practices_in_the_efl_classroom-Autorizacion.pdf.jpgGenerated Thumbnailimage/jpeg14922https://bdigital.uexternado.edu.co/bitstreams/2a58f83c-30ec-4875-9441-7e62866d380d/download2589d66b28ecfbe9a2d9249135d09248MD57001/14659oai:bdigital.uexternado.edu.co:001/146592024-04-09 15:00:26.84https://creativecommons.org/licenses/by-nc-nd/4.0/https://bdigital.uexternado.edu.coUniversidad Externado de Colombiametabiblioteca@metabiblioteca.orgPGRpdj4KICA8cD4KICAgIFlvLCBhY3R1YW5kbyBlbiBub21icmUgeSByZXByZXNlbnRhY2nDs24gcHJvcGlhLCBlbiBtaSAobnVlc3RyYSkgY2FsaWRhZCBkZSBhdXRvcihlcykgZGUgbGEocykgb2JyYShzKSBlbnRyZWdvCiAgICAoZW50cmVnYW1vcykgdW5hICgxKSBjb3BpYSBkZSBsYShzKSBvYnJhKHMpIGluZGljYWRhKHMpPHNtYWxsPlsxXTwvc21hbGw+LCBlbiBlbCBmb3JtYXRvIHkgZXh0ZW5zacOzbiBlc3RhYmxlY2lkb3MKICAgIHBvciBsYSBCaWJsaW90ZWNhCiAgICBkZSBsYSBVbml2ZXJzaWRhZCBFeHRlcm5hZG8gZGUgQ29sb21iaWEsIHkgYmFqbyBsb3MgcGFyw6FtZXRyb3MgZSBpbnN0cnVjY2lvbmVzIGRlZmluaWRvcyBwb3IgbGEKICAgIG1pc21hPHNtYWxsPlsyXTwvc21hbGw+LCB5IGF1dG9yaXpvCiAgICAoYXV0b3JpemFtb3MpIGEgbGEgVW5pdmVyc2lkYWQgRXh0ZXJuYWRvIGRlIENvbG9tYmlhLCBwYXJhIGVmZWN0b3MgZGUgdXNvLCByZXByb2R1Y2Npw7NuIChzaW4gZmluZXMgZGUgbHVjcm8pLAogICAgZGlzdHJpYnVjacOzbiAocHLDqXN0YW1vKSB5IGNvbXVuaWNhY2nDs24gcMO6YmxpY2EgKHB1ZXN0YSBhIGRpc3Bvc2ljacOzbikgZGUgbGEocykgb2JyYShzKSBvYmpldG8gZGVsIHByZXNlbnRlCiAgICBkb2N1bWVudG8sCiAgICBlbiBmb3JtYXRvIGVsZWN0csOzbmljbyBhYmllcnRvIChjb25zdWx0YSBhY2Nlc28gYWJpZXJ0byBvbi1saW5lKSwgZW4gbG9zIHTDqXJtaW5vcyBlc3RhYmxlY2lkb3MgZW4gbGEgTGV5IDIzIGRlIDE5ODIsCiAgICBMZXkgNDQgZGUgMTk5MywgTGV5IDE0NTAgZGUgMjAxMSwgTGV5IDE5MTUgZGUgMjAxOCwgRGVjaXNpw7NuIEFuZGluYSAzNTEgZGUgMTk5MywgRGVjcmV0byA0NjAgZGUgMTk5NSwgeSBkZW3DoXMgbm9ybWFzCiAgICBnZW5lcmFsZXMgc29icmUgbGEgbWF0ZXJpYS4KICA8L3A+CiAgPHA+CiAgICBPdG9yZ28gKG90b3JnYW1vcykgZXN0YSBhdXRvcml6YWNpw7NuIGNvbiBlbCBmaW4gZGUgY29sYWJvcmFyIHkgcGFydGljaXBhciBlbiBlbCBmaW4gw7psdGltbyBkZSBsYSBVbml2ZXJzaWRhZAogICAgRXh0ZXJuYWRvIGRlIENvbG9tYmlhLCBlcyBkZWNpciwgZW4gbGEgcHJvbW9jacOzbiBkZSBsYSBlZHVjYWNpw7NuIHkgbGEgY3VsdHVyYSwgcG9yIG1lZGlvIGRlbCBhY2Nlc28gYWJpZXJ0byBhIGxhCiAgICBtaXNtYSwgY29tbyBoZXJyYW1pZW50YSBkZSBpbmNsdXNpw7NuIHkgcHJvZ3Jlc28gZGUgbGEgc29jaWVkYWQgY29sb21iaWFuYS4KICA8L3A+CiAgPHA+CiAgICBMYSBwcmVzZW50ZSBhdXRvcml6YWNpw7NuIHNlIG90b3JnYSBiYWpvIGxhcyBzaWd1aWVudGVzOgogIDwvcD4KICA8Y2VudGVyPgogICAgPGI+Q0zDgVVTVUxBUzwvYj4KICA8L2NlbnRlcj4KICA8cD4KICAgIDxiPlByaW1lcmE6PC9iPiBsYSBsaWNlbmNpYSBwZXJtaXRhIGEgbGEgVW5pdmVyc2lkYWQgRXh0ZXJuYWRvIGRlIENvbG9tYmlhLCB1c2FyLCByZXByb2R1Y2lyIChzaW4gZmluZXMgZGUgbHVjcm8pLAogICAgZGlzdHJpYnVpciAocHLDqXN0YW1vKSB5IGNvbXVuaWNhciBww7pibGljYW1lbnRlIGxhKHMpIG9icmEocykgKHB1ZXN0YSBhIGRpc3Bvc2ljacOzbikgZW4gZm9ybWF0byBlbGVjdHLDs25pY28gYWJpZXJ0bwogICAgKGNvbnN1bHRhIGFjY2VzbyBhYmllcnRvIG9uLWxpbmUpIGVuIGxhIEJpYmxpb3RlY2EgRGlnaXRhbCBkZSBlc3RhIENhc2EgZGUgRXN0dWRpb3MuCiAgPC9wPgogIDxwPgogICAgPGI+U2VndW5kYTo8L2I+IGxhIGF1dG9yaXphY2nDs24gb2JqZXRvIGRlbCBwcmVzZW50ZSBkb2N1bWVudG8sIHNlIGVudGllbmRlIG90b3JnYWRhIGEgdMOtdHVsbyBncmF0dWl0byBwYXJhIGVsCiAgICB0ZXJyaXRvcmlvIGRlCiAgICBDb2xvbWJpYSB5IHRvZG9zIGxvcyBkZW3DoXMgcGHDrXNlcyBkZWwgbXVuZG8sIHBvciBlbCB0w6lybWlubyBkZSBwcm90ZWNjacOzbiBlc3RhYmxlY2lkbyBlbiBsYSBsZWdpc2xhY2nDs24gdmlnZW50ZSB5CiAgICBhcGxpY2FibGUgcGFyYSBDb2xvbWJpYS4KICA8L3A+CiAgPHA+CiAgICA8Yj5UZXJjZXJhOjwvYj4gbGEgbGljZW5jaWEgYW50ZXMgbWVuY2lvbmFkYSBzZSBoYWNlIGV4dGVuc2l2YSBhIGxhcyBmYWN1bHRhZGVzIHkgZGVyZWNob3Mgc29icmUgbGEocykgb2JyYShzKSBlbgogICAgZm9ybWF0byBvCiAgICBzb3BvcnRlIG1hdGVyaWFsLCBkaWdpdGFsLCBlbGVjdHLDs25pY28sIHZpcnR1YWwsIMOzcHRpY28sIHVzbyBlbiByZWQsIGludGVybmV0LCBleHRyYW5ldCBlIGludHJhbmV0LgogIDwvcD4KICA8cD4KICAgIDxiPkN1YXJ0YTo8L2I+IGxhIGF1dG9yaXphY2nDs24gb3RvcmdhZGEgcG9yIG1lZGlvIGRlIGVzdGUgZG9jdW1lbnRvIG5vIGVzIGV4Y2x1c2l2YSwgcG9yIGxvIHF1ZSBlbCAobG9zKSBhdXRvcihlcykKICAgIHBvZHLDoW4KICAgIHNlZ3VpciBleHBsb3RhbmRvIGxhKHMpIG9icmEocykgc2luIHF1ZSBlbGxvIGltcGxpcXVlIGFmZWN0YWNpw7NuIGFsZ3VuYSBhIGxhIHByZXNlbnRlIGF1dG9yaXphY2nDs24uCiAgPC9wPgogIDxwPgogICAgPGI+UXVpbnRhOjwvYj4gZWwgKGxvcykgYXV0b3IoZXMpIG1hbmlmaWVzdGEobikgcXVlIGxhKHMpIG9icmEocykgb2JqZXRvIGRlIGxhIHByZXNlbnRlIGF1dG9yaXphY2nDs24gZXMgKHNvbikKICAgIG9yaWdpbmFsKHMpIHkKICAgIGZ1ZSAoZnVlcm9uKSByZWFsaXphZGEocykgc2luIHZpb2xhciBvIHVzdXJwYXIgZGVyZWNob3MgZGUgYXV0b3IgZGUgdGVyY2Vyb3MsIHBvciBsbyB0YW50bywgbGEocykgb2JyYShzKSBlcyAoc29uKQogICAgZGUKICAgIHN1IGV4Y2x1c2l2YSBhdXRvcsOtYSB5IGRldGVudGEobikgbGEgdGl0dWxhcmlkYWQgZGUgbGEocykgbWlzbWEocykuCiAgPC9wPgogIDxwPgogICAgRW4gY2FzbyBkZSBwcmVzZW50YXJzZSBjdWFscXVpZXIgcmVjbGFtYWNpw7NuIG8gYWNjacOzbiBwb3IgcGFydGUgZGUgdW4gdGVyY2VybyBlbiBjdWFudG8gYSBsb3MgZGVyZWNob3MgZGUgYXV0b3IKICAgIHNvYnJlIGxhKHMpIG9icmEocykgZW4gY3Vlc3Rpw7NuLCBlbCAobG9zKSBhdXRvcihlcykgYXN1bWlyw6EobikgdG9kYSBsYSByZXNwb25zYWJpbGlkYWQgeSBzYWxkcsOhKG4pIGVuIGRlZmVuc2EgZGUgbGFzCiAgICBmYWN1bHRhZGVzIHkgZGVyZWNob3MgYXF1w60gYXV0b3JpemFkb3MsIGFzdW1pZW5kbyBjdWFscXVpZXIgY29zdG8gcG9yIGVzdGUgY29uY2VwdG8uIFBhcmEgdG9kb3MgbG9zIGVmZWN0b3MsIGxhCiAgICBVbml2ZXJzaWRhZCBFeHRlcm5hZG8gZGUgQ29sb21iaWEgYWN0w7phIGNvbW8gdW4gdGVyY2VybyBkZSBidWVuYSBmZS4KICA8L3A+CiAgPHA+CiAgICA8Yj5TZXh0YTo8L2I+IGxhIHByZXNlbnRlIGxpY2VuY2lhIG5vIGltcGxpY2EgbGEgY2VzacOzbiBkZSBsb3MgZGVyZWNob3MgbW9yYWxlcyBzb2JyZSBsYShzKSBvYnJhKHMpLCBwb3IgY3VhbnRvIGRlCiAgICBjb25mb3JtaWRhZCBjb24gbG8gZXN0YWJsZWNpZG8gcG9yIGVsIGFydMOtY3VsbyAzMCBkZSBsYSBMZXkgMjMgZGUgMTk4MiwgZWwgYXJ0w61jdWxvIDExIGRlIGxhIERlY2lzacOzbiBBbmRpbmEgMzUxIGRlCiAgICAxOTkzIHkgZGVtw6FzIG5vcm1hcyBjb25jb3JkYW50ZXMsIGVzdG9zIGRlcmVjaG9zIHNvbiBpcnJlbnVuY2lhYmxlcywgaW1wcmVzY3JpcHRpYmxlcywgaW5lbWJhcmdhYmxlcyBlIGluYWxpZW5hYmxlczsKICAgIGlndWFsbWVudGUsIGVzdGEgbGljZW5jaWEgbm8gaW1wbGljYSBsYSBjZXNpw7NuIGRlIGxvcyBkZXJlY2hvcyBwYXRyaW1vbmlhbGVzIHNvYnJlIGxhKHMpIG9icmEocykuCiAgPC9wPgogIDxwPgogICAgPGI+U8OpcHRpbWE6PC9iPiBlbCAobG9zKSBhdXRvcmVzIG1hbmlmaWVzdGEobikgcXVlIGxvcyBkZXJlY2hvcyBwYXRyaW1vbmlhbGVzIHNvYnJlIGxhKHMpIG9icmEocykgZW4gY3Vlc3Rpw7NuIG5vIGhhbgogICAgc2lkbyBjZWRpZG9zIGNvbiBhbnRlbGFjacOzbiB5IHNvYnJlIGVsbG9zIG5vIHBlc2EgbmluZ8O6biBncmF2YW1lbiBuaSBsaW1pdGFjacOzbiBlbiBzdSB1c28gbyB1dGlsaXphY2nDs24uCiAgPC9wPgogIDxwPgogICAgPGI+T2N0YXZhOjwvYj4gbGEgcHJlc2VudGUgbGljZW5jaWEgaW5jbHV5ZSBlbCBwZXJtaXNvIHBhcmEgbW9kaWZpY2FyIGVsIGZvcm1hdG8vc29wb3J0ZSBlbiBxdWUgc2UgZW50cmVnYSBsYShzKQogICAgb2JyYShzKS4KICA8L3A+CiAgPHA+CiAgICA8Yj5Ob3ZlbmE6PC9iPiBlbiBjYXNvIGRlIG5lY2VzaXRhcnNlIGNvcGlhcyBhZGljaW9uYWxlcyBwb3IgcGFydGUgZGUgbGEgVW5pdmVyc2lkYWQgRXh0ZXJuYWRvIGRlIENvbG9tYmlhLCBlbCAobG9zKQogICAgYXV0b3IoZXMpIGRlYmVyw6EobikgZW50cmVnYXJsYXMsIHkgc2UgZW50aWVuZGUgcXVlIGVzdGEgYXV0b3JpemFjacOzbiBzZSBoYWNlIGV4dGVuc2l2YSBhIGxhcyBudWV2YXMgY29waWFzIGRlIGxhKHMpCiAgICBvYnJhKHMpLgogIDwvcD4KICA8cD4KICAgIDxiPkTDqWNpbWE6PC9iPiBlc3RhIGF1dG9yaXphY2nDs24gc2UgZW50aWVuZGUgY29tbyB1bmEgY29udHJpYnVjacOzbiBwb3IgcGFydGUgZGVsIChsb3MpIGF1dG9yKGVzKSBhIGxhIGRpZnVzacOzbiBkZWwKICAgIGNvbm9jaW1pZW50byB5L28gZGVzYXJyb2xsbyB0ZWNub2zDs2dpY28sIGN1bHR1cmFsIG8gY2llbnTDrWZpY28gZGUgbGEgY29tdW5pZGFkIG8gZGVsIHBhw61zLCBlbiBlbCDDoXJlYSBlbiBxdWUgc2UKICAgIGluc2NyaWJlLgogIDwvcD4KICA8cD4KICAgIDxiPkTDqWNpbWEgcHJpbWVyYTo8L2I+IGxhIFVuaXZlcnNpZGFkIEV4dGVybmFkbyBkZSBDb2xvbWJpYSBzZSBjb21wcm9tZXRlIGEgbGxldmFyIGEgY2FibyBsYXMgYWNjaW9uZXMgcXVlIHNlCiAgICBlbmN1ZW50cmVuIGEgc3UgYWxjYW5jZSBwYXJhIHByZXNlcnZhciBsYShzKSBvYnJhKHMpIGVuIGVsIGVzdGFkbyBlbiBxdWUgc2UgZW5jdWVudHJhKG4pLgogIDwvcD4KICA8cD4KICAgIEVuIGNhc28gZGUgY2F1c2FzIHNvYnJldmVuaWRhcyBlIGltcHJldmlzaWJsZXMsIGNhc28gZm9ydHVpdG8gbyBmdWVyemEgbWF5b3IsIG8gaGVjaG8gZXhjbHVzaXZvIGRlIHRlcmNlcm8sIGxhCiAgICBVbml2ZXJzaWRhZCBFeHRlcm5hZG8gZGUgQ29sb21iaWEgbm8gcmVzcG9uZGVyw6EgcG9yIG5pbmfDum4gcGVyanVpY2lvIHF1ZSBzZSBjYXVzZSBhIGxhKHMpIG9icmEocykuCiAgPC9wPgogIDxwPgogICAgPGI+RMOpY2ltYSBzZWd1bmRhOjwvYj4gbGEgVW5pdmVyc2lkYWQgRXh0ZXJuYWRvIGRlIENvbG9tYmlhIGN1bXBsaXLDoSBsYXMgbm9ybWFzIHNvYnJlIGxvcyBkZXJlY2hvcyBtb3JhbGVzLCBkYW5kbwogICAgbG9zIGNyw6lkaXRvcyByZXNwZWN0aXZvcyBhbChsb3MpIGF1dG9yKGVzKSBlbiBsYXMgYWNjaW9uZXMgZGUgcmVwcm9kdWNjacOzbiwgZGlzdHJpYnVjacOzbiwgY29tdW5pY2FjacOzbiBww7pibGljYSB5CiAgICB0b2RhcyBhcXVlbGxhcyBxdWUgaW1wbGlxdWVuIGVsIHVzbyB5IHV0aWxpemFjacOzbiBhdXRvcml6YWRhLgogIDwvcD4KICA8cD4KICAgIDxiPkTDqWNpbWEgdGVyY2VyYTo8L2I+IGxhIHByZXNlbnRlIGF1dG9yaXphY2nDs24gbm8gb2JsaWdhIGEgZXN0YSBDYXNhIGRlIEVzdHVkaW9zIGEgaW5jbHVpciBsYShzKSBvYnJhKHMpIGVuIGxhCiAgICBCaWJsaW90ZWNhIERpZ2l0YWwsIGRldGVybWluYWNpw7NuIHF1ZSBjb3JyZXNwb25kZSDDum5pY2EgeSBleGNsdXNpdmFtZW50ZSBhIGxhIFVuaXZlcnNpZGFkLCB5IHNlIGFkb3B0YXLDoSBkZQogICAgY29uZm9ybWlkYWQgY29uIGxvcyBjcml0ZXJpb3MgZXN0YWJsZWNpZG9zIHBvciBlbGxhIHBhcmEgdGFsIGVmZWN0by4KICA8L3A+CgogIDxkaXY+CiAgICA8cD4KICAgICAgPHNtYWxsPlsxXSBObyBhcGxpY2EgcGFyYSBwdWJsaWNhY2lvbmVzIGRlIGxhIGVkaXRvcmlhbCBkZSBsYSBVbml2ZXJzaWRhZCBFeHRlcm5hZG8gZGUgQ29sb21iaWEuPC9zbWFsbD4KICAgIDwvcD4KICAgIDxwPgogICAgICA8c21hbGw+WzJdIFBhcmEgdHJhYmFqb3MgZGUgZ3JhZG86IDxhIGhyZWY9Imh0dHBzOi8vd3d3LnVleHRlcm5hZG8uZWR1LmNvL2JpYmxpb3RlY2EvZW50cmVnYXItbWktdGVzaXMvIgogICAgICAgICAgdGFyZ2V0PSJfYmxhbmsiCiAgICAgICAgICByZWw9Im5vb3BlbmVyIG5vcmVmZXJyZXIiPmh0dHBzOi8vd3d3LnVleHRlcm5hZG8uZWR1LmNvL2JpYmxpb3RlY2EvZW50cmVnYXItbWktdGVzaXMvPC9hPjwvc21hbGw+CiAgICA8L3A+CiAgICA8cD4KICAgICAgPHNtYWxsPlBhcmEgYmlibGlvdGVjYSBkaWdpdGFsOiA8YQogICAgICAgICAgaHJlZj0iaHR0cHM6Ly9iZGlnaXRhbC51ZXh0ZXJuYWRvLmVkdS5jby9iaXRzdHJlYW0vaGFuZGxlLzAwMS80MDg5L0xELXNwYS0yMDIxLURpcmVjdHJpY2VzX2RlX0JpYmxpb3RlY2FfRGlnaXRhbCIKICAgICAgICAgIHRhcmdldD0iX2JsYW5rIgogICAgICAgICAgcmVsPSJub29wZW5lciBub3JlZmVycmVyIj5odHRwczovL2JkaWdpdGFsLnVleHRlcm5hZG8uZWR1LmNvL2JpdHN0cmVhbS9oYW5kbGUvMDAxLzQwODkvTEQtc3BhLTIwMjEtRGlyZWN0cmljZXNfZGVfQmlibGlvdGVjYV9EaWdpdGFsLjwvYT48L3NtYWxsPgogICAgPC9wPgogIDwvZGl2Pgo8L2Rpdj4K