
Assessing Teacher Digital Competence: the Construction of an Instrument for Measuring the Knowledge of Pre-Service Teachers
ARTICLE
Español/Spanish La evaluación de la competencia digital docente: construcción de un instrumento para medir los conocimientos de futuros docentes
José Lázaro-Cantabrana, Mireia Usart-Rodríguez, Mercè Gisbert-Cervera
NAERJ Volume 8, Number 1, ISSN 2254-7339 Publisher: University of Alicante
Abstract
Assessing competences always poses a challenge and can be even more complicated when tackling a multidimensional competence like teacher digital competence (TDC). TDC is understood to consist of different dimensions linked to its components. This complexity gives rise to the need to organize and systematize both TDC training and its evaluation through a standard based on validated benchmark indicators. Designing and developing an instrument for TDC assessment has been a two-phase process. The COMDID-A self-assessment tool was developed in the first phase and COMDID-C, an instrument for assessing knowledge related to TDC, in the second. In this article we present the process of constructing the COMDID-C instrument. For this first stage, we worked with two samples, an expert validation and a pilot test sample. Due to the complexity of the test, we conducted a preliminary evaluation of the validity of its content, construction and reliability. Our results indicate that the test is well designed and consistent with its intended purpose. The next step will be administering the test to a larger sample that will allow the instrument to be externally validated.
Español/Spanish:
La evaluación de competencias siempre supone un reto y más si tenemos que abordar una competencia multidimensional como la competencia digital docente (CDD). La CDD la entendemos organizada en diferentes dimensiones vinculadas a sus componentes. De esta complejidad se deriva la necesidad de organizar y sistematizar tanto la formación en CDD como su la evaluación mediante un estándar basado en indicadores de referencia que estén contrastados. Diseñar y desarrollar un instrumento para la evaluación de la CDD ha sido un proceso en dos fases. En la primera, se ha desarrollado un instrumento de autoevaluación COMDID-A y en la segunda COMDID-C, un instrumento para la evaluación de conocimientos vinculados a la CDD. En este artículo presentamos la construcción de COMDID-C. Para esta primera fase se trabaja con dos muestras, una para la validación de expertos y otra para el test piloto. Debido a la complejidad de la prueba se realiza un primer cálculo de la validez de contenido, constructo y fiabilidad. Los resultados indican que es una prueba que está bien diseñada y es coherente con el objetivo que se propone. El siguiente paso será la aplicación de la herramienta en una muestra mayor que permita validar externamente el instrumento.
Citation
Lázaro-Cantabrana, J., Usart-Rodríguez, M. & Gisbert-Cervera, M. (2019). Assessing Teacher Digital Competence: the Construction of an Instrument for Measuring the Knowledge of Pre-Service Teachers. Journal of New Approaches in Educational Research (NAER Journal), 8(1), 73-78. University of Alicante. Retrieved October 4, 2023 from https://www.learntechlib.org/p/207150/.
© 2019 University of Alicante
References
View References & Citations Map- Angoff, W.H. (1971). Scales norms and equivalent scores. En A R.L. Thorndike (Ed.), Educational measurement (2a. Ed.). Washington: American Council on Education.
- Carless, D., Joughin, G., & Mok, M.M.C. (2006). Learning-oriented assessment: principles and practice. Assessment& Evaluation in Higher Education, 31(4), 395-398.
- Carless, D. (2007). Learning-oriented assessment: conceptual basis and practical implications. Innovations in Education and Teaching International, 44(1), 57-66.
- Clark L.A., & Watson D. (1995). Constructing validity: basic issues in objec-t ive scale development. Psychol Assessment, 7, 309-319.
- Cizek, G.J., & Bunch, M.B. (2007). Standard setting. A guide to establishing and evaluating performance standards on tests. Thoundand Oaks: SAGE Publications, Inc.
- Cohen, J. (1960). A coefficient of agreement for nominal scales. Educational and Psychological Measurement, 20 (1), 37-46. tament d’Ensenyament (2016). Resolució ENS/1356/2016, de 23 de maig,
- Esteve, F. (2015). La competencia digital docente. Análisis de la autopercepción y evaluación del desempeño de los estudiantes universitarios de educación por medio de un entorno 3D. Rov i ra i Vi rg ili. Retrieved from http://www.tdx.cat/hand Le/10803/291441
- European Commission (2007). Key competencies for lifelong learning: European Reference Framework, Office for Official Publications of the European Communities, Luxembourg. Retrieved from https://www.erasmusplus.org.
- Fraser, J., Atkins, L., & Richard, H. (2013). DigiLit leicester. Supporting teachers, promoting digital literacy, transforming learning. Leicester City Council.
- Generalitat de Catalunya (2016) ENS/1356/2016, de 23 de maig, per la qual es dóna publicitat a la definició de la Competència digital docent, DOGC Núm. 7133. Retrieved from http://dogc.gencat.cat/ca/pdogc_canals_in DASHDASH
- Gil-Flores, J. (2012). La evaluación del aprendizaje en la universidad según la experiencia de los estudiantes. Estudios sobre Educación, 22, 133-153.
- Gisbert-Cervera, M., & Lázaro-Cantabrana, J.L. (2015). Professional develop-ment in teacher digital competence and improving school quality from the teachers’ perspective: a case study. Journal of New Approaches in Educa-t ional Research, 4(2), 115-122.
- Gutiérrez, I., & Serrano, J. (2016). Evaluation and development of digital competence in future primary school teachers at the University of Murcia. Journal of New Approaches in Educational Research, 5(1), 51-56.
- Ibarra, M.S., & Rodríguez, G. (2010). An approach to the dominant discourse of learning assessment in higher education. Revista de Educación, 351, 385407.
- INTEF (2014). Marco Común de Competencia Digital Docente. Inst ituto Nacio-nal de Tecnolog ías Educativas y de Formación del Profesorado (INTEF).
These references have been extracted automatically and may have some errors. Signed in users can suggest corrections to these mistakes.
Suggest Corrections to References