Validation and pilot testing of tools to measure the integration of mobile phones in extended cognition
Keywords:
basic education, learning, learning process, mobile phone, questionnaire, school performanceAbstract
This study focused on the development, validation, and pilot testing of two instruments designed to assess the integration of the cell phone as an extension of cognition in middle school students and teachers in Mexico City. The main objective of this article was to present the development and validation process of these instruments and to analyze the preliminary relationship between cell phone use in the school context, cognitive extension, and academic performance, through the application of the developed tools, within the framework of a broader doctoral research project that evaluates the effect of restricting its use. The methodology employed was quantitative, using self-administered questionnaires validated through expert judgment, Cronbach’s Alpha coefficient, and Aiken’s V coefficient, which ensured their reliability. Following the pilot test, the results indicated that validation by experts, along with Cronbach’s Alpha and construct coefficients, allowed for important adjustments to the instruments to improve their sufficiency, clarity, coherence, and relevance. It is concluded that the instruments are appropriate and applicable in the secondary education context, providing a valid tool to investigate the use of the cell phone as a cognitive extension, as a pedagogical resource, and its impact on students’ academic performance.
Downloads
References
Aiken, L. R. (1980). Content validity and reliability of single items or questionnaires. Educational and Psychological Measurement, 40, 955-959. https://doi.org/10.1177/001316448004000419
Aiken, L. R. (1985). Three coefficients for analyzing the reliability and validity of ratings. Educational and Psychological Measurement, 45, 131-142. https://doi.org/10.1177/0013164485451012
Astorga Aguilar, C., León Anchía, R. y Schmidt Fonseca, I. (2020). El teléfono celular como herramienta de apoyo en el proceso de aprendizaje para el estudiante no indígena y el estudiante indígena de la Sección Regional Huetar. Revista Ensayos Pedagógicos, 15(2), 155-172. https://doi.org/10.15359/rep.15-2.7
Cabrero Almenara, J. y Llorente Cejudo, M. C. (2013). La aplicación del juicio de experto como técnica de evaluación de las tecnologías de la información (TIC). Eduweb. Revista de Tecnología de Información y Comunicación en Educación, 7(22), 11-22. https://dialnet.unirioja.es/servlet/articulo?codigo=4857163
Celina Oviedo, H. y Campo Arias, A. (2005). Aproximación al uso del coeficiente alfa de Cronbach. Revista Colombiana de Psiquiatría, 34(4), 572-580. http://www.scielo.org.co/scielo.php?script=sci_arttext&pid=S0034-74502005000400009
Clark, A., y Chalmers, D. (1998). The extended mind. Analysis, 58(1), 7-19. https://doi.org/10.1093/analys/58.1.7
Escobar Pérez, J., Cuervo Martínez, A. (2008). Validez de contenido y juicio de expertos: Una Aproximación a su utilización. Avances en Medición, 6, 27-36.
Galicia Alarcón L. Balderrama Trápaga, J., y Navarro, E. (2017) Validez de contenido por juicio de expertos: propuesta de una herramienta virtual. Apertura, 9, (2), 42-53. http://dx.doi.org/10.32870/Ap.v9n2.993
Hernández-Nieto, R. A. (2002). Contributions to Statistical Analysis. Mérida: Universidad de Los Andes.
Hernández-Nieto, R. (2011). Instrumentos de recolección de datos en ciencias sociales y ciencias biomédicas. Universidad de los Andes. https://www.academia.edu/37886946/Instrumentos_de_recoleccion_de_datos_en_ciencias_sociales_y_ciencias_biomedicas_Rafael_Hernandez_Nieto_pdf
Hernández Sampieri, R., Fernández Collado, C. y Baptista Lucio, M. (2014). Metodología de la Investigación. Sexta edición. Mc Graw Hill Education. https://www.uncuyo.edu.ar/ices/libro-metodologia-de-la-investigacion-6ta-edicion
Hernández Silva, D. (2017). Etnografía escolar del celular como un recurso para la construcción de espacios de fuga. Civilizar Ciencias Sociales y Humanas, 18(34),167-178. https://revistas.usergioarboleda.edu.co/index.php/ccsh/article/view/v18n34a11
Maldonado Suárez, N. y Santoyo-Téllez, F. (2024). Validez de contenido por juicio de expertos: Integración cuantitativa y cualitativa en la construcción de instrumentos de medición. REIRE Revista d’Innovació i Recerca en Educació, 17(2), 1-19. https://dialnet.unirioja.es/servlet/articulo?codigo=9622062
Martínez Domínguez, M. (2020). La desigualdad digital en México: un análisis de las razones para el no acceso y el no uso de internet. Paakat: Revista de Tecnología y Sociedad, 10(19). http://dx.doi.org/10.32870/Pk.a10n19.519
Martínez Ramírez, J. L. (2019). El proceso de elaboración y validación de un instrumento de medición documental. Acción y reflexión educativa, 44. https://portal.amelica.org/ameli/jatsRepo/226/226955004/index.html
Matamala Riquelme, C. (2016). Uso de las TIC en el hogar: Entre el entretenimiento y el aprendizaje informal. Estudios Pedagógicos (Valdivia), 42(3), 293–311. https://www.scielo.cl/scielo.php?pid=S0718-07052016000400016&script=sci_arttext
Merino Soto, C. y Livia Segovia, J. (2009). Intervalos de confianza asimétricos para el índice de validez de contenido: Un programa Visual Básica para V de Aiken. Anales de Psicología, 25(1), 169-171. https://doi.org/10.15359/mhs.20-1.3
Nijssen, S., Schaap, G. y Verheijen, G. (2018). Has your smartphone replaced your brain? Construction and validation of the Extended Mind Questionnaire (XMQ). PLoS One, 13(18). https://doi.org/10.1371/journal.pone.0202188
Nikolopoulou, K. (2020). Secondary education teachers’ perceptions of mobile phone and tablet use in classroom: constraints and concerns. Journal of Computers in Education, 7, 257-275. https://doi.org/10.1007/s40692-020-00156-7
Penfield, R. D. y Giacobbi, P. R. (2004). Applying a Score Confidence Interval to Aiken’s Item Content-Relevance Index. Measurement in Physical Education and Exercise Science, 8(4), 213-225. DOI: 10.1207/s15327841mpee0804_3.
Silva Calpa, A. C. y Martínez Delgado, D.G. (2017). Influencia del Smartphone en los procesos de aprendizaje y enseñanza. Suma de Negocios, 8(17), 1-6. https://doi.org/10.1016/j.sumneg.2017.01.001
Tuapanta Dacto, J., Duque Vaca, M. y Mena Reinoso, A. (2017). Alfa de Cronbach para validar un cuestionario de usos de TIC en docentes universitarios. Revista mkt Descubre, 10, 37-48. https://core.ac.uk/download/pdf/234578641.pdf
Downloads
Published
Issue
Section
License
Copyright (c) 2025 Authors who publish in Revista La Universidad agree to the following terms: Authors continue as owners of their works, non-exclusively assigning dissemination rights to La Universidad Journal under the standards of the Attribution-NonCommercial-ShareAlike License: CC BY-NC-SA 4.0. This license allows the use of a work to create another work or content, modifying or not the original work, as long as the author is cited, the resulting work is shared under the same type of license and has no commercial purposes(https://creativecommons.org/licenses/by-nc-sa/4.0/deed.es).
This work is licensed under a Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.
