Diseño y validación de instrumento para analizar canales educativos de YouTube

1. Introducción

El avance de las tecnologías de la información y de la comunicación en las últimas décadas ha originado un cambio sustancial en diversas áreas de la sociedad. En el ámbito educativo ha proporcionado numerosos espacios y aportaciones innovadoras transformando metodologías, recursos e implementaciones en todas los niveles y etapas.

Más allá, el período de la pandemia de la COVID-19, que produjo una necesidad de reconversión metodológica para poder continuar con el proceso de enseñanza-aprendizaje de una manera en línea o semipresencial (Cabrera, 2020; García-Peñalvo et al., 2020), evidenció que los recursos audiovisuales son una práctica de éxito educativo (Encinas-Martín, 2020). En este ámbito, YouTube se sitúa como una de las plataformas más utilizadas en educación (León-Gómez et al., 2021; Rangarajan et al., 2019), y que supuso un salvavidas para estudiantes, profesionales de la educación y familias durante el inestable período de la pandemia.

En este marco, ha ido surgiendo un colectivo profesional innovador desde el campo de la comunicación que ha dedicado sus esfuerzos a la creación de canales educativos en YouTube y que son, hoy en día, grandes referentes tanto en el ámbito de la educación formal como de la educación informal: los edutubers (Pattier, 2021a). El gran impacto de esta nueva realidad impele el análisis y reflexión acerca de los canales educativos de YouTube, en primer lugar, para comprender cómo se está produciendo esta innovación que nace en una plataforma de comunicación, y, en segundo lugar, para promover la reflexión acerca de los actuales sistemas pedagógicos y metodológicos educativos.

La literatura demuestra los numerosos beneficios de la utilización de YouTube y de los vídeos en educación: mejora del rendimiento académico de los estudiantes (Bardakci, 2019; De-la-Fuente-Sánchez et al., 2018), potenciación de la competencia comunicativa (Yukselir & Komur, 2017), aumento de la comprensión de los contenidos (Bohloko et al. 2019), mejora de la capacidad autodidacta de los discentes (Ranga, 2017), o la autorreflexión de los docentes de su práctica profesional (Bautista et al., 2019).

Sin embargo, también es importante destacar las limitaciones de la implementación de este tipo de recursos en educación: el posicionamiento de los vídeos en YouTube no correspondiente a la calidad de los vídeos (Beltrán-Pellicer et al., 2018), la pérdida de control sobre los discentes y la necesidad de equipos informáticos (Behesti et al., 2018), el uso de un tipo de lenguaje inadecuado (Rego-Rey & Romero-Rodríguez, 2016), la falta de atención de los estudiantes durante el visionado de los vídeos (Zureick et al., 2018) o la necesidad de una profunda reflexión acerca de la idoneidad de los recursos audiovisuales en el proceso de enseñanza-aprendizaje (Burgos et al., 2020).

Teniendo en cuenta esto, es evidente el impacto significativo que los vídeos están teniendo en la actualidad educativa ya sea dentro de un ámbito formal (Sarkar et al., 2019; Walsh et al., 2019) o informal (Pattier, 2021a; Vizcaíno-Verdú et al., 2019), que podemos apreciar en el número elevado de suscriptores y visualizaciones de los canales educativos de YouTube, y de la satisfacción en la implementación de este tipo de recursos por parte de los profesionales de la educación y de los estudiantes (García-Martín & Cantón-Mayo, 2019; Tiernan & O´Kelly, 2019).

Además, a lo largo de la literatura se han hecho avances centrados en el análisis de vídeos educativos tanto de la plataforma YouTube como de otro tipo de páginas del ámbito de la comunicación. Entre las diversas aportaciones que se han ofrecido, destacan la proposición de rúbricas para evaluar la calidad de los vídeos educativos de YouTube utilizando las categorías de edad apropiada, calidad de contenido, características de diseño y objetivos de aprendizaje (Neumann & Herodotou, 2020). Por otro lado, es importante tener en cuenta los instrumentos de análisis de vídeos para analizar vídeo-lecciones en MOOC por su cierta aplicabilidad en vídeos educativos de la plataforma YouTube (Manotas Salcedo et al., 2018). Por último, son reseñables las investigaciones sobre el análisis de los vídeos en su fase de creación, teniendo en cuenta categorías como el estilo de conversación, la estética del vídeo, el público al que se dirigen o el uso de la narración (Moussiades et al., 2019), o las que tienen en cuenta todos los pasos del proceso que siguen los creadores de contenido audiovisual: planificación, desarrollo, entrega y reflexión (Di Paolo et al., 2017).

De este modo, y teniendo en cuenta las investigaciones que se han realizado en el ámbito del análisis de vídeos educativos, el objetivo de este trabajo es proponer un instrumento de análisis de canales educativos de YouTube, que ofrezca una base validada para poder profundizar y analizar los diversos aspectos que pueden ser estudiados de manera pública en esta plataforma teniendo en cuenta tanto las funcionalidades ofrecidas a los creadores de contenido, como el proceso de grabación, de edición y de publicitación de los vídeos. Para ello, debido a la naturaleza del artículo, la metodología del trabajo quedará conformada por el diseño del instrumento. A continuación, se ofrecerán los resultados, constituidos por el propio instrumento y su consecuente validación. Por último, se expondrá el apartado de discusión y conclusiones.

2. Metodología

Considerando el objetivo de diseñar un instrumento para analizar las diversas categorías que los canales educativos de YouTube ofrecen en la actualidad, se procedió a la creación de un primer borrador que acogiese las diferentes aportaciones de la literatura desde una perspectiva conceptual y procedimental. Por otro lado, se añadieron ítems íntimamente relacionados con la plataforma YouTube y las diversas funcionalidades ofrecidas para los creadores de contenido de dicha plataforma. Tras varias versiones y modificaciones, el instrumento quedó conformado por 41 ítems agrupados en 7 categorías:

1. (1) Variables dependientes. Donde se desarrollan las diferentes variables que se pueden apreciar en los vídeos educativos de los canales de YouTube. Así, el género, la etapa y el área de conocimiento conforman esta categoría, mientras que la edad fue descartada ya que no es posible poder determinarla de una manera exacta si el creador de contenido no lo anuncia.

2. (2) Datos y estadísticas del canal. Esta categoría acoge aquellos ítems estadísticos que pueden ser analizados en cada canal de YouTube de manera pública para cualquier usuario. Los análisis ofrecidos por la plataforma únicamente para los creadores de contenido quedan fuera de esta selección por la gran dificultad de acceso a dichos datos ya que están destinados únicamente a los creadores de contenido de manera privada.

3. (3) Estructuración de los vídeos. En este apartado se analizan los ítems que tienen que ver con la naturaleza del vídeo y con la disposición y estructura tanto interna como en relación con los otros vídeos del canal, organizada por el creador de contenido del canal.

4. (4) Grabación y edición de los vídeos. Los ítems analizados en esta categoría hacen referencia a la manera en que los vídeos son grabados y editados antes de ser subidos a la plataforma YouTube.

5. (5) Personalidad del creador de contenido. Esta categoría analiza la huella de personalidad que los creadores de contenido dejan en los vídeos, aparezcan físicamente en ellos o no, y que puede ser observada a través del análisis de ciertos factores que aparecen en el canal o en los vídeos.

6. (6) Utilización de la plataforma YouTube. Las diversas funciones que permite YouTube a los creadores de contenido, y que son públicas, pueden ser analizadas a través de los ítems de esta categoría.

7. (7) Redes sociales. Por último, los ítems de esta categoría analizan la presencia de los canales de YouTube y de sus creadores en otras redes sociales de éxito. En este apartado se tiene en cuenta la presencia con la misma nomenclatura del canal y no cuentas personales de creadores con canales de YouTube con una nomenclatura diferente. Así, es considerada una presencia en otra red si el nombre de usuario o página es coincidente con el nombre del canal.

En la Tabla 1 se puede observar la fundamentación teórica que sustenta la división categórica realizada teniendo en cuenta las aportaciones de la literatura.

3. Resultados

3.1. Instrumento

El instrumento quedó conformado por las siguientes preguntas y posibles respuestas, como puede observarse en la Tabla 2:

3.2. Validación del instrumento

Debido a la naturaleza de los criterios estudiados, que se pueden obtener de manera pública a través de los canales de YouTube, la validación del instrumento se realizó desde una perspectiva cualitativa, y, por lo tanto, no se efectuaron análisis a través de coeficientes cuantitativos que evalúan aspectos únicamente numéricos de las muestras de estudio.

Para obtener una validación total del instrumento, se estimó una validación de contenido, de criterio y de constructo.

3.2.1. Validación de contenido

Para la validación de contenido del instrumento, se utilizó un juicio de 10 expertos y se analizó la relevancia de contenido mediante el coeficiente V de Aiken. Los expertos fueron seleccionados por su trayectoria profesional y por su nivel de experiencia y conocimiento sobre el uso de YouTube en educación. De este modo, se obtuvo el siguiente panel de expertos: dos doctores y profesores de la Facultad de Educación de la Universidad Complutense de Madrid con docencia e investigación en el uso de las TIC en educación (expertos 1 y 2), una doctora y profesora de la Facultad de Educación de la Universidad de León con un enfoque en su desarrollo profesional y en sus numerosas publicaciones acerca del uso de plataformas digitales y redes sociales en educación (experto 3), dos doctoras y profesoras de la Facultad de Ciencias de la Comunicación de la Universidad Complutense de Madrid con una amplia trayectoria en aspectos comunicativos a través de plataformas digitales y redes sociales (expertos 4 y 5), dos docentes expertos en el uso de nuevas tecnologías y metodologías en educación (expertos 6 y 7), y tres profesores creadores de contenido educativo en YouTube con amplia trayectoria y reconocimiento por sus aportaciones en este ámbito (expertos 8, 9 y 10).

Para proceder a la validación, se elaboró una guía de evaluación para los expertos en la que se detalló de manera adecuada los objetivos, las necesidades y las variables más importantes a tener en cuenta en el transcurso de la validación. Durante todo el proceso se garantizaron las condiciones necesarias éticas para la petición y uso de los datos aportados por los expertos.

Los expertos evaluaron cada uno de los ítems del instrumento a través de una escala Likert, donde 1 significa Totalmente en desacuerdo, 2 En desacuerdo, 3 Neutro, 4 De acuerdo, y 5 Totalmente de acuerdo. Asumiendo que el coeficiente V de Aiken (1985) muestra la relevancia de contenido de un instrumento a partir de las valoraciones de los expertos, y que indica que cuanto más se acerque el valor a 1, más validez de contenido tendrá el instrumento (Escurra et al., 2014), observamos una validez positiva en los ítems desarrollados en el mismo, como muestra la Tabla 3.

El juicio de expertos permitió la mejora de los ítems en cuanto a su pertinencia y redacción se refiere, consiguiendo una validez de contenido para el instrumento.

3.2.2. Validación de criterio

Para la validación de criterio del instrumento y poder predecir el grado de eficacia del análisis de las variables estudiadas, se utilizó una validez de pronóstico. Para ello, se tomó una muestra de 204 canales educativos de éxito de YouTube y se analizó la eficacia del instrumento a la hora de obtener datos de valor para cada una de las categorías estudiadas.

Los resultados obtenidos han sido considerados de interés y han pasado el riguroso filtro metodológico de varias revistas científicas de prestigio, permitiendo un gran avance en la literatura en el ámbito de estudio.

En primer lugar, se publicó un artículo centrado en análisis descriptivos de la muestra indicando los factores de éxito de cada una de las categorías analizadas en el instrumento, proporcionando diferentes reflexiones al respecto en cuanto al ámbito de la comunicación y de la educación (Pattier, 2021a).

En segundo lugar, se elaboró un análisis detallado de correlaciones significativas entre los ítems del instrumento y la variable de género. Gracias a ello, se hizo patente una brecha de género actual en el colectivo de los edutubers y se pudieron ofrecer una serie de pautas concretas para promover la participación efectiva de la mujer en plataformas de comunicación como YouTube (Pattier, 2021b).

En tercer lugar, se desarrolló un estudio pormenorizado teniendo en cuenta las correlaciones significativas entre las categorías del instrumento y la variable de área del conocimiento, centrando el estudio en los canales de Ciencias. De esta manera se evidenciaron los factores de éxito de los edutubers de este campo y las diferencias existentes comparadas con el resto de creadores de contenido de otras áreas (Pattier, 2021c).

En cuarto lugar, se profundizó en el análisis de los canales del área de Arte y Cultura de la muestra, señalando resultados de interés para la comunidad científica a partir de los datos obtenidos a través del instrumento (Pattier, 2021d).

Los resultados que ofrecen estos artículos ya publicados, en los que son utilizados íntegramente las categorías estudiadas a través de la aplicación del instrumento (variables dependientes, datos y estadísticas del canal, estructuración de los vídeos, proceso de grabación y edición de los vídeos, personalidad del creador de contenido, utilización de la plataforma YouTube y redes sociales), demuestran la validez de criterio del mismo.

3.2.3. Validación de constructo

Debido a la naturaleza cualitativa de las categorías estudiadas, se utilizó una validación convergente teniendo en cuenta diversos estudios e investigaciones sobre la temática que apuntan hacia la importancia y efectividad del análisis de las categorías que conforman el instrumento que pretendemos validar.

Así, la Tabla 4 demuestra el estudio y análisis por parte de otras investigaciones a nivel internacional de los ítems y categorías que conforman el instrumento.

El estudio de las mismas categorías por parte de investigaciones con diversas metodologías y muestras a nivel internacional denota una validez de constructo por parte del instrumento que se presenta en este trabajo.

4. Discusión y conclusiones

La validación de contenido, juntamente con la validación de criterio y de constructo, corroboran una validación total para el instrumento de análisis de canales educativos de YouTube. Así, este trabajo se posiciona como una ayuda y base para investigadores, creadores de contenido y profesionales del ámbito de la comunicación y de la educación que pretendan analizar los canales educativos de YouTube y los factores que más influyen en su éxito actual (Cheng et al., 2014).

El gran uso de diversas plataformas de comunicación en el ámbito educativo impele a una profunda reflexión pedagógica acerca de las posibilidades que brindan las funcionalidades inherentes a dichas aplicaciones. Situaciones como la vivida durante la pandemia de la COVID-19 han demostrado la eficacia de su implementación para mantener el aprendizaje de una manera en línea (Cabrera, 2020; Encinas-Martín, 2020; García-Peñalvo et al., 2020). Por ello, es clave reflexionar acerca de los factores de éxito de los profesionales de la comunicación que ya están en dichas plataformas para entender el proceso que consigue generar un impacto, al menos cuantitativo, en la población general a través de páginas como YouTube (López et al., 2020).

Dicho impacto es evidenciado por los millones de suscriptores a los canales y por los millones de visualizaciones a los recursos audiovisuales subidos por los edutubers (León-Gómez et al., 2021), que proporcionan recursos de apoyo tanto para la educación formal, como para la informal (Moreira et al., 2019; Roque Rodríguez, 2020; Sarkar et al., 2019; Walsh et al., 2019). De ahí la importancia de analizar esta temática que influye significativamente en la sociedad desde el ámbito de la comunicación (Rangarajan et al., 2019).

La apuesta a nivel internacional por una digitalización social (OECD, 2020), que mitigue el impacto negativo de situaciones donde se utilice una educación telemática, ya sea por elección, o por necesidad (Pérez-Narváez & Tufiño, 2020), debe profundizar no simplemente en potenciar una mera utilización de dispositivos electrónicos cambiando únicamente el formato, sino por una importante reflexión pedagógica y didáctica sustentada en evidencias que permita mejorar la educación desde una visión holística e integral (Burgos et al., 2020). El papel, por tanto, de la Administración y de los diversos organismos nacionales o internacionales, no debe limitarse únicamente a la disposición de recursos económicos para la reducción de la brecha digital en cuanto a la adquisición de equipamientos digitales, sino a la transformación educativa necesaria para que la educación actual consiga metodológicamente tener éxito en el proceso de enseñanza-aprendizaje. En este sentido, y teniendo en cuenta la indicación de la OECD de la utilización de vídeos como una clara práctica de éxito educativo (Encinas-Martín, 2020), el instrumento presentado y validado en este trabajo puede ser de gran utilidad para diferenciar los factores esenciales que deben ser tenidos en cuenta para la discusión educativa global y mejorar aspectos fundamentales de la pedagogía y didáctica impartida en la formación actual del profesorado.

El análisis de los canales educativos de YouTube, con una implicación innovadora en la actualidad educativa, podrá ofrecer datos de valor en una necesaria reflexión acerca del uso de las tecnologías, de las plataformas comunicativas digitales y del uso de YouTube en educación (Burgos et al., 2020; León-Gómez et al., 2021; López et al., 2020). Así, esta propuesta validada puede vertebrar algunos cambios necesarios en los ámbitos del currículo, del profesorado o de las tecnologías de la información y de la comunicación en el ámbito educativo.

Las limitaciones de este instrumento recaen en el propio enfoque educativo del mismo. Se necesitan más investigaciones para determinar si el instrumento que presentamos en este trabajo ofrecería una fiabilidad aceptable también para el análisis de canales de YouTube de otros campos. Aun así, esta propuesta puede conformar una base para el desarrollo de otros instrumentos de análisis desde ámbitos no provenientes de la educación.

La prospectiva de este trabajo es muy halagüeña debido al uso creciente de YouTube en los últimos años (Rangarajan et al., 2019), a la constatación del potencial en la mejora del aprendizaje de los estudiantes (Rodríguez & Fernández, 2017), al creciente uso de las tecnologías en los jóvenes (Junco, 2015) y a las grandes posibilidades que genera en una sociedad cada vez más orientada a la digitalización. Por otro lado, teniendo en cuenta que la satisfacción por parte de los profesionales de la educación con el uso de vídeos en sus clases es alta (García-Martín & Cantón-Mayo, 2019) y la tendencia de los futuros profesores a la utilización de YouTube en educación (Szeto et al., 2016), podemos entrever que los canales educativos de YouTube seguirán teniendo un impacto significativo en educación (Pattier, 2021c; Sarkar et al., 2019; Vizcaíno-Verdú et al., 2019; Walsh et al., 2019). De ahí la importancia de establecer instrumentos validados que puedan servir de fundamentos orientadores a nivel internacional para el acercamiento pedagógico a uno de los colectivos más influyentes e innovadores de los últimos años aparecidos en el ámbito de la comunicación: los edutubers.

Financiación

Este trabajo ha sido financiado por la Comisión Europea a través del proyecto Erasmus + EIPSI Evidence Informed Practice for School Inclusion, con referencia 2020-1-ES01-KA201-082328, y por el Ministerio de Ciencia e Innovación de España a través del proyecto I+D+i #LobbyingTeachers – Fundamentos teóricos, estructuras políticas y prácticas sociales de las relaciones público-privadas en materia de profesorado en España, con referencia PID2019-104566RA-I00/AEI/10.13039/501100011033.

Referencias

Notas de autor

* Investigador en formación en el Departamento de Estudios Educativos de la Facultad de Educación de la Universidad Complutense de Madrid

Información adicional

Para citar este artículo : Pattier, Daniel. (2022). Diseño y validación de instrumento para analizar canales educativos de YouTube ICONO 14. Revista Científica De Comunicación Y Tecnologías Emergentes, 20(2). https://doi.org/10.7195/ri14.v20i2.1818

ICONO 14, Revista de comunicación y tecnologías emergentes

ISSN: 1697-8293

Vol. 20

Num. 2

Año. 2022

Diseño y validación de instrumento para analizar canales educativos de YouTube

Daniel Pattier ¹