La mayoría de los profesores se enfrentan al análisis de vídeos en un contexto un poco incómodo. Alguien del departamento de informática o del centro de formación comparte un panel de control, en el que aparecen un montón de cifras, y la pregunta implícita es: “¿Están viendo los alumnos los vídeos?”.”
Es una pregunta razonable, pero no resulta muy interesante. Además, da un tono equivocado, ya que convierte una rica fuente de información en algo que parece un ejercicio de control.
Hay una forma más útil de aprovecharlas. Tus grabaciones no solo se ven, sino que se utilizan. Los alumnos vuelven a verlas la noche antes de una evaluación, repasan una demostración por segunda vez antes de intentarla por su cuenta y consultan una sesión semanas después de que se haya impartido porque algún aspecto de un tema posterior les ha llevado a volver a ella. Los datos de visualización son un registro de ese estudio y constituyen una de las pocas ventanas que te permiten ver lo que ocurre después de que los alumnos salgan del aula.
Leído de esa manera, deja de ser un ejercicio de seguimiento y se convierte en algo más parecido a una conversación.
Empieza con una pregunta, no con un panel de control
La forma más rápida de no sacar nada en claro de la analítica es abrir la vista de informes y echar un vistazo. Siempre hay algo que ver, pero casi nada de ello tiene mucho sentido por sí solo.
En su lugar, trae una pregunta que ya tengas. La mayoría de los profesores suelen tener dos o tres de estas en cualquier momento del curso:
- ¿Los alumnos utilizan el material previo al seminario antes de la sesión o después?
- ¿Alguien ha vuelto a ver la grabación que hice sobre el tema más complicado de la quinta semana?
- ¿Se sigue utilizando el material adicional que produje el año pasado?
El análisis de los datos responde bien a preguntas como estas. Sin embargo, responde muy mal a la pregunta “¿cómo va el módulo?”. Empieza por un ámbito reducido y las cifras se volverán más fáciles de interpretar.
Lo que realmente te muestra Mediasite
Es útil conocer la estructura de los datos antes de interpretarlos, así como saber cómo se obtienen en primer lugar.
Los informes de Mediasite son configurables, lo cual es más importante de lo que parece. En lugar de ofrecerte toda la información de una sola vez, un informe puede limitarse exactamente a aquello de lo que eres responsable. Un profesor que imparte Economía 101 puede configurar un «Informe de estadísticas de usuarios» que abarque la carpeta y el canal de su curso, limitado a los cincuenta alumnos de ese curso. De este modo, todo lo que ven es relevante para ellos, y nada más lo es.
En ese informe, el nivel superior muestra a la clase en su conjunto mediante gráficos y mapas de calor. A continuación, puedes hacer clic en un alumno concreto si lo necesitas. La mayoría de las veces no será necesario, y hay buenas razones para quedarse en el nivel agregado, algo que se explica más adelante.
Si nunca has visto un informe como este para tu propio módulo, lo primero que debes pedirle al administrador de Mediasite o a tu centro de enseñanza es que te lo faciliten. Se trata de una configuración que solo hay que realizar una vez y que facilita considerablemente todo lo que viene a continuación.
En cuanto al contenido incluido en el informe, este abarca:
Visitas. Cuántas veces se ha abierto el contenido.
Tiempo. Tiempo total de visionado, expresado en horas, minutos y segundos.
Cobertura. El porcentaje del vídeo que se ha visto. En el nivel superior de un informe, este dato refleja el conjunto de tus espectadores, y puedes profundizar en el perfil de un alumno concreto para ver sus datos.
Gama. La fecha en que se vio por primera vez y la fecha en que se vio por última vez.
Tendencias de visualización. Un mapa de calor que muestra qué partes del vídeo se han visto más.
Actividad de la cita. Un gráfico que muestra en qué fechas se registró un mayor número de visitas.
Plataformas. Los dispositivos y navegadores que se utilizan para ver contenidos, como Mac, Windows o Chrome.
Siete medidas sencillas. Su valor reside casi por completo en cómo se interpretan en su conjunto.
Tendencias de visualización: en qué aspectos se están esforzando los estudiantes
El mapa de calor es el más interesante de todos y el más fácil de malinterpretar.
Cuando un tramo concreto de una grabación registra un número de visualizaciones notablemente mayor que el resto, el instinto nos lleva a considerarlo un problema, a pensar que los alumnos no están prestando atención a todo el material. En la práctica, suele ser una señal de que los alumnos han identificado correctamente la parte más importante y le están dedicando el tiempo que corresponde. Eso es precisamente lo que quieres que hagan.
Las preguntas de seguimiento más útiles no son “¿en qué me he equivocado ahí?” o “¿por qué se han saltado esas partes del vídeo?”, sino algo más sencillo como: “¿es fácil trabajar con esa parte?”.”
A veces es evidente que sí, y el hecho de que haya que verlo varias veces no hace más que reflejar una idea compleja que requiere más de un visionado. Hay conceptos que son así, y la repetición es precisamente la respuesta adecuada para ellos.
A veces, en cambio, se trata de algo práctico. Un contenido que resulta denso en pantalla, un diagrama al que se hace referencia antes de que aparezca, o un tramo en el que has cubierto mucho terreno rápidamente porque faltaba tiempo. Ninguno de estos casos supone un fallo didáctico. Son las concesiones habituales de una clase en directo, y el vídeo es una de las pocas cosas que te permite siquiera darte cuenta de ellas.
Cuando una sección supone mucho trabajo para los alumnos, una breve grabación complementaria de dos o tres minutos suele ser la mejor forma de aprovechar tu tiempo. Cuesta muy poco y se centra exactamente en el contenido que los alumnos ya te han dicho que les interesa. También es un buen momento para utilizar Mediasite Capture y poder grabar rápidamente vídeos en tu navegador o en tu móvil para crear estos vídeos de resumen rápido.
Una observación práctica: busca patrones que se repitan en las distintas promociones. Un mapa de calor de un solo curso puede verse influido por un puñado de alumnos. Que el mismo patrón se repita dos años seguidos te indica algo más sólido.
Cobertura y alcance: cómo estudian realmente los alumnos
La cobertura y el alcance son parámetros discretos que merecen un poco de atención.
Una baja cobertura en un grupo no supone automáticamente un problema. Es frecuente que los alumnos accedan a una grabación en busca de algo concreto, lo encuentren y se marchen. Se trata de un comportamiento eficiente y una señal de que tu contenido es fácil de navegar, sobre todo en sesiones más largas. La cobertura cobra mayor importancia cuando esperas que una grabación se vea de principio a fin —como ocurre con una breve introducción— y, sin embargo, no es así de forma sistemática.
Dado que la información se interpreta de forma diferente según en qué parte del informe te encuentres, conviene tener claro qué pregunta te estás planteando. La cifra a nivel de clase te indica cómo se está utilizando un contenido en general. Una cifra individual te da información sobre el patrón de estudio de un alumno concreto, lo cual es una cuestión diferente con implicaciones distintas, y que suele ser más propio de una conversación con él que de una hoja de cálculo.
El intervalo de visualización es más revelador de lo que parece a primera vista. Una gran diferencia entre la primera y la última fecha de visualización indica que un contenido tiene una larga vida útil. Se vio cuando se publicó y, de nuevo, mucho más tarde, normalmente durante un repaso o cuando un tema relacionado hizo que los alumnos volvieran a él. El contenido con un amplio intervalo de tiempo es el material más reutilizable, y merece la pena saber qué grabaciones entran en esa categoría antes de decidir qué actualizar durante el verano.
Fecha de la actividad: el ritmo de tu módulo
El gráfico de actividad por fecha muestra cuándo se producen las visualizaciones, y el patrón suele coincidir perfectamente con los puntos de mayor actividad de tu módulo.
Es totalmente previsible que se produzcan picos de visualización antes de los exámenes. Lo que merece la pena tener en cuenta es dónde se sitúan esos picos en relación con tus intenciones. Si el material diseñado para preparar a los estudiantes para un seminario se consulta principalmente la noche siguiente a su celebración, es útil saberlo, y suele tratarse más bien de una cuestión de programación o de señalización que de motivación. Publicarlo antes o mencionarlo de forma más explícita en las comunicaciones de la semana suele bastar para cambiar el patrón por sí solo.
Plataformas: un indicador de pequeñas dimensiones con consecuencias prácticas
Los datos sobre las plataformas rara vez se tienen en cuenta, pero tienen un uso muy práctico. Si una parte significativa de las visualizaciones se produce en pantallas más pequeñas, eso tiene implicaciones a la hora de diseñar las diapositivas.
Las tablas detalladas, las pequeñas anotaciones y los diagramas densos se visualizan de forma muy diferente en un móvil que en un proyector. Saber dónde se visualiza tu contenido es una forma sencilla de facilitar su uso, y beneficia a todos los alumnos, no solo a unos pocos.
Lo que los datos no te dirán
Ser sincero respecto a los límites es lo que hace que el resto resulte creíble.
Los datos de visualización pueden indicar que alguien ha asistido a una sesión, pero no permiten saber si la ha entendido. Tampoco tienen en cuenta a los alumnos que la han visto junto a un amigo en una sola pantalla, a los que han leído la transcripción en lugar de verla, o a los que han hecho una pausa porque ha sonado el timbre.
Dado que puedes profundizar hasta llegar a un alumno concreto, conviene pensar bien cuándo hacerlo. La vista a nivel de clase responde a casi todas las preguntas que puedas tener sobre tu contenido, y es ahí donde deberías dedicar la mayor parte de tu tiempo. Los datos individuales tienen su lugar, normalmente cuando ya estás prestando apoyo a un alumno concreto y este sabe por qué estás revisando su expediente, pero no se trata de una herramienta de uso general.
Enmarcar todo esto como una mejora del contenido, en lugar de como un control de la asistencia, es más preciso y, además, mucho mejor para la confianza que se genera en el aula. Tu institución dispondrá de directrices sobre el uso de los datos de los alumnos, y vale la pena leerlas antes de empezar, en lugar de hacerlo después.
Considéralo como una de las muchas fuentes de información, junto con las preguntas que te hacen después de clase, lo que surge durante las horas de tutoría y los resultados de las evaluaciones.
Conviértelo en un hábito, no en un proyecto
Los profesores que sacan mayor provecho de esto no realizan un análisis en profundidad una vez al año. Le dedican quince minutos dos veces por trimestre.
Un ritmo viable sería el siguiente: antes de que comience el semestre, solicita un informe centrado en la carpeta de tu asignatura y en tu promoción, de modo que los datos ya estén a tu disposición en lugar de tener que recopilarlos tú mismo. Alrededor de la cuarta semana, consulta las tendencias de visualización de las dos o tres grabaciones que abarcan los contenidos que a los alumnos les suelen resultar más exigentes y fíjate simplemente en dónde se centra la atención. Alrededor de la novena semana, echa un vistazo a la cobertura y a la actividad por fechas a lo largo del módulo. Al final del trimestre, anota los dos cambios que valga la pena introducir la próxima vez, mientras el contexto aún esté fresco en tu memoria.
Eso supone menos de una hora a lo largo de un semestre, y el efecto es acumulativo. Cada revisión hace que tu contenido resulte un poco más fácil de manejar para los alumnos, lo cual es un objetivo mucho más factible que mejorar todo de una sola vez.
Las grabaciones ya se están realizando. Los datos ya están disponibles. Empezar a analizarlos cuesta muy poco. Dar los primeros pasos con Mediasite Analytics nunca ha sido tan fácil. Si tienes alguna duda sobre las posibilidades que ofrece, no dudes en ponerte en contacto con nuestros ingenieros de soluciones o a través de nuestro Comunidad Mediasite.
English 
Français 
日本語 
Español 
Italiano 
Nederlands 
Deutsch