Para profundizar el análisis del Caso de Estudio 02, resulta clave explorar la relación entre frecuencia de uso y avance efectivo en la plataforma. El Caso de Estudio 03 se enfoca en analizar la correlación entre logins, entendidos como asistencia semanal, y el progreso académico, medido a partir de clases completadas. El análisis se desagrega por grado escolar (sistema K–12) y por producto, considerando los distintos cursos o paquetes de contenidos asignados a los estudiantes.
Para este caso de estudio, se simuló una tabla de matriculaciones para >8000 usuarios.
En este contexto, las escuelas contratan productos que consisten en cursos impartidos a través de una plataforma de aprendizaje, los cuales pueden asignarse a uno, varios o todos los grados escolares (years del "K-12"). La EdTech ofrece un portafolio de seis cursos, organizados en dos trayectorias correlativas: tres cursos Junior (J1, J2 y J3) y tres cursos Senior (S1, S2 y S3). Cada trayectoria está diseñada con niveles progresivos, lo que introduce distintas exigencias de uso, avance y frecuencia según el curso y el grado escolar al que es asignado.
En una primera aproximación, es posible obtener indicadores agregados simples, como el promedio anual de logins acumulados por estudiante, el promedio de clases completadas y un ritmo medio de avance medido en clases por sesión. Si bien estas métricas ofrecen una visión general del uso de la plataforma, resultan limitadas para comprender diferencias relevantes entre estudiantes.
Para profundizar el análisis, resulta necesario observar cómo se comporta esta performance según el producto y el grado escolar. Correlacionando la cantidad de logins semanales con la cantidad de lecciones completadas, se construyó un gráfico de burbujas por producto, donde cada punto representa valores promedio por curso, y el tamaño de la burbuja indica la cantidad de estudiantes matriculados en ese paquete de contenidos.
En una primera lectura del gráfico se observa que:
Los cursos J3 y S3 concentran una cantidad significativamente menor de estudiantes, lo cual es esperable al tratarse de los niveles más avanzados de cada trayectoria.
Los grupos más numerosos se encuentran en J1 y S1, funcionando como las principales puertas de entrada académicas a la propuesta de la edtech.
Al analizar la correlación entre uso y progreso, se identifican los siguientes patrones:
En términos generales, a mayor cantidad de logins, mayor cantidad de lecciones completadas.
Aparecen dos casos atípicos relevantes:
Los estudiantes del curso J2 muestran un avance considerablemente bajo en relación con la cantidad de logins acumulados.
Los estudiantes del curso S3 presentan un buen nivel de progreso aun con una frecuencia de uso relativamente menor.
Para comprender estos comportamientos, el siguiente paso del análisis será determinar si estas diferencias responden principalmente a factores etarios (grado escolar) o a características propias del contenido y del diseño del producto.
Analizando los resultados según los grados escolares, se observa que:
Parece que los estudiantes de Year 12 acumulan, en general, una baja cantidad de logins, lo cual resulta esperable dado que:
se trata del año de egreso de la secundaria, con viajes, actividades de cierre académico y una mayor carga extracurricular;
los estudiantes pueden trabajar de forma más autónoma y en sesiones de estudio más intensivas, logrando niveles de progreso relativamente buenos a pesar de una menor frecuencia de acceso.
Los estudiantes de Y07, correspondientes al primer año de secundaria, muestran un menor nivel de progreso.
Se asume que estos alumnos realizan el curso J1, ya que no cuentan con experiencia previa en la plataforma.
Surge entonces la pregunta: ¿el bajo progreso está asociado al curso J1 en sí, o a su adecuación a la edad y madurez académica de los estudiantes de Y07?
Los estudiantes de Y08 presentan un progreso bajo a pesar de registrar una alta cantidad de logins a lo largo del año.
Se espera que, en este grado escolar, la mayor parte de los alumnos haya comenzado el curso J2, mientras que en algunas instituciones continúan cursando J1.
¿Qué está ocurriendo con Y08? ¿Se trata de una característica propia de ese grado escolar? ¿Existen actividades escolares típicas de ese grado escolar que distorsionen el avance del curso, como exámenes internacionales de lenguas extranjeras? ¿O el problema está vinculado al diseño o la exigencia del curso J2 para la edad de esos estudiantes?
Se decide realizar un análisis cruzado. Los grupos de análisis (cada burbuja) están conformados por el cruce de Producto + Year (K–12), es decir, estudiantes que realizan un determinado curso en un determinado grado escolar. No es equivalente que un estudiante curse J1 en Y07 que hacerlo en Y09, ya que la madurez cognitiva y los conocimientos complementarios varían significativamente.
Observamos que la correlación entre logins y lecciones completadas resulta consistente y esperable para la mayoría de las combinaciones, con excepción de los siguientes casos:
S1, S2 y S3 en Y12: presentan un buen nivel de progreso a pesar de una menor cantidad de logins. Esto refuerza la hipótesis planteada anteriormente:
independientemente del curso, los estudiantes de mayor edad son capaces de avanzar de forma autónoma y en sesiones de trabajo más intensivas;
además, puede inferirse que este efecto es particularmente marcado en el caso de S3 en Y12,
ya que se trata de estudiantes que probablemente han recorrido otros cursos de la plataforma en años previos,
y cuya experiencia previa facilita el uso de los materiales y dinámicas de la edtech.
J1 en Y07 muestra un nivel de progreso relativamente inferior al esperado según la tendencia observada en otros grupos:
este comportamiento es esperable, dado que se trata del primer año de la escuela secundaria y de un período de adaptación académica;
el problema no parece residir en los contenidos del curso J1, ya que los estudiantes de Y08 que realizan este mismo curso presentan una muy buena performance en relación con su cantidad de logins.
J2 en Y08, el caso que generaba mayor preocupación desde un principio:
los estudiantes que realizan J2 en Y09 no presentan problemas de desempeño;
los estudiantes de Y08 que cursan J1 tampoco muestran dificultades relevantes;
puede concluirse que el problema no se explica por características del curso J2 ni por el grado Y08 de forma aislada, sino por la adecuación del contenido al grado escolar y a la edad de los estudiantes.
Es importante tener en cuenta en el diseño de productos que:
Y12 trabaja de forma más esporádica e intensiva.
Se debe tener especial cuidado en los productos destinados a Y07, debido a su performance condicionada. ¿Sería conveniente generar contenidos adaptables a la edad?
Hay que hacer un análisis más exhaustivo de la adecuación de J2 a Y08. ¿Hay conocimientos de otras asignaturas que los estudiantes aún no han adquirido? ¿Habilidades aún en desarrollo?