José S. MartÃnez
Los padres consultan estos dÃas con el banco y con los reyes magos la pertinencia o no de regalar vÃdeoconsolas a sus hijos. Hay cierto pánico moral con estos inventos del demonio, pues es normal temer lo que se desconoce y es más fácil “elegir†estar a favor o en contra de algo que dedicar tiempo para tomar una posición matizada. Por suerte, los menores cuentan con aliados entre los adolescentes cuarentones, que somos de la primera generación de vÃdeojugones.
Recientemente, en el blog «Nada es gratis» se ha publicado una entrada sobre este tema por Antonio Cabrales y Florentino Felgueroso (Los regalos, aún los de Reyes, tampoco son gratis: videoconsolas y efecto sobre la lectura en PISA), aprovechando que los datos del reciente informe PISA, dedicado a rendimiento educativo de los jóvenes, tiene en cuenta si en casa tienen una vÃdeoconsola y si la usan. PermÃtanme establecer polémica con este blog, en este tema concreto, pues en su razonamiento he visto varios de los errores que comúnmente se cometen en la interpretación de los datos de PISA. Una equivocación es fallar en la interpretación de las puntuaciones de PISA.Estas pruebas contienen dos tipos de errores, uno puramente aleatorio (son muestrales) y otro de medición (las preguntas que emplean para medir el nivel de competencia pueden ser equivocadas). El primer error es fácil de estimar, el segundo no. Por otro lado, está la cuestión de cómo interpretar las diferencias en puntuaciones; teniendo en cuenta que la media es de 500 y la desviación tÃpica es de 100, si convertimos 10 puntos PISA en estatura (suponiendo una estatura media de 170 cm. y que el 95,5% de la población esté entre 150 cm. y 190 cm.), esos 10 puntos serÃan equivalentes a un centÃmetro, y ese centÃmetro es el margen de error aleatorio (es decir, entre 490 y 500 puntos de la diferencia puede ser por puro error estadÃstico). Lo digo porque estoy cansado de ver grandes propuestas de reformas educativas basadas en diferencias que son errores estadÃsticos o «milÃmetros» de estatura. Si los autores tuviesen esto en cuenta, verÃan que no en todos los paÃses las vÃdeoconsolas producen efectos sobre la lectura.
Otro fallo común es la comparación alegre entre paÃses. Hay patrones de relación entre los datos que operan en el mismo sentido en los 65 paÃses participantes y en todas sus regiones. Por ejemplo, los jóvenes con padres de mayor nivel educativo o de más estatus social siempre puntúan mejor. Sin embargo, hay relaciones que son positivas en unos paÃses o regiones y negativas en otras. Por ejemplo, el sistema educativo francés es muy centralizado, mientras que el de EEUU es muy descentralizado, y sin embargo sus resultados son muy similares. O cuando aplicamos una mirada temporal, en EEUU los resultados actuales son muy parecidos a los de 2000, pero en 2002 se aplicaron importantes reformas educativas, y los resultados en 2009 son similares a los de 2000. Julio Carabaña ha analizado con detalle este tipo tan frecuente de error en el análisis de PISA. El fallo metodológico que subyace a este tipo de comparaciones es aplicar análisis estadÃstico a paÃses, cuando no se cumple uno de los supuestos básicos de la estadÃstica: que las unidades comparadas sean homogéneas. Esto quiere decir que la inercia histórica e institucional puede llevar a que polÃticas que son buenas en un paÃs son totalmente inaplicables en otro paÃs. Pensamos mucho cómo copiar las recetas educativas finlandesas, pero nos olvidamos en que allà no cierran las puertas de la casa o de los coches con llave, es decir, que el nivel de confianza (capital social) es mucho mayor, por lo que no es necesario establecer tantos controles sobre la actividad del profesorado o del alumnado como en otros sitios.
Entrando ya en faena, si ven uno de los gráficos del citado blog (pinche aquÃ) podrán observar que jugar con la videoconsola tiende a producir efectos negativos en lectura. La explicación de este hecho, según los autores, podrÃa ser que el tiempo dedicado a la videoconsola es tiempo que se sustrae a la lectura. Pero la evidencia no es tan robusta, pues en unos paÃses el efecto es positivo, mientras que en otros es neutral (recuerden que 10 puntos de PISA son la horquilla del error aleatorio), aunque ciertamente en la mayorÃa es negativo. El efecto positivo podrÃa deberse al bajo nivel de desarrollo de estos paÃses (Panamá, Jordania y TurquÃa), pero ¿por qué no en otros paÃses de bajo nivel de desarrollo, como Bulgaria o Trinidad y Tobago? En Suecia, Chile o España parece que las diferencias no son significativas, y sin embargo lo son en Noruega o en lo que fue Checoslovaquia. Moraleja: no conviene hacer comparaciones entre paÃses si no conocemos a fondo las peculiaridades de cada paÃs. Quizá sea cierto que en unos paÃses el tiempo del videojuego se sustrae a la lectura, pero quizá en otros se sustrae de ver Gran Hermano o de jugar al fútbol. O puede que la relación sea más compleja.
Aplicándome el cuento, me quedo sólo con los datos de España, y considero un matiz que apuntan atinadamente Antonio Cabrales y Florentino Felgueroso, pero que no terminan de desarrollar bien: las videoconsolas no solo son un juguete, son también un sÃmbolo de estatus. Para analizar esta afirmación con más detalle es necesario tener en cuenta el estatus de la familia. En la tabla 1 y el gráfico 1 muestro los resultados de la prueba de PISA en lectura por nivel de estudios de la madre y relación con las videoconsolas. Tengo en cuenta el nivel de estudios de la madre debido a que es la caracterÃstica que produce más efecto sobre su rendimiento en lectura, y porque además es una buena aproximación a la posición social de la familia.
[Quienes no estén familiarizados con la estadÃstica necesitan de una pequeña aclaración. Los circulitos son la puntuación media de los jóvenes de 15 años en lectura y las lÃneas que salen de los circulitos tienen en cuenta el margen de error estadÃstico que les comenté previamente. Para interpretar estas lÃneas de error debe tenerse en cuenta que cuanto más se superponen, más probable es que las diferencias entre las medias se deban al azar. El error más frecuente al comentar los datos de PISA (y de cualquier estudio muestral) es mirar los circulitos -la estimación puntual- y olvidarse de que tiene márgenes de error (estimación por intervalos). (Disculpen el inglés: azul tiene video-consola y la usa, verde, la tiene pero no la usa, canelo no tiene videoconsola, y en el eje horizontal, el nivel de estudios de la madre, empezando por licenciada y acabando en sin estudios)].
El resultado, por inesperado, me da mucha risa, todo hay que decirlo. Si hago de comentarista estándar de PISA dirÃa que lo mejor que puede hacer estos reyes es regalarle una videoconsola al menor que la pida, y acto seguido guardarla en el desván: los jóvenes con mejores puntuaciones son aquellos que tienen videoconsola y no la usan. En todos los niveles de estudios de la madre esto es asÃ, aunque no siempre es estadÃsticamente significativa la diferencia. Lo bueno del asunto es que jugones y quienes no tienen videoconsola obtienen resultados similares en todos los grupos, excepto para las madres universitarias. Es el único caso en el que claramente los videojugones obtienen malos resultados. Sin embargo, aquellos con madres con bajo nivel de estudios (primarios y sin estudios) los videojugones obtienen mejores resultados (aunque podrÃa ser por errores aleatorios, debido a que son pocos los que tienen videoconsolas en estas familias).
PodrÃamos atribuir causalidad al efecto mágico de guardar la videoconsola en el armario. Esto es lo que suelen hacer muchos estudios que intentan sacar recetas educativas de malas lecturas de los datos de PISA (no tienen en cuenta márgenes de error aleatorios, lo grande que son las diferencias o comparan paÃses al tuntún). O podemos pensar que el estatus de la familia es crucial para conocer la relación entre videoconsola y rendimiento educativo (sin olvidar que no contemplamos el efecto de que hay muchos videojugones que prefieren el PC a la videoconsola). Quizá la relación no sea causal, sino que las caracterÃsticas de las familias varÃan tanto por su nivel cultural como por las razones que les llevan a comprar una videoconsola (una posibilidad, en términos técnicos, es que haya interacciones con efectos positivos para las familias de bajo nivel educativo y negativos para las de alto nivel educativo). Incluso puede que las familias tiendan a regalar la videoconsola como gratificación por las buenas notas, asà que el menor tiempo dedicado al estudio se equilibra con la mayor capacidad del niño; además, esto podrÃa explicar los buenos resultados de los “niños pobresâ€: la videoconsola como premio, no como capricho. En todo caso, como pueden observar las diferencias son pequeñas, por lo que quizá no sea necesario hilar tan fino. ¿Está dispuesto a que su hijo o hija sea unos milÃmetros más bajito que la media lectora de la clase a cambio de que disfrute matando zombies nazis? Claro que sÃ, pues el dÃa que lleguen esos zombies, tendrá a quien recurrir para que le salve la vida…
Espero no haberles aburrido mucho con cuestiones metodológicas y que por lo menos haya quedado claro que los datos de PISA son de gran interés, pero que deben interpretarse con sumo cuidado.
Buenos dias José S. MartÃnez,caballeros callejeros y cabellleras al viento:
Gracias por el articulo,me he riedo mucho con las distintas posibilidades que despierta en los lectores de estadisticas y consultas varias.
Esto me lleva a preguntar si existe alguna estadistica o sondeo que refleje el grado de inteligencia asociado a la empatia de los que dice que van a votar al Partido Popular.
No se que dicen las estadisticas sobre los fumadores de nuestro pais,pero qlo que si ha dejado en evidencia la ley antitabaco en lugares publicos es que los periodistas de nuestro pais son una pandilla de gritonas desencajadas verduleras escapadas de un psiquiatrico,y que me perdonen las verduleras y los psiquiatricos….¡¡Dios mio, que cantidad de tinta de calamar nicotinosa,vertida en los medios de comunicacion!!.
¡¡Fumad ,fumad malditos!!!…..JAJAJA…que nervios.
Muchisimas gracias Jose S Martinez por un articulo excelente y divertido, espero que continues mucho tiempo y muchas veces aquà como articulista. Penilla que al salir en una època vacacional los comentarios son mas escasos.
Por cierto, bien está darles un pequeño «capirote» a los «Nadaesgratis» blog de buena calidad, de nivel, pero para mi gusto, un poco pagado de si mismo.
Abrazos
Gracias José S. MartÃnez por el articulo. Realmente es muy cierto lo que expones. Teniendo la misma madre licenciada en dos carreras, entre mi hija, que no juega a la play y mi hijo que si lo hace, existe esa diferencia de lectura a la que te refieres, aunque curiosamente mi hijo tiene mejores notas que mi hija, paradojas de la vida.
Dejo aquà este video ilustrativo del tema: Redes 75: No me molestes, mamá, estoy aprendiendo.
Eduard Punset entrevista en Redes a Marc Prensky, un experto en la educación del futuro, un hombre rompedor y creativo en la empresa de reformar las aulas y los sistemas educativos actuales.
Que la educación necesita una revolución nadie lo duda. Las innovaciones que vivirá el mundo educativo acabarán desmontando todo el sistema que hoy en dÃa forma a los ciudadanos en las escuelas e institutos. En este proceso, la tecnologÃa, las redes sociales o los videojuegos tendrán seguramente un papel importante, serán herramientas valiosas para transmitir nuevas habilidades a los jóvenes, las que verdaderamente necesitan para llegar a la vida laboral y desenvolverse socialmente en entornos cambiantes. Lástima que la economÃa esté estancada en conceptos obsoletos y no de muestras de pertenecer al futuro que viene.
http://www.redesparalaciencia.com/4040/redes/redes-75-no-me-molestes-mama-estoy-aprendiendo
Saludos al viento
Puestos a ilusionar podrÃamos imaginar que los tres reyes magos descendieron de los cielos desde su nave espacial estelar (estrella fugaz) y transmitieron poderes al niño Jesús que finalmente ascendió a los cielos… jejeje.
http://www.youtube.com/watch?v=IsfzFj1MP94&feature=related
Saludos extraterrestres.
24 de diciembre del 2010: http://www.youtube.com/watch?v=3P53ZwuexUA&feature=related
Felicidades por el artÃculo. Excelente.
Qué razón tiene cuando afirma el cansancio que produce «…ver grandes propuestas de reformas educativas basadas en diferencias que son errores estadÃsticos o “milÃmetros†de estatura». Y lo peor es que la majaderÃa se repite en este paÃs cada vez que se presentan estos informes.
Muchas gracias por los comentarios, y por la información. Quizá para rematar, como todo, lo importante es que la consola se intergre con sensatez en las actividades de los menores, aunque agrdezco profundamente a mis padres que me dejasen jugar hasta 11 horas seguidas… (con puas fisiológicas) como ven, salà mal, lo normal 🙂
Hay un experimento que consistió en dar de forma aleatoria una videoconsola a un grupo de niños y compararlos con otros que no tenÃan videoconsola (http://scienceblogs.com/notrocketscience/2010/02/trial_finds_that_video_games_hamper_reading_and_writing_skil.php) Se me ocurren por lo menos dos problemas:
– las familias no compran las consolas de forma aleatoria, sino que lo pueden hacer un contexto educativo. POr ejemplo, se la regalamos porque asà será más fácil «chantajearlo» y por tanto podremos mejorar su comportamiento. A lo mejor por eso da buenos resultados en las familias de bajo nivel cultural (aunque el efecto no es estadÃsiticamente significativo)
– Los experimentos aleatorios con personas pueden tener sesgos, por el efecto Hawthorne, que hace que las personas que participan en un experimento cambien su comportamiento
Me quiero someter al efecto Hawthorne,¿donde tengo que pedir la beca?…..jeje.
Viendo como se estan comportando algunos fumadores y los que son contrarios a la ley porque la han hecho los socialistas ,uno llega a entender porque los etarras siguen sin dejar las armas.
9
A ver …… explÃcamelo.
el efecto Hawthorne, que hace que las personas que participan en un experimento cambien su comportamiento.
los fumadores que no quieren dejar de fumar y gozar de sus privilegios se convierten en energumenos antisistema.
los etarras que no quieren dejar de ser quienes son y gozar del privilegio de matar siguen sin dejar las armas.
el efecto Hawthorne ¿parece contradictorio verdad?…pues no.
Por cierto….cuanto «cabron» han dejado los Reyes Magos……jeje.