Nosotros no hablamos de test perfecto, sino de su grado de validez o fiabilidad. Lo que intentamos siempre es buscar la calidad de un instrumento de evaluaci\u00f3n como son los cuestionarios, tests o ex\u00e1menes.<\/p>\n
\u00bfQu\u00e9 hacen exactamente?<\/strong><\/p>\n Hacemos el test del test. Si por ejemplo hay una entidad que hace una selecci\u00f3n de personal o unas oposiciones o ex\u00e1menes a nivel acad\u00e9mico y hay alg\u00fan tipo de sospecha o problema en torno a la calidad de aquella prueba, lo que nosotros ofrecemos es un servicio de auditor\u00eda, que consiste en realizar un proceso de control de calidad de las garant\u00edas que ofrece ese instrumento.<\/p>\n Llevamos a cabo dos tipos de auditor\u00edas: una preventiva y otra reactiva. Si por ejemplo hay alguien que quiere conocer la calidad de un examen antes de utilizarlo, se puede hacer una auditor\u00eda de car\u00e1cter cualitativo del mismo revisando el material y garantizando que aquello funciona correctamente. Por ejemplo, nos encontramos todav\u00eda en el a\u00f1o 2019 con muchos ex\u00e1menes en los que a\u00fan aparece la opci\u00f3n de respuesta \u201cninguna respuesta es cierta\u201d. Esta opci\u00f3n es reclamable. Lo que hay que poner es \u00abninguna de las otras respuestas\u00bb o \u00abninguna de las respuestas anteriores\u00bb. Es un lapsus, una peque\u00f1a tonter\u00eda, pero muchos docentes no se dan cuenta de ello y all\u00ed hay un punto al que el examinado puede agarrarse. O, por ejemplo, hay aut\u00e9nticos patrones que los alumnos conocen, como que la alternativa m\u00e1s larga, si no tienes clara cu\u00e1l es la correcta, es la que se debe elegir. O que no se deben elegir las primeras opciones de los principios de p\u00e1gina ni las \u00faltimas de los finales de p\u00e1gina. Porque los autores de los tests tienden a retrasar la posici\u00f3n de las respuestas correctas al principio de la p\u00e1gina y a avanzarlas en las preguntas de los finales de p\u00e1gina. Son patrones, rutinas que se van perpetuando a\u00f1o tras a\u00f1o. Para detectar este tipo de cosas y eventuales problemas en la expresi\u00f3n ling\u00fc\u00edstica hacemos la auditor\u00eda previa de los tests.<\/p>\n La auditor\u00eda reactiva o cuantitativa se hace una vez ya se ha hecho la evaluaci\u00f3n. A partir de nuestro an\u00e1lisis, antes de dar los resultados a las personas evaluadas, podemos dar un feedback<\/em> a los autores sobre si hay alguna pregunta sospechosa o que tiene un mal funcionamiento, ya que esto podr\u00eda ocasionar una p\u00e9rdida de confianza de los examinandos.<\/p>\n \u00bfC\u00f3mo realizan este an\u00e1lisis cuantitativo?<\/strong><\/p>\n Nosotros lo que utilizamos, b\u00e1sicamente, es la matriz de respuestas original, lo que ha marcado la persona lo m\u00e1s original posible. A partir de esto se nos ocurre una serie de an\u00e1lisis y de simulaciones que hacen que se pueda constatar si la alternativa que da el autor como correcta lo es realmente o no. Cuando detectamos que hay \u00edtems que psicom\u00e9tricamente no funcionan, lo que hacemos, y \u00e9sta es la parte m\u00e1s delicada, es comunicarlo a los autores. Hay autores que admiten que ha habido una anomal\u00eda, y otros que siguen adelante tal como ellos hab\u00edan dicho.<\/p>\n A menudo, cuando hacemos una auditor\u00eda, pedimos cu\u00e1l es el escenario: para qu\u00e9 se quiere la prueba, qu\u00e9 repercusi\u00f3n tiene de cara al futuro de los examinados… Todo esto es importante, porque no hacemos un an\u00e1lisis as\u00e9ptico, hay que ponerle contexto. Esta parte final, la de dar sentido a las preguntas conflictivas, le corresponde al autor.<\/p>\n En algunos cursos que hicimos en el ICE dimos a los profesores que asist\u00edan la posibilidad de traer sus propios ex\u00e1menes. La pr\u00e1ctica de revisarlos la hac\u00edamos entre todos, pero hab\u00eda un momento en el que se produc\u00eda el silencio: cuando cada profesor tomaba conciencia de que tal vez aquel examen que hab\u00edan hecho hac\u00eda dos a\u00f1os ten\u00eda un 20% de preguntas que no funcionaban. Entonces se daban cuenta de que hab\u00eda habido una evaluaci\u00f3n injusta, y eso es duro.<\/p>\n \u00bfCu\u00e1les son los problemas m\u00e1s recurrentes que tienen los tests?<\/strong><\/p>\n El conocimiento que una persona determinada pueda tener de un tema concreto no est\u00e1 ligado a la capacidad o al conocimiento que tiene esta persona para desarrollar las herramientas para evaluar dicho conocimiento. Ahora hay m\u00e1s sensibilidad con esta cuesti\u00f3n, pero durante a\u00f1os no ha habido formaci\u00f3n en esta pr\u00e1ctica. En el caso de los docentes, han vivido una experiencia como alumnos que a menudo propagan como docentes m\u00e1s adelante. Muchas veces esto hace que se mantengan los estilos de c\u00f3mo evaluar. Hay una especie de herencia adquirida que muchas veces arrastra problemas.<\/p>\n En este sentido, alguna vez nos hemos encontrado con que m\u00e1s de la mitad de una prueba oficial ten\u00eda graves deficiencias que la invalidaban completamente. Lo que nos preocupa es que, si estamos jugando con la precisi\u00f3n que los autores adjudican a sus pruebas (hay que sacar un 5 para aprobar), esto supone que el instrumento debe tener la misma precisi\u00f3n. En cambio, nos encontramos con ex\u00e1menes que tienen un error de +\/- 2 puntos sobre 10. Esto nos lleva a veces a constatar que, por ejemplo, un 20% de los suspendidos en un examen para nosotros tal vez deber\u00edan haber sido aprobados. Y un 20% de los aprobados quiz\u00e1s deber\u00edan estar en la categor\u00eda de suspensos. No porque supieran m\u00e1s o menos, sino porque el examen ten\u00eda unos problemas de dise\u00f1o que hac\u00edan que esta zona de apto\/no apto quedara muy difuminada.<\/p>\n Hay muchos ex\u00e1menes que penalizan las respuestas incorrectas en las que la alternativa correcta es dejar la respuesta en blanco. Es decir, la gente m\u00e1s preparada ha visto algo raro en la pregunta que los que no est\u00e1n tan preparados no han visto, y puesto que quieren evitar la penalizaci\u00f3n la dejan en blanco. Hemos encontrado pruebas en las que dejar la pregunta en blanco es la respuesta correcta, porque es la que indica qui\u00e9n est\u00e1 mejor preparado. Y esto es un problema grave. Los examinandos lo notan, pero son pasivos, conf\u00edan en el examen, conf\u00edan en la autor\u00eda del mismo… Y en cierto modo lo que hacemos nosotros es inyectar desconfianza. Por qu\u00e9, \u00bfqui\u00e9n garantiza que una prueba funciona con garant\u00edas? Nadie.<\/p>\n \u00bfA qui\u00e9n le interesa este tipo de servicio?<\/strong><\/p>\n \u00daltimamente tenemos convenios con empresas privadas que quieren garantizar una cierta calidad de sus evaluaciones. No tienen expertos, pero quieren evaluar alg\u00fan concepto sobre sus trabajadores (resiliencia, emprendedur\u00eda, perfil motivacional, etc.). Se trata de asegurarse de que la evaluaci\u00f3n consigue alcanzar todo lo que se pretende alcanzar.<\/p>\n \u00bfCu\u00e1ntos lugares hay donde piensan que el test es sagrado, que el cuestionario es lo que es, que es indudable y que funciona por defecto bien? En estos casos no hay ninguna conciencia, por tanto, de que aquello es una herramienta muy parcial. Y si hablamos de una prueba que es vinculante para el futuro de alguien, hay que tener mucho cuidado.<\/p>\n <\/p>\n M\u00e1s sobre Jordi Renom<\/strong><\/p>\n El mejor invento de la historia El invento del futuro que le gustar\u00eda ver El que m\u00e1s miedo le da La FBG es… Dentro del Departamento de Psicolog\u00eda Social y Psicolog\u00eda Cuantitativa de la Universidad de Barcelona, \u200b\u200bel Dr. Jordi Renom se dedica…<\/p>\n","protected":false},"author":2,"featured_media":6698,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_acf_changed":false,"inline_featured_image":false,"_monsterinsights_skip_tracking":false,"_monsterinsights_sitenote_active":false,"_monsterinsights_sitenote_note":"","_monsterinsights_sitenote_category":0,"footnotes":""},"categories":[3],"tags":[],"class_list":["post-6700","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-actualidad"],"acf":[],"_links":{"self":[{"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/posts\/6700","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/comments?post=6700"}],"version-history":[{"count":3,"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/posts\/6700\/revisions"}],"predecessor-version":[{"id":7302,"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/posts\/6700\/revisions\/7302"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/media\/6698"}],"wp:attachment":[{"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/media?parent=6700"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/categories?post=6700"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.fbg.ub.edu\/es\/wp-json\/wp\/v2\/tags?post=6700"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}
\n<\/strong>La vela<\/p>\n
\n<\/strong>La m\u00e1quina del tiempo<\/p>\n
\n<\/strong>La m\u00e1quina del tiempo, tambi\u00e9n<\/p>\n
\n<\/strong>Es una puerta a la sociedad. Nos permite comunicarnos y ponernos en contacto a nivel acad\u00e9mico con la sociedad. Para m\u00ed es una pieza important\u00edsima, y \u200b\u200bcreo que en este sentido en la UB tenemos mucha suerte. Viendo compa\u00f1eros de otras entidades y universidades tomas conciencia de que nosotros tenemos esta oportunidad, que no es tan habitual.<\/p>\n![\"\"](\"http:\/\/www.fbg.ub.edu\/wp-content\/uploads\/2018\/12\/FederSUR-2-1024x78.jpg\")
<\/p>\n","protected":false},"excerpt":{"rendered":"