0000000000900782
AUTHOR
J. M. Jornet Meliá
Encrucijadas para la evaluación del profesorado pre-universitario
Se presenta una reflexión acerca del potencial de la evaluación formativa del profesorado y los elementos que inciden en ella haciendo que pierdan su validez cuando se utiliza con consecuencias sumativas. Se orienta hacia los aspectos que podría interesar analizar en el momento de incertidumbre que vive España en la actualidad. A reflection is presented about the potential of the formative evaluation of the teaching staff and the elements that affect it, causing them to lose their validity when used with summative consequences. It is oriented towards the aspects that could be interesting to analyze in the uncertainty moment that Spain is currently experiencing.
La validez en la evaluación de programas
El tema de la Validez, en cualquiera de los ámbitos que afectan a las CC. De la Educación, es un tema recurrente y, por lo tanto, tratado con exhaustividad y acierto por la gran mayoría de autores que, en algún momento, lo han atendido. Por ello, más que acercarnos a él desde una perspectiva estrictamente de fundamentación metodológica, en la que poco se puede aportar, estimamos que quizá es más adecuado revisar este tema desde las implicaciones que se derivan de las experiencias evaluativas en las que hemos estado inmersos, refiriendo eso sí los componentes teórico-metodológicos con los que nos sentimos más identificados. Por ello, este trabajo lo estructuramos en dos grandes apartados: a)…
Proceso de diseño y validación de un instrumento para evaluar la competencia lingüística en escolares de educación infantil (segundo ciclo) y primaria (primer ciclo), en castellano y valenciano.
El desarrollo adecuado del lenguaje y, dentro de la competencia comunicativa, de la expresión oral, es fundamental para un buen desarrollo personal y escolar en la infancia. Presentamos un estudio cuya finalidad es diseñar y validar un instrumento para evaluar la expresión oral en Castellano y en Valenciano, basado en estrategias narrativas, dirigido a escolares de segundo ciclo de educación infantil y primer ciclo de educación primaria. Se analizan las tareas narrativas como medio de evaluación de la expresión oral. Se plantea un proceso metodológico, para su diseño y validación, de carácter mixto (cuantitativo/cualitativo), con la finalidad de establecer criterios que permitan definir rúb…
Evaluación, acreditación y certificación de la Formación profesional, ocupacional y contínua: unas notas para la reflexión
La evolución social experimentada en los países desarrollados y en especial en el contexto europeo, ha puesto de manifiesto la necesidad de la Formación Ocupacional y Continua como un elemento clave de dinamización social. En el plano personal y social su rol es evidente: se trata de un factor central de adaptación de las personas, de preparación al cambio. En este sentido, se puede entender como un factor de atención continuada para que las personas puedan mejorar su adaptación socio-laboral, considerando la rapidez de adecuación a las nuevas situaciones. Asimismo, constituye un elemento preventivo de la exclusión socio-laboral, al atenuar los componentes de riesgo debidos a los cambios qu…
Modelo para la determinación de niveles de logro y puntos de corte de los EXCALE
La determinación de los Niveles de Logro (NL) o de estándares de ejecución de los Exámenes de la Calidad y el Logro Educativos (Excale), del Instituto nacional para la Evaluación de la Educación (INEE), constituye un proceso complejo propio de la construcción de pruebas de gran escala y que implica elementos de validación. Las estrategias y procedimientos que se utilizan para lograr un adecuado sistema de interpretación de resultados de las pruebas nacionales se basan, por lo general, en métodos que han sido probados por diversas agencias evaluadoras e instituciones académicas de prestigio internacional.
Diseños de evaluación de competencias: consideraciones acerca de los estándares en el dominio de las competencias
En este artículo se analizan los conceptos de competencias y estándares de desempeño, así como una estrategia general para orientar el diseño y planificación de un sistema de evaluación de competencias. Se comentan algunos elementos conceptuales y metodológicos acerca de la determinación de estándares en el dominio de las competencias. En este punto se revisan los conceptos y roles de los criterios, estándares e indicadores de evaluación, y de la necesidad de orientar los procesos de evaluación de competencias sobre modelos de tipo cuantitativo que permitan graduar los niveles de desempeño con precisión. Finalmente, se analizan las implicaciones educativas y organizativas de la enseñanza po…
Tendencias en las políticas de formación y evaluación del profesorado en la Educación Superior en España
En esta aportación revisaremos la situación en la universidad española respecto a los procesos de formación y de evaluación de la función docente. La demanda social respecto a la universidad y su papel en el desarrollo de la sociedad y la ciudadanía, los cambios derivados del Proceso de Bolonia y los procesos explícitos y continuos de evaluación y acreditación en las universidades han configurado un nuevo panorama en la universidad española, que ha influido en las políticas de formación y de evaluación del profesorado. La formación inicial y continua del profesorado universitario, en tanto investigador y, sobre todo, como docente, tiene una larga tradición, pero se ha visto sustancialmente …
Manual técnico. Establecimiento de niveles de competencia
La determinación de estándares para la interpretación de los niveles de logro de los Exámenes para la Calidad y el Logro Educativos (Excale) constituye un proceso complejo en la construcción de las pruebas, el cual implica elementos de validación. La estrategia y los procedimientos utilizados para este propósito deben basarse en métodos sustentados en la experiencia que las diversas agencias e instituciones de evaluación, nacionales e internacionales han desarrollado y, a partir de ella, crear las interpretaciones de pruebas con sustento en estándares cuidadosamente diseñados, mediante soluciones ajustadas específicamente a los requerimientos de diseño, construcción y aplicación de los Exca…
Bordón : revista de pedagogía
Resumen tomado de la publicación Se realiza una revisión acerca de un posible modelo de diseño y desarrollo de cuestionarios de contexto para la evaluación de sistemas educativos. Se revisan fases generales, a la par que se identifica la posible composición de indicadores simples y complejos de dichos instrumentos. En el diseño de cuestionarios de contexto hay que considerar diversos aspectos: la selección de variables e indicadores que se deben incluir como parte del modelo y el modo en que se evalúan los indicadores complejos. Éstos últimos son resultado de una escala o de la combinación de indicadores simples representados por un solo ítem. Para evaluar indicadores complejos, como el cli…
Validación de un plan de evaluación de teleformación en la empresa
This article presents a validation study concerning an Evaluation Plan for E-Leaning. A quality validation study is developed from the conclusions or decisions of an Evaluation Plan for E-Learning. All this offers initial evidence of validation, in a global character, of these types of evaluation plans. En este artículo se presenta un estudio de validación acerca de un plan de evaluación de teleformación. Concretamente, se desarrolla una estrategia de validación cualitativa de las conclusiones o toma de decisiones del plan de evaluación, con el fin de aportar una evidencia inicial de validación de carácter global para este tipo de planes de evaluación
Reflexiones generales sobre el contexto para el desarrollo de la docencia.
En la búsqueda de elementos explicativos que permitan mejorar el quehacer docente en las instituciones de educación superior, surge el “Estudio sobre las prácticas y condiciones institucionales para el de- sarrollo de la docencia”, que reunió a un grupo de investigadores de cuatro países, quienes analizaron el contexto en el que los docentes desarrollan su práctica desde tres dimensiones de análisis –macro, meso y micro– en siete universidades. Mediante la aplicación de di- ferentes técnicas para recabar la opinión de directivos, profesores y estudiantes, así como del análisis de textos, se obtuvieron los resul- tados reportados en el libro, los cuales nos ofrecen elementos para…
La Investigación Evaluativa y las Tecnologías de la Información y la Comunicación (TIC).
La investigación evaluativa se ha constituido en los últimos años como un poderoso instrumento de apoyo a la gestión educativa, tanto en el planomicro-analíticopara la gestión y mejora de la evaluación en el aula, como en macro-analíticopara la evaluación de programas, organizaciones y sistemas.
A educación durante a pandemia. Materias pendentes e leccións aprendidas
As circunstancias vividas durante o confinamento motivado pola covid-19 na primavera de 2020 e o desenvolvemento anómalo do curso actual, 2020/21, deberíannos facer reflexionar. Entre as leccións aprendidas, hai que sinalar que a pandemia nos puxo socialmente ante un espello e estanse poñendo de manifesto problemáticas sociais e educativas que, actualmente, xa son evidentes. A emerxencia educativa é moi grave. Durante o confinamento puidemos realizar un estudo sobre como estivo a funcionar a educación nesa situación. O estudo denominouse La escuela en casa (EEC).
Acerca de la Validez de los Exámenes de la Calidad y el Logro Educativos (Excale).
Este documento trata de la validación de una nueva generación de pruebas de aprovechamiento desarrollados por el Instituto Nacional para la Evaluación de la Educación conocidos como Exámenes de la Calidad y el Logro Educativos (Excale). En el documento se discuten consideraciones conceptuales acerca de su validez, se propone un marco conceptual basado en premisas, y un marco de referencia para el diseño de estudios de validez. El marco de referencia se basa en la idea de que casi toda la información que se colecta durante el desarrollo de una prueba es útil para su validación. Este marco considera tres aspectos fundamentales: 1) las etapas de desarrollo de una prueba a gran escala (diseño y…
La evaluación del profesorado universitario en España.
El presente artículo pretende hacer una breve revisión acerca de la evaluación del desempeño del profesorado universitario en la España democrática. Se presentan: a) unas reflexiones acerca de la evaluación de la docencia, para delimitar la posición de los autores, dado que ésta condiciona indudablemente cualquier revisión; b) una breve reseña histórica de la evaluación de los docentes universitarios en España en los últimos años, desde la aprobación de la Constitución Española de 1978; c) una tipología de planes de evaluación, para definir un mapa acerca de las líneas de los planes evaluación que se aplican en España; d) las pautas técnicas para evaluar al profesorado y la presentación del…
El valor social de la educación. Una apuesta por la ciudadanía intercultural.
El valor social de la educación. Una apuesta por la ciudadanía intercultural.
Patrones diferenciales entre padres y profesorado en la detección de TDAH
El diagnóstico del Trastorno por Déficit de Atención con Hiperactividad (TDAH) se ha ido incrementando en los últimos años (CDC, 2014; UNESCO, 2011: 14). Los criterios sobre el TDAH se han ido aclarando entre la comunidad científica. Sin embargo, se trata de un trastorno complejo que requiere la participación en el diagnóstico de un equipo multidisciplinar. MÉTODO. En este estudio se analiza, con una muestra (N = 331) de alumnado de 6 a 9 años de Cuenca, la existencia de patrones diferenciales entre las dos valoraciones, mediante las Escalas EMA-D.D.A. (García-Pérez y Magaz, 2006). Se utilizan diversas aproximaciones de contraste de hipótesis, así como se valora la consistencia interna de l…
Hacia una definición del constructo de colegialidad docente: estrategias metodológicas para su evaluación
En el contexto actual de la educación, se plantea la necesidad de una mayor coordinación del profesorado en los centros escolares, con el fin de mejorar su eficacia y responder a las demandas educativas que recaen sobre ellos. Compartir las metas de la enseñanza constituye, de forma especial una de las condiciones que influyen en la profundidad con la que el profesorado colabora prestándose entre sí consejo y apoyo, esta existencia o no de consenso alrededor de los fines educativos es muy importante ya que repercute en los resultados generales tanto a nivel del profesorado como del alumnado en los centros. La aparición cada vez mayor de participación en la toma de decisiones en las escuelas…
La evaluación educativa como ámbito de especialización profesional
En este artículo se presenta una revisión acerca de la Medición y Evaluación Educativas como ámbitos de profesionalización. La evaluación ha ido instaurándose en nuestra sociedad, en especial respecto a la Educación. Hay prácticas evaluativas a nivel nacional e internacional acerca de la gran mayoría de factores implicados en la educación: alumnado, profesorado, instituciones educativas, programas de intervención, materiales, sistemas educativos...Para ejercer la función profesional en evaluación, es necesario identificar cuáles son las competencias clave a desarrollar. En este trabajo se revisan la evolución histórica del perfil profesional del evaluador hasta la actualidad, así como las c…
La Evaluación de la Formación Ocupacional y Continua
La Evaluación de los Programas de Formación para el Trabajo ha concitado un gran interés en los últimos años, tanto desde una perspectiva sociopolítica, como desde la gestión y organización de los mismos. La estructuración y evaluación de la Formación Profesional (Cabrera, 1987), en sus diversas modalidades, desde la Inicial reglada a la no reglada, ha constituido un centro de interés que progresivamente se ha ido instaurando también en nuestro país. El motivo central es que se ha constituido como uno de los ejes centrales de dinamización del empleo y de mejora de la competitividad empresarial a nivel europeo. Los fondos aportados para la Formación, las expectativas creadas en cuanto a su n…
Presentación
La Red Iberoamericana de Investigadores en la Evaluación de la Docencia (RIIED: http://iide.ens.uabc.mx/ried/ibero/) es un colectivo que reúne a investigadoras e investigadores de diversos países latinoamericanos, Portugal y España. Su propósito es coadyuvar a la mejora de la educación a partir de las aportaciones de la evaluación.
El valor social de la educación: a modo de introducción
La crisis económica sufrida en los últimos años, y en concreto en España, ha transmitido una cierta desconfianza en la sociedad acerca del valor que posee la educación para la integración y promoción socio-laboral de los jóvenes, así como en relación al impacto que ésta tiene para prevenir de la exclusión social a lo largo de la vida. Por desgracia en España, aún en la actualidad, que se considera que la crisis económica está en proceso de superación, hay una gran cantidad de jóvenes que se les identifica como 'sobre-formados'y que no encuentran un empleo adecuado a su formación. Unos acaban trabajando en empleos que requieren menor formación académica, mientras que otros acaban en el paro …
Una aproximación conceptual para el diseño de instrumentos de evaluación de la competencia aprender a aprender en los profesionales de la educación
La competencia de Aprender a Aprender (AaA, en lo sucesivo) ha sido señalada desde hace unos años como una de las competencias clave para el desarrollo personal y social. La formación a lo largo de la vida se basa no sólo en lo que las sociedades avanzadas puedan aportar a sus ciudadanos, sino también en la preparación con que éstos cuenten para aprovechar estas oportunidades. Prevenir la posibilidad de exclusión a lo largo de la vida (fenómeno especialmente doloroso cuando se produce en edades avanzadas, en las que las personas encuentran menos permeabilidad en el mercado de trabajo), es fundamental si se quiere apoyar un modelo de desarrollo social dirigido a promover la Cohesión Social.
La Evaluación de Programas de Formación: tipos de planes y algunas cuestiones metodológicas.
Del mismo modo que ha ocurrido en otros contextos educativos, en la Formación para el empleo la Evaluación de Programas se está constituyendo como uno de los instrumentos fundamentales para la mejora de su Calidad. No obstante, en este ámbito inciden una gran cantidad de factores, que deben ser tenidos en cuenta si se desea orientar de forma adecuada la evaluación. (Pérez Carbonell, 1999; Villanueva y Catalá, 1997; Marí, Perales y Villanueva, 1999). Revisarlos, de forma sistemática y exhaustiva, excedería con mucho los limites razonables para esta presentación. Por ello, hemos optado por describir los tipos de planes de evaluación, tomando como criterio la Unidad de Análisis a que se refier…
Valor social subjetivo de la educación: docencia y resultados escolares
La educación posee un valor social evidente que puede presentarse a través de diferentes indicadores de evaluación. La percepción que la sociedad pueda construirse acerca de ese Valor Social de la Educación (VSE), además de la que tenga la comunidad educativa en sí misma (alumnado, profesorado y familias), se aproxima a la idea de constructo de Valor Social Subjetivo de la Educación (VSE-Subjetivo). En este sentido, se ha realizado una revisión a nivel internacional de diferentes cuestionarios de contexto, en la cual se han identificado 45 pruebas (referidas a PIRLS, PISA, EXCALE, SERCE, TIMSS, ICCS, TALIS, etc.) en las cuales se han identificado 111 reactivos relacionados directamente con …
La formación inicial de docentes de educación infantil en América Latina y el Caribe y su relación con el valor social objetivo de la educación
Este estudio tiene el propósito de conocer cómo se organizan y estructuran las titulaciones universitarias de Educación y atención de la primera infancia en América Latina y el Caribe. Para ello se realizó un análisis de 19 países que componen la región, donde se consideraron sus requisitos de acceso y características generales de sus sistemas. Además, se asociaron indicadores de Valor Social Objetivo que influyen de manera directa en sus estructuras. Para identificar los grupos de formación y sus variables se realizó un análisis de conglomerados Kmedias y contrastes no paramétricos (ji-cuadrado), lo que permitirá observar las diferencias de formación inicial que existen entre los países de…
La teoria de l'error de traducció de proves: entrevista a Guillermo Solano-Flores
Guillermo Solano-Flores és professor a l’Escola d’Educació de la Universitat de Colorado Boulder, als EUA. El seu treball de recerca examina la intersecció de la psicometria i la sociolingüística i la manera com aquest coneixement multidisciplinari pot contribuir a millorar el procés de desenvolupament, revisió, traducció i adaptació de proves. Va postular la Teoria de l’error de traducció de proves, que està tenint un elevat impacte en la millora de les proves internacionals per avaluar sistemes educatius (TIMSS, PISA…). La recerca de Solano-Flores és rellevant per a l’avaluació d’estudiants en societats amb alta diversitat lingüística i també per a proves internacionals.
Diseño de procesos de evaluación de competencias : consideraciones acerca de los estándares en el dominio de las competencias
En este artículo se analizan los conceptos de competencias y estándares de desempeño, así como una estrategia general para orientar el diseño y planificación de un sistema de evaluación de competencias. Se comentan algunos elementos conceptuales y metodológicos acerca de la determinación de estándares en el dominio de las competencias. En este punto se revisan los conceptos y roles de los criterios, estándares e indicadores de evaluación, y de la necesidad de orientar los procesos de evaluación de competencias sobre modelos de tipo cuantitativo que permitan graduar los niveles de desempeño con precisión. Finalmente, se analizan las implicaciones educativas y organizativas de la enseñanza po…
Dimensiones docentes y cohesión social: reflexiones desde la evaluación
La evolución de las sociedades en el s. XXI pone de manifiesto que si algo no se ha conseguido todavía a nivel humano es asegurar las posibilidades de desarrollo y dignidad para todos. Las diferencias que se observan actualmente desde las sociedades más avanzadas a las que están inmersas en graves problemas de desarrollo, son abismales y las brechas que se dan ponen de manifiesto que el ser humano, todavía, no ha sido capaz de organizarse para conseguir el objetivo social de una civilización que merezca denominase como tal. La misma ONU propuso los objetivos del milenio, y como horizonte el 2015. Actualmente ya se están empezando a oír voces, desde la propia ONU, que señalan que sería un ve…
Evaluación estandarizada.
La estandarización de la medida y evaluación en CC. Sociales en general y en CC. de la Educación en particular ha estado en el centro de los debates epistemológicos tanto respecto a los procesos de construcción del conocimiento como en los aplicados, por ejemplo, la evaluación. Por estandarización entendemos el proceso de sistematización de todos los elementos de acercamiento a una acción de recogida e interpretación de información, de manera que se utilicen los mismos: instrumentos o técnicas, criterios de corrección y/o síntesis o análisis de la información y criterios de interpretación de la misma.
Evaluación criterial: determinación de estándares de interpretación (EE) para pruebas de rendimiento educativo
En este trabajo se presenta una revisión del estado de la cuestión acerca de los métodos para determinar estándares en pruebas de referencia criterial. Se analiza el concepto de estándar, sus componentes y los problemas implicados en las tareas de juicio en estos métodos. Se revisan los procedimientos para diseñar descriptores de estándares y los métodos para identificar puntuaciones de corte.
Reflexiones en torno al contexto de la docencia universitaria desde un concepto de Cohesión Social : intervención educativa y evaluación = Reflections on the context of university teaching from a concept of Social Cohesion : educational intervention and evaluation
En este trabajo se realiza una revisión de las áreas de intervención que podrían abordar las instituciones de Educación Superior, en un marco de trabajo cuyo propósito es el desarrollo de la Cohesión Social. Se unen, pues, dos conceptos que integran la acción docente: la planificación universitaria y su intervención. Este marco de trabajo permite identificar las áreas de orientación de los procesos de evaluación que podrían integrarse, ofreciendo una concepción del contexto del trabajo del docente universitario. De este modo, se revisa la definición de Cohesión Social que aporta el Consejo de Europa en 2005. En ella, se analizan posibles dimensiones que se toman como referencia para identif…
Colegialidad docente: un estudio comparativo (España/México) de validación de constructo para el diseño de un instrumento de evaluación
En Bakieva (2011) y Bakieva, Jornet y Carmona (2012) se aportan las bases teóricas y una primera validación de constructo realizada en España para el desarrollo de un instrumento de evaluación de colegialidad docente en Educación Primaria y Secundaria. Aquí presentamos un segundo análisis comparativo de los juicios de dos grupos de profesorado de España y México, que han valorado las dimensiones que componen la Colegialidad Docente. Finalmente, identificamos tres dimensiones de Colegialidad Docente: Satisfacción Laboral, como percepción de lo que “recibe” el sujeto en esa institución, Clima Institucional, como percepción exterior de lo que se vive en la institucional, y Compromiso Instituci…
El valor social de la educación: entre la subjetividad y la objetividad. Consideraciones teórico-metodológicas para su evaluación.
En este artículo se presenta una reflexión acerca del valor social de la educación (VSE) como constructo a evaluar. Se presenta una definición del constructo VSE, que se identifica como la utilidad que tiene la educación para el bienestar personal y social. Desde esta perspectiva, en el VSE se diferencian dos tipos de acercamiento: el VSE-Objetivo (que hace referencia a la utilidad objetiva medida a través de indicadores estadísticos referidos a diversos factores que involucran la educación), y el VSE-Subjetivo (que se define como la percepción que tienen las personas acerca de la utilidad de la educación tanto para el desarrollo personal como social). Se aportan reflexiones acerca del VSE …
La utilidad de las evaluaciones de sistemas educativos: el valor de la consideración del contexto.
En este artículo se hace una revisión de los procedimientos de evaluación de sistemas educativos. A partir de esta revisión, se analizan algunos factores relacionados con la baja utilidad de este tipo de evaluaciones. El análisis se dirige hacia el diseño deficiente de los cuestionarios de contexto. Se observa que los cuestionarios de contexto no llegan a explicar el rendimiento. Su baja capacidad de explicación del rendimiento es la causa de la baja utilidad de las evaluaciones de sistemas educativos; pues no permiten establecer recomendaciones de mejora. Se propone una base teórica y metodológica alternativa para diseñar los cuestionarios de contexto. Este tipo de metodología para diseñar…
Factores contextuales que influyen en el desempeño docente
En este trabajo presentamos una revisión conceptual acerca de los factores contextuales que influyen en el desempeño docente. El objetivo del trabajo es analizar la influencia que estos factores tienen en la docencia y, en consecuencia, la necesidad de considerarlos para el diseño de planes de evaluación de profesorado. Se identifican cuatro niveles de contextualización de la docencia: el salón de clases, el contexto institucional (que integra el centro escolar y el sistema educativo), y dos contextos sociales (el inmediato o cercano: población a la que atiende el profesorado y el centro escolar; y el mediato o lejano: las características poblacionales ¿socioeconómicas y culturales- de la r…
Evaluación de sistemas educativos:teoría y experiencia
La evaluación de sistemas educativos se ha ido constituyendo como un ámbito disciplinar que concita un gran interés socio-político y educativo. Aunque este tipo de evaluaciones ya tiene una considerable historia y un elevado impacto social, probablemente es uno de los sectores en los que mayor desconocimiento real se produce entre profesionales de la educación, administradores, gestores y la sociedad en general.