07.-+AVALUACIÓ+DEL+PROTOTIP

Si bien existen muchas lagunas en los incios de este curso virtual a estudio, destacamos que el profesor lleva a cabo una serie de acciones que consideramos correctamente ejecutadas en cuanto a la EVALUACIÓN DEL PROTOTIPO, aunque también queremos dejar patente que ésta no ha existido como tal, por falta material de tiempo, y por lo tanto han sido los propios alumnos los que, de una forma práctica -y tal vez inconsciente- han realizado la evaluación del prototipo aportando el "feed back" necesario para ir modificando los puntos en los que el profesor detectaba errores, opiniones contrarias a lo esperado o dificultades de los alumnos en progresar en su aprendizaje, mediante cuestionarios: ...//En general, apareixien al final de la lliçó i estaven formats per entre 5 i 10 preguntes, que es presentaven en format de selecció múltiple. Com que aquests qüestionaris es puntuaven automàticament, l'estudiant els podia fer tantes vegades com fos necessari i m'enviava una nota per dir-me que l'havia superat. Normalment, es necessitaven entre 10 i 15 minuts per a fer el qüestionari i aquest servia com a revisió del contingut del curs. L'estudiant rebia un únic punt de tota la nota final per realitzar el test//.

De igual manera, los exámenes oficiales han sido planteados de una forma muy personal por el profesor, permitiendo que los alumnos los realicen en una hora y facilitándoles instrucciones de no hablar con nadie, no consultar otras páginas Web, no usar el móvil, no consultar entre ellos hasta al cabo de una semana en la que ya tendrían las notas... El autor afirma haber tenido buenos resultados y considera que los alumnos agradecen ese depósito de confianza por su parte. La cuestion es que esa percepción del profesor la deduce a través de los exámenes que le son remitidos por correo electrónico. No nos parece un sistema correcto, ni siquiera en el año 2000, pues la enseñanza a distancia lleva funcionando muchísimos más años (hay quien afirma que desde el siglo XVIII) y nunca ha sido esa la forma de actuar con los alumnos de cara a unos exámenes oficiales del curso que están realizando. No consideramos ese proceder como una innovación, ya que las respuestas recibidas, a buen seguro, serán todas de carácter positivo y conformidad de los alumnos con el sistema empleado, pero no garantiza ni la asimilación de conocimientos por los alumnos, ni la cosecución de las competencias previstas en él.

Continuando con la EVALUACIÓN DEL PROTOTIPO, el profesor utiliza un método que nos parece contraproducente e igualmente improvisado, tal como venimos sosteniendo en varios puntos anteriores y posteriores a éste. Él mismo narra cómo algunos estudiantes se alarmaban al recibir un correo electrónico que les enviaba, para conocer cuál era su impresión sobre los objetivos conseguidos, lo que interpretaban como que su rendimiento era bajo: //...L'àrea final de l'avaluació fa referència al meu desig de controlar l'èxit dels estudiants en el curs i refinar contínuament l'experiència en línia. Per la meva banda, intento mantenir un registre del funcionament i dels ajustos o millores del curs. Al final del curs, puc revisar aquestes idees i determinar on situaré el meu temps i la meva energia en la següent edició del curs que ofereixi. Per a conèixer el punt de vista de l'estudiant, demano la seva opinió en diversos moments durant el període que dura l'experiència. Després de tres o quatre setmanes de formació, trameto un correu electrònic privat a cada estudiant on li pregunto com va el seu progrés i l'abast d'objectius fins a aquest moment. Al principi, vaig alarmar diversos estudiants amb aquest correu electrònic perquè van suposar que jo pensava que els seus resultats no estaven a l'altura dels meus estàndards. Els vaig haver d'assegurar que la meva intenció era només comprovar com els anaven les coses. Ara sóc més curós a explicar la raó del meu correu electrònic en el qual demano "idees de l'estudiant".// Puesto que no existe realmente una evaluación de cada una de las fases del modelo ADDIE, al menos en este primer curso -según lo narra el profesor-, ni tampoco un estudio previo sobre cómo evaluarlo, sino que se van planteando cuestionarios improvisados durante la evolución del curso, o se envían correos electrónicos a los alumnos pidiéndoles opinión sobre sus progresos, volvemos sobre nuestros pasos en relación con la improvisación, y nos planteamos cada vez con más fuerza si realmente merecía la pena haber planteado el curso de esta forma, o si hubiera sido mejor anularlo y preparalo durante el curso convencional para el siguiente año académico.

Para finalizar, el autor también afirma que: //...Una vegada acabat el curs, utilitzo dues estratègies més per a obtenir informació sobre l'èxit del curs. Com a activitat d'equip de tancament o final, exigeixo que els estudiants treballin en grups reduïts i que classifiquin el valor de les lliçons individuals, indicant específicament els aspectes que consideren que valen la pena i els que no van considerar tan beneficiosos. Finalment, utilitzo un fòrum obert de preguntes tipus enquesta, que envio jo i que no són obligatòries, on sol·licito suggeriments o comentaris sobre el curs. Asseguro als estudiants que no accediré als seus comentaris sobre el curs fins que se n'exposin les notes finals. D'aquesta manera, estan còmodes sabent que els seus comentaris no influiran en la nota final. Tots els anys que he impartit l'AEE 413 he rebut opinions positives i constructives sobre el funcionament del curs. Aquest feedback ha influït notablement en les modificacions que he introduït en revisar el curs//. Consideramos que este tipo de prueba o de EVALUACIÓN DEL PROTOTIPO debe hacerse con un grupo seleccionado de alumnos o participantes voluntarios que sepan que están proporcionando ese tipo de datos, y no lo que ocurre en este caso, pues el PROTOTIPO pasa a ser la PROPUESTA VIRTUAL DEFINITIVA, y los propios alumnos verdaderos quiénes sufren y padecen toda la improvisación de un curso que debe mejorar en todos sus aspectos, contribuyendo con su propio desgaste a la puesta a punto del PROTOTIPO.

De la lectura d'aquest apartat i del cas crec que deuriem separar els mecanismes d'avaluació dels coneixements dels alumnes, dels mecanismes d'avaluació del curs o prototip.

En quant als mecanismes d'avaluació dels coneixements dels alumnes coincideixo en part amb el que s'ha apuntat abans. Hi ha una part d'avalucació objectiva preguntes al final de la lliçó, i una part més discutible com és que cadasqú faci el examen en solitari.

Pel que fa a l'avaluació del prototip el principal problema és que no hi ha prototip. S'està avaluant el curs denifitiu i els ajustos o millores es produeixen d'un curs per al següent. Els mecanismes de captació d'informació dels alumnes són correctes però es trobe a falta l'autocrítica del mateix professor. Per tant podriem considerar vàlids aquestos procediments de feedback si es tractés d'un curs consolidat però no són acceptables per a una primera versió del curs on s'hauria d'haver provat el curs amb un grup de test.