1
00:00:00,000 --> 00:00:06,800
en inglés, pero niños españoles. Luego veremos programas, porque la mayor parte de

2
00:00:06,800 --> 00:00:13,120
la investigación sobre este mundo está hecha en los países anglosajones y centrada en

3
00:00:13,120 --> 00:00:18,040
el idioma inglés. Entonces, yo le he querido dar ese enfoque, esa adaptación, aplicado

4
00:00:18,040 --> 00:00:25,320
un poco a lo que estamos enseñando nosotros en España y en la clase de inglés.

5
00:00:25,320 --> 00:00:32,880
Todo esto empezó, precisamente, como eso. Yo trabajaba con los niños historietas, cuentos,

6
00:00:32,880 --> 00:00:39,880
y en un momento dado, una parte de la actividad era hacerlas por escrito. Luego viene la parte

7
00:00:39,880 --> 00:00:47,040
que me toca a mí, revisar esas historias. Es un trabajo bastante laborioso, sobre todo

8
00:00:47,040 --> 00:00:51,520
es decir, voy a buscar determinadas estructuras, determinado vocabulario, quiero ver si lo

9
00:00:51,520 --> 00:00:58,240
están utilizando, si eso aparece en los cuentos. Entonces, yo empecé creando un programa,

10
00:00:58,240 --> 00:01:02,560
que está en el título de la presentación, que se llama ESA, que es el acrónimo en inglés

11
00:01:02,560 --> 00:01:09,400
de English Short Stories Analyzer. En un principio, lo único que hacía era buscar cosas muy

12
00:01:09,400 --> 00:01:14,360
básicas, alguna expresión, alguna estructura y algo de vocabulario. Pero claro, a mí me

13
00:01:14,400 --> 00:01:22,080
quitaba ya toda esa parte del trabajo. Con el tiempo lo fui mejorando un poco y ahora,

14
00:01:22,080 --> 00:01:28,520
por ejemplo, es un proyecto, que va a ser también una futura tesis doctoral, pero que

15
00:01:28,520 --> 00:01:32,000
está abierto también a la comunidad educativa. El programa está colgado en internet y es

16
00:01:32,000 --> 00:01:39,640
accesible libremente a cualquiera. El enlace está en las páginas del Congreso, donde

17
00:01:39,720 --> 00:01:47,080
está la contribución, allí tenéis el enlace. Todo esto empezó en el año 1966. Ellis Page

18
00:01:47,080 --> 00:01:54,560
fue el creador del primer programa, que lo llamó BEC, P-E-G, Project Basic Grade, en

19
00:01:54,560 --> 00:01:59,720
el que él, por una serie de variables, lo que hacía era poner un texto y que el ordenador

20
00:01:59,720 --> 00:02:06,200
de alguna manera lo valorara. Por aquel entonces fue algo pionero y relativamente complejo

21
00:02:06,200 --> 00:02:13,400
y complicado de hacer. Posteriormente se suspendió esa investigación principalmente

22
00:02:13,400 --> 00:02:20,160
porque requiere muchos recursos informáticos. Estamos mezclando estadística, cálculos

23
00:02:20,160 --> 00:02:28,640
complejos. Todo eso hizo que se parara hasta los años finales de los ochenta, principios

24
00:02:28,640 --> 00:02:34,440
de los noventa, que es cuando ya los ordenadores empezaron a ofrecernos posibilidades y potencial

25
00:02:34,440 --> 00:02:44,120
de cálculo matemático. Los colegios anglosajones tienen tradición de hacer una prueba escrita

26
00:02:44,120 --> 00:02:47,480
en muchas circunstancias, es decir, lo que nosotros hacemos aquí en selectividad o

27
00:02:47,480 --> 00:02:53,080
incluso la certificación para los docentes, es decir, en qué lugar o en qué nivel van

28
00:02:53,080 --> 00:02:57,360
a colocar a los alumnos en la universidad, una parte de esas pruebas es un texto escrito.

29
00:02:57,360 --> 00:03:02,640
Entonces, claro, cuando eso lo haces a nivel generalizado te encuentras con miles de textos

30
00:03:02,640 --> 00:03:07,840
y el trabajo es inmenso. Aquí es donde entran los ordenadores, es decir, es un campo que

31
00:03:07,840 --> 00:03:13,280
es abierto, el campo se llama data mining, que es recuperación de la información, y

32
00:03:13,280 --> 00:03:19,600
en esencia lo que consiste es que el ordenador, partiendo de un texto o de un documento escrito,

33
00:03:19,600 --> 00:03:25,000
extraiga determinadas unidades de información que nos permitan clasificarlo o de alguna

34
00:03:25,000 --> 00:03:31,680
manera entenderlo, sin leerlo entero. Como veis, ahí os pongo una serie de posibilidades,

35
00:03:31,720 --> 00:03:35,440
de líneas abiertas de investigación. Se está investigando, por ejemplo, que los

36
00:03:35,440 --> 00:03:41,200
ordenadores hagan índices de palabras, listas de palabras, resúmenes automáticos, es decir,

37
00:03:41,200 --> 00:03:46,840
se le da al ordenador un texto de X páginas, él lo que te hace es un resumen de 5 o 10

38
00:03:46,840 --> 00:03:54,040
líneas. Por ejemplo, traducciones es otra variante, clasificación de textos, que será

39
00:03:54,040 --> 00:03:58,440
lo nuestro, porque evaluar no deja de ser una forma de clasificar un texto, es decir,

40
00:03:58,440 --> 00:04:03,160
lo clasificamos en distintos niveles, ya tenemos la evaluación. Extracción de palabras

41
00:04:03,160 --> 00:04:07,160
clave, que esto es fundamental, es decir, un poco la base de toda esta línea de investigación

42
00:04:07,160 --> 00:04:11,600
son las palabras y, fundamentalmente, las palabras clave. Eso es lo que nos va a permitir

43
00:04:11,600 --> 00:04:17,200
después que el ordenador interprete esa información y la clasifique de alguna manera. La lingüística

44
00:04:17,200 --> 00:04:22,400
computacional es otra rama que ha surgido también a raíz de toda esta tendencia de

45
00:04:22,400 --> 00:04:27,360
la recuperación de la información, y ahora hay muchas investigaciones en relación a

46
00:04:27,360 --> 00:04:31,920
que los ordenadores sean capaces de entender las palabras por su forma y por su función.

47
00:04:31,920 --> 00:04:35,880
Algo que, si pensáis un poquitín, es sumamente complejo, porque el ordenador del significado,

48
00:04:35,880 --> 00:04:40,480
por ejemplo, ahora de momento, tal y como estamos, no lo entiende. En el futuro no lo

49
00:04:40,480 --> 00:04:46,400
sé, pero ahora no lo entiende. ¿Cuál es la base de todo ello? Pues lo que estamos

50
00:04:46,400 --> 00:04:51,080
diciendo, que los ordenadores entiendan lo que es el lenguaje natural, es decir, que

51
00:04:51,080 --> 00:04:55,080
se puedan comunicar como nosotros, que les hablemos, que les escribamos y que sean capaces

52
00:04:55,200 --> 00:04:59,920
de interpretar esa información. Esto es un poco futurista, pero bueno, se va en esa línea

53
00:04:59,920 --> 00:05:06,920
y ya hay pequeños pasos que son muy prometedores. En el caso nuestro, continuando con lo que

54
00:05:07,480 --> 00:05:12,360
os decía, tenéis aquí una captura de la página del programa este que os he comentado

55
00:05:12,360 --> 00:05:17,520
que empezó en el año 1966. Es una captura actual. El programa sigue funcionando. De

56
00:05:17,520 --> 00:05:24,520
hecho, en Estados Unidos sigue siendo utilizado a nivel nacional para valorar pruebas de universidad

57
00:05:25,160 --> 00:05:30,440
e incluso de otro tipo de sectores profesionales. Como veis, es muy sencillito. Lo único que

58
00:05:30,440 --> 00:05:37,120
hace falta es que tenga una zona para escribir, un área para escribir y un botón para decirle

59
00:05:37,120 --> 00:05:43,480
que te valora el texto. Se pueden hacer demostraciones, es decir, se puede ir a la página e introducir

60
00:05:43,480 --> 00:05:48,400
un texto y ver cómo funciona. Lo único que a veces yo no he conseguido porque me dice

61
00:05:48,400 --> 00:05:55,120
que el servidor no funciona. Entonces, pues no lo sé. El programa que os comentaba, lo

62
00:05:55,120 --> 00:06:02,120
tenéis ahí, que es en el que yo estoy trabajando, lo he enfocado al análisis y valoración

63
00:06:02,920 --> 00:06:09,920
de textos narrativos con también, digamos, descripción. ¿Por qué textos narrativos?

64
00:06:09,960 --> 00:06:16,240
Bueno, todos los textos, y como somos de letras o hemos trabajado en literatura, sabemos que

65
00:06:16,320 --> 00:06:21,320
cada género literario tiene sus características. Entonces, no se puede valorar lo mismo un

66
00:06:21,320 --> 00:06:25,960
texto que es poesía, que es prosa, que es una narración, que es una exposición. Cada

67
00:06:25,960 --> 00:06:29,380
texto tiene sus características. Entonces, todo lo que hace este programa está adecuado

68
00:06:29,380 --> 00:06:36,380
a lo que es la narración y algo a la descripción. Los niños tienen que hacer historias o cuentos

69
00:06:37,240 --> 00:06:41,840
que previamente se han trabajado en clase alrededor de unas 100 palabras, que es más

70
00:06:41,840 --> 00:06:46,920
o menos lo que les daría tiempo en una clase. Es decir, ellos se sientan delante del ordenador

71
00:06:46,920 --> 00:06:51,120
y empiezan a componer su historia. La cuestión no es que la preparen previamente o que les

72
00:06:51,120 --> 00:06:55,640
ayuden a prepararla o que se la hagan en casa, sino que ellos se pongan delante del ordenador

73
00:06:55,640 --> 00:07:01,240
y que demuestren que apliquen todos los conocimientos que tienen.

74
00:07:01,240 --> 00:07:05,920
Como veis, se aplica al área de lenguas extranjeras, completamente inglés, está adecuado al currículo

75
00:07:05,920 --> 00:07:10,360
de sexto de primaria, y luego os iré comentando un poco lo que he tenido en cuenta para hacer

76
00:07:10,440 --> 00:07:16,520
el programa, y tiene las unidades de análisis perfectamente delimitadas. Esto es una diferencia

77
00:07:16,520 --> 00:07:21,600
con los otros programas que veremos, que son solísticos, son generales, son globales.

78
00:07:21,600 --> 00:07:27,040
Ellos se les pone un texto y lo valoran globalmente. Lo distribuyen por apartados, pero incluso

79
00:07:27,040 --> 00:07:33,040
consideran el contenido, algo que puede ser todavía un poco pronto para decir que se

80
00:07:33,040 --> 00:07:38,760
está valorando. En el caso nuestro, el programa se centra en lo que es la parte gramatical.

81
00:07:38,880 --> 00:07:43,840
El contenido no lo va a entender, pero sí lo que es la parte gramatical, y las unidades

82
00:07:43,840 --> 00:07:49,520
están perfectamente delimitadas. Estos serían los bloques de contenidos que tenemos oficialmente

83
00:07:49,520 --> 00:07:54,960
que trabajar en el área de lengua extranjera. Son cuatro, escuchar, hablar, conversar, leer,

84
00:07:54,960 --> 00:07:59,600
escribir, conocimiento de la lengua, que es la gramática, y luego los aspectos socioculturales.

85
00:07:59,600 --> 00:08:04,640
El programa entraría en el bloque dos y en el bloque tres, es decir, él valoraría un

86
00:08:04,640 --> 00:08:11,640
poco el aspecto de la escritura y el conocimiento de la lengua. Las unidades de análisis que

87
00:08:13,320 --> 00:08:17,720
considera, pues las tenéis ahí, son las fundamentales. Hay alguna más que no la ha puesto para no

88
00:08:17,720 --> 00:08:23,120
complicar la presentación, pero tiene en cuenta el número de palabras. No es lo mismo

89
00:08:23,120 --> 00:08:29,040
una composición de 50 palabras que una de 120. Las conjunciones coordinadas, verbos

90
00:08:29,040 --> 00:08:34,040
habituales, conjunciones subordinadas, palabras gramaticales específicas. Esto es un poco

91
00:08:34,040 --> 00:08:38,680
un cajón desastre. Son todas esas palabras que vamos en la clase de lengua extranjera,

92
00:08:38,680 --> 00:08:45,680
pero que no ubicamos en ningún sitio. También informa de las repeticiones, la riqueza de

93
00:08:46,240 --> 00:08:52,160
vocabulario, y por último estructuras verbales y gramaticales. Entonces reconocería todas

94
00:08:52,160 --> 00:08:58,200
esas unidades dentro de las estructuras verbales y gramaticales. El programa, pues busca en

95
00:08:58,240 --> 00:09:02,920
el texto, está hecho, por si a alguien le interesa, está hecho con el lenguaje de programación

96
00:09:02,920 --> 00:09:09,760
PHP. Esta parte de la estructura verbal y gramatical está hecho con una funcionalidad

97
00:09:09,760 --> 00:09:14,440
dentro de PHP o de muchos lenguajes que lo incluyen, que se llama Regular Expressions,

98
00:09:14,440 --> 00:09:20,720
expresiones regulares. Es decir, es una herramienta informática que te permite buscar expresiones

99
00:09:20,720 --> 00:09:25,400
que se repiten en un texto. Es muy utilizado, por ejemplo, en los bioinformáticos o en

100
00:09:25,400 --> 00:09:32,000
la biología, por buscar cadenas, secuencias, y yo lo he utilizado aquí para la localización

101
00:09:32,000 --> 00:09:38,080
de estas estructuras. Como veis, utiliza y busca todas las estructuras más importantes

102
00:09:38,080 --> 00:09:45,080
que se dan en el currículo de primaria. Hasta ahí. Si le ponemos un texto preparado para

103
00:09:45,160 --> 00:09:50,400
secundaria, instituto, o digamos, copiado de un periódico, pues el análisis no va

104
00:09:50,400 --> 00:09:55,800
a funcionar, porque solo reconoce hasta sexto, es decir, lo que se da hasta sexto. Entonces,

105
00:09:55,800 --> 00:10:01,440
todos los tiempos verbales, estructuras, vocabulario complejo, que un nativo probablemente domina,

106
00:10:01,440 --> 00:10:05,320
o que podemos ver en un texto, si lo ponemos aquí, pues veremos, diremos, bueno, tendría

107
00:10:05,320 --> 00:10:09,200
que haber sacado un diez, y no se ha sacado un diez. Claro, es que el ordenador ve lo

108
00:10:09,200 --> 00:10:12,800
que se le ha dicho que vea. El resto, pues está muy bien, está ahí, pero él no lo

109
00:10:12,800 --> 00:10:19,680
valora. Entonces, dentro de los tiempos verbales, considera el presente, el pasado y el futuro,

110
00:10:19,680 --> 00:10:24,680
los tiempos continuos, presente y pasado, el futuro inmediato, que es el going to, las

111
00:10:24,680 --> 00:10:30,000
formas contractas, combinaciones verbales de dos palabras, lo veis ahí, es un verbo,

112
00:10:30,000 --> 00:10:35,400
pero con dos palabras, supone una complejidad para el niño, porque él, en realidad, asocia

113
00:10:35,400 --> 00:10:41,120
una palabra en español con una en inglés, dos es una complejidad mayor, verbos seguidos

114
00:10:41,120 --> 00:10:45,000
tanto de infinitivo como de gerundio, que también se ven en primaria, al menos los

115
00:10:45,000 --> 00:10:52,920
básicos, como gustar, tener, etc., y oraciones interrogativas y negativas. Estas serían

116
00:10:52,920 --> 00:10:58,480
las estructuras que busca en el texto y que, posteriormente, él va a valorar.

117
00:10:58,480 --> 00:11:04,080
Tenemos aquí los criterios de evaluación que nos pone el Real Decreto, que se aplica

118
00:11:04,080 --> 00:11:09,520
en educación primaria, y me gustaría comentar unos cuantos de los que habéis subrayado,

119
00:11:09,520 --> 00:11:14,440
porque es importante a la hora de utilizar el programa, es decir, nos dice que se tienen

120
00:11:14,440 --> 00:11:21,760
que trabajar temas conocidos y aplicados en clase previamente, la complejidad tiene

121
00:11:21,760 --> 00:11:30,760
que ser gradual y creciente, a partir de modelos, con ayuda, habla de reproducir, con lo cual

122
00:11:30,760 --> 00:11:36,520
tampoco le estamos diciendo al niño que genere, que cree, que sea la original, pero, en algún

123
00:11:36,520 --> 00:11:41,840
caso, es decir, como las historias han trabajado previamente, las puede reproducir a su manera.

124
00:11:41,840 --> 00:11:48,960
Debo insistir, y siempre a partir de modelos, otro aspecto importante es que empecemos a

125
00:11:48,960 --> 00:11:54,840
trabajar también la circunstancia de que los niños aprendan a valorar sus propios

126
00:11:54,840 --> 00:12:02,120
progresos. El programa tiene una virtud, entre otras, y es que, si se utiliza regularmente,

127
00:12:02,120 --> 00:12:05,680
pues los niños van viendo, de alguna manera, cómo va evolucionando su progreso. Yo, por

128
00:12:05,680 --> 00:12:09,880
la experiencia que tengo ya trabajando con historietas, pues al principio les cuesta

129
00:12:09,880 --> 00:12:14,480
mucho hacer una historieta de 40 palabras, y probablemente no hagan mucho más, pero

130
00:12:14,480 --> 00:12:19,280
a medida que las trabajas en el curso, pues te van superando las 100. Ellos lo verían

131
00:12:19,280 --> 00:12:25,200
gradualmente cómo va avanzando. Y estructuras sencillas, son las que ya hemos visto anteriormente

132
00:12:25,200 --> 00:12:32,440
para primaria. ¿Por qué he repasado estos criterios? Bueno, pues esta es una pantalla

133
00:12:32,440 --> 00:12:38,120
del programa. Si vais a la página web que está en el congreso, vais aquí, veis también

134
00:12:38,120 --> 00:12:42,200
que es un diseño sencillito. En esencia lo que tiene es una zona para escribir, algo

135
00:12:42,200 --> 00:12:48,560
de información debajo y nada más. Cuando el niño escribe el texto, una vez que lo

136
00:12:48,560 --> 00:12:52,200
tiene hecho, que normalmente le lleva media hora, 40 minutos, yo empleo el resto de la

137
00:12:52,200 --> 00:12:58,000
clase, es decir, los 15 o 20 minutos restantes, en que lo revise. Y que lo revise antes de

138
00:12:58,000 --> 00:13:01,920
enviarlo. Primero porque no va a poder volver para atrás. Ya lo pongo yo ahí en inglés.

139
00:13:01,920 --> 00:13:05,640
Es decir, una vez que le das valor al texto no puedes volver a la historia. Y en segundo

140
00:13:05,640 --> 00:13:10,560
lugar porque también es interesante tener un enfoque proactivo. Es decir, no esperar

141
00:13:10,560 --> 00:13:14,840
a que le digan cuáles son los errores, porque el programa no se los va a decir. El programa

142
00:13:14,840 --> 00:13:18,680
solo busca lo que es capaz de hacer. No va a buscar errores, ni le va a decir errores,

143
00:13:18,680 --> 00:13:23,000
ni le va a penalizar errores. Al menos directamente. Si indirectamente, porque claro, si una palabra

144
00:13:23,000 --> 00:13:28,080
la escribe mal y no la reconoce el programa, no se la puede valorar. Pero tampoco le va

145
00:13:28,080 --> 00:13:34,680
a penalizar. Entonces, antes de que lo envíen, que lo revisen. Pueden hacerlo en revisión

146
00:13:34,720 --> 00:13:39,360
entre iguales. Es decir, que se ayuden entre ellos. Pueden utilizar el diccionario, porque

147
00:13:39,360 --> 00:13:44,520
sí es importante que escriban las palabras bien. Si las escriben mal, el programa va

148
00:13:44,520 --> 00:13:49,920
a tener... Bueno, problema no. Simplemente no las va a reconocer. O incluso con cierta

149
00:13:49,920 --> 00:13:53,760
ayuda del docente, del maestro. Es decir, les podemos dar pistas, ayudas. No les vamos

150
00:13:53,760 --> 00:14:00,000
a hacer la composición, pero sí les podemos ayudar. Una vez que la han hecho, dan a valorar

151
00:14:00,000 --> 00:14:05,880
el texto y se encontrarían con esta pantalla, que sería el análisis comentado un poquitín

152
00:14:05,880 --> 00:14:10,760
de lo que ellos han hecho en su texto. Primero les va a decir el número de palabras que

153
00:14:10,760 --> 00:14:15,920
han hecho en su composición. Y en parte también afecta el resultado. Les digo que si el texto

154
00:14:15,920 --> 00:14:21,800
es corto, va a reducir la valoración. Si el texto es más largo, lo va a compensar,

155
00:14:21,800 --> 00:14:27,040
porque puede haber más repeticiones. Pero hay que valorar la longitud. Le va a indicar

156
00:14:27,040 --> 00:14:31,480
también las estructuras verbales y gramaticales. Entonces veis que el código son tres símbolos.

157
00:14:31,480 --> 00:14:37,920
El símbolo más, que significa bien, good. El asterisco, que es fair, que es aceptable.

158
00:14:37,920 --> 00:14:43,400
Y el signo menos, que es poor, pobre. Le va a poner en cada uno de los apartados cómo

159
00:14:43,400 --> 00:14:49,520
está. Para que él vea si está bien, si tiene que trabajarlo, o si está tan flojito

160
00:14:49,520 --> 00:14:55,360
que tiene que volver a intentarlo en otro momento. Posteriormente, más abajo, le pone

161
00:14:55,360 --> 00:15:03,680
la valoración. Y utiliza tres colores. Aparece verde cuando está por encima del 60%. Luego

162
00:15:03,680 --> 00:15:09,320
aparece en amarillo sin nota. Simplemente pone fair, que es aceptable y suficiente.

163
00:15:09,320 --> 00:15:18,560
Y ya por último en rojo le pone poor, pobre. He decidido no poner valoración en porcentaje,

164
00:15:18,560 --> 00:15:23,200
simplemente por motivación. Que vea que es de un color a otro más que de un número

165
00:15:23,200 --> 00:15:26,760
a otro. Porque si no tienen tendencia a decir, bueno, saca un 80, voy a intentar a ver si

166
00:15:26,760 --> 00:15:32,320
saca un 82. Y está bien. Pero a veces no es significativo la diferencia. Porque pueden

167
00:15:32,320 --> 00:15:38,000
ser dos palabras o una estructura. Pero el texto sigue más o menos igual. Esta sería

168
00:15:38,000 --> 00:15:43,800
la pantalla en la que aparece lo que es la valoración. Otros programas, como os decía,

169
00:15:43,800 --> 00:15:49,240
que trabajan en esta línea y que ya están en el mercado, son comerciales, los tenemos

170
00:15:49,240 --> 00:15:55,320
aquí. Son todos programas protegidos por derechos de autor y marcas comerciales. Con

171
00:15:55,320 --> 00:16:00,520
lo cual, si queremos usarlos o queremos conocer algo de ellos, tenemos que pagar la licencia

172
00:16:00,520 --> 00:16:08,880
oportuna. El cuarto de ellos, MyAccess, es el más popular. En el Reino Unido, por ejemplo,

173
00:16:08,880 --> 00:16:13,320
está siendo utilizado en muchos institutos. Otra de las diferencias es que estos programas

174
00:16:13,320 --> 00:16:19,080
están pensados para gente nativa. Y normalmente la edad es superior a diez años. Bastante

175
00:16:19,080 --> 00:16:23,280
superior. Es decir, ya es un mínimo muy mínimo. Mientras que el programa que yo estoy

176
00:16:23,280 --> 00:16:29,840
diseñando está por debajo de los doce años y no es gente nativa. Luego, las diferencias

177
00:16:29,840 --> 00:16:35,720
son considerables. Ya os digo que el cuarto es el más popular. El tercero es el único

178
00:16:35,720 --> 00:16:42,000
libre. Es decir, el que se puede acceder libremente e incluso conseguir el código. Pero, bueno,

179
00:16:42,000 --> 00:16:46,560
yo he intentado... Ahora parece que el servidor está funcionando. En otras ocasiones no ha

180
00:16:46,560 --> 00:16:51,000
funcionado. Y la forma de funcionar, la veremos, es un poco distinta a nuestro objetivo. Nos

181
00:16:51,000 --> 00:16:57,440
vale como una referencia, pero tampoco nos va a resolver el objetivo que perseguimos.

182
00:16:57,440 --> 00:17:02,120
Tenemos aquí una pantalla del primero de ellos, IEA. Veis lo mismo. Es una pequeña

183
00:17:02,120 --> 00:17:07,920
explicación en la zona para escribir y, por último, el botón para enviar la información

184
00:17:07,920 --> 00:17:15,480
y valorar. ¿Cómo valoran estos programas? De la siguiente manera. Si tenéis contacto

185
00:17:15,480 --> 00:17:20,320
con el mundo anglosajón, que no lo dudo, veréis que ellos valoran de una manera distinta

186
00:17:20,320 --> 00:17:26,000
a nosotros. Utilizan porcentajes o letras. Y, aparte de eso, cuando se trata de textos

187
00:17:26,000 --> 00:17:29,920
cualitativos, es decir, que estamos valorando la calidad, como son, por ejemplo, composiciones

188
00:17:29,920 --> 00:17:37,840
escritas, utilizan mucho lo que son las rúbricas. Una rúbrica, en esencia, es una cuadrícula

189
00:17:37,840 --> 00:17:44,600
donde se establece la valoración de 1 al 6, o de 1 al 5, o de 1 al 3, hay posibilidades,

190
00:17:44,600 --> 00:17:50,320
y debajo los criterios. En la medida que cumple la mayoría de los criterios bien conseguidos

191
00:17:50,320 --> 00:17:54,720
en cada uno de esos números, se le asigna ese número. Es decir, el 6 serían todos

192
00:17:54,720 --> 00:17:58,840
los criterios de la izquierda, todos esos apartados, conseguidos en su grado máximo.

193
00:17:58,840 --> 00:18:04,280
Y de ahí va bajando. Entonces, de tal manera que cuando un programa de estos valora un

194
00:18:04,280 --> 00:18:10,040
texto, aquí tenemos otra rúbrica de la Universidad de Minas Sota, es similar, es decir, pone

195
00:18:10,040 --> 00:18:15,080
los criterios a la izquierda y ahora lo valora con números. En vez de ir mirando cuántos

196
00:18:15,080 --> 00:18:19,600
cumple de cada número, tú le vas asignando los números y luego calculas la media de

197
00:18:19,600 --> 00:18:26,200
todos ellos. Tenemos aquí los resultados que proporciona el programa IEA. Veis que

198
00:18:26,200 --> 00:18:32,080
nos pone Overall Score 2 out of 6. Le ha dado una puntuación de 2 sobre 6, con lo

199
00:18:32,080 --> 00:18:39,840
cual está más bien flojo. Y debajo le explica los cuatro apartados que justifican esa valoración.

200
00:18:39,840 --> 00:18:45,840
Esto es un proceso mecanizado que ya el ordenador lo tiene interno y cuando aparece 2, pues

201
00:18:45,840 --> 00:18:52,840
más o menos, sale la explicación. Por último, le pone el texto que se ha escrito para valorar.

202
00:18:52,840 --> 00:18:59,280
Este es el programa Betsy, que es el que os decía que es libre. Lo que hace es clasificar

203
00:18:59,280 --> 00:19:06,000
los textos en tres grupos. Ahí veis T, M, E, A, P, S. Son tres grandes grupos. Escribimos

204
00:19:06,000 --> 00:19:15,680
un texto y en la siguiente pantalla, según un cálculo de probabilidades bastante complejo

205
00:19:15,680 --> 00:19:19,720
y que de hecho requiere muchos recursos en el ordenador, un PC normal y corriente se

206
00:19:19,720 --> 00:19:25,360
ralentizaría, él establece las probabilidades. Veis que va palabra por palabra o las palabras

207
00:19:25,360 --> 00:19:29,880
clave. Les va asignando una probabilidad y eso le permite determinar a cuál de esos

208
00:19:29,880 --> 00:19:34,880
tres grupos pertenece el texto. Si eso lo aplicamos al caso nuestro, decimos que ya

209
00:19:34,880 --> 00:19:47,480
tenemos la valoración del texto. Vamos a ver las conclusiones. Este campo es muy reciente,

210
00:19:47,480 --> 00:19:53,720
es decir, apenas tiene 15 o 20 años, aunque empezó en el año 66 a raíz del aumento

211
00:19:53,720 --> 00:19:59,040
de la potencia de los ordenadores y de la bajada del coste de los mismos, pues ha vuelto

212
00:19:59,040 --> 00:20:05,200
a retomar y empieza a ser investigado con bastante fuerza. Se ha visto que los ordenadores

213
00:20:05,200 --> 00:20:12,160
tienen una mayor fiabilidad en la valoración que los jueces, y por jueces entendemos docentes.

214
00:20:12,160 --> 00:20:16,800
El problema de valorar textos es que si yo mismo valoro ese texto en una segunda circunstancia,

215
00:20:16,800 --> 00:20:21,240
en un segundo momento, puedo darle una valoración distinta antes. Y si lo hace otra persona

216
00:20:21,240 --> 00:20:26,560
todavía le dará otra valoración. ¿Qué sucede? Pues que los ordenadores en eso son

217
00:20:26,560 --> 00:20:29,960
casi perfectos, es decir, más o menos la valoración va a ser siempre la misma. Se

218
00:20:29,960 --> 00:20:33,600
ponga el texto cuando se ponga y se corrija cuando se corrija. Cosa que en el caso de

219
00:20:33,600 --> 00:20:39,080
las personas, pues tenemos ahí el índice de subjetividad. Vemos que la correlación

220
00:20:39,080 --> 00:20:45,720
entre docentes o entre jueces es entre 0,70 y 0,75 sobre 1. Es bastante alta. Es decir,

221
00:20:45,720 --> 00:20:51,040
si corrige un texto dos maestros o tres maestros, la correlación entre ellos va a ser probablemente

222
00:20:51,400 --> 00:20:58,600
0,70 a 0,75, que sobre 1 está muy bien. Pero como veis, la correlación entre los programas

223
00:20:58,600 --> 00:21:07,160
y los jueces es muy superior, llegando incluso casi a la perfección, 97% sobre 100. Lo que

224
00:21:07,160 --> 00:21:12,920
demuestra que la potencialidad de los ordenadores en este campo es mucha, aunque estamos en

225
00:21:12,920 --> 00:21:19,160
el comienzo. Las ventajas que tiene utilizar la informática, en este caso como apoyo nuestro,

226
00:21:19,680 --> 00:21:25,440
es rapidez en la corrección. Si los textos se hacen en Internet, porque los programas

227
00:21:25,440 --> 00:21:30,280
están en Internet, pues se hacen directamente en la sala de informática y al segundo lo

228
00:21:30,280 --> 00:21:34,760
tienen corregido. Cosa que nosotros tendríamos que recoger el papel, llevarlo a casa y unos

229
00:21:34,760 --> 00:21:40,960
días después entregar la nota. Supone también ahorro de costes. En Estados Unidos se hacen

230
00:21:40,960 --> 00:21:45,720
miles de exámenes de este tipo. Necesitan cientos de correctores, de personas que los

231
00:21:45,720 --> 00:21:51,840
valoren. Tienen que contratarlos, pagarlos. Si lo hace una máquina, entonces ahí hay

232
00:21:51,840 --> 00:21:56,200
mucho ahorro de costes. Sí que es cierto que puede haber casos en los que el ordenador

233
00:21:56,200 --> 00:22:00,220
evidentemente no lo va a hacer bien o puede cometer ciertos errores. Entonces tenemos

234
00:22:00,220 --> 00:22:05,280
que plantear la corrección del ordenador como una ayuda nuestra. No nos va a hacer

235
00:22:05,280 --> 00:22:09,960
el trabajo y tampoco se pretende que el ordenador suplante la actividad del docente. La última

236
00:22:09,960 --> 00:22:14,120
palabra la vamos a tener que dar nosotros y al menos el contenido tendremos que valorarlo

237
00:22:14,120 --> 00:22:19,160
nosotros. El aspecto duro que es decir, voy a ver si aparecen ciertas estructuras, cuánto

238
00:22:19,160 --> 00:22:24,480
vocabulario utiliza, qué repeticiones hay, eso nos lo hace el ordenador. Pero ver cómo

239
00:22:24,480 --> 00:22:28,720
se expresa, las ideas que expone y demás, eso lo vamos a tener que hacer nosotros al

240
00:22:28,720 --> 00:22:35,720
menos de momento. Otra ventaja también que tienen es que permiten ser recalibrados. Dependiendo

241
00:22:36,280 --> 00:22:40,840
de la población que estemos evaluando, pues podemos reajustar el programa para que se

242
00:22:40,880 --> 00:22:47,880
adapte a esa población. Entonces puede ser más exigente o menos exigente. Un estudio

243
00:22:48,440 --> 00:22:54,920
piloto que he hecho yo de este programa con 17 alumnos de sexto, encontré las siguientes

244
00:22:54,920 --> 00:23:01,920
datos, es decir, las correlaciones entre el programa y la media de la nota de dos docentes

245
00:23:02,760 --> 00:23:09,280
fue del 0,80. Veis que está en la línea que os decía antes. Cuando esos docentes

246
00:23:09,480 --> 00:23:14,280
corrigieron los textos utilizando una plantilla que les limitaba, digamos, de alguna manera,

247
00:23:14,280 --> 00:23:17,240
antes ponían su nota en función de decir yo me leo el texto y lo valoro pues lo que

248
00:23:17,240 --> 00:23:22,560
considero oportuno. Nosotros no utilizamos mucho las rúbricas, entonces puede haber

249
00:23:22,560 --> 00:23:27,440
más variabilidad. Cuando utilizaron una plantilla que seguía una serie de apartados, que eran

250
00:23:27,440 --> 00:23:31,680
los que tenían que valorar, la correlación subió, lo que quiere decir que las notas

251
00:23:31,680 --> 00:23:36,640
fueron más ajustadas. Entonces la correlación entre las medias de las notas obtenidas con

252
00:23:36,640 --> 00:23:43,360
plantilla y las que daba el programa subió a 0,86, casi 0,87. ¿Cuáles fueron las medias

253
00:23:43,360 --> 00:23:47,120
de las calificaciones? Pues cuando utilizaron el criterio personal de decir, bueno, yo te

254
00:23:47,120 --> 00:23:54,120
doy un texto, tú valóralo, le pones una nota, la media fue 6,03. El programa, la media

255
00:23:55,800 --> 00:24:02,800
de las notas fue 6,54 y cuando corrigieron con la plantilla fue 6,77. Bueno, ha salido

256
00:24:03,120 --> 00:24:10,120
así, veis ya la variabilidad, es decir, la corrección de los docentes. Pues si es según

257
00:24:10,120 --> 00:24:14,240
el criterio que él puede tener de decir, bueno, pues yo como soy docente y ya más

258
00:24:14,240 --> 00:24:18,680
o menos estoy habituado a corregir estos textos, valoro estas cosas, esta es mi puntuación,

259
00:24:18,680 --> 00:24:22,880
pero si tiene que seguir una plantilla que te limita las opciones, tienes que dar otra

260
00:24:22,880 --> 00:24:29,800
valoración, pues veis de 6,03 pasamos a 6,77. El programa se encuentra en medio, lo que

261
00:24:29,840 --> 00:24:34,040
nos indica que en principio pues es más fiable, es decir, no tiene esos saltos, siempre y

262
00:24:34,040 --> 00:24:37,880
cuando el texto sea el mismo va a dar siempre la misma nota. Los docentes dependiendo el

263
00:24:37,880 --> 00:24:42,820
método que utilicen para corregir o el momento o la persona que lo haga puede haber una pequeña

264
00:24:42,820 --> 00:24:49,820
variabilidad en todas las situaciones. Y ya para terminar sí que os quería comentar

265
00:24:50,920 --> 00:24:54,560
que el planteamiento de estos programas y de este en concreto, lo que os decía antes,

266
00:24:54,560 --> 00:25:01,560
es como una ayuda nuestra. Es muy laborioso corregir exámenes, sobre todo textos, redacciones,

267
00:25:02,800 --> 00:25:06,760
ahí es donde entra el programa, donde nos puede ayudar, pero tenemos que verlo como

268
00:25:06,760 --> 00:25:11,720
una herramienta que nos auxilia, que nos va a aportar una información que nosotros tenemos

269
00:25:11,720 --> 00:25:18,720
que complementar. Con esa referencia ya sacaríamos lo que es la valoración final. Ese es el

270
00:25:19,280 --> 00:25:25,000
objetivo de estos programas, aparte de, bueno, pues una de las razones de este Congreso es

271
00:25:25,000 --> 00:25:29,960
integrar las tecnologías de la comunicación en educación, pues aquí estaríamos hablando

272
00:25:29,960 --> 00:25:34,400
de integrar lo que es la informática, el ordenador en la evaluación, pero evaluación

273
00:25:34,400 --> 00:25:40,040
entendida en el plano formativo. Os comentaba yo que se trata de valorar el progreso que

274
00:25:40,040 --> 00:25:44,400
hace el alumno, no decir el último día de curso les voy a mandar una redacción a ver

275
00:25:44,400 --> 00:25:48,800
qué nota sacan. Si no lo han trabajado previamente, pues pueden pasar muchas cosas. Lo bueno es

276
00:25:48,800 --> 00:25:54,240
trabajarlo gradualmente, poco a poco, entonces que ellos vean el progreso y al final sí

277
00:25:54,240 --> 00:25:59,080
que podemos decir, bueno, ahora sí que podemos considerar este texto como una especie de

278
00:25:59,080 --> 00:26:06,080
examen a ver qué es lo que sucede. Eso sería un poco lo que yo intentaba comentaros, presentaros

279
00:26:06,480 --> 00:26:10,600
esta opción que está abriendo la informática, las tecnologías. Espero que os haya dado

280
00:26:10,600 --> 00:26:15,680
una visión general del campo de la valoración de textos automatizada con ordenador. Si tenéis

281
00:26:15,680 --> 00:26:19,320
alguna pregunta, pues aquí estoy y si no, muchas gracias por vuestra atención.

282
00:26:40,600 --> 00:26:43,600
Subtítulos realizados por la comunidad de Amara.org