@fermin No da la palabra más probable, sino el grupo de palabras que que mejor encajan a lo preguntado según lo aprendido. Y básicamente nosotros hacemos lo mismo....
Y además de eso dibuja, y crea música, y se inventa historias a partir de otras (pídele que se invente la segunda parte de una película y flipa)...
En lo que sí coincido es en que no tiene conciencia. Pero todavía no sabemos muy bien qué es eso de tener conciencia. De hecho yo solo puedo asegurar que yo mismo tengo conciencia, nadie me dice que tú y el resto del mundo seáis una invención de mi propia mente.
Sobre el tema de cómo funciona chatGPT, es lo que se llama una red neuronal de tipo "transformer", y no deja de ser un modelo probabilistico, como cualquier red neuronal.
No quiero entrar en detalles técnicos, pero se puede encontrar en cualquier artículo de divulgación científica no muy técnico su funcionamiento básico. Aquí se puede leer:
Como modelo lingüístico, funciona con probabilidades y es capaz de adivinar cuál debe ser la siguiente palabra de una frase. Para llegar a este punto, el modelo pasó por una fase de pruebas supervisadas.
Lo de inventar en general es cierto, pues las redes neuronales siempre tienen una componente aleatoria (son así por definición).
Sobre lo de dibujar y crear música, chatGPT no lo puede hacer directamente (al menos a día de hoy... a la espera de modelos multimodales).
Sobre el tema de la conciencia, sí, primero deberíamos saber qué es la conciencia (y la inteligencia), pero para eso todavía hacen falta muchos estudios.
Hay que ver a chatGPT (y otras IAs), como sistemas que nos ayudan a hacer la vida más fácil.
@fermin@omoloc@Raquelita Cuando dice "adivinar", simplifica para hacer el artículo "accesible" a todo el público, pero sería generar la siguiente palabra según los pesos probabilísticos que los nodos de la red neuronal de tipo "transformer". Ese proceso se repite cada vez para ir generando palabras. Es hasta cierto punto recursivo, pues según la palabra que genere en el paso anterior, generará la próxima.
Primero, una red neuronal precisamente lo que busca es replicar el funcionamiento de las neuronas.
La diferencia de un transformer y una red clasica es que deja de funcionar de forma lineal, y pasa a funcionar de forma matricial. En la práctica esto hace que ya no busca una palabra, busca un conjunto de palabras (o un conjunto de píxeles) y eso lo cambia todo.
Una IA como chatGPT no tiene consciencia, pero tiene la inteligencia de una persona de unos doce años, pero mucha mas memoria.
Y sobre la consciencia Penrose especulaba con que surgía en las neuronas a nivel cuántico, y postulaba que por eso una maquina no podría alcanzarla nunca. Pero lo postuló antes de que apareciera la computación cuántica.
Lo mas jodido de todo es que si en algun momento las maquinas cobran consciencia, seriamos incapaces de saberlo. Pero a lo mejor ellas sí.
@omoloc@fermin@Raquelita Gran debate sobre deep learning!!! Mucha gente confunde el maravilloso poder de la computación + matemáticas + estadística con inteligencia y conciencia real y por mucho "charm" que tenga el tema pues no estamos ni cerca, según he leído creo que ni siquiera se entiende completamente todavía el funcionamiento del cerebro humano.
Pero es sorprendente todo lo que se está consiguiendo gracias a esto, prometedor es en el campo de la medicina : vacunas, nuevas medicinas diagnósticos automáticos.
Y además de eso dibuja, y crea música, y se inventa historias a partir de otras (pídele que se invente la segunda parte de una película y flipa)...
En lo que sí coincido es en que no tiene conciencia. Pero todavía no sabemos muy bien qué es eso de tener conciencia. De hecho yo solo puedo asegurar que yo mismo tengo conciencia, nadie me dice que tú y el resto del mundo seáis una invención de mi propia mente.
@Raquelita