Skip to main content

La falsa promesa de ChatGPT

Noam Chomsky, reconocido lingüista y filósofo escribió un artículo junto a dos especialistas, en el que compartió su visión sobre los avances que se han presentado en el campo de la inteligencia artificial, como los casos de ChatGPT y DALL-E. Según las declaraciones de los especialistas, el defecto más profundo de estas herramientas es la falta de capacidad crítica, lo que los hacen caer en declaraciones extremistas y controversiales, en medio de un escenario donde podrían ayudar a potenciar la ya alta cantidad de fake news y alborotadores del mundo digital. A través de varios ejemplos, el experto razona que ChatGPT y similares tienen como principal problema en que no pueden ir más allá de la descripción y la anticipación de ciertos contenidos. Se trataría simplemente de "un pesado motor estadístico de comparación de patrones, que se atiborra de cientos de terabytes de datos y extrapola la respuesta conversacional más probable o la respuesta más probable a una pregunta científica". Aquí la nota completa, donde se explica porqué se enuncia que la variante más destacada de la inteligencia artificial codifica una concepción errónea del lenguaje y el conocimiento.

Por Noam Chomsky, Ian Roberts, Jeffrey Watumull


Jorge Luis Borges escribió una vez que vivir en una época de grandes peligros y promesas es experimentar tanto la tragedia como la comedia, con “la inminencia de una revelación”, para entendernos a nosotros mismos y al mundo. En la actualidad, los avances supuestamente revolucionarios de la inteligencia artificial son motivo tanto de preocupación como de optimismo. Optimismo porque la inteligencia es el medio con el que resolvemos problemas. Preocupación porque tememos que la variante de la inteligencia artificial más popular y de moda (el aprendizaje automático) degrade nuestra ciencia y envilezca nuestra ética al incorporar a nuestra tecnología una concepción fundamentalmente errónea del lenguaje y el conocimiento.

ChatGPT de OpenAI, Bard de Google y Sydney de Microsoft son maravillas del aprendizaje automático. A grandes rasgos, toman enormes cantidades de datos, buscan patrones en ellos y se vuelven cada vez más competentes a la hora de generar resultados estadísticamente probables, como un lenguaje y un pensamiento de apariencia humana. Estos programas han sido objeto de elogio por ser los primeros destellos en el horizonte de la inteligencia artificial general, ese momento tan profetizado en el que las mentes mecánicas superan a los cerebros humanos no solo cuantitativamente en términos de velocidad de procesamiento y tamaño de memoria, sino también cualitativamente en términos de perspicacia intelectual, creatividad artística y cualquier otra facultad distintiva del ser humano.

Ese día llegará, pero aún no ha visto la luz, al contrario de lo que se lee en titulares hiperbólicos y de lo que se calcula mediante inversiones insensatas. La revelación borgiana de la comprensión no se ha producido ni se producirá —y, en nuestra opinión, no puede producirse— si los programas de aprendizaje automático como ChatGPT siguen dominando el campo de la inteligencia artificial. Por muy útiles que puedan ser estos programas en algunos ámbitos concretos (pueden ser útiles en programación informática, por ejemplo, o para sugerir rimas para versos ligeros), sabemos por la ciencia de la lingüística y la filosofía del conocimiento que difieren en gran medida de la manera en que los seres humanos razonamos y utilizamos el lenguaje. Estas diferencias imponen limitaciones significativas a lo que estos programas pueden hacer, codificándolos con defectos imposibles de erradicar.

Resulta a la vez cómico y trágico, como podría haber señalado Borges, que se concentren tanto dinero y atención en algo tan insignificante, algo tan trivial comparado con la mente humana, la cual, a fuerza de lenguaje, en palabras de Wilhelm von Humboldt, puede hacer un “uso infinito de medios finitos”, creando ideas y teorías de alcance universal.

A diferencia de ChatGPT y sus similares, la mente humana no es una pesada máquina estadística de comparación de patrones, que se atiborra de cientos de “terabytes” de datos y extrapola la contestación más probable en una conversación o la respuesta más probable a una pregunta científica. Por el contrario, la mente humana es un sistema sorprendentemente eficiente, e incluso elegante, que funciona con pequeñas cantidades de información; no busca inferir correlaciones brutas entre puntos de datos, sino suscitar explicaciones.

Por ejemplo, un niño pequeño que aprende un idioma está desarrollando (de manera inconsciente, automática y rápida a partir de datos minúsculos) una gramática, un sistema increíblemente sofisticado de principios y parámetros lógicos. Esta gramática puede entenderse como expresión del “sistema operativo” innato, instalado en los genes, que dota a los seres humanos de la capacidad de generar frases complejas y largos hilos de pensamiento. Cuando los lingüistas intentan desarrollar una teoría de por qué una lengua determinada funciona como lo hace (“¿Por qué se consideran gramaticales estas frases y no aquellas?”), están construyendo consciente y laboriosamente una versión explícita de la gramática que el niño construye por instinto y con una exposición mínima a la información. El sistema operativo del niño es completamente distinto al de un programa de aprendizaje automático.

De hecho, estos programas están estancados en una fase pre-humana o no humana de la evolución cognitiva. Su defecto más profundo es la falta de esa capacidad que es la más crucial de cualquier inteligencia: decir no sólo lo que es el caso, lo que fue el caso y lo que será el caso —eso es descripción y predicción—, sino, además, lo que no es el caso y lo que podría y no podría ser el caso. Esos son los ingredientes de la explicación, la marca de la verdadera inteligencia.

Pongamos, a continuación, un ejemplo. Supongamos que sostenemos una manzana en la mano. Dejamos ahora caer la manzana. Observamos el resultado y decimos: “La manzana cae”. Esa es una descripción. Una predicción podría ser la frase: “La manzana se caerá si abro la mano”. Ambas son valiosas y ambas pueden ser correctas. Pero una explicación es algo más: incluye no solo descripciones y predicciones, sino también conjeturas contrafácticas del género “cualquier objeto de este tipo caería”, más la cláusula adicional “debido a la fuerza de la gravedad” o “debido a la curvatura del espacio-tiempo”, o lo que sea. Eso es una explicación causal: “La manzana no habría caído de no ser por la fuerza de la gravedad”. Eso significa pensar.

El talón de Aquiles del aprendizaje automático se encuentra en la descripción y la predicción: no plantea ningún mecanismo causal ni leyes físicas. Por supuesto, cualquier explicación de tipo humano no es necesariamente correcta: somos falibles. Pero esto es parte de lo que significa pensar: para llevar razón, debe ser posible equivocarse. La inteligencia no sólo consiste en hacer conjeturas creativas, sino también críticas creativas. El pensamiento al modo humano se basa en explicaciones posibles y en la corrección de errores, un proceso que limita poco a poco las posibilidades que pueden considerarse racionalmente (tal como le dijo Sherlock Holmes al Dr. Watson: “Cuando hayas eliminado lo imposible, lo que quede, por improbable que sea, ha de ser la verdad”).

Pero ChatGPT y programas similares son, por su diseño, ilimitados en lo que pueden “aprender” (es decir, memorizar); son incapaces de distinguir lo posible de lo imposible. A diferencia, por ejemplo, de los humanos, que estamos dotados de una gramática universal que limita los idiomas que podemos aprender a aquellos con un cierto tipo de elegancia casi matemática, estos programas aprenden idiomas humanamente posibles y humanamente imposibles con la misma facilidad. Mientras que los humanos estamos limitados en el tipo de explicaciones que podemos conjeturar a nivel racional, los sistemas de aprendizaje automático pueden aprender tanto que la Tierra es plana como que es redonda. Se limitan a negociar con probabilidades que cambian con el tiempo.

Por esta razón, las predicciones de los sistemas de aprendizaje automático siempre serán superficiales y dudosas. Como estos programas no pueden explicar las reglas de la sintaxis de la lengua inglesa, por ejemplo, pueden predecir, erróneamente, que la frase “John is too stubborn to talk to” significa que Juan es tan terco que no habla con nadie (en lugar de que es demasiado terco como para razonar con él). ¿Por qué un programa de aprendizaje automático predeciría algo tan extraño? Porque podría establecer una analogía en el patrón que infirió a partir de frases como “John ate an apple” (Juan se comió una manzana) y “John ate” (Juan comió), en el que esta última significa que Juan se comió algo. El programa bien podría predecir que, como la frase “John is too stubborn to talk to Bill” (Juan es demasiado terco para hablar con Bill) es similar a “John ate an apple” (Juan se comió una manzana), “John is too stubborn to talk to” (Juan es demasiado terco para hablar) sería similar a “John ate” (Juan comió). Las explicaciones correctas de lenguaje son complicadas y no pueden aprenderse simplemente macerándolas en macrodatos.

Sin lógica alguna, ciertos entusiastas del aprendizaje automático parecen estar orgullosos de que sus creaciones puedan generar predicciones “científicas” correctas (digamos, sobre el movimiento de cuerpos físicos) sin recurrir a explicaciones (que impliquen, por ejemplo, las leyes del movimiento y la gravitación universal de Newton). Pero este tipo de predicción, aunque cuando tenga éxito, es pseudociencia. Aunque es cierto que los científicos buscan teorías que tengan un alto grado de corroboración empírica, como señaló el filósofo Karl Popper: “No buscamos teorías altamente probables, sino explicaciones; es decir, teorías poderosas y altamente improbables”.

La teoría de que las manzanas caen al suelo porque ése es su lugar natural (el punto de vista de Aristóteles) es posible, pero solo invita a plantearse más preguntas (¿por qué el suelo es su lugar natural?) La teoría de que las manzanas caen a la tierra porque la masa curva el espacio-tiempo (opinión de Einstein) es altamente improbable, pero en realidad te explica por qué caen. La verdadera inteligencia se demuestra en la capacidad de pensar y expresar cosas improbables pero lúcidas.

La verdadera inteligencia también es capaz de pensar moralmente. Esto significa ceñir la creatividad de nuestras mentes, que de otro modo sería ilimitada, a un conjunto de principios éticos que determinen lo que debe y no debe ser (y, por supuesto, someter esos mismos principios a la crítica creativa). Para ser útil, ChatGPT debe ser capaz de generar resultados novedosos; para ser aceptable para la mayoría de sus usuarios, debe mantenerse alejado de contenidos moralmente censurables. Pero los programadores de ChatGPT y otras maravillas del aprendizaje automático batallan, y seguirán haciéndolo, alcanzar este tipo de equilibrio.

En 2016, por ejemplo, el “chatbot” Tay de Microsoft (precursor de ChatGPT) inundó la Red de contenidos misóginos y racistas, tras haberse visto contaminado por “troles” cibernéticos que lo llenaron de datos de adiestramiento ofensivos. ¿Cómo resolver ese problema en el futuro? Al carecer de capacidad para razonar a partir de principios morales, los programadores de ChatGPT restringieron de manera burda la posibilidad de aportar algo novedoso a los debates controvertidos; es decir, importantes. Se sacrificó la creatividad por una especie de amoralidad.

Consideremos el siguiente intercambio que uno de nosotros (Watumull) mantuvo hace poco con ChatGPT sobre si sería ético transformar Marte para que pudiera albergar vida humana:

Nótese, a pesar de todo el pensamiento y lenguaje en apariencia sofisticados, la indiferencia moral nacida de la falta de inteligencia. Aquí, ChatGPT exhibe algo parecido a la banalidad del mal: plagio, apatía y obviedad. Resume los argumentos estándar de la literatura mediante una especie de “superautocompletado”, se niega a adoptar una postura sobre lo que sea, alega no solo ignorancia sino falta de inteligencia y, en última instancia, se defiende con un “solo cumplía órdenes”, trasladando la responsabilidad a sus creadores.

En resumen, ChatGPT y sus afines son constitutivamente incapaces de equilibrar la creatividad con la restricción. O bien generan de más (produciendo tanto verdades como falsedades, respaldando decisiones éticas y no éticas por igual) o generan de menos (mostrando falta de compromiso con cualquier decisión e indiferencia ante las consecuencias). Dada la amoralidad, la falsa ciencia y la incompetencia lingüística de estos sistemas, no podemos más que reír o llorar frente a su popularidad.

Noam Chomsky, Ian Roberts, Jeffrey Watumull

Noam Chomsky: profesor laureado de la Universidad de Arizona y catedrático emérito de Lingüística del Massachusetts Institute of Technology, es uno de los activistas sociales más reconocidos internacionalmente por su magisterio y compromiso político. Su libro más reciente es “Climate Crisis and the Global Green New Deal: The Political Economy of Saving the Planet”.

Ian Roberts: es Profesor de Lingüística del Downing College de la Universidad de Cambridge. Lingüista generativo, Se doctoró en la Universidad del Sur de California y ha sido profesor en las universidades de Ginebra, Bangor y Stuttgart.

Jeffrey Watumull: es director de Inteligencia Artificial de la empresa Oceanit, de Honolulu (Hawaii). Estudió Matemáticas y Biología Evolutiva en la Universidad de Harvard y se doctoró en Inteligencia Artificial en el MIT. Fuente:

The New York Times, Traducción: Lucas Antón

Fuente Sin Permiso







Texto expandido de la entrada

Texto expandido de la entrada




Lista de Temas:
1. ---
2. ---
3. ---
4. ---

Alineación:
- --- / ---
- --- / ---
- --- / ---
- --- / ---



Comments

Lo más visto de la semana pasada

David Gilmour - Luck and Strange (2024)

Una entrada cortita y al pie para aclarar porqué le llamamos "Mago". Esto recién va a estar disponible en las plataformas el día de mañana pero ya lo podés ir degustando aquí en el blog cabeza, lo último de David Gilmour de mano del Mago Alberto, y no tengo mucho más para agregar. Ideal para comenzar a juntar cositas para que escuchen en el fin de semana que ya lo tenemos cerquita... Artista: David Gilmour Álbum: Luck and Strange Año: 2024 Género: Rock Soft Progresivo / Prog Related / Crossover prog / Art rock Referencia: Aún no hay nada Nacionalidad: Inglaterra Lo único que voy a dejar es el comentario del Mago... y esto aún no existe así que no puedo hablar de fantasmas y cosas que aún no llegaron. Si quieren mañana volvemos a hablar. Cae al blog cabezón, como quien cae a la Escuela Pública, lo último del Sr. David Gilmour (c and p). El nuevo álbum de David Gilmour, "Luck and Strange", se grabó durante cinco meses en Brighton y Londres y es el prim

Isaac Asimov: El Culto a la Ignorancia

Vivimos una época violenta, muy violenta; quizás tan violenta como otras épocas, sin embargo, la diferencia radica en que la actual es una violencia estructural y mundial; que hasta la OMS retrata como "epidemia mundial" en muchos de sus variados informes de situación. En ese engendro imperial denominado (grandilocuentemente) como "el gran país del norte", la ignorancia (junto con otras bestialidades, como el supremacismo, el racismo y la xenofobia, etc.) adquiere ribetes escandalosos, y más por la violencia que se ejerce directamente sobre aquellos seres que los "ganadores" han determinado como "inferiores". Aquí, un texto fechado en 1980 donde el genio de la ciencia ficción Isaac Asimov hace una crítica mordaz sobre el culto a la ignorancia, un culto a un Dios ciego y estúpido cual Azathoth, que se ha esparcido por todo el mundo, y aquí tenemos sus consecuencias, las vivimos en nuestra cotidaneidad. Hoy, como ayer, Cthulhu sigue llamando... ah,

King Crimson - Red (Elemental Mixes) (1974 - 2024)

Y para empezar la semana siempre vamos con algo bueno ¿Y qué decir de esto que ahora nos trae El Mago Alberto?, tenemos uno de los disco claves del Rey Carmesí con temas inéditos, y me copio de uno de los comentarios de esta entrada: "El último gran álbum de los mejores King Crimson, los de la década de los ’70, veía la luz en aquel Noviembre de 1974. "Red" nacía proyectando su propia sombra densa, vestida de elementos de su sinfónico pasado, de un oscuro y rauco jazz y del naciente heavy metal, marcado este último por las distorsionadas guitarras y sus pétreos riffs, que dieron una visión un tanto peculiar de aquel primogénito del Hard Rock desde el especial prisma de Robert Fripp. (...) Este álbum sin duda marcó un antes y un después en la carrera de la banda, pues tras 7 años de silencio después de "Red", la banda volvió entrados los ’80 con otra onda completamente distinta, otra visión y concepción de su sonido, sonando también interesantes y originales, pe

Bill Bruford - The Best of Bill Bruford The Winterfold & Summerfold Years (2024)

Empezamos la semana con la nueva versión del "Red" de King Crimson, seguimos luego con Bill Bruford´s Earthworks y parece que seguimos en la misma onda porque ahora presentamos, gracias al Mago Alberto, algo recién salido del horno: "The Best of Bill Bruford The Winterfold & Summerfold Years", que no otra cosa que una retrospectiva completa que cubre amplias franjas del trabajo del legendario baterista, desde su homónima banda de jazz-rock hasta la encarnación final de su célebre banda de jazz Earthworks, un conjunto de tres discos que está lleno de numerosas colaboraciones; su compañero de Yes Patrick Moraz, el pianista holandés Michiel Borstlap, Luis Conte, Chad Wackerman y Ralph Towner, entre otros. Artista: Bill Bruford Álbum: The Best of Bill Bruford The Winterfold & Summerfold Years Año: 2024 Género: Jazz Rock /  Fusion Referencia: Link a Discogs, Bandcamp, Youtube, Wikipedia, Progarchives o lo que sea. Nacionalidad: Inglaterra Ante

Alejandro Matos - Carnaval De Las Víctimas (2024)

Tras el impresionante "La Potestad" en el 2015, y casi diez años después llega el nuevo y  magnífico álbum del multiinstrumentista Alejandro Matos "Carnaval De Las Victimas", otro trabajo de primer nivel que para constatarlo se puede ver simplemente el lugar que ocupa en Progarchives, dentro de los mejores discos del este año 2024 a nivel mundial, y con eso ya nos damos una idea de la valía de este nuestro trabajo, donde Alejandro Matos se ocupa de todos los instrumentos salvo la batería, conformando un trabajo oscuro, cinematográfico, elegante y ambicioso, y toda una reflexión sobre los tiempos que corren, en base a buenos riffs y melodías cautivadoras, hasta su bucólica y triste belleza. Un trabajo que llevó tres largos años, que cursa su travesía desde un medio tiempo en casi toda su extensión y se escucha como un oscuro regalo de los dioses... o de los demonios, uno vaya a saber, pero que definitivamente tenemos que recomendar al selecto público cabezón. Ide

El Ritual - El Ritual (1971)

Quizás aquellos que no estén muy familiarizados con el rock mexicano se sorprendan de la calidad y amplitud de bandas que han surgido en aquel país, y aún hoy siguen surgiendo. El Ritual es de esas bandas que quizás jamás tendrán el respeto que tienen bandas como Caifanes, jamás tendrán el marketing de Mana o la popularidad de Café Tacuba, sin embargo esta olvidada banda pudo con un solo álbum plasmar una autenticidad que pocos logran, no por nada es considerada como una de las mejores bandas en la historia del rock mexicano. Provenientes de Tijuana, aparecieron en el ámbito musical a finales de los años 60’s, en un momento en que se vivía la "revolución ideológica" tanto en México como en el mundo en general. Estas series de cambios se extendieron más allá de lo social y llegaron al arte, que era el principal medio de expresión que tenían los jóvenes. Si hacemos el paralelismo con lo que pasaba en Argentina podríamos mencionar, por ejemplo, a La Cofradía, entre otros muchos

King Crimson - Larks' Tongues In Aspic 50th Anniversary Edition Elemental Mixes (1973 - 2023)

Para ir cerrando la semana vamos con uno de los clásicos experimental de todos los tiempos, pero presentado de un modo nuevo gracias al Mago Alberto que se zarpa nuevamente para quemarla las válvulas a más de un cabezón, mientras que a algunos más les funde algunas lamparitas. Hablo de un álbum que rompió nuestra percepción del mundo de la música, donde Fripp, Bruford, Wetton, Cross y Muir crean un disco bisagra en la historia del Rey Carmesí, pero ahora en otra versión distinta a la que conocés, y sobre ello nos dice el Mago: "Una nueva edicion de Larks Tongues in Aspic commemorando los 50 años de la salida de esta enorme obra, y así como sucedió con RED nos encontramos con un nuevo lanzamiento con nuevas versiones y mezclas, esta vez a cargo de David Singleton, van a poder disfrutar también de versiones alternativas del mismo álbum. Cuando se lanzo este disco King Crimson rompió con todos los moldes existentes hasta el momento, la instrumentación era exquisita y la grabación era

The Alan Parsons Project - Pyramid (Super Edtion Deluxe) (2024)

Otro gran aporte del Mago Alberto, se trata del tercer álbum de Alan Parsons Project, pero ahora reeditado en este 2024. "Pyramid" fue un álbum conceptual centrado en las pirámides de Giza, que se grabó en los estudios Abbey Road con una variedad de vocalistas y músicos un conjunto de 4 CD que incluyen una nueva remasterización del álbum por Miles Showell y 67 temas adicionales, 54 de ellos inéditos, incluidas tomas descartadas de sesiones de estudio y demos de Eric Woolfson o "Songwriting Diaries", como se las conoce. Y lo presentamos basándonos en un comentario que nos dejó hace tiempo nuestro amigo El Canario, que como siempre se disfruta mucho. Que lo disfruten, tanto al texto como a esta nueva versión de este clásico. Artista:  The Alan Parsons Project Álbum:  Pyramid (edición remasterizada y ampliada, 2008) Año: 1978 - 2024 Género:  rock progresivo, rock sinfónico Duración: 1:03:40 Nacionalidad:  inglesa De todo lo que he escuchado de Alan Par

Charly García - La Lógica del Escorpión (2024)

Y ya que nos estamos yendo a la mierda, nos vamos a la mierda bien y presentamos lo último de Charly, en otro gran aporte de LightbulbSun. Y no será el mejor disco de Charly, ya no tiene la misma chispa de siempre, su lírica no es la misma, pero es un disco de un sobreviviente, y ese sobreviviente es nada más y nada menos que Charly. No daré mucha vuelta a esto, otra entrada cortita y al pie, como para adentrarse a lo último de un genio que marcó una etapa. Esto es lo que queda... lanzado hoy mismo, se suma a las sorpresas de Tony Levin y del Tío Franky, porque a ellos se les suma ahora el abuelo jodón de Charly, quien lanza esto en compañía de David Lebón, Pedro Aznar, Fito Páez, Fernando Kabusacki, Fernando Samalea y muchos otros, entre ellos nuestro querido Spinetta que presenta su aporte desde el más allá. Artista: Charly García Álbum: La Lógica del Escorpión Año: 2024 Género: Rock Referencia: Rollingstone Nacionalidad: Argentina Como comentario, solamente dejar

Genesis - The Lamb Lies Down On Broadway Analogue Productions (Atlantic 75 Series) (1974 / 2023)

Para comenzar la semana el Mago Alberto se zarpa de nuevo mientras nos dice: "Hoy se cumplen 50 añitos de The Lamb Lies Down On Broadway y como siempre en La Escuelita de Moe se hacen festejos, esta vez vamos con una presentación conmemorativa muy especial. Celebrando el 75 Aniversario de Atlantic Records, el sello lanzo una serie de álbumes masterizados a partir de las cintas analógicas originales o de la mejor fuente disponible, la serie cuenta con la maestría de reconocidos ingenieros de masterización, entre los que se incluyen leyendas como Bernie Grundman, Ryan K. Smith, Kevin Gray, Chris Bellman y Matthew Lutthans de Blue Heaven Studios. (...) Cabezonas/es, cuando parecía que nada nuevo podía conmoverte y menos de la gloriosa década de los 70 asoman estas cosas y  tus oídos se sacuden las telarañas. Atlantic está haciendo estos lanzamientos a razón de dos títulos por mes durante los próximos tres años, así que a prepararse y mover esa aletargada cola de dinosaurio y moverla

Ideario del arte y política cabezona

Ideario del arte y política cabezona


"La desobediencia civil es el derecho imprescriptible de todo ciudadano. No puede renunciar a ella sin dejar de ser un hombre".

Gandhi, Tous les hommes sont frères, Gallimard, 1969, p. 235.