Skip to main content

La falsa promesa de ChatGPT

Noam Chomsky, reconocido lingüista y filósofo escribió un artículo junto a dos especialistas, en el que compartió su visión sobre los avances que se han presentado en el campo de la inteligencia artificial, como los casos de ChatGPT y DALL-E. Según las declaraciones de los especialistas, el defecto más profundo de estas herramientas es la falta de capacidad crítica, lo que los hacen caer en declaraciones extremistas y controversiales, en medio de un escenario donde podrían ayudar a potenciar la ya alta cantidad de fake news y alborotadores del mundo digital. A través de varios ejemplos, el experto razona que ChatGPT y similares tienen como principal problema en que no pueden ir más allá de la descripción y la anticipación de ciertos contenidos. Se trataría simplemente de "un pesado motor estadístico de comparación de patrones, que se atiborra de cientos de terabytes de datos y extrapola la respuesta conversacional más probable o la respuesta más probable a una pregunta científica". Aquí la nota completa, donde se explica porqué se enuncia que la variante más destacada de la inteligencia artificial codifica una concepción errónea del lenguaje y el conocimiento.

Por Noam Chomsky, Ian Roberts, Jeffrey Watumull


Jorge Luis Borges escribió una vez que vivir en una época de grandes peligros y promesas es experimentar tanto la tragedia como la comedia, con “la inminencia de una revelación”, para entendernos a nosotros mismos y al mundo. En la actualidad, los avances supuestamente revolucionarios de la inteligencia artificial son motivo tanto de preocupación como de optimismo. Optimismo porque la inteligencia es el medio con el que resolvemos problemas. Preocupación porque tememos que la variante de la inteligencia artificial más popular y de moda (el aprendizaje automático) degrade nuestra ciencia y envilezca nuestra ética al incorporar a nuestra tecnología una concepción fundamentalmente errónea del lenguaje y el conocimiento.

ChatGPT de OpenAI, Bard de Google y Sydney de Microsoft son maravillas del aprendizaje automático. A grandes rasgos, toman enormes cantidades de datos, buscan patrones en ellos y se vuelven cada vez más competentes a la hora de generar resultados estadísticamente probables, como un lenguaje y un pensamiento de apariencia humana. Estos programas han sido objeto de elogio por ser los primeros destellos en el horizonte de la inteligencia artificial general, ese momento tan profetizado en el que las mentes mecánicas superan a los cerebros humanos no solo cuantitativamente en términos de velocidad de procesamiento y tamaño de memoria, sino también cualitativamente en términos de perspicacia intelectual, creatividad artística y cualquier otra facultad distintiva del ser humano.

Ese día llegará, pero aún no ha visto la luz, al contrario de lo que se lee en titulares hiperbólicos y de lo que se calcula mediante inversiones insensatas. La revelación borgiana de la comprensión no se ha producido ni se producirá —y, en nuestra opinión, no puede producirse— si los programas de aprendizaje automático como ChatGPT siguen dominando el campo de la inteligencia artificial. Por muy útiles que puedan ser estos programas en algunos ámbitos concretos (pueden ser útiles en programación informática, por ejemplo, o para sugerir rimas para versos ligeros), sabemos por la ciencia de la lingüística y la filosofía del conocimiento que difieren en gran medida de la manera en que los seres humanos razonamos y utilizamos el lenguaje. Estas diferencias imponen limitaciones significativas a lo que estos programas pueden hacer, codificándolos con defectos imposibles de erradicar.

Resulta a la vez cómico y trágico, como podría haber señalado Borges, que se concentren tanto dinero y atención en algo tan insignificante, algo tan trivial comparado con la mente humana, la cual, a fuerza de lenguaje, en palabras de Wilhelm von Humboldt, puede hacer un “uso infinito de medios finitos”, creando ideas y teorías de alcance universal.

A diferencia de ChatGPT y sus similares, la mente humana no es una pesada máquina estadística de comparación de patrones, que se atiborra de cientos de “terabytes” de datos y extrapola la contestación más probable en una conversación o la respuesta más probable a una pregunta científica. Por el contrario, la mente humana es un sistema sorprendentemente eficiente, e incluso elegante, que funciona con pequeñas cantidades de información; no busca inferir correlaciones brutas entre puntos de datos, sino suscitar explicaciones.

Por ejemplo, un niño pequeño que aprende un idioma está desarrollando (de manera inconsciente, automática y rápida a partir de datos minúsculos) una gramática, un sistema increíblemente sofisticado de principios y parámetros lógicos. Esta gramática puede entenderse como expresión del “sistema operativo” innato, instalado en los genes, que dota a los seres humanos de la capacidad de generar frases complejas y largos hilos de pensamiento. Cuando los lingüistas intentan desarrollar una teoría de por qué una lengua determinada funciona como lo hace (“¿Por qué se consideran gramaticales estas frases y no aquellas?”), están construyendo consciente y laboriosamente una versión explícita de la gramática que el niño construye por instinto y con una exposición mínima a la información. El sistema operativo del niño es completamente distinto al de un programa de aprendizaje automático.

De hecho, estos programas están estancados en una fase pre-humana o no humana de la evolución cognitiva. Su defecto más profundo es la falta de esa capacidad que es la más crucial de cualquier inteligencia: decir no sólo lo que es el caso, lo que fue el caso y lo que será el caso —eso es descripción y predicción—, sino, además, lo que no es el caso y lo que podría y no podría ser el caso. Esos son los ingredientes de la explicación, la marca de la verdadera inteligencia.

Pongamos, a continuación, un ejemplo. Supongamos que sostenemos una manzana en la mano. Dejamos ahora caer la manzana. Observamos el resultado y decimos: “La manzana cae”. Esa es una descripción. Una predicción podría ser la frase: “La manzana se caerá si abro la mano”. Ambas son valiosas y ambas pueden ser correctas. Pero una explicación es algo más: incluye no solo descripciones y predicciones, sino también conjeturas contrafácticas del género “cualquier objeto de este tipo caería”, más la cláusula adicional “debido a la fuerza de la gravedad” o “debido a la curvatura del espacio-tiempo”, o lo que sea. Eso es una explicación causal: “La manzana no habría caído de no ser por la fuerza de la gravedad”. Eso significa pensar.

El talón de Aquiles del aprendizaje automático se encuentra en la descripción y la predicción: no plantea ningún mecanismo causal ni leyes físicas. Por supuesto, cualquier explicación de tipo humano no es necesariamente correcta: somos falibles. Pero esto es parte de lo que significa pensar: para llevar razón, debe ser posible equivocarse. La inteligencia no sólo consiste en hacer conjeturas creativas, sino también críticas creativas. El pensamiento al modo humano se basa en explicaciones posibles y en la corrección de errores, un proceso que limita poco a poco las posibilidades que pueden considerarse racionalmente (tal como le dijo Sherlock Holmes al Dr. Watson: “Cuando hayas eliminado lo imposible, lo que quede, por improbable que sea, ha de ser la verdad”).

Pero ChatGPT y programas similares son, por su diseño, ilimitados en lo que pueden “aprender” (es decir, memorizar); son incapaces de distinguir lo posible de lo imposible. A diferencia, por ejemplo, de los humanos, que estamos dotados de una gramática universal que limita los idiomas que podemos aprender a aquellos con un cierto tipo de elegancia casi matemática, estos programas aprenden idiomas humanamente posibles y humanamente imposibles con la misma facilidad. Mientras que los humanos estamos limitados en el tipo de explicaciones que podemos conjeturar a nivel racional, los sistemas de aprendizaje automático pueden aprender tanto que la Tierra es plana como que es redonda. Se limitan a negociar con probabilidades que cambian con el tiempo.

Por esta razón, las predicciones de los sistemas de aprendizaje automático siempre serán superficiales y dudosas. Como estos programas no pueden explicar las reglas de la sintaxis de la lengua inglesa, por ejemplo, pueden predecir, erróneamente, que la frase “John is too stubborn to talk to” significa que Juan es tan terco que no habla con nadie (en lugar de que es demasiado terco como para razonar con él). ¿Por qué un programa de aprendizaje automático predeciría algo tan extraño? Porque podría establecer una analogía en el patrón que infirió a partir de frases como “John ate an apple” (Juan se comió una manzana) y “John ate” (Juan comió), en el que esta última significa que Juan se comió algo. El programa bien podría predecir que, como la frase “John is too stubborn to talk to Bill” (Juan es demasiado terco para hablar con Bill) es similar a “John ate an apple” (Juan se comió una manzana), “John is too stubborn to talk to” (Juan es demasiado terco para hablar) sería similar a “John ate” (Juan comió). Las explicaciones correctas de lenguaje son complicadas y no pueden aprenderse simplemente macerándolas en macrodatos.

Sin lógica alguna, ciertos entusiastas del aprendizaje automático parecen estar orgullosos de que sus creaciones puedan generar predicciones “científicas” correctas (digamos, sobre el movimiento de cuerpos físicos) sin recurrir a explicaciones (que impliquen, por ejemplo, las leyes del movimiento y la gravitación universal de Newton). Pero este tipo de predicción, aunque cuando tenga éxito, es pseudociencia. Aunque es cierto que los científicos buscan teorías que tengan un alto grado de corroboración empírica, como señaló el filósofo Karl Popper: “No buscamos teorías altamente probables, sino explicaciones; es decir, teorías poderosas y altamente improbables”.

La teoría de que las manzanas caen al suelo porque ése es su lugar natural (el punto de vista de Aristóteles) es posible, pero solo invita a plantearse más preguntas (¿por qué el suelo es su lugar natural?) La teoría de que las manzanas caen a la tierra porque la masa curva el espacio-tiempo (opinión de Einstein) es altamente improbable, pero en realidad te explica por qué caen. La verdadera inteligencia se demuestra en la capacidad de pensar y expresar cosas improbables pero lúcidas.

La verdadera inteligencia también es capaz de pensar moralmente. Esto significa ceñir la creatividad de nuestras mentes, que de otro modo sería ilimitada, a un conjunto de principios éticos que determinen lo que debe y no debe ser (y, por supuesto, someter esos mismos principios a la crítica creativa). Para ser útil, ChatGPT debe ser capaz de generar resultados novedosos; para ser aceptable para la mayoría de sus usuarios, debe mantenerse alejado de contenidos moralmente censurables. Pero los programadores de ChatGPT y otras maravillas del aprendizaje automático batallan, y seguirán haciéndolo, alcanzar este tipo de equilibrio.

En 2016, por ejemplo, el “chatbot” Tay de Microsoft (precursor de ChatGPT) inundó la Red de contenidos misóginos y racistas, tras haberse visto contaminado por “troles” cibernéticos que lo llenaron de datos de adiestramiento ofensivos. ¿Cómo resolver ese problema en el futuro? Al carecer de capacidad para razonar a partir de principios morales, los programadores de ChatGPT restringieron de manera burda la posibilidad de aportar algo novedoso a los debates controvertidos; es decir, importantes. Se sacrificó la creatividad por una especie de amoralidad.

Consideremos el siguiente intercambio que uno de nosotros (Watumull) mantuvo hace poco con ChatGPT sobre si sería ético transformar Marte para que pudiera albergar vida humana:

Nótese, a pesar de todo el pensamiento y lenguaje en apariencia sofisticados, la indiferencia moral nacida de la falta de inteligencia. Aquí, ChatGPT exhibe algo parecido a la banalidad del mal: plagio, apatía y obviedad. Resume los argumentos estándar de la literatura mediante una especie de “superautocompletado”, se niega a adoptar una postura sobre lo que sea, alega no solo ignorancia sino falta de inteligencia y, en última instancia, se defiende con un “solo cumplía órdenes”, trasladando la responsabilidad a sus creadores.

En resumen, ChatGPT y sus afines son constitutivamente incapaces de equilibrar la creatividad con la restricción. O bien generan de más (produciendo tanto verdades como falsedades, respaldando decisiones éticas y no éticas por igual) o generan de menos (mostrando falta de compromiso con cualquier decisión e indiferencia ante las consecuencias). Dada la amoralidad, la falsa ciencia y la incompetencia lingüística de estos sistemas, no podemos más que reír o llorar frente a su popularidad.

Noam Chomsky, Ian Roberts, Jeffrey Watumull

Noam Chomsky: profesor laureado de la Universidad de Arizona y catedrático emérito de Lingüística del Massachusetts Institute of Technology, es uno de los activistas sociales más reconocidos internacionalmente por su magisterio y compromiso político. Su libro más reciente es “Climate Crisis and the Global Green New Deal: The Political Economy of Saving the Planet”.

Ian Roberts: es Profesor de Lingüística del Downing College de la Universidad de Cambridge. Lingüista generativo, Se doctoró en la Universidad del Sur de California y ha sido profesor en las universidades de Ginebra, Bangor y Stuttgart.

Jeffrey Watumull: es director de Inteligencia Artificial de la empresa Oceanit, de Honolulu (Hawaii). Estudió Matemáticas y Biología Evolutiva en la Universidad de Harvard y se doctoró en Inteligencia Artificial en el MIT. Fuente:

The New York Times, Traducción: Lucas Antón

Fuente Sin Permiso







Texto expandido de la entrada

Texto expandido de la entrada




Lista de Temas:
1. ---
2. ---
3. ---
4. ---

Alineación:
- --- / ---
- --- / ---
- --- / ---
- --- / ---



Comments

Lo más visto de la semana pasada

Don Cornelio y la Zona - Don Cornelio y la Zona (1987)

"Hola, les saludo desde Ecuador, he seguido la página desde hace unos años y han sido un gran soporte emocional en mi vida gracias a la música que me han compartido. Quería preguntarles si pueden revivir este álbum que descubrí hace poco". ¿Y cómo negarnos ante ese comentario?. Como homenaje al recientemente desaparecido Palo Pandolfo (uno de los cantautores más destacados de la música argentina en las últimas tres décadas), reflotamos un discos que Artie había publicado hace ya mucho tiempo. Acá está, entonces, el disco homónimo de Don Cornelio, muy pedido por varios, como recuerdo de ese referente del rock argento que fue el poeta del rock "Palo" Pandolfo, con su combinación de lirismo y violencia reconocible en su rock, algunos dicen que fue heredero artístico de Pescado Rabioso , y desde hace 35 años que vino siendo bastante más que el flaquito que vino a poner oscuridad en el pop alfonsinista. Artista: Don Cornelio y la Zona Álbum: Don Cornelio y la Zona ...

Los 100 Mejores Álbumes del Rock Argentino según Rolling Stone

Quizás hay que aclararlo de entrada: la siguiente lista no está armada por nosotros, y la idea de presentarla aquí no es porque se propone como una demostración objetiva de cuales obras tenemos o no que tener en cuenta, ya que en ella faltan (y desde mi perspectiva, también sobran) muchas obras indispensables del rock argento, aunque quizás no tan masificadas. Pero sí tenemos algunos discos indispensables del rock argentino que nadie interesado en la materia debería dejar de tener en cuenta. Y ojo que en el blog cabezón no tratamos de crear un ranking de los "mejores" ni los más "exitosos" ya que nos importa un carajo el éxito y lo "mejor" es solamente subjetivo, pero sobretodo nos espanta el concepto de tratar de imponer una opinión, un solo punto de vista y un sola manera de ver las cosas. Todo comenzó allá por mediados de los años 60, cuando Litto Nebbia y Tanguito escribieron la primera canción, Moris grabó el primer disco, Almendra fue el primer ...

King Crimson Collector's Club (1998 - 2012)

Artista: King Crimson Álbum: King Crimson Collector's Club Año: (1998 - 2012) Género: Progresivo ecléctico Nacionalidad: Inglaterra Lista de Discos: KCCC 01 - [1969] Live at the Marquee (1998) KCCC 02 - [1972] Live at Jacksonville (1998) KCCC 03 - [1972] The Beat Club Bremen (1999) KCCC 04 - [1982] Live at Cap D'Agde (1999) KCCC 05 - [1995] On Broadway - Part 1 (1999) KCCC 06 - [1995] On Broadway - Part 2 (1999) KCCC 07 - [1998] ProjeKct Four - The Roar Of P4 - Live in San Francisco (1999) KCCC 08 - [1994] The VROOOM - Sessions April - May (1999) KCCC 09 - [1972] Live At Summit Studios Denver, March 12 (2000) KCCC 10 - [1974] Live in Central Park NYC (2000) KCCC 11 - [1981] Live at Moles Club Bath (2000) KCCC 12 - [1969] Live in Hyde Park, July 5 (2002 KCCC 13 - [1997] Nashville Rehearsals (2000) KCCC 14 - [1971] Live at Plymouth Guildhall, May 11 (2CD) (2000) KCCC 15 - [1974] Live In Mainz, March 30 (2001) KCCC 16 - [1982] Live in Berkeley (2CD) (200...

Vivencia - Vida y Vida De Sebastián (1972) / En Vivo (2005)

Empezamos el día con un 2 x 1. En nuestra incursión por la historia del rock nacional le llegó el turno, luego de mucho tiempo (publicamos oportunamente el disco homónimo y "Mi Cuarto"), al dúo acústico Vivencia, traído por (otra vez) el Mago Alberto. Considerados como uno de los mejores duos de rock argentino, nacida bajo los aires poéticos que envolvían las letras y partituras del rock de los '70s, crearon obras profundas que nutrieron los albores del rock nacional. Formados en una época de tensión política y silenciamiento artístico, Vivencia comenzó su carrera con el disco conceptual "Vida y Vida de Sebastián", uno de los grandes discos del rock nacional que ahora está presente en el blog cabezón para que nadie lo olvide. Artista: Vivencia Álbum: Vida y Vida De Sebastián / En Vivo Año: 1972 / Género: Folk rock Nacionalidad: Argentina Parte de la historia del rock argentino está pasando esta semana por el blog cabezón, y ya habíamos posteado alg...

Varios Artistas - Una Celebración Del Rock Argentino (2010)

Hace tiempo Oskar nos había presentado estos 9 discos que rescatan la labor compositiva e importancia histórica de algunas figuras clave en el surgimiento y consolidación del rock argentino durante sus primeros años de vida. Hoy me lo vienen pidiendo, y como se viene el fin de semana y además tengo poco tiempo como para ponerme a presentarles algún nuevo disco, lo traemos de nuevo a la palestra para felicidad de algún cabezón rezagado o para los nuevos que se van acercando al fogón... Artista: Varios Artistas Álbum: Una Celebración Del Rock Argentino Año: 2010 Género: Rock Nacionalidad: Argentina Aquí tienen, como para quemarse la cabeza en todo el fin de semana... Este histórico tributo al rock argentino se presenta en un paquete cerrado que incluye los 9 CDs, cada uno con su cajita, y un librito de 110 páginas con la historia de los artistas homenajeados. Por lo tanto la caja pesa 1 kg, ¡es bueno recordar esto al añadirlo al pedido del mes! El precio es especial para ...

Serú Girán - La Grasa de las Capitales (Edición 40 Aniversario) (1979 / 2019)

Esta edición especial tiene su lanzamiento digital hoy, y nosotros no podíamos dejar de mencionarlo. Un disco bien para que aparezca en el blog cabezón un viernes. Porque no es una versión cualquiera, porque salió hoy mismo, porque es una gran sorpresa tenerlo aquí y porque lo trae el Mago Alberto.  A partir de la recuperación del histórico catálogo discográfico de Music Hall, realizada por el Instituto Nacional de la Música (INAMU), y con un minucioso trabajo de producción que incluyó la remasterización del sonido desde cintas, restauración de arte de tapa e inclusión de un insert con fotos originales nunca antes vistas, se lanza a 40 años de su publicación una edición especial de "La Grasa de las Capitales", segundo disco del legendario Serú Girán. Con la idea de escuchar cada vez mejor estas obras que traspasan el tiempo, es que anunciamos estas cosas maravillosas que van saliendo, y es que así se vive la mejor música en el blog cabezón. Artista: Serú Girán Álbum: ...

Soft Machine - Thirteen (2026)

Gracias al Mago Alberto vamos cerrando la semana con el último trabajo, recién salido del horno, de otra banda histórica. Obviamente me refiero a los Soft Machine, que este año se renuevan con nuevo disco, y con él cerramos otra semana a pura música, sorpresa y ganas de romper las pelotas. Y así vemos una nueva reencarnación musical de Theo Travis, John Etheridge, Fred Baker y el debut de Asaf Sirkis a cargo de la batería, y hasta donde hay un hueco para meterlo al finado Daevid Allen (hablando de Gong). "Thirteen" abarca desde improvisaciones atmosféricas y psicodelia libre, hasta jazz rock poderoso, guitarras incendiarias, flautas hipnóticas y exploraciones electrónicas. Por otro lado, el grupo invita a sus seguidores a formar parte del proceso final de lanzamiento, apoyando una producción completamente autogestionada, en el verdadero espíritu independiente que siempre ha caracterizado a la banda. Ideal para finalizar la semana, nosotros nos despedimos hasta el lunes, de ...

Varios Artistas - Pidamos Peras a Mandioca (1970)

#Músicaparaelencierro.  Mandioca fue un sello fundacional del Rock Argentino que tuvo la "audacia" de grabar a artistas que hacían su música un poco contra la corriente y contra lo establecido. En "Pidamos peras a mandioca" podemos encontrar las primeras grabaciones de artistas que luego fueron Iconos del Rock Nacional como Manal, Pappo, Billy Bond, Alma y Vida, La Cofradía de la flor Solar, Vox Dei, Tanguito y Moris. Este disco se editó originalmente en 1970 y fue el segundo album recopilatorio del sello, luego de "Mandioca Underground" de 1969.    Artista: Varios Artistas Álbum: Pidamos Peras a Mandioca Año: 1970 Género: Rock / Beat Duración: 49:57 Nacionalidad: Argentina En “Pidamos peras a Mandioca” aparecen solistas y bandas pilares de nuestro rock como Manal , Pappo , Billy Bond , Alma y Vida , La Cofradía de la flor Solar , Vox Dei , Tanguito y Moris . Jorge Álvarez (n. ciudad de Buenos Aires, 1932) es un productor discográfico y empre...

Robert Dimery, Editor - 1001 Albums You Must Hear Before You Die (2006)

Libro de referencia de la música pop aparecida entre 1955 y 2005, abarcando los géneros desde el rock, blues, folk, jazz, pop, electrónica y world music. Las reseñas fueron realizadas por un equipo de unos 90 críticos de distintas latitudes y gustos. El trabajo se basa en discos originales, quedando así por fuera las recopilaciones de  varios  artistas, quedando excluido así, el mítico álbum de Woodstock. Sin embargo el panorama es muy amplio y uno siempre encontrará artistas que no ha oído. Editor: Robert Dimery Prefacio:  Michael Lydon Primera Edición: 2005 Cubierta:   Jon Wainwright Género: Catálogo Páginas: 960 Nacionalidad:  EEUU Editorial:     Universe Publishing Reediciones:     2 008, 2011, 2013 Otros Idiomas:    español, portugués, noruego, finés, sueco, y otros. Presentación del Editor de libros de Amazon.com  The ultimate compendium of a half century of the best music, now revised and updated...

Gong - Bright Spirit (2026)

Ya de una, el panorama musical para el 2026 pinta muy bien, y para aseverar esta afirmación podemos darle un poco de bola a lo que nos trae el Mago Alberto, que es el último disco de los míticos Gong, ni más ni menos. Y si bien no hay nadie de su formación original, hay que mencionar no solo que su espíritu sigue intacto, sino que además es ya el cuarto álbum de Gong con la formación actual, después de lanzar los 3 anteriores, "Rejoice, I'm Dead" (2016), "The Universe Also Collapses" (2019) y "Unending Ascending" (2023). Con el gran guitarrista brasilero Fabio Golfetti (amigo de la casa), y acompañado de una ralea de músicos consecuentes con la historia musical de la histórica banda, presentados ahora en una entrada cortita y al pie, para presentar un álbum que es necesario que conozcan en el fin de semana... mientras tanto, el viaje de Gong continúa, con giras mundiales y álbumes como este que marcan un nuevo cambio de atmósfera pero sin cambiar su es...

Ideario del arte y política cabezona

Ideario del arte y política cabezona


"La desobediencia civil es el derecho imprescriptible de todo ciudadano. No puede renunciar a ella sin dejar de ser un hombre".

Gandhi, Tous les hommes sont frères, Gallimard, 1969, p. 235.