Italia prohíbe ChatGPT mientras Elon Musk y 1100 signatarios piden una pausa en la IA [Carta abierta]

Noticias IBL | Nueva York

La autoridad de protección de datos de Italia dijo el viernes bloqueará e investigará inmediatamente a OpenAI para que no procese datos de usuarios italianos. La orden es temporal hasta que la empresa respete la histórica ley de privacidad de la Unión Europea, la Reglamento General de Protección de Datos (RGPD).

La prohibición de ChatGPT en Italia se produce en medio de llamadas para bloquear los lanzamientos de OpenAI debido a una variedad de riesgos para la privacidad, la ciberseguridad y la desinformación tanto en Europa como en los EE. UU.

La autoridad italiana dijo que recordó que ChatGPT también sufrió una violación de datos y expuso las conversaciones de los usuarios y la información de pago la semana pasada.

Además, se ha demostrado que ChatGPT produce información completamente falsa sobre personas nombradas, aparentemente inventando detalles de los que carecen sus datos de entrenamiento.

Los grupos de defensa del consumidor dicen que OpenAI está obteniendo una “recopilación y almacenamiento masivos de datos personales para entrenar los algoritmos de ChatGPT” y está “procesando datos de manera incorrecta”.

Esta semana, Elon Musk y docenas de expertos en IA pidieron una pausa de seis meses en los sistemas de entrenamiento más potentes que GPT-4.

Más de 1100 signatarios, incluidos Steve Wozniak, Tristan Harris del Center for Humane Technology, algunos ingenieros de Meta y Google, el CEO de Stability AI, Emad Mostaque — firmaron una carta abierta, que se publicó en línea, pidiendo a “todos los laboratorios de IA que pausen inmediatamente durante al menos 6 meses el entrenamiento de los sistemas de IA más potente que GPT-4.”

• “Los sistemas de IA contemporáneos ahora se están volviendo competitivos para los humanos en tareas generales, y debemos preguntarnos: ¿Deberíamos dejar que las máquinas inunden nuestros canales de información con propaganda y falsedad? ¿Deberíamos automatizar todos los trabajos, incluidos los que cumplen? ¿Deberíamos desarrollar mentes no humanas que eventualmente podrían superarnos en número, ser más astutas, obsoletas y reemplazarnos? ¿Deberíamos arriesgarnos a perder el control de nuestra civilización? Tales decisiones no deben delegarse en líderes tecnológicos no elegidos. sus efectos serán positivos y sus riesgos serán manejables”.

• “Los laboratorios de IA se han visto envueltos en una carrera fuera de control para desarrollar e implementar mentes digitales cada vez más poderosas que nadie, ni siquiera sus creadores, pueden entender, predecir o controlar de manera confiable”.

• “La pausa debe ser pública y verificable, e incluir a todos los actores clave. Si no se puede promulgar rápidamente, los gobiernos deben intervenir e instituir una moratoria”.

• “Los laboratorios de IA y los expertos independientes deben aprovechar esta pausa para desarrollar e implementar conjuntamente un conjunto de protocolos de seguridad compartidos para el diseño y desarrollo de IA avanzados que son rigurosamente auditados y supervisados por expertos externos independientes”.

• “Esto no significa una pausa en el desarrollo de la IA en general, simplemente un paso atrás de la carrera peligrosa hacia modelos de caja negra impredecibles cada vez más grandes con capacidades emergentes”.

Nadie de OpenAI ni nadie de Anthropic firmó esta carta.

Miércoles, el director ejecutivo de OpenAI, Sam Altman habló con el WSJ y dijo que OpenAI no ha comenzado a entrenar GPT-5.

• Detener los experimentos gigantes de IA: una carta abierta:

Los sistemas de IA con inteligencia humana-competitiva pueden plantear riesgos profundos para la sociedad y la humanidad, como lo demuestra una extensa investigación y lo reconocen los principales laboratorios de IA. Como se establece en los Principios de IA de Asilomar, ampliamente respaldados, la IA avanzada podría representar un cambio profundo en la historia de la vida en la Tierra, y debe planificarse y administrarse con el cuidado y los recursos correspondientes. Desafortunadamente, este nivel de planificación y gestión no está ocurriendo, a pesar de que en los últimos meses los laboratorios de IA han entrado en una carrera fuera de control para desarrollar e implementar mentes digitales cada vez más poderosas que nadie, ni siquiera sus creadores, pueden entender. predecir o controlar de forma fiable.

Los sistemas de IA contemporáneos ahora se están volviendo competitivos con los humanos en tareas generales, y debemos preguntarnos: ¿Deberíamos dejar que las máquinas inunden nuestros canales de información con propaganda y falsedad? ¿Deberíamos automatizar todos los trabajos, incluidos los de cumplimiento? ¿Deberíamos desarrollar mentes no humanas que eventualmente podrían superarnos en número, ser más inteligentes, obsoletas y reemplazarnos? ¿Deberíamos arriesgarnos a perder el control de nuestra civilización? Tales decisiones no deben delegarse en líderes tecnológicos no elegidos. Los sistemas potentes de IA deben desarrollarse solo una vez que estemos seguros de que sus efectos serán positivos y sus riesgos serán manejables. Esta confianza debe estar bien justificada y aumentar con la magnitud de los efectos potenciales de un sistema. La declaración reciente de OpenAI con respecto a la inteligencia general artificial establece que “En algún momento, puede ser importante obtener una revisión independiente antes de comenzar a entrenar sistemas futuros, y para los esfuerzos más avanzados para acordar limitar la tasa de crecimiento de la computación utilizada para crear nuevos modelos”. Estamos de acuerdo. Ese punto es ahora.

Por lo tanto, pedimos a todos los laboratorios de IA que pausen de inmediato durante al menos 6 meses el entrenamiento de los sistemas de IA más potentes que GPT-4. Esta pausa debe ser pública y verificable, e incluir a todos los actores clave. Si tal pausa no se puede promulgar rápidamente, los gobiernos deben intervenir e instituir una moratoria.

Los laboratorios de IA y los expertos independientes deben aprovechar esta pausa para desarrollar e implementar conjuntamente un conjunto de protocolos de seguridad compartidos para el diseño y desarrollo avanzados de IA que son rigurosamente auditados y supervisados por expertos externos independientes. Estos protocolos deben garantizar que los sistemas que se adhieren a ellos sean seguros más allá de toda duda razonable. Esto no significa una pausa en el desarrollo de la IA en general, simplemente un paso atrás de la peligrosa carrera hacia modelos de caja negra impredecibles cada vez más grandes con capacidades emergentes.

La investigación y el desarrollo de IA deben reenfocarse en hacer que los sistemas potentes y de última generación de hoy en día sean más precisos, seguros, interpretables, transparentes, sólidos, alineados, confiables y leales.

Paralelamente, los desarrolladores de IA deben trabajar con los legisladores para acelerar drásticamente el desarrollo de sistemas sólidos de gobierno de IA. Estos deben incluir como mínimo: autoridades reguladoras nuevas y capaces dedicadas a la IA; supervisión y seguimiento de sistemas de IA de alta capacidad y grandes conjuntos de capacidad computacional; sistemas de procedencia y marcas de agua para ayudar a distinguir las fugas reales de las sintéticas y rastrear modelos; un sólido ecosistema de auditoría y certificación; responsabilidad por daños causados por IA; financiación pública sólida para la investigación técnica de seguridad de la IA; e instituciones bien dotadas para hacer frente a las dramáticas perturbaciones económicas y políticas (especialmente en la democracia) que causará la IA.

La humanidad puede disfrutar de un futuro floreciente con la IA. Habiendo tenido éxito en la creación de poderosos sistemas de IA, ahora podemos disfrutar de un “verano de IA” en el que cosechamos las recompensas, diseñamos estos sistemas para el claro beneficio de todos y le damos a la sociedad la oportunidad de adaptarse. La sociedad ha hecho una pausa en otras tecnologías con efectos potencialmente catastróficos en la sociedad. Podemos hacerlo aquí. Disfrutemos de un largo verano de IA, no nos apresuremos a caer sin estar preparados.