Influencers de pelajes varios firman la que parece ser una carta redactada por una IA altamente irónica, para recomendar que alguien se encargue de atajar el desastre provocado por la desregulación en la investigación alrededor de la inteligencia artificial y así podamos disfrutar de «un largo verano de IA». 🥹
Detener los experimentos gigantes de IA: una carta abierta* **
Tomado de: Future of Life*
Traducción: Guillermo Vanegas**
Hacemos un llamado a todos los laboratorios de IA para que pausen inmediatamente, y durante al menos 6 meses, el entrenamiento de los sistemas de IA más potentes que GPT-4.
Los sistemas de IA con inteligencia humana-competitiva pueden plantear riesgos profundos para la sociedad y la humanidad, como lo demuestra una extensa investigación (1) y lo reconocen los principales laboratorios de IA. (2) Como se establece en los ampliamente respaldados Principios de IA de Asilomar, la IA avanzada podría representar un cambio profundo en la historia de la vida en la Tierra y debe planificarse y administrarse con el cuidado y los recursos correspondientes.
Desafortunadamente, este nivel de planificación y gestión no está ocurriendo, a pesar de que en los últimos meses los laboratorios de IA han entrado en una carrera fuera de control para desarrollar e implementar mentes digitales cada vez más poderosas que nadie, ni siquiera sus creadores, pueden entender, predecir o controlar de manera fiable.
Los sistemas de IA contemporáneos se están volviendo competitivos para los humanos en tareas generales (3) y debemos preguntarnos:
¿Deberíamos dejar que las máquinas inunden nuestros canales de información con propaganda y falsedad?
¿Deberíamos automatizar todos los trabajos, incluidos los de cumplimiento?
¿Deberíamos desarrollar mentes no humanas que eventualmente podrían superarnos en número e inteligencia, desfasarnos y reemplazarnos?
¿Deberíamos arriesgarnos a perder el control de nuestra civilización?
Tales decisiones no deben delegarse en líderes tecnológicos no elegidos. Los sistemas potentes de IA deben desarrollarse solo cuando estemos seguros de que sus efectos serán positivos y sus riesgos manejables. Esta confianza debe estar justificada y aumentar con la magnitud de los efectos potenciales de un sistema. La declaración reciente de OpenAI con respecto a la inteligencia general artificial establece que «en algún momento, podría ser importante contar con una investigación independiente antes de entrenar sistemas futuros, y para los esfuerzos más avanzados, acordar un límite a la tasa de crecimiento de la computación utilizada para crear nuevos modelos».
Estamos de acuerdo. Ese punto es ahora.
Por lo tanto, hacemos un llamado a todos los laboratorios de IA para que pausen de inmediato durante al menos 6 meses el entrenamiento de los sistemas de IA más potentes que GPT-4. Esta pausa debe ser pública y verificable, e incluir a todos los actores clave. Si tal pausa no se puede promulgar rápidamente, los gobiernos deberían intervenir e instituir una moratoria.
Los laboratorios de IA y los expertos independientes deberían aprovechar esta pausa para desarrollar e implementar conjuntamente un conjunto de protocolos de seguridad compartidos para el diseño y desarrollo avanzados de IA que sean rigurosamente auditados y supervisados por expertos externos independientes. Estos protocolos deben garantizar que los sistemas que se adhieren a ellos sean seguros más allá de toda duda razonable. (4)
Esto no significa una pausa en el desarrollo de la IA en general, simplemente un paso atrás en una peligrosa carrera hacia impredecibles modelos de caja negra cada vez más grandes y con capacidades emergentes.
La investigación y el desarrollo de IA deben reenfocarse en hacer que los potentes sistemas de última generación sean más precisos, seguros, interpretables, transparentes, robustos, alineados, confiables y leales.
Paralelamente, los desarrolladores de IA deben trabajar con los legisladores para acelerar drásticamente el desarrollo de sistemas sólidos de gobierno de IA. Estos deben incluir como mínimo:
-Autoridades reguladoras nuevas y capaces dedicadas a la IA.
-Supervisión y seguimiento de sistemas de IA de alta capacidad y grandes conjuntos de capacidad computacional.
-Sistemas de procedencia y marcas de agua para ayudar a distinguir las fugas reales de las sintéticas y rastrear modelos.
-Un sólido ecosistema de auditoría y certificación.
-Responsabilidad por daños causados por IA.
-Financiación pública sólida para la investigación técnica de seguridad de la IA, e
-Instituciones dotadas para hacer frente a las perturbaciones económicas y políticas (especialmente en la democracia) que provocará la IA.
La humanidad puede disfrutar de un futuro floreciente con la IA. Habiendo tenido éxito en la creación de poderosos sistemas de IA, ahora podemos disfrutar de un «verano de IA» en el que cosechamos las recompensas, diseñamos estos sistemas para el claro beneficio de todos y le damos a la sociedad la oportunidad de adaptarse. La sociedad ha hecho una pausa en otras tecnologías con efectos potencialmente catastróficos. (5) Podemos hacerlo aquí. Disfrutemos de un largo verano de IA, no nos apresuremos a caer sin estar preparados.
Notas y referencias
1.- Bender, E. M., Gebru, T., McMillan-Major, A., & Shmitchell, S. (2021, March). On the Dangers of Stochastic Parrots: Can Language Models Be Too Big?🦜. In Proceedings of the 2021 ACM conference on fairness, accountability, and transparency (pp. 610-623).
Bostrom, N. (2016). Superintelligence. Oxford University Press.
Bucknall, B. S., & Dori-Hacohen, S. (2022, July). Current and near-term AI as a potential existential risk factor. In Proceedings of the 2022 AAAI/ACM Conference on AI, Ethics, and Society (pp. 119-129).
Carlsmith, J. (2022). Is Power-Seeking AI an Existential Risk?. arXiv preprint arXiv:2206.13353.
Christian, B. (2020). The Alignment Problem: Machine Learning and human values. Norton & Company.
Cohen, M. et al. (2022). Advanced Artificial Agents Intervene in the Provision of Reward. AI Magazine, 43(3) (pp. 282-293).
Eloundou, T., et al. (2023). GPTs are GPTs: An Early Look at the Labor Market Impact Potential of Large Language Models.
Hendrycks, D., & Mazeika, M. (2022). X-risk Analysis for AI Research. arXiv preprint arXiv:2206.05862.
Ngo, R. (2022). The alignment problem from a deep learning perspective. arXiv preprint arXiv:2209.00626.
Russell, S. (2019). Human Compatible: Artificial Intelligence and the Problem of Control. Viking.
Tegmark, M. (2017). Life 3.0: Being Human in the Age of Artificial Intelligence. Knopf.
Weidinger, L. et al (2021). Ethical and social risks of harm from language models. arXiv preprint arXiv:2112.04359.
2.- Ordonez, V. et al. (2023, March 16). OpenAI CEO Sam Altman says AI will reshape society, acknowledges risks: ‘A little bit scared of this’. ABC News.
Perrigo, B. (2023, January 12). DeepMind CEO Demis Hassabis Urges Caution on AI. Time.
3.- Bubeck, S. et al. (2023). Sparks of Artificial General Intelligence: Early experiments with GPT-4. arXiv:2303.12712.
OpenAI (2023). GPT-4 Technical Report. arXiv:2303.08774.
4.- Existen amplios predentes legales —por ejemplo los Principios en IA, adoptados por la OECD, exigen que los sistemas de IA «funcionen apropiadamente y no supongan innecesarios riesgos a la seguridad.»
5.- Por ejemplo: clonación humana, modificación del genoma humano, investigación de mejora de funciones [gain-of-function] y eugenesia.
