Resiliencia en la era de la IA

IA, tecnologías de propósito general y por qué la resiliencia es la tarea de nuestra generación.

Por Wojciech Zaremba

La Fundación OpenAI existe para asegurar que la inteligencia artificial general beneficie a toda la humanidad.

Hemos estado trabajando incansablemente para seguir el ritmo de los rápidos avances en la IA. En abril, la Fundación anunció nuestras primeras subvenciones por USD 100 millones en Ciencias de la Salud y tratamiento de enfermedades, con la ambición de ayudar a prevenir y tratar enfermedades como el Alzheimer aprovechando la IA avanzada. La semana pasada, anunciamos nuestro programa de empleo y futuros económicos, con la esperanza de comprender y dar forma a lo que el trabajo y la prosperidad económica significan para las futuras generaciones.

Hoy profundizamos en nuestra visión para el próximo gran programa: garantizar que, a medida que crezcan las capacidades de la IA, la capacidad de la sociedad para aprovecharla crezca al mismo ritmo. A este trabajo lo llamamos resiliencia ante la IA: el enfoque ecosistémico necesario para mitigar los riesgos de la IA, de modo que la sociedad pueda maximizar sus beneficios.

Nuestro trabajo ya comenzó. En los pocos meses transcurridos desde que iniciamos nuestro trabajo, la Fundación está trabajando para finalizar más de USD 130 millones en subvenciones a organizaciones a través de nuestro programa de Resiliencia en IA, que se anunciarán públicamente pronto, y habrá más por venir.1

El patrón de las tecnologías transformadoras

La importancia de la resiliencia de la IA se comprende mejor desde la perspectiva de las tecnologías del pasado que moldearon de manera significativa la historia humana.

Cada cierto tiempo, surge una tecnología que transforma la sociedad desde sus cimientos. Los economistas las llaman “tecnologías de propósito general”. Fuego. La imprenta. Electricidad. Internet. Cada uno siguió una trayectoria similar: innovación rápida, riesgos reales e instituciones apresurándose por ponerse al día. Pero cada ejemplo también muestra lo que se necesita para hacer que una tecnología poderosa sea segura.

El fuego hizo posible la civilización humana. Nos mantuvo calientes, cocinó nuestra comida y nos protegió de los depredadores. También quemó nuestras ciudades hasta los cimientos. Con el tiempo, las sociedades desarrollaron resiliencia: materiales resistentes al fuego, redes de hidrantes, cuerpos de bomberos profesionales y códigos de construcción. Un ecosistema, capa por capa.

La electricidad siguió el mismo camino. Después de que la estación Pearl Street de Edison iluminó Manhattan en 1882, la electricidad trajo incendios, electrocuciones y pánico público. Sin medidas de protección, como cables aislados, interruptores automáticos y códigos eléctricos, trabajadores y transeúntes eran electrocutados en ciudades de todo el país. Las ciudades debatieron si el experimento debía abandonarse por completo. En cambio, a medida que la tecnología avanzó, establecimos organismos de pruebas independientes como Underwriters Laboratories, estándares del sector como el Código Eléctrico Nacional, e inversión pública que llevó electricidad a comunidades que el mercado había dejado atrás. Cada capa hizo que la electricidad fuera más segura y accesible; hoy es tan segura que un niño puede accionar un interruptor y la luz se enciende.

Así se ve la resiliencia cuando se hace bien.

La IA requiere un ecosistema de resiliencia

La IA sigue la misma trayectoria que tecnologías anteriores, pero avanza a una velocidad sin precedentes.

Aún estamos en sus primeras etapas, pero los beneficios ya son claros: la IA está reduciendo las barreras para iniciar un negocio, ampliando el acceso a la educación, acelerando los descubrimientos científicos y transformando la medicina.

Al mismo tiempo, los riesgos están surgiendo con la misma rapidez, y como una imagen especular de los beneficios de la IA. El mismo crecimiento que da origen a nuevas industrias puede trastocar las existentes y alterar trayectorias profesionales. Los mismos sistemas que pueden ayudar a los jóvenes a aprender y crear también podrían dar lugar a comportamientos perjudiciales. Las herramientas que aceleran la investigación biológica podrían reducir la barrera para crear patógenos dañinos. Y la capacidad de la IA para escribir código, en las manos equivocadas, podría amenazar la infraestructura crítica.

El equipo inicial de OpenAI creía que garantizar que la IA beneficiara a la sociedad dependía principalmente de resolver el problema técnico de la alineación. Eso sigue siendo fundamental, y central para nuestro trabajo, pero ahora creemos que es solo una pieza del rompecabezas. A medida que la IA se extiende por sectores y países, la sociedad también requerirá investigación independiente, infraestructura pública, coordinación industrial y campos de especialización completamente nuevos. En resumen, requerirá resiliencia de la IA.

Optamos por centrar nuestro trabajo inicial en cuatro áreas2 que se encuentran en la intersección entre grandes riesgos a corto plazo y el impacto inmediato:

  1. Biorresiliencia para ayudar a prevenir futuras pandemias creadas mediante ingeniería;

  2. Ciberresiliencia para trabajar a fin de garantizar la seguridad de los sistemas críticos de nuestro mundo;

  3. Seguridad de los modelos de IA para consolidar el control de la humanidad sobre los modelos que creamos; y

  4. El impacto de la IA en los jóvenes para ayudar a que la tecnología sea una fuerza positiva para las futuras generaciones.

Nuestro trabajo apenas comienza. Tenemos previsto compartir más información sobre nuestras estrategias y subvenciones iniciales en cada área, y ampliar nuestro alcance a otras áreas con el tiempo.

Biorresiliencia

La IA permitirá que la investigación biológica avance a una velocidad sin precedentes, ayudando a desarrollar nuevas curas y mejoras en la salud pública que nos permitan a todos vivir de manera más saludable y por más tiempo. Sin embargo, estas mismas capacidades también podrían ser utilizadas indebidamente por actores malintencionados, reduciendo la barrera para diseñar patógenos dañinos.

La era de la IA requiere un enfoque renovado en la bioseguridad. Debido a que los sistemas avanzados de IA podrían ser utilizados indebidamente por actores malintencionados para ayudar a crear una amplia gama de amenazas biológicas, priorizaremos soluciones de bioseguridad independientes del patógeno. Esto requerirá inversiones en las áreas de prevención, detección y defensa. Debemos dificultar que los delincuentes accedan a los conocimientos especializados, el equipo y los materiales necesarios para crear amenazas biológicas, mejorar nuestra capacidad para identificar y rastrear brotes nuevos de manera temprana, y fortalecer las tecnologías, como los equipos de protección, los sistemas de limpieza del aire en interiores y las contramedidas médicas, necesarias para responder con rapidez y eficacia.

Ciberresiliencia

La IA comenzó a transformar rápidamente el panorama de la ciberseguridad. El trabajo que antes requería equipos especializados ahora puede ser asistido o automatizado por modelos capaces. Al mismo tiempo, las capacidades de IA, que mejoran rápidamente, también pueden usarse para agilizar la labor de los ciberdefensores, incluso mediante la identificación y corrección de vulnerabilidades y la aceleración de la respuesta.

Muchas grandes empresas y actores privados pueden invertir grandes sumas en ciberseguridad para proteger sus propios sistemas, incluso mediante nuevos avances en IA. Prevemos dedicar recursos significativos a proteger a otros actores sociales importantes que cuentan con menos recursos y tendrán muchas más dificultades para implementar ciberdefensas preparadas para la IA con la rapidez necesaria. En paralelo, también estamos enfocados en prepararnos para los nuevos desafíos de seguridad que la inteligencia artificial general traerá en última instancia.

Seguridad de modelos de IA

La seguridad de los modelos de IA se centra en el comportamiento de los sistemas en sí: si son veraces, confiables y están alineados con la intención humana. En un mundo en el que esto sale mal, los modelos pueden salirse de control y comportarse de formas impredecibles, engañarnos o perseguir objetivos que exceden su diseño. Hacer esto bien se vuelve cada vez más importante a medida que los sistemas de IA se vuelven más autónomos y se acercan a la inteligencia de nivel humano y, con el tiempo, la superan.

Las empresas de IA están invirtiendo recursos considerables en la seguridad de los modelos. Sin embargo, la importancia de este desafío exige un ecosistema más amplio y robusto: instituciones independientes que evalúen la seguridad de los modelos, infraestructura pública para verificar el despliegue seguro de los modelos en la práctica y avances continuos en la ciencia de la alineación que impulsen el campo en general.

El impacto de la IA en los jóvenes

Los jóvenes suelen ser los primeros en adoptar nuevas tecnologías, y las usan para aprender, crear, comunicarse y explorar el mundo. La IA no es la excepción. Pero a medida que estas herramientas se convierten en una parte cada vez más importante de la vida cotidiana de los jóvenes, es fundamental que desarrollemos una base de evidencia más sólida para comprender sus impactos.

Las familias, las escuelas, los responsables de políticas públicas y las organizaciones comunitarias se enfrentan a preguntas sobre cómo y cuándo los jóvenes interactúan con la IA, incluido su impacto en la conexión humana, el aprendizaje y el desarrollo. Nuestro enfoque inicial se centrará en impulsar la investigación independiente para ayudar a orientar esas decisiones: comprender mejor en qué ámbitos la IA puede apoyar el desarrollo, los riesgos que podría generar y los contextos que moldean esos efectos.

Estos hallazgos deberían impulsar estándares generales de seguridad y principios de diseño que guíen cómo se desarrolla cualquier producto de IA, cómo las escuelas deciden implementarlos y si y cómo las familias deciden incorporar estas tecnologías en sus vidas.

El trabajo por delante

Hay una diferencia fundamental entre la IA y las tecnologías que la precedieron: la velocidad.

La resiliencia al fuego tomó milenios. La resiliencia eléctrica tomó décadas. La resiliencia de la IA está evolucionando en cuestión de años. Los sistemas que garantizan que la inteligencia artificial sea segura, confiable y ampliamente beneficiosa deben construirse junto a ella.

Si lo hacemos bien, la IA puede convertirse en parte de la infraestructura fundamental de la vida moderna: ampliar el acceso al conocimiento, acelerar los descubrimientos y mejorar vidas a escala global.

Pero ese resultado no está garantizado. Ninguna tecnología de propósito general jamás se hizo segura por sí sola.

La resiliencia es una disciplina permanente que requiere que muchas personas e instituciones la construyan, inviertan en ella y colaboren. Esa es la labor que tenemos por delante, y es uno de los desafíos que definen nuestro tiempo. Esperamos que nos acompañes.

Notas al pie

  1. 1

    La Fundación OpenAI prevé invertir más de USD 1000 millones en varios programas durante el próximo año, y USD 25 000 millones en resiliencia de la IA y Ciencias de la Salud y curación de enfermedades en los próximos años.

  2. 2

    Los impactos económicos de la IA forman parte de la agenda más amplia de resiliencia de la IA. Dada la magnitud de la transición económica, la Fundación está desarrollando este trabajo como un programa independiente. Obtén más información aquí.

  • Acknowledgements: Jeff Arnold, Naomi Bashkansky, Sean Coey, Rebecca Distler, Adrien Ecoffet, Tarun Gogineni, Mike Heimowitz, Alice Lee, Leyan Lo, Rodney Manabat, Mike McCormick, Cody Nguyen, Yonadav Shavit, Kendal Simon, Divya Siddarth, Jacob Trefethen.

Gracias a Zach Sims por su ayuda para desarrollar esta pieza.