Resiliencia en la era de la IA

La Fundación OpenAI existe para asegurar que la inteligencia artificial general beneficie a toda la humanidad.

Hemos estado trabajando incansablemente para seguir el ritmo de los rápidos avances en la IA. En abril, la Fundación anunció⁠ nuestras primeras subvenciones por USD 100 millones en Ciencias de la Salud y tratamiento de enfermedades, con la ambición de ayudar a prevenir y tratar enfermedades como el Alzheimer aprovechando la IA avanzada. La semana pasada, anunciamos⁠ nuestro programa de empleo y futuros económicos, con la esperanza de comprender y dar forma a lo que el trabajo y la prosperidad económica significan para las futuras generaciones.

Hoy profundizamos en nuestra visión para el próximo gran programa: garantizar que, a medida que crezcan las capacidades de la IA, la capacidad de la sociedad para aprovecharla crezca al mismo ritmo. A este trabajo lo llamamos resiliencia ante la IA: el enfoque ecosistémico necesario para mitigar los riesgos de la IA, de modo que la sociedad pueda maximizar sus beneficios.

Nuestro trabajo ya comenzó. En los pocos meses transcurridos desde que iniciamos nuestro trabajo, la Fundación está trabajando para finalizar más de USD 130 millones en subvenciones a organizaciones a través de nuestro programa de Resiliencia en IA, que se anunciarán públicamente pronto, y habrá más por venir.^1⁠

El patrón de las tecnologías transformadoras

La importancia de la resiliencia de la IA se comprende mejor desde la perspectiva de las tecnologías del pasado que moldearon de manera significativa la historia humana.

Cada cierto tiempo, surge una tecnología que transforma la sociedad desde sus cimientos. Los economistas las llaman “tecnologías de propósito general”. Fuego. La imprenta. Electricidad. Internet. Cada uno siguió una trayectoria similar: innovación rápida, riesgos reales e instituciones apresurándose por ponerse al día. Pero cada ejemplo también muestra lo que se necesita para hacer que una tecnología poderosa sea segura.

El fuego hizo posible la civilización humana. Nos mantuvo calientes, cocinó nuestra comida y nos protegió de los depredadores. También quemó nuestras ciudades hasta los cimientos. Con el tiempo, las sociedades desarrollaron resiliencia: materiales resistentes al fuego, redes de hidrantes, cuerpos de bomberos profesionales y códigos de construcción. Un ecosistema, capa por capa.

La electricidad siguió el mismo camino. Después de que la estación Pearl Street de Edison iluminó Manhattan en 1882, la electricidad trajo incendios, electrocuciones y pánico público. Sin medidas de protección, como cables aislados, interruptores automáticos y códigos eléctricos, trabajadores y transeúntes eran electrocutados en ciudades de todo el país. Las ciudades debatieron si el experimento debía abandonarse por completo. En cambio, a medida que la tecnología avanzó, establecimos organismos de pruebas independientes como Underwriters Laboratories, estándares del sector como el Código Eléctrico Nacional, e inversión pública que llevó electricidad a comunidades que el mercado había dejado atrás. Cada capa hizo que la electricidad fuera más segura y accesible; hoy es tan segura que un niño puede accionar un interruptor y la luz se enciende.

Así se ve la resiliencia cuando se hace bien.

La IA requiere un ecosistema de resiliencia

La IA sigue la misma trayectoria que tecnologías anteriores, pero avanza a una velocidad sin precedentes.

Aún estamos en sus primeras etapas, pero los beneficios ya son claros: la IA está reduciendo las barreras para iniciar un negocio, ampliando el acceso a la educación, acelerando los descubrimientos científicos y transformando la medicina.

Al mismo tiempo, los riesgos están surgiendo con la misma rapidez, y como una imagen especular de los beneficios de la IA. El mismo crecimiento que da origen a nuevas industrias puede trastocar las existentes y alterar trayectorias profesionales. Los mismos sistemas que pueden ayudar a los jóvenes a aprender y crear también podrían dar lugar a comportamientos perjudiciales. Las herramientas que aceleran la investigación biológica podrían reducir la barrera para crear patógenos dañinos. Y la capacidad de la IA para escribir código, en las manos equivocadas, podría amenazar la infraestructura crítica.

El equipo inicial de OpenAI creía que garantizar que la IA beneficiara a la sociedad dependía principalmente de resolver el problema técnico de la alineación. Eso sigue siendo fundamental, y central para nuestro trabajo, pero ahora creemos que es solo una pieza del rompecabezas. A medida que la IA se extiende por sectores y países, la sociedad también requerirá investigación independiente, infraestructura pública, coordinación industrial y campos de especialización completamente nuevos. En resumen, requerirá resiliencia de la IA.

Optamos por centrar nuestro trabajo inicial en cuatro áreas^2⁠ que se encuentran en la intersección entre grandes riesgos a corto plazo y el impacto inmediato:

1. Biorresiliencia para ayudar a prevenir futuras pandemias creadas mediante ingeniería;

2. Ciberresiliencia para trabajar a fin de garantizar la seguridad de los sistemas críticos de nuestro mundo;

3. Seguridad de los modelos de IA para consolidar el control de la humanidad sobre los modelos que creamos; y

4. El impacto de la IA en los jóvenes para ayudar a que la tecnología sea una fuerza positiva para las futuras generaciones.

Nuestro trabajo apenas comienza. Tenemos previsto compartir más información sobre nuestras estrategias y subvenciones iniciales en cada área, y ampliar nuestro alcance a otras áreas con el tiempo.

Bio-resilience

AI will enable biological research to move at unprecedented speed, helping develop new cures and public health improvements that enable us to all live healthier and longer. However, these same capabilities could also be misused by malicious actors, lowering the barrier to designing harmful pathogens.

The age of AI requires a renewed focus on biosecurity. Because advanced AI systems could be misused by bad actors to help create a wide range of biological threats, we will prioritize pathogen-agnostic biosecurity solutions. This will require investments across prevention, detection, and defense. We need to make it harder for malicious actors to access the expertise, equipment, and materials to create biological threats, improve our ability to identify and track novel outbreaks early, and strengthen the technologies—such as protective equipment, indoor air cleaning systems, and medical countermeasures—needed to respond quickly and effectively.

Cyber-resilience

AI has begun to rapidly reshape the cybersecurity landscape. The work that once required specialized teams can now be assisted or automated by capable models. At the same time, rapidly-improving AI capabilities can also be used to accelerate cyberdefenders, including by identifying and patching vulnerabilities and accelerating response.

Many large companies and private actors can spend heavily on cyber to secure their own systems, including with new advances in AI. We anticipate focusing significant resources on securing other important societal actors that are less resourced and will have a much harder time deploying AI-ready cyberdefenses as quickly as needed. In parallel, we are also focused on preparing for novel security challenges that artificial general intelligence will ultimately bring.

AI model safety

AI model safety focuses on the behavior of the systems themselves—whether they are truthful, reliable, and aligned with human intent. In a world where this goes awry, models can break out and behave in unpredictable ways, deceiving us or pursuing goals beyond their design. Getting this right becomes increasingly important as AI systems grow more autonomous and approach—and eventually surpass—human-level intelligence.

AI companies are investing substantial resources in model safety. However, the importance of this challenge calls for a broader, more robust ecosystem: independent institutions to evaluate model safety, public infrastructure to verify models’ safe deployment in practice, and continued advances in alignment science that advance the field broadly.

AI’s impact on young people

Young people are often the earliest adopters of new technologies, using them to learn, create, communicate, and explore the world. AI is no exception. But as these tools become an increasing part of young people’s daily lives, it is critical that we develop a stronger evidence base to understand its impacts.

Families, schools, policymakers, and community organizations are all grappling with questions about how and when young people engage with AI—including its impact on human connection, learning, and development. Our initial focus will be on advancing independent research to help guide those decisions—to better understand where AI can support development, the risks it may introduce, and the contexts that shape those effects.

These insights should drive broad safety standards and design principles that guide how any AI product is developed, how schools choose to deploy them, and if and how families decide to incorporate these technologies into their lives.

The work ahead

There is one critical difference between AI and the technologies that came before it: speed.

Fire resilience took millennia. Electricity resilience took decades. AI resilience is evolving in a matter of years. The systems that make it safe, reliable, and broadly beneficial must be built alongside it.

If we get it right, AI can become part of the foundational infrastructure of modern life—expanding access to knowledge, accelerating discovery, and improving lives at a global scale.

But that outcome isn’t guaranteed. No general purpose technology ever made itself safe.

Resilience is a permanent discipline that requires many people and institutions to build, invest, and collaborate. That is the work ahead, and it is one of the defining challenges of our time. We hope you’ll join us.