Resilienza nell’era dell’IA

IA, tecnologie a uso generale e perché la resilienza è il lavoro della nostra generazione.

Di Wojciech Zaremba

La OpenAI Foundation esiste per garantire che l’intelligenza artificiale generale porti benefici a tutta l’umanità.

Lavoriamo senza sosta per tenere il passo con i rapidi progressi dell’IA stessa. Ad aprile, la fondazione ha annunciato i nostri primi 100 milioni di dollari in sovvenzioni per le scienze della vita e la cura delle malattie, con l’ambizione di contribuire a prevenire e curare malattie come l’Alzheimer utilizzando l’IA avanzata. La scorsa settimana abbiamo annunciato il nostro programma Jobs and Economic Futures, con l’obiettivo di comprendere e plasmare ciò che il lavoro e la prosperità economica significheranno per le generazioni future.

Oggi ampliamo la nostra visione per il prossimo grande programma: garantire che, mentre le capacità dell’IA crescono, cresca altrettanto rapidamente anche la capacità della società di utilizzarla. Chiamiamo questo lavoro resilienza dell'IA: l’approccio ecosistemico necessario per mitigare i rischi dell’IA, in modo che la società possa aumentarne al massimo i benefici.

Il nostro lavoro è già iniziato. Nei pochi mesi trascorsi dall’avvio dell'iniziativa, la fondazione ha già lavorato alla finalizzazione di oltre 130 milioni di dollari in sovvenzioni a organizzazioni attraverso il programma AI Resilience, che annunceremo presto pubblicamente, con ulteriori fondi in arrivo.1

Il modello delle tecnologie trasformative

L'importanza della resilienza dell'IA si comprende meglio alla luce delle tecnologie del passato che hanno plasmato in modo significativo la storia umana.

Di tanto in tanto, arriva una tecnologia che rimodella la società dalle fondamenta. Gli economisti le chiamano “tecnologie di uso generale”. Il fuoco. La stampa a caratteri mobili. L'elettricità. Internet. Ciascuno ha seguito una traiettoria simile: innovazione rapida, rischi concreti e istituzioni in corsa per mettersi al passo. Ciascun esempio mostra tuttavia anche cosa occorre per rendere sicura una tecnologia potente.

Il fuoco ha reso possibile la civiltà umana. Ci teneva al caldo, cuoceva il nostro cibo e ci proteggeva dai predatori. Ha anche ridotto in cenere le nostre città. Nel corso del tempo, le società hanno sviluppato la resilienza: materiali resistenti al fuoco, reti di idranti, vigili del fuoco professionisti e norme edilizie. Un ecosistema, livello dopo livello.

L’elettricità ha seguito lo stesso percorso. Dopo che la Pearl Street Station di Edison illuminò Manhattan nel 1882, l’elettricità portò incendi, folgorazioni e panico tra la popolazione. Senza misure di protezione come cavi isolati, interruttori automatici e normative, lavoratori e passanti rimanevano folgorati nelle città di tutto il paese. Le città discussero se l'esperimento dovesse essere abbandonato del tutto. Invece, con l’avanzare della tecnologia, abbiamo istituito organismi di collaudo indipendenti come gli Underwriters Laboratories, standard industriali come il National Electrical Code e investimenti pubblici che hanno portato l’energia alle comunità che il mercato aveva trascurato. Ogni livello ha reso l’elettricità più sicura e più accessibile; oggi è così sicura che un bambino può premere un interruttore e la luce si accende.

Ecco come si manifesta la resilienza quando è ben realizzata.

L'IA richiede un ecosistema di resilienza

L'IA sta seguendo la stessa traiettoria delle tecnologie che l'anno preceduta, ma si sta muovendo a una velocità senza precedenti.

Siamo ancora agli inizi, ma i benefici sono già evidenti: l’IA sta riducendo le barriere per avviare un’impresa, ampliando l’accesso all’istruzione, accelerando la scoperta scientifica e trasformando la medicina.

Allo stesso tempo, i rischi stanno emergendo con la stessa rapidità, e in modo speculare rispetto ai benefici dell’IA. La stessa crescita che crea nuovi settori può stravolgere quelli esistenti e destabilizzare le carriere. Gli stessi sistemi che possono aiutare i giovani a imparare e creare potrebbero anche portare a comportamenti dannosi. Gli strumenti che accelerano la ricerca biologica potrebbero abbassare la barriera alla creazione di agenti patogeni dannosi. La capacità dell’IA di scrivere codice, nelle mani sbagliate, potrebbe minacciare le infrastrutture critiche.

Il primo team di OpenAI riteneva che garantire che l’IA fosse un beneficio per la società dipendesse principalmente dalla risoluzione del problema tecnico dell’allineamento. Questo rimane fondamentale (ed è centrale nel nostro lavoro), ma oggi crediamo che sia solo una parte del puzzle. Man mano che l’IA si diffonde in settori e paesi diversi, la società necessiterà anche di ricerche indipendenti, infrastrutture pubbliche, coordinamento industriale e ambiti di competenza completamente nuovi. In altre parole, necessiterà della resilienza dell’IA.

Abbiamo scelto di concentrare il nostro lavoro iniziale in quattro aree2 che si collocano all’intersezione tra grandi rischi a breve termine e impatto immediato:

  1. Bio-resilienza per contribuire a prevenire future pandemie ingegnerizzate;

  2. Cyber-resilienza per contribuire a garantire la sicurezza dei sistemi critici del nostro mondo;

  3. Sicurezza dei modelli di IA per consolidare il controllo dell’umanità sui modelli che creiamo;

  4. Impatto dell’IA sui giovani per contribuire a rendere la tecnologia una forza positiva per le generazioni future.

Il nostro lavoro è solo all'inizio. Abbiamo in programma di condividere maggiori dettagli sulle nostre strategie e sulle sovvenzioni iniziali in ciascun ambito, così come di estendere le nostre attività ad altri ambiti nel tempo.

Bio-resilience

AI will enable biological research to move at unprecedented speed, helping develop new cures and public health improvements that enable us to all live healthier and longer. However, these same capabilities could also be misused by malicious actors, lowering the barrier to designing harmful pathogens.

The age of AI requires a renewed focus on biosecurity. Because advanced AI systems could be misused by bad actors to help create a wide range of biological threats, we will prioritize pathogen-agnostic biosecurity solutions. This will require investments across prevention, detection, and defense. We need to make it harder for malicious actors to access the expertise, equipment, and materials to create biological threats, improve our ability to identify and track novel outbreaks early, and strengthen the technologies—such as protective equipment, indoor air cleaning systems, and medical countermeasures—needed to respond quickly and effectively.

Cyber-resilience

AI has begun to rapidly reshape the cybersecurity landscape. The work that once required specialized teams can now be assisted or automated by capable models. At the same time, rapidly-improving AI capabilities can also be used to accelerate cyberdefenders, including by identifying and patching vulnerabilities and accelerating response.

Many large companies and private actors can spend heavily on cyber to secure their own systems, including with new advances in AI. We anticipate focusing significant resources on securing other important societal actors that are less resourced and will have a much harder time deploying AI-ready cyberdefenses as quickly as needed. In parallel, we are also focused on preparing for novel security challenges that artificial general intelligence will ultimately bring.

AI model safety

AI model safety focuses on the behavior of the systems themselves—whether they are truthful, reliable, and aligned with human intent. In a world where this goes awry, models can break out and behave in unpredictable ways, deceiving us or pursuing goals beyond their design. Getting this right becomes increasingly important as AI systems grow more autonomous and approach—and eventually surpass—human-level intelligence.

AI companies are investing substantial resources in model safety. However, the importance of this challenge calls for a broader, more robust ecosystem: independent institutions to evaluate model safety, public infrastructure to verify models’ safe deployment in practice, and continued advances in alignment science that advance the field broadly.

AI’s impact on young people

Young people are often the earliest adopters of new technologies, using them to learn, create, communicate, and explore the world. AI is no exception. But as these tools become an increasing part of young people’s daily lives, it is critical that we develop a stronger evidence base to understand its impacts.

Families, schools, policymakers, and community organizations are all grappling with questions about how and when young people engage with AI—including its impact on human connection, learning, and development. Our initial focus will be on advancing independent research to help guide those decisions—to better understand where AI can support development, the risks it may introduce, and the contexts that shape those effects.

These insights should drive broad safety standards and design principles that guide how any AI product is developed, how schools choose to deploy them, and if and how families decide to incorporate these technologies into their lives.

The work ahead

There is one critical difference between AI and the technologies that came before it: speed.

Fire resilience took millennia. Electricity resilience took decades. AI resilience is evolving in a matter of years. The systems that make it safe, reliable, and broadly beneficial must be built alongside it.

If we get it right, AI can become part of the foundational infrastructure of modern life—expanding access to knowledge, accelerating discovery, and improving lives at a global scale.

But that outcome isn’t guaranteed. No general purpose technology ever made itself safe.

Resilience is a permanent discipline that requires many people and institutions to build, invest, and collaborate. That is the work ahead, and it is one of the defining challenges of our time. We hope you’ll join us.

Footnotes

  1. 1

    The OpenAI Foundation expects to invest more than $1 billion across several programs over the next year, and $25 billion in AI Resilience and Life Sciences & Curing Disease in the years ahead.

  2. 2

    The economic impacts of AI are part of the broader AI resilience agenda. Given the scale of the economic transition, the Foundation is developing this work as a separate program. Read more here.

  • Thank you to Zach Sims for helping develop this piece.
  • Acknowledgements: Jeff Arnold, Naomi Bashkansky, Sean Coey, Rebecca Distler, Adrien Ecoffet, Tarun Gogineni, Mike Heimowitz, Alice Lee, Leyan Lo, Rodney Manabat, Mike McCormick, Cody Nguyen, Yonadav Shavit, Kendal Simon, Divya Siddarth, Jacob Trefethen.