Reziliencia a mesterséges intelligencia korában
AI, általános célú technológiák, és hogy miért a reziliencia a mi generációnk feladata.
Az OpenAI Alapítvány célja annak biztosítása, hogy a mesterséges általános intelligencia az egész emberiség javát szolgálja.
Fáradhatatlanul dolgozunk azon, hogy lépést tartsunk a mesterséges intelligencia rohamos fejlődésével. Áprilisban az Alapítvány bejelentette az élettudományok és betegségek gyógyítása területén nyújtott első 100 millió dollárnyi támogatásunkat, azzal a céllal, hogy a fejlett mesterséges intelligencia kiaknázásával segítsen megelőzni és kezelni olyan betegségeket, mint az Alzheimer-kór. Múlt héten bejelentettük a Munka és gazdasági jövők programunkat, abban a reményben, hogy megérthetjük és alakíthatjuk, mit jelent a munka és a gazdasági jólét a jövő generációi számára.
Ma bővebben ismertetjük a következő nagyszabású programmal kapcsolatos jövőképünket – biztosítva, hogy ahogy az MI képességei fejlődnek, a társadalom képessége is ugyanolyan gyorsan fejlődjön annak kiaknázására. Ezt a munkát AI-rezilienciának nevezzük: ez az AI kockázatainak mérsékléséhez szükséges ökoszisztéma-alapú megközelítés, amely lehetővé teszi, hogy a társadalom a lehető legnagyobb mértékben kiaknázhassa az előnyeit.
A munkánk már megkezdődött. A munkánk megkezdése óta eltelt néhány rövid hónap alatt az Alapítvány az AI-reziliencia programunk keretében több mint 130 millió $ támogatás véglegesítésén dolgozik, amelyeket hamarosan nyilvánosan is megosztunk, és továbbiak is várhatók.1
A transzformációs technológiák mintázata
Az AI-reziliencia jelentőségét leginkább azoknak a múltbeli technológiáknak a szemszögéből érthetjük meg, amelyek érdemben alakították az emberiség történelmét.
Időről időre megjelenik egy technológia, amely alapjaiban formálja át a társadalmat. A közgazdászok ezeket „általános célú technológiáknak” nevezik. Tűz. A nyomdagép. Villamos energia. Az internet. Mindegyik hasonló utat járt be: gyors innováció, valós kockázatok, valamint az intézmények versenyfutása a felzárkózásért. Ugyanakkor mindegyik példa azt is megmutatja, mi kell ahhoz, hogy egy nagy hatású technológiát biztonságossá tegyünk.
A tűz tette lehetővé az emberi civilizációt. Melegen tartott minket, megfőzte az ételünket, és megvédett minket a ragadozóktól. A városainkat is porig égette. Idővel a társadalmak ellenálló képességüket fejlesztették: tűzálló anyagok, tűzcsaphálózatok, hivatásos tűzoltóságok és építési szabályzatok. Egy ökoszisztéma, rétegről rétegre.
Az elektromosság ugyanazon az úton haladt. Miután Edison Pearl Street-i erőműve 1882-ben kivilágította Manhattant, az elektromosság tüzeket, áramütéseket és közpánikot okozott. Az olyan biztonsági intézkedések nélkül, mint a szigetelt vezetékek, a megszakítók és az előírások, országszerte városokban munkások és a közelben tartózkodók szenvedtek halálos áramütést. A városok arról vitáztak, hogy a kísérletet teljesen fel kell-e hagyni. Ehelyett ahogy a technológia fejlődött, független vizsgáló szervezeteket hoztunk létre, mint például az Underwriters Laboratories, iparági szabványokat vezettünk be, mint például a National Electrical Code, és közösségi beruházásokkal támogattuk azokat a közösségeket, amelyeket a piac magukra hagyott. Minden egyes réteg biztonságosabbá és hozzáférhetőbbé tette az elektromosságot; ma már annyira biztonságos, hogy egy gyerek is felkapcsolhatja a villanyt, és fény gyúl.
Így néz ki a reziliencia, ha jól csinálják.
Az MI-nek egy ellenálló képességi ökoszisztémára van szüksége
A mesterséges intelligencia ugyanazt a pályát követi, mint a korábbi technológiák, de példátlan sebességgel halad.
Még csak a kezdeti szakaszában járunk, de az előnyök már most egyértelműek: a mesterséges intelligencia csökkenti a vállalkozásindítás akadályait, szélesíti az oktatáshoz való hozzáférést, felgyorsítja a tudományos felfedezéseket, és átalakítja az orvoslást.
Ugyanakkor a kockázatok éppoly gyorsan jelennek meg – az MI előnyeinek tükörképeként. Ugyanaz a növekedés, amely új iparágakat hoz létre, felforgathatja a meglévőket, és megzavarhatja a karrierutakat. Ugyanazok a rendszerek, amelyek segíthetnek a fiataloknak a tanulásban és alkotásban, nemkívánatos viselkedéshez is vezethetnek. A biológiai kutatást felgyorsító eszközök csökkenthetik a káros kórokozók létrehozásának akadályait. A mesterséges intelligencia kódírási képessége rossz kezekben fenyegetheti a kritikus infrastruktúrát.
Az OpenAI korai csapata úgy vélte, hogy annak biztosítása, hogy az MI a társadalom javát szolgálja, elsősorban a technikai összehangolási probléma megoldásától függ. Ez továbbra is kritikus fontosságú – és központi szerepet játszik a munkánkban –, de most már úgy véljük, hogy ez csak a kirakós egyik darabja. Ahogy a mesterséges intelligencia elterjed az ágazatokban és az országokban, a társadalomnak független kutatásra, közinfrastruktúrára, iparági koordinációra és teljesen új szakterületekre is szüksége lesz. Röviden: AI-rezilienciára lesz szükség.
Úgy döntöttünk, hogy kezdeti munkánkat négy olyan területre2 összpontosítjuk, amelyek a jelentős, rövid távú kockázatok és az azonnali hatás metszéspontjában helyezkednek el:
Bioreziliencia a jövő mesterségesen előidézett világjárványainak megelőzéséért;
Kiberreziliencia világunk kritikus rendszerei biztonságának biztosítása érdekében;
AI-modell biztonsága az általunk létrehozott modellek feletti emberi kontroll megszilárdítása érdekében; valamint
Az AI fiatalokra gyakorolt hatása, hogy a technológia pozitív erővé váljon a jövő generációi számára.
Munkánk még csak most kezdődik. Tervezzük, hogy minden területen megosztunk további információkat stratégiáinkról és az első támogatásokról, és idővel más területekre is kiterjesztjük tevékenységünket.
Bio-resilience
AI will enable biological research to move at unprecedented speed, helping develop new cures and public health improvements that enable us to all live healthier and longer. However, these same capabilities could also be misused by malicious actors, lowering the barrier to designing harmful pathogens.
The age of AI requires a renewed focus on biosecurity. Because advanced AI systems could be misused by bad actors to help create a wide range of biological threats, we will prioritize pathogen-agnostic biosecurity solutions. This will require investments across prevention, detection, and defense. We need to make it harder for malicious actors to access the expertise, equipment, and materials to create biological threats, improve our ability to identify and track novel outbreaks early, and strengthen the technologies—such as protective equipment, indoor air cleaning systems, and medical countermeasures—needed to respond quickly and effectively.
Cyber-resilience
AI has begun to rapidly reshape the cybersecurity landscape. The work that once required specialized teams can now be assisted or automated by capable models. At the same time, rapidly-improving AI capabilities can also be used to accelerate cyberdefenders, including by identifying and patching vulnerabilities and accelerating response.
Many large companies and private actors can spend heavily on cyber to secure their own systems, including with new advances in AI. We anticipate focusing significant resources on securing other important societal actors that are less resourced and will have a much harder time deploying AI-ready cyberdefenses as quickly as needed. In parallel, we are also focused on preparing for novel security challenges that artificial general intelligence will ultimately bring.
AI model safety
AI model safety focuses on the behavior of the systems themselves—whether they are truthful, reliable, and aligned with human intent. In a world where this goes awry, models can break out and behave in unpredictable ways, deceiving us or pursuing goals beyond their design. Getting this right becomes increasingly important as AI systems grow more autonomous and approach—and eventually surpass—human-level intelligence.
AI companies are investing substantial resources in model safety. However, the importance of this challenge calls for a broader, more robust ecosystem: independent institutions to evaluate model safety, public infrastructure to verify models’ safe deployment in practice, and continued advances in alignment science that advance the field broadly.
AI’s impact on young people
Young people are often the earliest adopters of new technologies, using them to learn, create, communicate, and explore the world. AI is no exception. But as these tools become an increasing part of young people’s daily lives, it is critical that we develop a stronger evidence base to understand its impacts.
Families, schools, policymakers, and community organizations are all grappling with questions about how and when young people engage with AI—including its impact on human connection, learning, and development. Our initial focus will be on advancing independent research to help guide those decisions—to better understand where AI can support development, the risks it may introduce, and the contexts that shape those effects.
These insights should drive broad safety standards and design principles that guide how any AI product is developed, how schools choose to deploy them, and if and how families decide to incorporate these technologies into their lives.
The work ahead
There is one critical difference between AI and the technologies that came before it: speed.
Fire resilience took millennia. Electricity resilience took decades. AI resilience is evolving in a matter of years. The systems that make it safe, reliable, and broadly beneficial must be built alongside it.
If we get it right, AI can become part of the foundational infrastructure of modern life—expanding access to knowledge, accelerating discovery, and improving lives at a global scale.
But that outcome isn’t guaranteed. No general purpose technology ever made itself safe.
Resilience is a permanent discipline that requires many people and institutions to build, invest, and collaborate. That is the work ahead, and it is one of the defining challenges of our time. We hope you’ll join us.
Footnotes
- 1
The OpenAI Foundation expects to invest more than $1 billion across several programs over the next year, and $25 billion in AI Resilience and Life Sciences & Curing Disease in the years ahead.
- 2
The economic impacts of AI are part of the broader AI resilience agenda. Given the scale of the economic transition, the Foundation is developing this work as a separate program. Read more here.
- Thank you to Zach Sims for helping develop this piece.
- Acknowledgements: Jeff Arnold, Naomi Bashkansky, Sean Coey, Rebecca Distler, Adrien Ecoffet, Tarun Gogineni, Mike Heimowitz, Alice Lee, Leyan Lo, Rodney Manabat, Mike McCormick, Cody Nguyen, Yonadav Shavit, Kendal Simon, Divya Siddarth, Jacob Trefethen.