Otpornost u doba umjetne inteligencije

Zaklada OpenAI postoji kako bi osigurala da opća umjetna inteligencija bude na korist cijelom čovječanstvu.

Neumorno radimo kako bismo držali korak s brzim napretkom same umjetne inteligencije. U travnju je Zaklada najavila⁠ dodjelu naših prvih 100 milijuna USD bespovratnih sredstava u području životnih znanosti i liječenja bolesti, s ambicijom da pomogne u sprječavanju i liječenju bolesti poput Alzheimerove bolesti primjenom napredne umjetne inteligencije. Prošli smo tjedan najavili⁠ naš program Radna mjesta i gospodarske budućnosti, u nadi da ćemo razumjeti i oblikovati što rad i gospodarski prosperitet znače budućim generacijama.

Danas razrađujemo svoju viziju za sljedeći veliki program – osiguravajući da, kako sposobnosti umjetne inteligencije rastu, tako i sposobnost društva da ih iskoristi raste jednako brzo. Ovaj rad nazivamo otpornosti umjetne inteligencije: ekosustavnom pristupu potrebnom za ublažavanje rizika umjetne inteligencije, kako bi društvo moglo maksimalno iskoristiti njezine prednosti.

Naš je rad već započeo. U nekoliko kratkih mjeseci otkako smo započeli s radom, Zaklada radi na finalizaciji dodjele više od 130 milijuna USD bespovratnih sredstava organizacijama u okviru našeg programa AI Resilience, o čemu ćemo uskoro javno izvijestiti, a slijedit će još toga.^1⁠

Obrazac transformacijskih tehnologija

Važnost otpornosti umjetne inteligencije najbolje se razumije kroz prizmu ranijih tehnologija koje su značajno oblikovale ljudsku povijest.

S vremena na vrijeme pojavi se tehnologija koja iz temelja preoblikuje društvo. Ekonomisti ih nazivaju „tehnologijama opće namjene”. Vatra. Tiskarski stroj. Električna energija. Internet. Svaki je slijedio sličan tijek: brze inovacije, stvarni rizici i institucije koje nastoje što brže uhvatiti korak. No svaki od tih primjera isto tako pokazuje što je potrebno da bi moćna tehnologija bila sigurna.

Vatra je omogućila nastanak ljudske civilizacije. Grijala nas je, kuhala nam hranu i štitila nas od grabežljivaca. No spalila je naše gradove do temelja. S vremenom su društva razvijala otpornost: vatrootporni materijali, mreže hidranata, profesionalne vatrogasne postrojbe i građevinski propisi. Jedan ekosustav, sloj po sloj.

Električna energija slijedila je isti put. Nakon što je Edisonova postaja Pearl Street osvijetlila Manhattan 1882., električna energija donijela je požare, strujne udare i paniku u javnosti. Bez zaštite poput izoliranih žica, prekidača i propisa, radnici i prolaznici su stradali od strujnog udara u gradovima diljem zemlje. Gradovi su raspravljali treba li eksperiment u potpunosti obustaviti. Umjesto toga, kako je tehnologija napredovala, uspostavili smo neovisna ispitivačka tijela poput Underwriters Laboratories, industrijske standarde poput National Electrical Code te javna ulaganja koja su električnu energiju dovela u zajednice koje je tržište bilo ostavilo po strani. Svaki sloj učinio je električnu energiju sigurnijom i dostupnijom, a danas je toliko sigurna da dijete može pritisnuti prekidač i pojavi se svjetlo.

Tako izgleda otpornost kada se dobro izvede.

Umjetna inteligencija zahtijeva ekosustav otpornosti

Umjetna inteligencija slijedi istu putanju kao prethodne tehnologije, ali ona napreduje dosad neviđenom brzinom.

Još smo u ranoj fazi njezina razvoja, ali koristi su već jasne: umjetna inteligencija smanjuje prepreke za pokretanje poslovanja, proširuje pristup obrazovanju, ubrzava znanstvena otkrića i transformira medicinu.

Istodobno, rizici se pojavljuju jednako brzo – i to kao zrcalna slika prednosti umjetne inteligencije. Isti rast koji stvara nove industrije može iz temelja promijeniti postojeće i poremetiti karijere. Isti sustavi koji mladima mogu pomoći u učenju i stvaranju mogli bi također dovesti do štetnog ponašanja. Alati koji ubrzavaju biološka istraživanja mogli bi sniziti prag za stvaranje štetnih patogena. Sposobnost umjetne inteligencije da piše programski kod, u pogrešnim rukama, mogla bi ugroziti kritičnu infrastrukturu.

Tim iz OpenAI-ja u ranim je danima vjerovao da osiguravanje koristi umjetne inteligencije za društvo prvenstveno ovisi o rješavanju tehničkog problema usklađivanja. To je i dalje ključno – i u središtu našeg rada – ali sada vjerujemo da je to samo jedan dio slagalice. Kako se umjetna inteligencija širi po sektorima i državama, društvo će također trebati neovisna istraživanja, javnu infrastrukturu, koordinaciju industrije i posve nova područja stručnosti. Ukratko, bit će potrebna otpornost umjetne inteligencije.

Odlučili smo usmjeriti naš početni rad na četiri područja^2⁠ koja se nalaze na sjecištu velikih, kratkoročnih rizika i neposrednog učinka:

1. biootpornost za pomoć u sprječavanju budućih umjetno stvorenih pandemija

2. kibernetička otpornost radi na osiguravanju sigurnosti kritičnih sustava našeg svijeta

3. sigurnost modela umjetne inteligencije radi učvršćivanja kontrole čovječanstva nad modelima koje stvaramo te

4. utjecaj umjetne inteligencije na mlade kako bi tehnologija postala pozitivna snaga za buduće generacije.

Naš posao tek počinje. Planiramo podijeliti više informacija o našim strategijama i početnim potporama u svakom području te se s vremenom proširiti na druga područja.

Bio-resilience

AI will enable biological research to move at unprecedented speed, helping develop new cures and public health improvements that enable us to all live healthier and longer. However, these same capabilities could also be misused by malicious actors, lowering the barrier to designing harmful pathogens.

The age of AI requires a renewed focus on biosecurity. Because advanced AI systems could be misused by bad actors to help create a wide range of biological threats, we will prioritize pathogen-agnostic biosecurity solutions. This will require investments across prevention, detection, and defense. We need to make it harder for malicious actors to access the expertise, equipment, and materials to create biological threats, improve our ability to identify and track novel outbreaks early, and strengthen the technologies—such as protective equipment, indoor air cleaning systems, and medical countermeasures—needed to respond quickly and effectively.

Cyber-resilience

AI has begun to rapidly reshape the cybersecurity landscape. The work that once required specialized teams can now be assisted or automated by capable models. At the same time, rapidly-improving AI capabilities can also be used to accelerate cyberdefenders, including by identifying and patching vulnerabilities and accelerating response.

Many large companies and private actors can spend heavily on cyber to secure their own systems, including with new advances in AI. We anticipate focusing significant resources on securing other important societal actors that are less resourced and will have a much harder time deploying AI-ready cyberdefenses as quickly as needed. In parallel, we are also focused on preparing for novel security challenges that artificial general intelligence will ultimately bring.

AI model safety

AI model safety focuses on the behavior of the systems themselves—whether they are truthful, reliable, and aligned with human intent. In a world where this goes awry, models can break out and behave in unpredictable ways, deceiving us or pursuing goals beyond their design. Getting this right becomes increasingly important as AI systems grow more autonomous and approach—and eventually surpass—human-level intelligence.

AI companies are investing substantial resources in model safety. However, the importance of this challenge calls for a broader, more robust ecosystem: independent institutions to evaluate model safety, public infrastructure to verify models’ safe deployment in practice, and continued advances in alignment science that advance the field broadly.

AI’s impact on young people

Young people are often the earliest adopters of new technologies, using them to learn, create, communicate, and explore the world. AI is no exception. But as these tools become an increasing part of young people’s daily lives, it is critical that we develop a stronger evidence base to understand its impacts.

Families, schools, policymakers, and community organizations are all grappling with questions about how and when young people engage with AI—including its impact on human connection, learning, and development. Our initial focus will be on advancing independent research to help guide those decisions—to better understand where AI can support development, the risks it may introduce, and the contexts that shape those effects.

These insights should drive broad safety standards and design principles that guide how any AI product is developed, how schools choose to deploy them, and if and how families decide to incorporate these technologies into their lives.

The work ahead

There is one critical difference between AI and the technologies that came before it: speed.

Fire resilience took millennia. Electricity resilience took decades. AI resilience is evolving in a matter of years. The systems that make it safe, reliable, and broadly beneficial must be built alongside it.

If we get it right, AI can become part of the foundational infrastructure of modern life—expanding access to knowledge, accelerating discovery, and improving lives at a global scale.

But that outcome isn’t guaranteed. No general purpose technology ever made itself safe.

Resilience is a permanent discipline that requires many people and institutions to build, invest, and collaborate. That is the work ahead, and it is one of the defining challenges of our time. We hope you’ll join us.