Modstandsdygtighed i AI-alderen

OpenAI Foundation har til formål at sikre, at kunstig generel intelligens kommer hele menneskeheden til gode.

Vi har arbejdet utrætteligt for at holde trit med de hastige fremskridt inden for selve AI’en. I april offentliggjorde ⁠fonden vores første bevillinger på 100 millioner dollar inden for biovidenskab og sygdomsbekæmpelse med det formål at bidrage til forebyggelse og behandling af sygdomme som Alzheimers ved hjælp af avanceret kunstig intelligens. I sidste uge annoncerede⁠ vi vores Jobs and Economic Futures-program i håb om at forstå og forme, hvad arbejde og økonomisk velstand betyder for fremtidige generationer.

I dag bygger vi videre på vores vision for det næste store program – og sikrer, at samfundets evne til at udnytte den vokser lige så hurtigt, i takt med at AI’s kapaciteter øges. Vi kalder dette arbejde AI-resiliens: Den økosystemtilgang, der kræves for at mindske risiciene ved AI, så samfundet kan maksimere fordelene.

Vores arbejde er allerede begyndt. I løbet af de få måneder, der er gået siden vi påbegyndte vores arbejde, er fonden i gang med at færdigbehandle bevillinger på mere end 130 millioner dollars til organisationer gennem vores AI Resilience-program. Disse vil snart blive offentliggjort, og der er flere på vej.^1⁠

Mønsteret for transformative teknologier

Vigtigheden af AI-robusthed forstås bedst i lyset af tidligere teknologier, der på væsentlig vis har formet menneskehedens historie.

En gang imellem opstår der en teknologi, der omformer samfundet fra grunden. Økonomer kalder dem "teknologier med bred anvendelse" eller General Purpose Technology. Ild. Trykpressen. Elektricitet. Internettet. Hver især fulgte et lignende forløb: hurtig innovation, reelle risici og institutioner, der skyndte sig at følge med. Men hvert eksempel viser også, hvad der skal til for at gøre en kraftfuld teknologi sikker.

Ilden gjorde den menneskelige civilisation mulig. Den holdt os varme, tilberedte vores mad og beskyttede os mod rovdyr. Det brændte også vores byer ned til grunden. Med tiden har samfundene opbygget en modstandsdygtighed: brandsikre materialer, brandhanenetværk, professionelle brandvæsener og bygningsreglementer. Et økosystem, lag for lag.

Det samme gjaldt elektriciteten. Efter at Edisons Pearl Street Station havde oplyst Manhattan i 1882, medførte elektriciteten brande, dødsulykker ved elektrisk stød og panik blandt befolkningen. Uden beskyttelsesforanstaltninger som isolerede ledninger, afbrydere og sikkerhedsbestemmelser blev arbejdere og forbipasserende ramt af elektrisk stød i byer over hele landet. Byerne drøftede, om forsøget burde opgives helt. I stedet oprettede vi, i takt med at teknologien udviklede sig, uafhængige testorganer som Underwriters Laboratories, indførte branchestandarder som National Electrical Code og sørgede for offentlige investeringer, der sikrede strømforsyning til de samfund, som markedet havde ladt i stikken. Hvert trin gjorde elektriciteten mere sikker og mere tilgængelig; i dag er den så sikker, at et barn kan trykke på en kontakt, og så tændes lyset.

Sådan ser modstandsdygtighed ud, når den er i topform.

AI kræver et robust økosystem

Kunstig intelligens følger samme udvikling som tidligere teknologier, men i et hidtil uset tempo.

Vi er stadig i de tidlige stadier, men fordelene er allerede tydelige: Kunstig intelligens sænker tærsklen for at starte en virksomhed, udvider adgangen til uddannelse, fremskynder videnskabelige opdagelser og forandrer medicinen.

Samtidig opstår risiciene lige så hurtigt – og som et spejlbillede af AI’s fordele. Den samme vækst, der skaber nye brancher, kan vende op og ned på de eksisterende og forstyrre karrierer. De samme systemer, der kan hjælpe unge med at lære og skabe, kan også føre til uhensigtsmæssig adfærd. De værktøjer, der fremskynder biologisk forskning, kan sænke tærsklen for at skabe skadelige patogener. Og AI's evne til at skrive kode kan i de forkerte hænder true kritisk infrastruktur.

Det oprindelige OpenAI-team mente, at det for at sikre, at kunstig intelligens kommer samfundet til gode, først og fremmest var nødvendigt at løse det tekniske problem med at sikre, at AI'en er i overensstemmelse med menneskelige værdier. Det er fortsat afgørende – og centralt for vores arbejde – men vi mener nu, at det kun er én brik i puslespillet. Efterhånden som AI udbredes på tværs af sektorer og lande, vil samfundet også få brug for uafhængig forskning, offentlig infrastruktur, koordinering på tværs af industrien og helt nye ekspertiseområder. Kort sagt vil det kræve AI-robusthed.

Vi har valgt at fokusere vores indledende arbejde på fire områder^2⁠, der befinder sig i krydsfeltet mellem betydelige, nært forestående risici og umiddelbar effekt:

1. Bio-resiliens som bidrag til at forhindre fremtidige kunstigt fremkaldte pandemier;

2. Cybersikkerhed for at sikre sikkerheden i verdens kritiske systemer;

3. Sikkerhed i forbindelse med AI-modeller for at styrke menneskehedens kontrol over de modeller, vi skaber; og

4. AI’s indflydelse på unge for at bidrage til, at teknologien bliver en positiv drivkraft for de kommende generationer.

Vores arbejde er kun lige begyndt. Vi planlægger at fortælle mere om vores strategier og indledende bevillinger inden for hvert område og med tiden udvide til andre områder.

Bio-resilience

AI will enable biological research to move at unprecedented speed, helping develop new cures and public health improvements that enable us to all live healthier and longer. However, these same capabilities could also be misused by malicious actors, lowering the barrier to designing harmful pathogens.

The age of AI requires a renewed focus on biosecurity. Because advanced AI systems could be misused by bad actors to help create a wide range of biological threats, we will prioritize pathogen-agnostic biosecurity solutions. This will require investments across prevention, detection, and defense. We need to make it harder for malicious actors to access the expertise, equipment, and materials to create biological threats, improve our ability to identify and track novel outbreaks early, and strengthen the technologies—such as protective equipment, indoor air cleaning systems, and medical countermeasures—needed to respond quickly and effectively.

Cyber-resilience

AI has begun to rapidly reshape the cybersecurity landscape. The work that once required specialized teams can now be assisted or automated by capable models. At the same time, rapidly-improving AI capabilities can also be used to accelerate cyberdefenders, including by identifying and patching vulnerabilities and accelerating response.

Many large companies and private actors can spend heavily on cyber to secure their own systems, including with new advances in AI. We anticipate focusing significant resources on securing other important societal actors that are less resourced and will have a much harder time deploying AI-ready cyberdefenses as quickly as needed. In parallel, we are also focused on preparing for novel security challenges that artificial general intelligence will ultimately bring.

AI model safety

AI model safety focuses on the behavior of the systems themselves—whether they are truthful, reliable, and aligned with human intent. In a world where this goes awry, models can break out and behave in unpredictable ways, deceiving us or pursuing goals beyond their design. Getting this right becomes increasingly important as AI systems grow more autonomous and approach—and eventually surpass—human-level intelligence.

AI companies are investing substantial resources in model safety. However, the importance of this challenge calls for a broader, more robust ecosystem: independent institutions to evaluate model safety, public infrastructure to verify models’ safe deployment in practice, and continued advances in alignment science that advance the field broadly.

AI’s impact on young people

Young people are often the earliest adopters of new technologies, using them to learn, create, communicate, and explore the world. AI is no exception. But as these tools become an increasing part of young people’s daily lives, it is critical that we develop a stronger evidence base to understand its impacts.

Families, schools, policymakers, and community organizations are all grappling with questions about how and when young people engage with AI—including its impact on human connection, learning, and development. Our initial focus will be on advancing independent research to help guide those decisions—to better understand where AI can support development, the risks it may introduce, and the contexts that shape those effects.

These insights should drive broad safety standards and design principles that guide how any AI product is developed, how schools choose to deploy them, and if and how families decide to incorporate these technologies into their lives.

The work ahead

There is one critical difference between AI and the technologies that came before it: speed.

Fire resilience took millennia. Electricity resilience took decades. AI resilience is evolving in a matter of years. The systems that make it safe, reliable, and broadly beneficial must be built alongside it.

If we get it right, AI can become part of the foundational infrastructure of modern life—expanding access to knowledge, accelerating discovery, and improving lives at a global scale.

But that outcome isn’t guaranteed. No general purpose technology ever made itself safe.

Resilience is a permanent discipline that requires many people and institutions to build, invest, and collaborate. That is the work ahead, and it is one of the defining challenges of our time. We hope you’ll join us.