Resiliensi di era AI

OpenAI Foundation hadir guna memastikan bahwa kecerdasan umum buatan bermanfaat bagi seluruh umat manusia.

Kami terus bekerja tanpa henti untuk mengimbangi kemajuan pesat dalam AI itu sendiri. Pada bulan April, Yayasan mengumumkan⁠ hibah pertama kami senilai $100 juta di bidang Ilmu Hayati dan Penyembuhan Penyakit, dengan ambisi untuk membantu mencegah dan mengobati penyakit seperti Alzheimer dengan memanfaatkan AI canggih. Minggu lalu, kami mengumumkan⁠ program Pekerjaan dan Masa Depan Ekonomi, dengan harapan dapat memahami dan membentuk makna pekerjaan dan kemakmuran ekonomi bagi generasi mendatang.

Hari ini, kami memperluas visi kami untuk program besar berikutnya—memastikan bahwa, seiring berkembangnya kemampuan AI, kemampuan masyarakat untuk memanfaatkannya akan berkembang sama cepatnya. Kami menyebut upaya ini resiliensi AI: pendekatan ekosistem yang diperlukan untuk memitigasi risiko AI, sehingga masyarakat dapat memaksimalkan manfaatnya.

Pekerjaan kami sudah dimulai. Dalam beberapa bulan saja sejak kami memulai pekerjaan ini, Yayasan tengah berupaya merampungkan hibah senilai lebih dari $130 juta kepada berbagai organisasi melalui program Ketahanan AI kami, yang akan segera diumumkan kepada publik, dan akan ada lebih banyak lagi.^1⁠

Pola teknologi transformatif

Pentingnya resiliensi AI paling baik dipahami melalui sudut pandang teknologi-teknologi masa lalu yang secara signifikan membentuk sejarah manusia.

Sesekali, muncul sebuah teknologi yang mengubah tatanan masyarakat secara mendasar. Para ekonom menyebutnya “teknologi tujuan umum”. Api. Mesin cetak. Listrik. Internet. Masing-masing mengikuti alur yang serupa: inovasi yang pesat, risiko nyata, dan institusi yang berlomba mengejar ketertinggalan. Namun, setiap contoh juga menunjukkan apa yang diperlukan untuk menjadikan teknologi yang sangat kuat aman.

Api memungkinkan adanya peradaban manusia. Api menjaga kita tetap hangat, memasak makanan kita, dan melindungi kita dari pemangsa. Itu juga membakar kota-kota kita hingga rata dengan tanah. Seiring waktu, masyarakat membangun ketangguhan: bahan tahan api, jaringan hidran, dinas pemadam kebakaran profesional, dan peraturan bangunan. Sebuah ekosistem, lapis demi lapis.

Listrik mengikuti jalur yang sama. Setelah Pearl Street Station milik Edison menerangi Manhattan pada 1882, listrik mendatangkan kebakaran, kematian akibat tersengat listrik, dan kepanikan publik. Tanpa pengaman seperti kabel berisolasi, pemutus arus, dan peraturan kelistrikan, para pekerja dan orang-orang di sekitar tewas tersengat listrik di kota-kota di seluruh negeri. Kota-kota memperdebatkan apakah eksperimen itu harus dihentikan sepenuhnya. Sebaliknya, seiring kemajuan teknologi, kami membentuk lembaga pengujian independen seperti Underwriters Laboratories, menetapkan standar industri seperti National Electrical Code, serta melakukan investasi publik yang menghadirkan listrik bagi komunitas yang sebelumnya ditinggalkan oleh pasar. Setiap lapisan membuat listrik lebih aman dan lebih mudah diakses; kini, listrik sudah begitu aman sehingga seorang anak dapat menekan sakelar dan lampu pun menyala.

Inilah wujud ketangguhan saat diterapkan dengan baik.

AI memerlukan ekosistem ketahanan

AI mengikuti jalur yang sama seperti teknologi-teknologi sebelumnya, tetapi bergerak dengan kecepatan yang belum pernah terjadi sebelumnya.

AI masih berada pada tahap awal, tetapi manfaatnya sudah jelas: AI menurunkan hambatan untuk memulai bisnis, memperluas akses ke pendidikan, mempercepat penemuan ilmiah, dan mentransformasi dunia kedokteran.

Pada saat yang sama, risiko-risiko tersebut muncul sama cepatnya—dan seolah menjadi cerminan terbalik dari manfaat AI. Pertumbuhan yang sama yang menciptakan industri baru juga dapat mengguncang industri yang sudah ada dan mengganggu karier. Sistem yang sama yang dapat membantu kaum muda belajar dan berkreasi juga dapat mengarah pada perilaku yang merugikan. Alat-alat yang mempercepat penelitian biologi dapat menurunkan hambatan untuk menciptakan patogen berbahaya. Dan kemampuan AI untuk menulis kode, jika jatuh ke tangan yang salah, dapat mengancam infrastruktur kritis.

Tim awal OpenAI meyakini bahwa memastikan AI bermanfaat bagi masyarakat terutama bergantung pada penyelesaian masalah penyelarasan teknis. Hal itu tetap krusial—dan menjadi inti dari pekerjaan kami—tetapi kini kami meyakini bahwa hal tersebut hanyalah salah satu bagian dari teka-teki. Seiring AI menyebar ke berbagai sektor dan negara, masyarakat juga akan membutuhkan penelitian independen, infrastruktur publik, koordinasi industri, dan bidang keahlian yang sepenuhnya baru. Singkatnya, hal ini akan membutuhkan ketahanan AI.

Kami telah memilih untuk memfokuskan pekerjaan awal kami pada empat bidang^2⁠ yang berada di titik temu antara risiko besar dalam waktu dekat dan dampak langsung:

1. Resiliensi hayati untuk membantu mencegah pandemi yang direkayasa di masa depan;

2. Ketahanan siber untuk berupaya memastikan keamanan sistem kritis dunia kita;

3. Keamanan model AI untuk memperkuat kendali umat manusia atas model yang kita ciptakan; dan

4. Dampak AI terhadap generasi muda untuk membantu menjadikan teknologi sebagai kekuatan positif bagi generasi mendatang.

Pekerjaan kami baru dimulai. Kami berencana untuk membagikan informasi lebih lanjut tentang strategi dan hibah awal kami di setiap bidang, serta memperluasnya ke bidang lain seiring waktu.

Bio-resilience

AI will enable biological research to move at unprecedented speed, helping develop new cures and public health improvements that enable us to all live healthier and longer. However, these same capabilities could also be misused by malicious actors, lowering the barrier to designing harmful pathogens.

The age of AI requires a renewed focus on biosecurity. Because advanced AI systems could be misused by bad actors to help create a wide range of biological threats, we will prioritize pathogen-agnostic biosecurity solutions. This will require investments across prevention, detection, and defense. We need to make it harder for malicious actors to access the expertise, equipment, and materials to create biological threats, improve our ability to identify and track novel outbreaks early, and strengthen the technologies—such as protective equipment, indoor air cleaning systems, and medical countermeasures—needed to respond quickly and effectively.

Cyber-resilience

AI has begun to rapidly reshape the cybersecurity landscape. The work that once required specialized teams can now be assisted or automated by capable models. At the same time, rapidly-improving AI capabilities can also be used to accelerate cyberdefenders, including by identifying and patching vulnerabilities and accelerating response.

Many large companies and private actors can spend heavily on cyber to secure their own systems, including with new advances in AI. We anticipate focusing significant resources on securing other important societal actors that are less resourced and will have a much harder time deploying AI-ready cyberdefenses as quickly as needed. In parallel, we are also focused on preparing for novel security challenges that artificial general intelligence will ultimately bring.

AI model safety

AI model safety focuses on the behavior of the systems themselves—whether they are truthful, reliable, and aligned with human intent. In a world where this goes awry, models can break out and behave in unpredictable ways, deceiving us or pursuing goals beyond their design. Getting this right becomes increasingly important as AI systems grow more autonomous and approach—and eventually surpass—human-level intelligence.

AI companies are investing substantial resources in model safety. However, the importance of this challenge calls for a broader, more robust ecosystem: independent institutions to evaluate model safety, public infrastructure to verify models’ safe deployment in practice, and continued advances in alignment science that advance the field broadly.

AI’s impact on young people

Young people are often the earliest adopters of new technologies, using them to learn, create, communicate, and explore the world. AI is no exception. But as these tools become an increasing part of young people’s daily lives, it is critical that we develop a stronger evidence base to understand its impacts.

Families, schools, policymakers, and community organizations are all grappling with questions about how and when young people engage with AI—including its impact on human connection, learning, and development. Our initial focus will be on advancing independent research to help guide those decisions—to better understand where AI can support development, the risks it may introduce, and the contexts that shape those effects.

These insights should drive broad safety standards and design principles that guide how any AI product is developed, how schools choose to deploy them, and if and how families decide to incorporate these technologies into their lives.

The work ahead

There is one critical difference between AI and the technologies that came before it: speed.

Fire resilience took millennia. Electricity resilience took decades. AI resilience is evolving in a matter of years. The systems that make it safe, reliable, and broadly beneficial must be built alongside it.

If we get it right, AI can become part of the foundational infrastructure of modern life—expanding access to knowledge, accelerating discovery, and improving lives at a global scale.

But that outcome isn’t guaranteed. No general purpose technology ever made itself safe.

Resilience is a permanent discipline that requires many people and institutions to build, invest, and collaborate. That is the work ahead, and it is one of the defining challenges of our time. We hope you’ll join us.