پایداری در عصر AI

بنیاد OpenAI وجود دارد تا اطمینان حاصل کند که هوش مصنوعی عمومی به سود همهٔ بشریت باشد.

ما بی‌وقفه تلاش کرده‌ایم تا همگام با پیشرفت‌های سریع خود AI حرکت کنیم. در ماه آوریل، بنیاد نخستین کمک‌های مالی ۱۰۰ میلیون دلاری ما در حوزه علوم زیستی و درمان بیماری‌ها را اعلام کرد⁠، با این هدف بلندپروازانه که با بهره‌گیری از AI پیشرفته به پیشگیری و درمان بیماری‌هایی مانند آلزایمر کمک کند. هفتهٔ گذشته، برنامهٔ مشاغل و آینده‌های اقتصادی خود را اعلام کردیم⁠، با این امید که دریابیم و شکل دهیم که کار و شکوفایی اقتصادی برای نسل‌های آینده چه معنایی خواهد داشت.

امروز، ما چشم‌انداز خود را برای برنامهٔ بزرگ بعدی گسترش می‌دهیم—تا اطمینان حاصل کنیم که با افزایش توانمندی‌های AI، توانایی جامعه برای به‌کارگیری آن نیز به همان سرعت رشد خواهد کرد. ما این کار را پایداری AI می‌نامیم: رویکرد زیست‌بومیِ لازم برای کاهش خطرات AI، تا جامعه بتواند مزایای آن را به حداکثر برساند.

کار ما از هم‌اکنون آغاز شده است. در چند ماه کوتاهی که از آغاز فعالیت‌های ما می‌گذرد، بنیاد در حال نهایی‌کردن بیش از ۱۳۰ میلیون دلار کمک مالی به سازمان‌ها از طریق برنامهٔ پایداری AI خود است؛ جزئیات آن به‌زودی به‌صورت عمومی اعلام خواهد شد و موارد بیشتری نیز در راه است.^1⁠

الگوی فناوری‌های تحول‌آفرین

اهمیت پایداری AI را زمانی بهتر می‌توان درک کرد که از دریچهٔ فناوری‌های گذشته‌ای به آن بنگریم که به‌طور معناداری تاریخ بشر را شکل داده‌اند.

هر از گاهی، فناوری‌ای از راه می‌رسد که جامعه را از پایه و اساس دگرگون می‌کند. اقتصاددانان این‌ها را «فناوری‌های همه‌منظوره» می‌نامند. آتش. دستگاه چاپ. برق. اینترنت. هرکدام مسیر مشابهی را طی کردند: نوآوری سریع، خطرات واقعی، و نهادهایی که برای همگام‌شدن شتاب می‌گرفتند. اما هر نمونه این را نیز نشان می‌دهد که برای ایمن‌سازی یک فناوری قدرتمند چه چیزهایی لازم است.

آتش تمدن انسانی را ممکن ساخت. ما را گرم نگه می‌داشت، غذایمان را می‌پخت و از ما در برابر درندگان محافظت می‌کرد. همچنین شهرهای ما را به آتش کشید و با خاک یکسان کرد. با گذشت زمان، جوامع پایداری خود را افزایش دادند: مصالح مقاوم در برابر آتش، شبکه‌های شیرهای آتش‌نشانی، سازمان‌های آتش‌نشانی حرفه‌ای و آیین‌نامه‌های ساختمانی. یک اکوسیستم، لایه‌به‌لایه.

برق نیز همین مسیر را پیمود. پس از راه‌اندازی نیروگاه Pearl Street Station ادیسون و آغاز برق‌رسانی به منهتن در سال ۱۸۸۲، برق با آتش‌سوزی‌ها، برق‌گرفتگی‌ها و نگرانی عمومی همراه بود. بدون تمهیدات حفاظتی مانند سیم‌های عایق‌دار، فیوزها و آیین‌نامه‌ها، کارگران و رهگذران در شهرهای سراسر کشور دچار برق‌گرفتگی می‌شدند. شهرها دربارهٔ اینکه آیا این آزمایش باید به‌کلی کنار گذاشته شود یا خیر، بحث می‌کردند. در عوض، با پیشرفت فناوری، ما نهادهای مستقل آزمون و ارزیابی مانند آزمایشگاه‌های آندررایترز (Underwriters Laboratories)، استانداردهای صنعتی مانند آیین‌نامه ملی برق (National Electrical Code)، و سرمایه‌گذاری عمومی را ایجاد کردیم که برق را به جوامعی رساند که بازار آن‌ها را نادیده گرفته بود. هر لایه برق را ایمن‌تر و در دسترس‌تر کرد؛ امروز، برق آن‌قدر ایمن است که یک کودک می‌تواند کلیدی را بزند و چراغ روشن شود.

پایداری، وقتی به‌درستی محقق شود، چنین جلوه‌ای دارد.

AI به یک اکوسیستم پایداری نیاز دارد

AI همان مسیر فناوری‌های پیشین را دنبال می‌کند، اما با سرعتی بی‌سابقه پیش می‌رود.

ما هنوز در آغاز این مسیر هستیم، اما مزایای آن از همین حالا آشکار است: AI موانع راه‌اندازی کسب‌وکار را کاهش می‌دهد، دسترسی به آموزش را گسترش می‌دهد، به کشفیات علمی شتاب می‌بخشد و پزشکی را متحول می‌کند.

در عین حال، خطرات نیز درست با همان سرعت پدیدار می‌شوند—و درست مانند بازتابی آینه‌ای از مزایای AI هستند. همان رشدی که صنایع جدیدی ایجاد می‌کند، می‌تواند صنایع موجود را دگرگون کند و مسیرهای شغلی را مختل سازد. همان سامانه‌هایی که می‌توانند به نوجوانان کمک کنند یاد بگیرند و خلق کنند، ممکن است به رفتارهای نامطلوب نیز بینجامند. ابزارهایی که پژوهش‌های زیستی را سرعت می‌بخشند، ممکن است مانع ایجاد عوامل بیماری‌زای مضر را کاهش دهند. و توانایی AI در نوشتن کد، اگر به دست افراد نادرست بیفتد، می‌تواند زیرساخت‌های حیاتی را تهدید کند.

تیم اولیهٔ OpenAI باور داشت که تضمین بهره‌مندی جامعه از AI، عمدتاً به حل مسئلهٔ فنی هم‌راستاسازی وابسته است. این موضوع همچنان حیاتی—و محور کار ما—است، اما اکنون بر این باوریم که تنها بخشی از این معماست. با گسترش AI در بخش‌ها و کشورها، جامعه به پژوهش مستقل، زیرساخت عمومی، هماهنگی صنعتی و حوزه‌های کاملاً تازه‌ای از تخصص نیز نیاز خواهد داشت. به‌طور خلاصه، این امر به پایداری AI نیاز خواهد داشت.

ما تصمیم گرفته‌ایم کارهای اولیهٔ خود را بر چهار حوزه^2⁠ متمرکز کنیم که در نقطهٔ تلاقیِ ریسک‌های بزرگ و نزدیک‌مدت و اثرگذاری فوری قرار دارند:

1. پایداری زیستی برای کمک به پیشگیری از همه‌گیری‌های مهندسی‌شده در آینده؛

2. پایداری سایبری برای کمک به تضمین ایمنی سامانه‌های حیاتی جهان ما؛

3. ایمنی مدل‌های AI برای تحکیم کنترل بشریت بر مدل‌هایی که ایجاد می‌کنیم؛ و

4. تأثیر AI بر نوجوانان برای کمک به تبدیل فناوری به نیرویی مثبت برای نسل‌های آینده.

کار ما تازه شروع شده است. قصد داریم اطلاعات بیشتری درباره راهبردها و کمک‌های مالی اولیه‌مان در هر حوزه به اشتراک بگذاریم و به‌مرور زمان فعالیت خود را به حوزه‌های دیگر نیز گسترش دهیم.

Bio-resilience

AI will enable biological research to move at unprecedented speed, helping develop new cures and public health improvements that enable us to all live healthier and longer. However, these same capabilities could also be misused by malicious actors, lowering the barrier to designing harmful pathogens.

The age of AI requires a renewed focus on biosecurity. Because advanced AI systems could be misused by bad actors to help create a wide range of biological threats, we will prioritize pathogen-agnostic biosecurity solutions. This will require investments across prevention, detection, and defense. We need to make it harder for malicious actors to access the expertise, equipment, and materials to create biological threats, improve our ability to identify and track novel outbreaks early, and strengthen the technologies—such as protective equipment, indoor air cleaning systems, and medical countermeasures—needed to respond quickly and effectively.

Cyber-resilience

AI has begun to rapidly reshape the cybersecurity landscape. The work that once required specialized teams can now be assisted or automated by capable models. At the same time, rapidly-improving AI capabilities can also be used to accelerate cyberdefenders, including by identifying and patching vulnerabilities and accelerating response.

Many large companies and private actors can spend heavily on cyber to secure their own systems, including with new advances in AI. We anticipate focusing significant resources on securing other important societal actors that are less resourced and will have a much harder time deploying AI-ready cyberdefenses as quickly as needed. In parallel, we are also focused on preparing for novel security challenges that artificial general intelligence will ultimately bring.

AI model safety

AI model safety focuses on the behavior of the systems themselves—whether they are truthful, reliable, and aligned with human intent. In a world where this goes awry, models can break out and behave in unpredictable ways, deceiving us or pursuing goals beyond their design. Getting this right becomes increasingly important as AI systems grow more autonomous and approach—and eventually surpass—human-level intelligence.

AI companies are investing substantial resources in model safety. However, the importance of this challenge calls for a broader, more robust ecosystem: independent institutions to evaluate model safety, public infrastructure to verify models’ safe deployment in practice, and continued advances in alignment science that advance the field broadly.

AI’s impact on young people

Young people are often the earliest adopters of new technologies, using them to learn, create, communicate, and explore the world. AI is no exception. But as these tools become an increasing part of young people’s daily lives, it is critical that we develop a stronger evidence base to understand its impacts.

Families, schools, policymakers, and community organizations are all grappling with questions about how and when young people engage with AI—including its impact on human connection, learning, and development. Our initial focus will be on advancing independent research to help guide those decisions—to better understand where AI can support development, the risks it may introduce, and the contexts that shape those effects.

These insights should drive broad safety standards and design principles that guide how any AI product is developed, how schools choose to deploy them, and if and how families decide to incorporate these technologies into their lives.

The work ahead

There is one critical difference between AI and the technologies that came before it: speed.

Fire resilience took millennia. Electricity resilience took decades. AI resilience is evolving in a matter of years. The systems that make it safe, reliable, and broadly beneficial must be built alongside it.

If we get it right, AI can become part of the foundational infrastructure of modern life—expanding access to knowledge, accelerating discovery, and improving lives at a global scale.

But that outcome isn’t guaranteed. No general purpose technology ever made itself safe.

Resilience is a permanent discipline that requires many people and institutions to build, invest, and collaborate. That is the work ahead, and it is one of the defining challenges of our time. We hope you’ll join us.