Жасанды интеллект дәуіріндегі төзімділік

ЖИ, жалпы мақсаттағы технологиялар және орнықтылық біздің буынның басты міндеті.

Wojciech Zaremba жазған

OpenAI қоры жалпы жасанды интеллекттің бүкіл адамзатқа пайда әкелуін қамтамасыз ету үшін құрылған.

Біз жасанды интеллектінің өзінің қарқынды дамуына ілесу үшін тынбай жұмыс істеп келеміз. Сәуір айында қор озық ЖИ мүмкіндіктерін пайдалану арқылы Альцгеймер ауруы сияқты аурулардың алдын алуға және оларды емдеуге көмектесу мақсатымен өмір ғылымдары және ауруларды емдеу саласындағы алғашқы 100 миллион АҚШ доллары көлеміндегі гранттарымызды жариялады. Өткен аптада біз болашақ ұрпақ үшін еңбек пен экономикалық өркендеу нені білдіретінін түсіну және қалыптастыру үмітімен Jobs and Economic Futures бағдарламамызды жарияладық.

Бүгін біз келесі ірі бағдарламаға қатысты пайымымызды одан әрі дамытып отырмыз: ЖИ мүмкіндіктері артқан сайын, қоғамның оны тиімді пайдалану қабілеті де дәл сондай қарқынмен артуын қамтамасыз ету. Біз бұл жұмысты ЖИ орнықтылығы деп атаймыз: бұл — қоғам ЖИ пайдасын барынша арттыра алуы үшін ЖИ тәуекелдерін азайтуға қажет экожүйелік тәсіл.

Жұмысымыз қазірдің өзінде басталды. Жұмысымызды бастағаннан бергі бірнеше айдың ішінде Қор ЖИ орнықтылығы бағдарламасы арқылы ұйымдарға берілетін 130 миллион АҚШ долларынан астам грантты түпкілікті бекіту үстінде. Бұл туралы жақында көпшілікке жарияланады, әрі алда тағы да гранттар болады.1

Трансформациялық технологиялардың үлгісі

Жасанды интеллекттің орнықтылығының маңыздылығын адамзат тарихын айтарлықтай қалыптастырған өткен технологиялар тұрғысынан қарастыру арқылы жақсырақ түсінуге болады.

Ара-тұра қоғамды түбегейлі қайта қалыптастыратын технология пайда болады. Экономистер бұларды «жалпы мақсаттағы технологиялар» деп атайды. Өрт. Баспа құралы. Электр энергиясы. Интернет. Әрқайсысы ұқсас жолдан өтті: инновацияның қарқынды дамуы, нақты қауіп-қатерлер және оларға ілесуге жанталасқан институттар. Бірақ әрбір мысал қуатты технологияны қауіпсіз ету үшін не қажет екенін де көрсетеді.

От адамзат өркениетінің пайда болуына мүмкіндік берді. Ол бізді жылытты, асымызды пісірді және жыртқыштардан қорғады. Ол қалаларымызды да күлге айналдырды. Уақыт өте келе қоғамдар орнықтылық қалыптастырды: отқа төзімді материалдар, гидрант желілері, кәсіби өрт сөндіру бөлімдері және құрылыс нормалары. Қабат-қабат құрылған экожүйе.

Электр тогы да сол жолмен жүрді. 1882 жылы Эдисонның Перл-стрит станциясы Манхэттенді жарықтандырғаннан кейін, электр тогы өрттерге, электр тогынан қазаға және қоғамдық дүрбелеңге әкелді. Оқшауланған сымдар, автоматты ажыратқыштар және электротехникалық нормалар сияқты қорғаныс шаралары болмағандықтан, елдің түкпір-түкпіріндегі қалаларда жұмысшылар мен маңайдағы адамдар электр тогынан қаза тапты. Қалалар экспериментті толығымен тоқтату керек пе, жоқ па деген мәселені талқылады. Керісінше, технология дамыған сайын, біз Underwriters Laboratories сияқты тәуелсіз сынақ ұйымдарын, National Electrical Code сияқты салалық стандарттарды және нарық қамтымай қалған қауымдастықтарға электр тогын жеткізген мемлекеттік инвестицияларды құрдық. Әрбір қабат электр тогын қауіпсіз әрі қолжетімді ете түсті; бүгінде оның қауіпсіздігі соншалық, бала қосқышты басса-ақ, жарық жанады.

Төзімділік дұрыс жүзеге асқанда осындай көрініс болады.

Жасанды интеллектке орнықтылық экожүйесі қажет

Жасанды интеллект бұрынғы технологиялар жүріп өткен даму жолын қайталап келеді, бірақ бұрын-соңды болмаған жылдамдықпен ілгерілеуде.

Бұл бағыт әлі бастапқы кезеңінде болса да, оның артықшылықтары қазірдің өзінде айқын: Жасанды интеллект бизнес бастауға кедергілерді төмендетіп, білімге қолжетімділікті кеңейтіп, ғылыми жаңалықтарды жеделдетіп, медицина саласын түбегейлі өзгертуде.

Сонымен қатар, тәуекелдер де дәл сондай қарқынмен пайда болып жатыр әрі олар ЖИ пайдасының айнадағы көрінісі іспетті. Жаңа салаларды қалыптастыратын сол дамудың өзі қолданыстағы салаларды түбегейлі өзгертіп, мансап жолдарын бұзуы мүмкін. Жастарға үйренуге және шығармашылықпен айналысуға көмектесе алатын дәл сол жүйелер зиянды мінез-құлыққа да әкелуі мүмкін. Биологиялық зерттеулерді жеделдететін құралдар зиянды патогендерді жасауға қойылатын кедергіні төмендетуі мүмкін. Ал ЖИ-дің код жазу қабілеті теріс ниетті адамдардың қолына түссе, аса маңызды инфрақұрылымға қауіп төндіруі мүмкін.

OpenAI-дың алғашқы командасы ЖИ-дің қоғамға пайда әкелуін қамтамасыз ету ең алдымен техникалық сәйкестендіру мәселесін шешуге байланысты деп санады. Бұл әлі де аса маңызды әрі жұмысымыздың өзегі болып қала береді, бірақ қазір біз мұны мәселенің тек бір бөлігі ғана деп санаймыз. ЖИ салалар мен елдерге таралған сайын, қоғамға тәуелсіз зерттеулер, қоғамдық инфрақұрылым, салалық үйлестіру және мүлдем жаңа сараптамалық құзырет салалары да қажет болады. Қысқасы, бұл ЖИ тұрақтылығын талап етеді.

Біз алғашқы жұмысымызды ауқымды, таяу мерзімдегі тәуекелдер мен дереу ықпал ету мүмкіндігі тоғысындағы төрт салаға2 шоғырландыруды таңдадық:

  1. Биологиялық орнықтылық болашақта инженерлік жолмен жасалған пандемиялардың алдын алуға көмектесу үшін;

  2. Кибертұрақтылық — әлемнің аса маңызды жүйелерінің қауіпсіздігін қамтамасыз етуге жұмыс істеу;

  3. ЖИ модельдерінің қауіпсіздігі адамзаттың біз жасайтын модельдерге бақылауын нығайту үшін;

  4. ЖИ-дің жастарға әсері — технологияны болашақ ұрпақтар үшін оң күшке айналдыруға көмектесу.

Біздің жұмысымыз енді ғана басталып жатыр. Біз әр бағыттағы стратегияларымыз бен алғашқы гранттарымыз туралы толығырақ ақпарат беруді, сондай-ақ уақыт өте келе басқа бағыттарға да кеңеюді жоспарлап отырмыз.

Bio-resilience

AI will enable biological research to move at unprecedented speed, helping develop new cures and public health improvements that enable us to all live healthier and longer. However, these same capabilities could also be misused by malicious actors, lowering the barrier to designing harmful pathogens.

The age of AI requires a renewed focus on biosecurity. Because advanced AI systems could be misused by bad actors to help create a wide range of biological threats, we will prioritize pathogen-agnostic biosecurity solutions. This will require investments across prevention, detection, and defense. We need to make it harder for malicious actors to access the expertise, equipment, and materials to create biological threats, improve our ability to identify and track novel outbreaks early, and strengthen the technologies—such as protective equipment, indoor air cleaning systems, and medical countermeasures—needed to respond quickly and effectively.

Cyber-resilience

AI has begun to rapidly reshape the cybersecurity landscape. The work that once required specialized teams can now be assisted or automated by capable models. At the same time, rapidly-improving AI capabilities can also be used to accelerate cyberdefenders, including by identifying and patching vulnerabilities and accelerating response.

Many large companies and private actors can spend heavily on cyber to secure their own systems, including with new advances in AI. We anticipate focusing significant resources on securing other important societal actors that are less resourced and will have a much harder time deploying AI-ready cyberdefenses as quickly as needed. In parallel, we are also focused on preparing for novel security challenges that artificial general intelligence will ultimately bring.

AI model safety

AI model safety focuses on the behavior of the systems themselves—whether they are truthful, reliable, and aligned with human intent. In a world where this goes awry, models can break out and behave in unpredictable ways, deceiving us or pursuing goals beyond their design. Getting this right becomes increasingly important as AI systems grow more autonomous and approach—and eventually surpass—human-level intelligence.

AI companies are investing substantial resources in model safety. However, the importance of this challenge calls for a broader, more robust ecosystem: independent institutions to evaluate model safety, public infrastructure to verify models’ safe deployment in practice, and continued advances in alignment science that advance the field broadly.

AI’s impact on young people

Young people are often the earliest adopters of new technologies, using them to learn, create, communicate, and explore the world. AI is no exception. But as these tools become an increasing part of young people’s daily lives, it is critical that we develop a stronger evidence base to understand its impacts.

Families, schools, policymakers, and community organizations are all grappling with questions about how and when young people engage with AI—including its impact on human connection, learning, and development. Our initial focus will be on advancing independent research to help guide those decisions—to better understand where AI can support development, the risks it may introduce, and the contexts that shape those effects.

These insights should drive broad safety standards and design principles that guide how any AI product is developed, how schools choose to deploy them, and if and how families decide to incorporate these technologies into their lives.

The work ahead

There is one critical difference between AI and the technologies that came before it: speed.

Fire resilience took millennia. Electricity resilience took decades. AI resilience is evolving in a matter of years. The systems that make it safe, reliable, and broadly beneficial must be built alongside it.

If we get it right, AI can become part of the foundational infrastructure of modern life—expanding access to knowledge, accelerating discovery, and improving lives at a global scale.

But that outcome isn’t guaranteed. No general purpose technology ever made itself safe.

Resilience is a permanent discipline that requires many people and institutions to build, invest, and collaborate. That is the work ahead, and it is one of the defining challenges of our time. We hope you’ll join us.

Сілтемелер

  1. 1

    OpenAI қоры келесі жылы бірнеше бағдарлама бойынша 1 млрд АҚШ долларынан астам, ал алдағы жылдары 25 млрд АҚШ долларын ЖИ тұрақтылығы және өмір туралы ғылымдар мен ауруларды емдеу салаларына инвестициялауды жоспарлап отыр.

  2. 2

    ЖИ-дің экономикалық әсерлері ЖИ орнықтылығы жөніндегі кеңірек күн тәртібінің бір бөлігі болып табылады. Экономикалық өзгерістердің ауқымын ескере отырып, Қор бұл жұмысты жеке бағдарлама ретінде дамытып жатыр. Толығырақ біліңіз.

  • Thank you to Zach Sims for helping develop this piece.
  • Acknowledgements: Jeff Arnold, Naomi Bashkansky, Sean Coey, Rebecca Distler, Adrien Ecoffet, Tarun Gogineni, Mike Heimowitz, Alice Lee, Leyan Lo, Rodney Manabat, Mike McCormick, Cody Nguyen, Yonadav Shavit, Kendal Simon, Divya Siddarth, Jacob Trefethen.