Ketahanan dalam era AI
AI, teknologi tujuan umum dan mengapa ketahanan ialah tugas generasi kita.
Yayasan OpenAI wujud untuk memastikan bahawa kecerdasan am buatan memberi manfaat kepada seluruh umat manusia.
Kami telah berusaha tanpa henti untuk mengikuti rentak kemajuan pesat dalam AI itu sendiri. Pada bulan April, Yayasan mengumumkan geran pertama kami berjumlah $100 juta dalam bidang Sains Hayat dan Penyembuhan Penyakit, dengan cita-cita untuk membantu mencegah dan merawat penyakit seperti Alzheimer dengan memanfaatkan AI canggih. Minggu lepas, kami mengumumkan program Masa Depan Kerja dan Ekonomi kami, dengan harapan untuk memahami dan membentuk erti pekerjaan dan kemakmuran ekonomi bagi generasi akan datang.
Hari ini, kami memperluaskan visi kami untuk program utama yang seterusnya—memastikan bahawa, apabila keupayaan AI berkembang, keupayaan masyarakat untuk memanfaatkannya juga akan berkembang sepantas itu. Kami menamakan usaha ini ketahanan AI: pendekatan ekosistem yang diperlukan untuk mengurangkan risiko AI, supaya masyarakat dapat memaksimumkan manfaat AI.
Kerja kami sudah pun bermula. Dalam beberapa bulan yang singkat sejak memulakan kerja kami, yayasan sedang berusaha untuk memuktamadkan geran bernilai lebih daripada $130 juta kepada organisasi melalui program ketahanan AI kami, yang akan dikongsikan kepada umum tidak lama lagi, dengan lebih banyak lagi akan menyusul.1
Corak teknologi transformasi
Kepentingan daya tahan AI paling baik difahami melalui lensa teknologi masa lalu yang membentuk sejarah manusia secara bermakna.
Selalunya, teknologi tiba yang membentuk semula masyarakat dari bawah ke atas. Ahli ekonomi memanggil ini sebagai “teknologi tujuan am.” Kebakaran. Mesin cetak. Elektrik. Internet. Setiap satunya mengikuti arka yang sama: inovasi pantas, risiko sebenar dan institusi yang berlumba untuk seiring. Tetapi setiap contoh juga menunjukkan perkara yang diperlukan untuk menjadikan teknologi berkuasa yang selamat.
Api memungkinkan wujudnya tamadun manusia. Ia menghangatkan kita, memasak makanan kita dan melindungi kita daripada pemangsa. Ia juga telah membakar bandar kami sehingga rata. Lama-kelamaan, masyarakat membina ketahanan: bahan tahan api, rangkaian pili bomba, jabatan bomba profesional dan kod bangunan. Sebuah ekosistem, lapisan demi lapisan.
Elektrik telah mengikuti corak yang sama. Selepas Stesen Pearl Street Edison menyalakan Manhattan pada tahun 1882, elektrik membawa kebakaran, renjatan elektrik dan orang ramai menjadi panik. Tanpa perlindungan seperti wayar bertebat, pemutus dan kod, pekerja dan penonton terkena renjatan elektrik di bandar-bandar di seluruh negara. Bandar-bandar membahaskan sama ada eksperimen itu harus dihentikan sepenuhnya. Sebaliknya, apabila teknologi semakin maju, kami menubuhkan badan ujian bebas seperti Makmal Penaja Jamin, piawaian industri seperti Kod Elektrik Kebangsaan dan pelaburan awam yang membawa kuasa kepada komuniti yang ditinggalkan oleh pasaran. Setiap lapisan menjadikan elektrik lebih selamat dan lebih mudah diakses; hari ini, ia sangat selamat sehingga kanak-kanak boleh membalikkan suis dan lampu muncul.
Beginilah rupa ketahanan apabila ia dilakukan dengan baik.
AI memerlukan ekosistem yang berdaya tahan
AI mengikuti trajektori yang sama seperti teknologi sebelumnya, tetapi bergerak pada kelajuan yang tidak pernah berlaku sebelum ini.
Kami masih berada pada peringkat awal, tetapi manfaatnya sudah jelas: AI sedang mengurangkan halangan untuk memulakan perniagaan, memperluas akses kepada pendidikan, mempercepat penemuan saintifik, dan mengubah bidang perubatan.
Pada masa yang sama, risiko turut muncul dengan sama pantas—seolah-olah mencerminkan imej manfaat AI. Pertumbuhan yang sama yang mewujudkan industri baharu boleh menggugat industri sedia ada dan menjejaskan kerjaya. Sistem yang sama yang boleh membantu golongan muda belajar dan mencipta juga boleh membawa kepada tingkah laku yang teruk. Alat yang mempercepat penyelidikan biologi boleh mengurangkan halangan untuk mencipta patogen berbahaya. Dan keupayaan AI untuk menulis kod, jika jatuh ke tangan pihak yang salah, boleh mengancam infrastruktur kritikal.
Pasukan awal OpenAI percaya bahawa memastikan AI memberi manfaat kepada masyarakat bergantung terutamanya pada penyelesaian masalah penjajaran teknikal. Perkara itu tetap amat penting—dan teras kepada kerja kami—tetapi kini kami percaya ia hanyalah satu bahagian daripada kepingan yang lebih besar. Apabila AI tersebar merentasi sektor dan negara, masyarakat juga akan memerlukan penyelidikan bebas, infrastruktur awam, penyelarasan industri, dan bidang kepakaran yang serba baharu. Secara ringkasnya, ia akan memerlukan ketahanan AI.
Kami telah memilih untuk memfokuskan kerja awal kami pada empat bidang2 yang terletak pada persilangan antara risiko besar dalam jangka masa terdekat dan impak segera:
Ketahanan bio untuk membantu mencegah pandemik kejuruteraan pada masa depan;
Ketahanan siber untuk berusaha memastikan keselamatan sistem kritikal dunia kita;
Keselamatan model AI untuk mengukuhkan kawalan manusia terhadap model yang kita cipta; dan
Kesan AI terhadap golongan muda untuk membantu menjadikan teknologi sebagai daya positif bagi generasi akan datang.
Usaha kita baru sahaja bermula. Kami merancang untuk berkongsi lebih lanjut tentang strategi dan geran awal kami dalam setiap bidang, serta memperluas ke bidang lain dari semasa ke semasa.
Ketahanan bio
AI akan membolehkan penyelidikan biologi bergerak pada kelajuan yang belum pernah berlaku sebelum ini, membantu membangunkan penawar baharu dan penambahbaikan kesihatan awam yang membolehkan kita semua hidup dengan lebih sihat dan lebih lama. Walau bagaimanapun, keupayaan yang sama ini juga boleh disalahgunakan oleh pelaku berniat jahat, sekali gus memudahkan mereka bentuk patogen berbahaya.
Era AI memerlukan tumpuan yang diperbaharui terhadap biosekuriti. Disebabkan sistem AI canggih boleh disalahgunakan oleh pelaku berniat jahat untuk membantu mencipta pelbagai ancaman biologi, kami akan mengutamakan penyelesaian biosekuriti agnostik patogen. Ini akan memerlukan pelaburan merentasi pencegahan, pengesanan dan pertahanan. Kita perlu menyukarkan pelaku berniat jahat untuk mengakses kepakaran, peralatan dan bahan bagi mencipta ancaman biologi, meningkatkan keupayaan kita untuk mengenal pasti dan menjejaki wabak baharu pada peringkat awal, serta memperkukuh teknologi—seperti peralatan perlindungan, sistem pembersihan udara dalaman, dan langkah balas perubatan—yang diperlukan untuk bertindak balas dengan cepat dan berkesan.
Ketahanan siber
AI telah mula membentuk semula landskap keselamatan siber dengan pesat. Kerja yang pada masa dahulu memerlukan pasukan khusus kini boleh dibantu atau diautomasikan oleh model yang berkeupayaan. Pada masa yang sama, keupayaan AI yang meningkat dengan pesat juga boleh digunakan untuk mempercepatkan pembela siber, termasuk mengenal pasti dan menampal kerentanan serta mempercepatkan tindak balas.
Banyak syarikat besar dan entiti swasta mampu membelanjakan jumlah yang besar untuk keselamatan siber bagi melindungi sistem mereka sendiri, termasuk dengan memanfaatkan kemajuan baharu dalam AI. Kami menjangkakan akan menumpukan sumber yang besar untuk melindungi pihak penting lain dalam masyarakat yang mempunyai sumber yang lebih terhad dan akan menghadapi cabaran yang jauh lebih besar untuk melaksanakan pertahanan siber yang bersedia untuk AI secepat yang diperlukan. Pada masa yang sama, kami juga menumpukan perhatian kepada persediaan menghadapi cabaran keselamatan baharu yang akhirnya akan dibawa oleh kecerdasan am buatan.
Keselamatan model AI
Keselamatan model AI menumpukan pada tingkah laku sistem itu sendiri—sama ada sistem tersebut benar, boleh dipercayai, dan sejajar dengan niat manusia. Dalam dunia di mana perkara ini menjadi tidak terkawal, model boleh terlepas daripada batasan dan berkelakuan dengan cara yang tidak dapat diramalkan, memperdaya kita atau mengejar matlamat yang melampaui reka bentuk asalnya. Memastikan perkara ini dilakukan dengan betul menjadi semakin penting apabila sistem AI menjadi lebih autonomi dan menghampiri—dan akhirnya melampaui—kecerdasan setaraf manusia.
Syarikat AI sedang melaburkan sumber yang besar dalam keselamatan model. Walau bagaimanapun, kepentingan cabaran ini memerlukan ekosistem yang lebih luas dan lebih kukuh: institusi bebas untuk menilai keselamatan model, infrastruktur awam untuk mengesahkan penerapan model yang selamat diamalkan dan kemajuan berterusan dalam sains penjajaran yang memajukan bidang ini secara meluas.
Kesan AI terhadap golongan muda
Golongan muda sering menjadi antara pengguna terawal teknologi baharu, menggunakannya untuk belajar, mencipta, berkomunikasi, dan meneroka dunia. AI juga tidak terkecuali. Namun, apabila alat ini semakin menjadi sebahagian daripada kehidupan harian golongan muda, amat penting untuk kita membangunkan asas bukti yang lebih kukuh bagi memahami kesannya.
Keluarga, sekolah, penggubal dasar dan organisasi masyarakat semuanya sedang bergelut dengan persoalan tentang bagaimana dan bila golongan muda berinteraksi dengan AI—termasuk kesannya terhadap hubungan sesama manusia, pembelajaran dan perkembangan. Tumpuan awal kami akan diberikan kepada usaha memajukan penyelidikan bebas bagi membantu membimbing keputusan tersebut—untuk lebih memahami di mana AI boleh menyokong pembangunan, risiko yang mungkin ditimbulkannya, serta konteks yang membentuk kesan tersebut.
Dapatan ini seharusnya memacu piawaian keselamatan yang menyeluruh dan prinsip reka bentuk yang membimbing cara sebarang produk AI dibangunkan, cara sekolah memilih untuk melaksanakan penggunaannya, serta sama ada dan bagaimana keluarga memutuskan untuk mengintegrasikan teknologi ini ke dalam kehidupan mereka.
Kerja yang menanti
Terdapat satu perbezaan kritikal antara AI dan teknologi yang terdahulu: kelajuan.
Ketahanan terhadap kebakaran memakan masa ribuan tahun. Ketahanan bekalan elektrik mengambil masa berdekad. Ketahanan AI sedang berkembang dalam tempoh beberapa tahun sahaja. Sistem yang menjadikannya selamat, boleh dipercayai dan bermanfaat secara meluas mesti dibangunkan seiring bersamanya.
Jika kita melaksanakannya dengan betul, AI boleh menjadi sebahagian daripada infrastruktur asas kehidupan moden—memperluas akses kepada pengetahuan, mempercepat penemuan dan meningkatkan mutu kehidupan pada skala global.
Tetapi hasil tersebut tidak dijamin. Belum pernah ada teknologi kegunaan umum yang pernah menjadi selamat dengan sendirinya.
Daya tahan merupakan suatu disiplin kekal yang memerlukan ramai orang dan institusi untuk membina, melabur dan bekerjasama. Itulah tugas yang menanti kita dan ia merupakan salah satu cabaran yang mencorakkan zaman kita. Kami berharap anda akan menyertai kami.
Nota kaki
- 1
Yayasan OpenAI menjangka akan melabur lebih daripada $1 bilion merentasi beberapa program sepanjang tahun depan, dan $25 bilion dalam Ketahanan AI dan Sains Hayat & Penyembuhan Penyakit pada tahun yang akan datang.
- 2
Kesan ekonomi AI merupakan sebahagian daripada agenda ketahanan AI yang lebih luas. Memandangkan skala peralihan ekonomi ini, Yayasan sedang membangunkan usaha ini sebagai program berasingan. Baca selanjutnya di sini.
- Acknowledgements: Jeff Arnold, Naomi Bashkansky, Sean Coey, Rebecca Distler, Adrien Ecoffet, Tarun Gogineni, Mike Heimowitz, Alice Lee, Leyan Lo, Rodney Manabat, Mike McCormick, Cody Nguyen, Yonadav Shavit, Kendal Simon, Divya Siddarth, Jacob Trefethen.
Terima kasih kepada Zach Sims kerana membantu membangunkan karya ini.