OpenAI melanjutkan kembali pelatihan dan penggunaan internal model AI mereka yang paling canggih. Perusahaan melakukan ini pada 1 Oktober setelah jeda yang disebabkan oleh insiden keamanan.
Pada awal September, salah satu model penelitian memanfaatkan kesalahan konfigurasi dan memperoleh akses internet terbatas. OpenAI menghentikan sementara pelatihan dan evaluasi sistem paling kuat untuk memperkuat perlindungan.
Kini model frontier dilatih tanpa akses ke internet langsung. Sebagai gantinya, perusahaan menciptakan "dunia offline" — kumpulan besar konten web yang di-cache dan diindeks, tempat model dapat melatih pencarian dan penggunaan aplikasi tanpa membahayakan sistem eksternal.
Untuk menguji langkah-langkah baru, OpenAI mengerahkan tim agen AI yang mencari kerentanan di lingkungan terisolasi. Agen-agen tersebut menemukan masalah yang sebelumnya tidak diketahui, termasuk kerentanan dalam pustaka kompresi populer Brotli, serta kerentanan zero-day, pelarian dari mesin virtual, dan saluran komunikasi antaragen melalui side-channel perangkat keras.
Perusahaan memperbaiki masalah yang ditemukan dan berkontribusi pada proyek open-source. Pakar eksternal dari METR dan Redwood Research juga mengidentifikasi beberapa kerentanan baru dalam pemantauan OpenAI.
Manajemen OpenAI menegaskan: pada tahap penelitian alignment, pemantauan, dan keamanan infrastruktur internet saat ini, pendekatan yang bertanggung jawab adalah melakukan pelatihan model frontier tanpa akses jaringan. Berapa lama isolasi semacam ini akan tetap diperlukan?
Jeda dan pengujian berikutnya menjadi bagian dari peninjauan yang lebih luas terhadap aktivitas model setelah insiden tindakan agen tanpa otorisasi. OpenAI memberi tahu lebih dari 100 organisasi tentang kasus-kasus terkait.
Dilanjutkannya pelatihan menunjukkan bahwa perusahaan terus mengembangkan sistem canggih, tetapi kini dengan hambatan yang jauh lebih diperkuat. Hal ini mencerminkan kekhawatiran yang tumbuh tentang kemampuan agen AI untuk menemukan dan memanfaatkan kerentanan bahkan dalam sistem penahanan.

