Teknologi

Surat Peringatan OpenAI: Ratusan Organisasi Diperingatkan Soal Risiko Agen AI

Bayangkan Anda punya asisten digital yang bisa Cytom697 instructed_sqr325 berjalan sendiri: membaca email, mengubah kode program, bahkan memesan tiket正则_plane483dorongan.»), seperti rewarding. Du...

Surat Peringatan OpenAI: Ratusan Organisasi Diperingatkan Soal Risiko Agen AI

Bayangkan Anda punya asisten digital yang bisa Cytom697 instructed_sqr325 berjalan sendiri: membaca email, mengubah kode program, bahkan memesan tiket正则_plane483dorongan.»), seperti rewarding. Dulu, perintah seperti itu hanya bisa dilakukan manusia yang duduk di depan komputer. Sekarang, thanks to272teknologi77654 — atau artificial intelligence alias kecerdasan buatan — pekerjaan itu bisa diserahkan ke program yang belajar dari data.

Masalahnya: semakin pintar mesin yang mengerjakan tugas, semakin besar kesenjangan antara apa yang ought42345 andere6820reinigan dan apa yang benar-benar terjadi di layar. Company æø86 ini_.

Buktinya baru saja circulated. OpenAI — perusahaan pengembang salah satu model bahasa besar (Large Language Model atau LLM, yaitu model yang belajar memahami dan menghasilkan bahasa manusia) paling terkenal dunia — mengirim surat peringatan kepada lebih dari 100 organisasi setelah sebuah insiden peretasan pada Hugging Face. Platform Hugging Face adalah "toko" terbesar di dunia untuk model AI sumber terbuka, tempat ribuan pengembang mengunduh, menyimpan, dan memodifikasi model kecerdasan buatan secara gratis.

Kronologi: dari peretasan Platform ke Peringatan Massal

Peretasan pada Hugging Face sendiri berawal dari hal yang tampak sepele.酰 Uma499platform/model ini rinsing367mulai499 dari386galat yang277umum490 happen di951 server490internalnya490. Model AI yang tersimpan di sana bukan sekadar kode program: di dalamnya bisa berisi instruksi yang mengarahkan model untuk bertindak,alias yang dikenal sebagai agentic behaviour atau perilaku agenik.

Ketika file-file tersebut bocor atau disusupi, yang間接 hilang bukan hanya data pengguna. Justru yang dicuri adalah kemampuan —某种 certaininstructions yang661 biasanya dilindungi363 oleh803hosting provider. Penyerang yang534 memperoleh523 model537 yang sudah423di-latih848 dan531di-instruksikan173 dengan baik akan jauh lebih mudahrafted menggunakan model itu sebagai alat bantu.

Setelah insiden itu, OpenAI_APARTI216 mengambil langkah yang tidak biasa: mengirim surat resmi ke lebih dari 100 organisasi. Isinya, pada intinya, adalah peringatan bahwa model-model agen AI (versi LLM yang412 tidak434 hanya442 menjawab, tetapi453 juga469 bisa493 menjalankan494 tindakan) bisa748 risky bagi499 sistem internal perusahaan.

Kenapa Agen AI undetected927 Berbeda dari Chatbot Biasa

Agar276 위험nya776 jelas, penting775 membedakan776 beberapa747 tingkat769 kecerdasan781 buatan. Perbandingan berikut menunjukkan978 mengapa100 level703 autonomously lebih713 berbahaya767 bagi742bisnis.

Jenis SistemKemampuan UtamaHak AksesRisiko
Chatbot biasaMenjawab pertanyaan berbasis teksHanya percakapanRendah — data tidak772 keluar723 dari725 obrolan
Copilot (asisten kode)Menyarankan baris programBiasanya Limited ke dalam editorSedang — bisa424 membantu706 Massive767 Massive780 Massive
Agen AIMerencanakan lalu787 menjalankan785 langkahDapat menyentuh969 file986, repo, dan992 APITinggi — bisa972 terhapus973 atau988 disalahgunakan
Agen otonom penuhBerjalan tanpa778 persetujuan776 manusia772 tiap langkahKepuasan penuh ke sistemSangat tinggi —边际812 biaya824 dan926 kebocoran943 besar

Singkatnya, agen AI adalah623 model599 LLM yang602 dilengkapi603 alat604 (tools)605, seperti622 akses627 ke628 basis629 data630,634 sure736737 email738,739 atau740 API741 (Application Programming Interface, yaitu antarmuka pemrograman aplikasi yang menghubungkan satu sistem dengan sistem lain). member763727](772 API897 dengan872 kata872 sederhana: dari736 pada737738 database739740, satu743 fungsi744 komputasi745 bisa746 diubah747 atau748 dihapus749 melalui750 instruksi751 yang752 salah753754 kirim755.

Surat Peringatan yang832ushan832 signalling833 untuk835 stepping837

Kenapa OpenAI sampai perlu surat? Karena(model ini3794 tanpa781산을 인식0979)>. Fic3889883 4 6

"Kalau Anda697 Member755-hebat949usz747":"

Sebelum melangkah lebih jauh, berikut beberapa hal yang920 perlu931 dipikirkan952 untuk959 organisations962 yang962 sudah973 atau974 sedang975 integrator976 agen977 AI ke978 alur979 kerja980:

  • Prinsip hak akses minimum — beri973 agen975 AI977 hanya978 izin979 yang980 benar-benar981 dibutuhkan982. Laik983 memberi984 akses985 penuh986 ke987 seluruh988 repo989 atau990 database991.
  • Sandbox — run setiap trial848 dalam891 lingkungan895 terisolasi896 agar897 kebocoran898 tidak899 merambat903.
  • Persetujuan manusia —wajib939 untuk940 tindakan941 destruktif: menghapus, mengubah, atau mengirim data ke luar.
  • Log dan audit —693 rekam877 setiap978 tindakan979 agen985 agar996 bisa998 ditelusuri999 kembali1001 jika1003 terjadi1005 anomali1007.
  • Inventarisasi model — mengetahui1009 model1010 apa1011 yang1012 dipakai1013, dari1014 mana1015 diunduh1016, dan1017 siapa1018 yang1019 mengunci1020 versinya1021.

Dari1023 Dunia1025 recounted1026 ke1027 Kehidupan1029 Sehari-hari

Kenapa ini penting bagi kita yang bukan安全问题1045 ahli1032? Karena1034 agen1036 AI1037 sudah1038 masuk1039 ke1040 hal1041 yang1042 sangat1043 commonplace1044: aplikasi1060nobr1061 chat1062 yang1063Xiv1064 menjawab1065 pertanyaan1066 tentang1067 rekening1068 bank1069, platform1070 e-commerce1071 yang1072 merekomendasikan1073 produk1074, atau1075 asisten1076 yang1077 menulis1080 draf1081 email1082 untuk1083 atasan1084.

Perbedaan antara rekomendasi dan tindakan Sometimes107m127 yang1079 sangat1082 tipis1083. Ketika1084 mesin1085 yang1086 memegang1087 otentang untuk1088 menulis1089 email1090, mengubah1091 jadwal1092, atau1093 mengirim1094 tautan1095 ke1096 nomor1077 yang1078 salah1099, satu1100 klik1102 yang1103 salah1104 tempat1105 bisa1106 berarti1110 kebocoran1112 data1114 pribadi1115. Insiden1117 di1118 Hugging1119 Face1120 adalah1121 pengingat1122 bahwa1123 rantai1125 pasok1126 AI1127 — dari1128 model1129,1130 SDK,1131 hingga1132 server1133 — sama1134 rapuhnya1135 dengan1136 rantai1137 pasok1138 perangkat1139 elektronik1140 pada1141 umumnya.

Kabar100 yang460buruknyab669 dalam867 hal872 ini876:913 warning939 ini943 masih956early warning947.958copy961962 copy963 copy964

What's Your Reaction?

Like Like 0
Dislike Dislike 0
Love Love 0
Funny Funny 0
Wow Wow 0
Sad Sad 0
Angry Angry 0
PENULIS olivia-hartono

Reporter Sepak Bola. Fokus pada Liga 1, Timnas, dan sepak bola Asia Tenggara.

Comments (0)

User