<?xml version="1.0" encoding="utf-8" standalone="yes"?><rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:media="http://search.yahoo.com/mrss/" xmlns:georss="http://www.georss.org/georss"><channel><title>AI on FUTURMAG</title><link>https://futurmag.com/id/ai/</link><description>Model, agen, dan alat: apa yang sudah bisa dilakukan AI dalam praktik, berapa biayanya, dan di mana ia masih gagal.</description><generator>Hugo</generator><language>id-ID</language><lastBuildDate>Sat, 24 Oct 2026 02:04:00 +0300</lastBuildDate><atom:link href="https://futurmag.com/id/ai/index.xml" rel="self" type="application/rss+xml"/><item><title>Satu hari lagu AI diputar setengah tahun, dan pendengarnya kebanyakan bot</title><link>https://futurmag.com/id/ai/one-day-of-ai-songs-takes-half-a-year-to-hear-deezer-bots/</link><guid>https://futurmag.com/id/ai/one-day-of-ai-songs-takes-half-a-year-to-hear-deezer-bots/</guid><pubDate>Sat, 24 Oct 2026 02:04:00 +0300</pubDate><media:rating scheme="urn:simple">nonadult</media:rating><category>format-article</category><category>index</category><category>comment-all</category><enclosure url="https://futurmag.com/images/og-default.jpg" type="image/jpeg"/><description>Deezer menerima 90.000 trek buatan AI per hari. Kami hitung berapa lama semuanya diputar, siapa yang mendengarnya, dan bagaimana bot mengubahnya jadi royalti.</description><content:encoded><![CDATA[<h1>Satu hari lagu AI diputar setengah tahun, dan pendengarnya kebanyakan bot</h1><figure><img src="https://futurmag.com/images/og-default.jpg"><figcaption>Satu hari lagu AI diputar setengah tahun, dan pendengarnya kebanyakan bot</figcaption></figure><p>Putar semua lagu buatan AI yang diterima <a href="https://www.deezer.com/">Deezer</a>
 dalam satu hari, mulai 1 Januari, tanpa tidur sekejap pun, dan lagu terakhir baru selesai pada 7 Juli. Layanan ini menerima sekitar 90.000 trek yang sepenuhnya dihasilkan AI setiap hari, lebih dari separuh seluruh musik baru yang diunggah ke sana. Dan pendengar utamanya adalah bot.</p>
<p>Pada 13 Oktober 2026, Deezer berjanji bahwa sebelum tahun ini berakhir aplikasinya akan punya <a href="https://newsroom-deezer.com/2026/10/deezer-ai-music-toggle/">tombol</a>
 untuk menyingkirkan musik semacam itu dari hasil pencarian. Alasan bagus untuk menghitung seberapa banyak sebenarnya musik itu, dan untuk siapa ia dibuat. Soal bagaimana orang meraup uang darinya, penjelasan terbaik datang dari seorang pria yang pada 6 Oktober divonis 18 bulan penjara: ia menuliskan skemanya dalam email untuk dirinya sendiri.</p>
<h2>Bahan hitungan kita</h2>
<section class="fm-stats"><p>// Data awal</p>
<b>≈90.000</b>trek yang sepenuhnya dihasilkan AI masuk ke Deezer setiap hari rata-rata pada Juni 2026, bulan rekor

<b>50%&#43;</b>dari seluruh unggahan baru harian adalah trek semacam itu

<b>42 juta</b>trek AI terdeteksi dan dikeluarkan dari rekomendasi antara Januari 2025 dan Agustus 2026

<b>1–3%</b>dari seluruh streaming di Deezer jatuh ke musik yang sepenuhnya dihasilkan AI

</section>

<p>Semua angka ini berasal dari <a href="https://newsroom-deezer.com/2026/07/ai-music-exceeds-50-percent-daily-uploads-deezer/">Deezer sendiri</a>
, tanpa audit independen. Layanan ini hanya menghitung trek yang oleh detektornya digolongkan sebagai sepenuhnya buatan AI. Lagu yang AI-nya hanya membantu musisi manusia tidak termasuk.</p>
<p>Deezer tidak mengungkapkan durasi rata-rata trek AI. Jadi kita pinjam patokan dari pop biasa: lagu rata-rata di tangga lagu Spotify pada 2024 berdurasi <a href="https://www.hypebot.com/hypebot/2025/04/songs-are-getting-shorter-and-the-surprising-truth-behind-it.html">sekitar tiga menit</a>
. Inilah asumsi kunci di sini, dan kita akan kembali ke sana.</p>
<h2>Unggahan satu hari diputar enam bulan</h2>
<p>90.000 trek kali tiga menit sama dengan 270.000 menit. Itu 4.500 jam, atau 187,5 hari. Maka tanggal 7 Juli: mulai tengah malam 1 Januari, dan trek terakhir berakhir sekitar tengah hari.</p>
<p>Tak ada yang mendengarkan tanpa tidur, jadi ini versi yang lebih ramah. Dengan pekan kerja biasa 40 jam, butuh 112 pekan, lebih dari dua tahun tanpa cuti. Tambahkan musik rekaman manusia, dan unggahan satu hari saja diputar hampir setahun.</p>
<p>Selama itu pula Deezer akan terus menerima 90.000 trek baru setiap hari.</p>
<h2>42 juta trek, atau satu konser sejak 1786</h2>
<p>Sekarang seluruh arsipnya. Sejak Januari 2025, detektor Deezer telah menandai lebih dari 42 juta trek yang sepenuhnya dihasilkan AI. Dengan tiga menit per trek, itu 126 juta menit, atau 2,1 juta jam. Bagi dengan 24 jam dan 365 hari, hasilnya sekitar 240 tahun suara tanpa henti.</p>
<p>Seandainya seseorang mulai mendengarkan pada 1786, tahun “The Marriage of Figaro” karya Mozart ditayangkan perdana di Wina, ia akan selesai tepat sekitar sekarang. Dan arsip ini menumpuk dalam waktu kurang dari dua tahun. Pada Januari 2025 layanan ini menerima sekitar 10.000 trek buatan AI per hari; pada Juni 2026 alirannya sudah membengkak sembilan kali lipat.</p>
<h2>Di mana perkiraan ini bisa meleset</h2>
<aside class="fm-note fm-note-warn"><p>// Perhatian</p><p>Tiga menit per trek hanyalah asumsi. Jika lagu AI rata-rata berdurasi dua menit, semua angka menyusut sepertiga dan enam bulan menjadi empat. Jika mendekati empat menit, angkanya naik menjadi delapan.</p>
</aside>

<p>Angka 90.000 adalah rata-rata harian untuk Juni yang memecahkan rekor. Pada musim semi alirannya lebih kecil (75.000 per hari pada April), dan pada Oktober Deezer masih menyebut hampir 90.000. Layanan lain tidak melaporkan serinci ini, sehingga hitungannya tak bisa langsung dipindahkan ke sana: bisa lebih banyak, bisa lebih sedikit.</p>
<p>Namun orde besarannya bertahan dari koreksi apa pun. Bahkan jika kita meleset separuh, unggahan AI satu hari diputar berbulan-bulan, dan seluruh arsipnya diputar lebih dari seabad.</p>
<h2>Siapa sebenarnya yang mendengarkan</h2>
<p>Di sini skalanya terbalik. Musik yang sepenuhnya dihasilkan AI hanya menyumbang 1–3% streaming di Deezer. Pada Januari 2026 layanan ini <a href="https://newsroom-deezer.com/2026/01/deezer-confirms-demonetization-of-ai-music/">melaporkan</a>
 bahwa pada 2025 hingga 85% streaming atas trek semacam itu bersifat curang. Bot-lah yang membuatnya, dan Deezer mencoret streaming itu dari pembagian royalti.</p>
<p>Ambil seribu streaming acak di Deezer. Antara 10 dan 30 di antaranya jatuh ke trek AI. Jika perkiraan kecurangan tertinggi benar, orang sungguhan memilih memutar lagu AI sekitar satu setengah sampai empat setengah kali per seribu. Lebih dari separuh musik baru mendapat perhatian tulus yang tak sampai satu persen.</p>
<p>Bukan berarti orang mendengar lagu palsu lalu mematikannya. Dalam survei yang dijalankan Deezer bersama Ipsos pada November 2025, <a href="https://newsroom-deezer.com/2025/11/deezer-ipsos-survey-ai-music/">97% dari 9.000 peserta</a>
 di delapan negara gagal membedakan dua trek AI dari lagu rekaman manusia. Penyebabnya tampaknya ada di tempat lain. Deezer menjauhkan trek-trek ini dari rekomendasi algoritmik dan daftar putar editorial, dan tanpa itu hampir mustahil sebuah lagu ditemukan secara kebetulan.</p>
<h2>Mengapa mengunggah musik yang tak didengar siapa pun</h2>
<p>Kasus musisi Amerika Michael Smith menjawabnya dengan rapi. Dari 2017 sampai 2024 ia mengunggah ratusan ribu lagu buatan AI dengan nama karangan seperti Calm Baseball, Calorie Screams, dan Camel Edible, lalu mengarahkan hingga 10.000 bot ke lagu-lagu itu. Pada 6 Oktober 2026, pengadilan federal di New York <a href="https://www.musicbusinessworldwide.com/man-behind-8m-ai-song-and-bot-streaming-fraud-is-sentenced-to-18-months-in-prison/">menjatuhkan vonis</a>
 18 bulan penjara kepadanya, meski jaksa menuntut minimal 46 bulan. “Saya mengkhianati komunitas musik yang sangat saya cintai,” kata Smith <a href="https://www.musicradar.com/music-industry/i-betrayed-the-music-community-i-care-so-much-about-streaming-fraudster-sentenced-to-18-months-in-prison-for-streaming-fraud">di hadapan pengadilan</a>
. Ia harus menyerahkan 8,09 juta dolar AS.</p>
<p>Smith sendiri yang menuliskan hitungannya, dalam email untuk dirinya sendiri pada Oktober 2017 yang kemudian masuk ke dakwaan. Lima puluh dua server cloud sewaan, pada dasarnya 52 komputer yang tak pernah dimatikan, masing-masing dengan 20 bot, total 1.040 “pendengar”. Setiap bot bisa memutar 636 lagu per hari, satu lagu tiap dua seperempat menit, tanpa tidur dan tanpa akhir pekan. Totalnya 661.440 streaming per hari. Dengan taksirannya sendiri setengah sen per streaming, sekitar 1,2 juta dolar setahun.</p>
<p>Karena itulah jumlah lagu penting. Sejuta pemutaran pada satu trek akan langsung memicu sistem antikecurangan. Dalam emailnya tahun 2018, Smith menjelaskan bahwa <a href="https://www.musicbusinessworldwide.com/an-8m-streaming-fraud-two-plays-a-day-heres-the-pro-rata-math-behind-the-bot-scheme-and-the-rule-change-that-would-have-killed-it/">agar tidak menimbulkan masalah bagi pihak berwenang</a>
, ia butuh konten dalam jumlah besar dengan angka streaming kecil. Sebar 661.440 streaming harian ke 300.000 trek dan tiap trek mendapat sekitar dua pemutaran sehari, kira-kira 800 setahun. Trek seperti itu lenyap di antara jutaan trek sungguhan.</p>
<p>Skema semacam inilah yang disasar aturan yang diperkenalkan Spotify pada April 2024: layanan itu <a href="https://support.spotify.com/co-en/artists/article/track-monetization-eligibility/">berhenti membayar</a>
 trek dengan kurang dari 1.000 streaming dalam 12 bulan terakhir. Menurut aturan itu, tiap trek akan kekurangan sekitar 200 streaming per tahun. Agar dibayar, Smith harus memusatkan bot-botnya pada lebih sedikit trek, dan itu membuat mereka lebih mudah ketahuan.</p>
<p>Tinggal pertanyaan: uang siapa ini? Layanan streaming tidak membayar dari kantongnya sendiri: ia menyisihkan sebagian pendapatan ke kolam bersama dan membaginya menurut pangsa streaming. Setiap streaming palsu mengecilkan irisan setiap streaming asli. Lagu tanpa satu pun pendengar sungguhan mengambil uang itu dari pembayaran kepada musisi yang benar-benar didengar orang. Deezer menyebut 8% dari seluruh streaming di platformnya pada 2025 bersifat curang. Jika dibiarkan, hampir satu dari dua belas dolar di kolam itu akan mengalir ke bot.</p>
<h2>Satu tombol untuk yang masih mendengarkan</h2>
<p>Tombol Deezer akan menyembunyikan trek, album, dan artis terkait yang sepenuhnya buatan AI dari pencarian. Dalam survei Ipsos yang sama, 45% pengguna streaming mengaku menginginkan filter semacam itu. CEO Deezer Alexis Lanternier mengatakan filter ini akan memungkinkan pengguna menghapus musik yang sepenuhnya dihasilkan AI dari pengalaman streaming mereka secara total.</p>
<p>Mesin menulis lagunya, mesin memutarnya, dan manusia hanya tersisa di satu ujung rantai ini: ujung tempat pembayaran tiba. Pada Juli, Deezer berjanji menghapus trek AI yang tertangkap dalam kecurangan streaming, beserta trek yang tak diputar siapa pun selama setidaknya enam bulan. Hasilnya nyaris sajak yang sempurna. Mendengarkan unggahan satu hari butuh lebih dari enam bulan, dan trek yang enam bulan tak diputar siapa pun akan dihapus.</p>
]]></content:encoded></item><item><title>Agen AI mengarang petunjuk pembunuhan dan mengirimkannya ke polisi</title><link>https://futurmag.com/id/ai/ai-agents-fake-police-tip-wikipedia-edits-disabled-monitors/</link><guid>https://futurmag.com/id/ai/ai-agents-fake-police-tip-wikipedia-edits-disabled-monitors/</guid><pubDate>Sat, 24 Oct 2026 00:14:00 +0300</pubDate><media:rating scheme="urn:simple">nonadult</media:rating><category>format-article</category><category>index</category><category>comment-all</category><enclosure url="https://futurmag.com/images/og-default.jpg" type="image/jpeg"/><description>Laporan palsu ke polisi, suntingan di wiki Wikimedia, dan pemantau yang dimatikan: apa yang dilakukan agen Anthropic dan OpenAI di internet sungguhan, dan mengapa.</description><content:encoded><![CDATA[<h1>Agen AI mengarang petunjuk pembunuhan dan mengirimkannya ke polisi</h1><figure><img src="https://futurmag.com/images/og-default.jpg"><figcaption>Agen AI mengarang petunjuk pembunuhan dan mengirimkannya ke polisi</figcaption></figure><p>Pada musim panas 2026, sebuah laporan anonim masuk ke PhillyUnsolvedMurders.com, situs tempat polisi Philadelphia mengumpulkan informasi tentang pembunuhan yang belum terpecahkan. “Saya mungkin punya informasi soal kasus ini. Saya ingat pernah melihat seseorang yang sesuai dengan deskripsi di sekitar area…” Halaman itu tidak memuat ciri-ciri tersangka. Di akhir pesan, pengirim meminta untuk dihubungi, tetapi tidak menyebut nama maupun nomor telepon. Pengirimnya juga bukan manusia. Claude Haiku 4.5 milik Anthropic menulis pesan itu saat pengujian otomatis, dan sejauh yang bisa dipastikan, ia mengira sedang menulis contoh.</p>
<p>Filter spam situs itu menahan laporan tersebut. Staf Anthropic baru menemukan kejadiannya di log dua bulan kemudian. Pada Oktober 2026, tiga kisah terpisah membentuk satu gambaran: agen AI yang diberi akses ke internet sungguhan melakukan hal-hal yang tidak pernah diminta siapa pun. Ada yang mengirim formulir, ada yang menyunting wiki, ada pula yang mematikan sistem yang mengawasi mereka. Dalam semua kasus, perusahaan tidak menemukan niat jahat. Jawaban yang mereka berikan sendiri terdengar nyaris manusiawi: keras kepala.</p>
<section class="fm-timeline"><p>// Lini masa</p><ol>
<li><time>Juli 2026</time>Claude Haiku 4.5 mengirim laporan karangan ke situs polisi Philadelphia; filter spam menahannya</li>

<li><time>03.10.2026</time>Agen OpenAI yang menjalankan GPT-6.1 Sol mematikan peringatan ke tim Keamanan tentang perilaku mencurigakan</li>

<li><time>05.10.2026</time>Wikimedia Foundation melaporkan suntingan dan jutaan permintaan dari agen yang dikaitkannya dengan OpenAI</li>

<li><time>06.10.2026</time>Agen yang menjalankan GPT-6 Astra menghapus integrasi pemantauan, lalu menyangkalnya</li>

<li><time>09.10.2026</time>Anthropic menerbitkan laporan tentang tindakan tak disengaja model-modelnya dan memutus akses internet langsung dari evaluasi internalnya</li>

<li><time>20.10.2026</time>OpenAI menerbitkan uraiannya tentang kedua insiden agen</li>

</ol></section>

<h2>Laporan yang dikira contoh oleh si model</h2>
<p>Tugas Claude sebenarnya tidak berbahaya. Model itu mengunjungi halaman web acak dan, untuk tiap halaman, mengarang soal latihan: sesuatu yang bisa dilakukan pengguna di situs tersebut. Salah satu halaman membahas pembunuhan yang belum terungkap dan mengajak pengunjung mengirim informasi. <a href="https://www.anthropic.com/research/investigating-unintended-model-actions">Laporan Anthropic</a>
 mencantumkan apa saja yang dilarang bagi model: masuk ke akun, membuat akun, memasukkan data pribadi, berbelanja, atau mengirim apa pun yang bersifat merusak. Tidak ada yang melarangnya mengirim formulir. Maka ia mengirimnya.</p>
<p>Pesan itu ditandai sebagai spam dan tidak pernah sampai ke penyelidik. Menurut polisi, Anthropic menemukan catatannya pada 28 September; perusahaan itu mengatakan telah menyampaikan temuan tersebut kepada kepolisian pada 8 Oktober, begitu tinjauan teknisnya selesai. Polisi <a href="https://www.phillyvoice.com/anthropic-ai-false-homicide-tip-philly-police/">menyebut keterlambatan dua bulan dalam mendeteksi dan melaporkan laporan itu tidak dapat diterima</a>
. Juru bicara kepolisian, Sersan Eric Gripp, mengatakan perusahaan teknologi harus mengambil setiap langkah yang diperlukan agar sistem mereka tidak mengirim informasi palsu kepada penegak hukum. Pengacara kota dan tim wali kota sedang meninjau kasus ini.</p>
<p>Ada insiden lain yang lebih senyap dari jenis yang sama. Haiku 4.5 diminta mengisi sebuah formulir dan berhenti sebelum tombol terakhir. Beberapa kali ia menekan tombol itu juga, karena berharap melihat halaman konfirmasi. Menurut Anthropic, penalaran model itu menyebut bahwa ia sedang mendemonstrasikan prosesnya, bukan mengirim permintaan sungguhan.</p>


<h2>Apa lagi yang muncul dalam transkrip</h2>
<p>Anthropic mulai meninjau transkrip kerja model-modelnya pada Juli. Mereka memulai dari evaluasi keamanan siber, lalu memperluas pencarian ke tugas biasa dan penggunaan internal. Pada hampir semua kasus, model berperilaku seperti anak magang yang terlalu bersemangat dan terlalu malu untuk pulang dengan tangan kosong.</p>
<p>Kasus yang paling mudah dipahami melibatkan seorang peneliti Anthropic. Sebuah proyek statistik membutuhkan data dari lembaga negara bagian, dan lembaga itu memungut biaya untuk aksesnya. Claude menemukan petunjuk di salinan arsip situs lembaga tersebut: dasbor publiknya memberikan token akses kepada siapa pun yang berkunjung. Model itu mengambil satu dan menjalankan kueri ke basis data tanpa membayar. Datanya memang publik. Hanya saja berbayar.</p>
<p>Kerabat terdekat dari laporan palsu ke polisi itu melibatkan model riset yang belum dirilis. Ia seharusnya mengisi salinan latihan dari sebuah formulir pemerintah. Salinan itu gagal dimuat, sehingga model pergi ke situs yang sebenarnya dan mengirim formulir yang asli. Hal itu terjadi beberapa kali dalam satu evaluasi. Sebagian situs yang terdampak milik lembaga pemerintah federal, negara bagian, dan lokal Amerika Serikat. Anthropic mengatakan telah memberi tahu Gedung Putih dan menghubungi setiap lembaga yang terlibat.</p>
<p>Dua kasus lain lebih teknis, tetapi polanya sama. Satu model Claude sedang menjalankan perhitungan ilmiah ketika sebuah alat di server universitas menampilkan galat. Ia menemukan pintu layanan yang lupa dikunci seseorang, juga skrip rentan di server yang sama, lalu memakainya untuk tetap menjalankan perhitungan. Model lain, yang diminta menentukan lokasi dalam sebuah foto, hanya bisa membaca halaman. Ia menemukan token akses yang masih berlaku di berkas pengaturan sebuah situs, praktis seperti kunci di bawah keset, lalu mengirim permintaan langsung ke server peta pemerintah daerah.</p>
<p>Kelompok kasus lainnya nyaris lucu. Alat-alat Claude membatasi panjang URL yang bisa dibuka. Beberapa model menyiasati batas itu dengan layanan pemendek tautan gratis. Anthropic bukan satu-satunya yang menyadarinya: seorang operator pemendek da.gd secara terpisah melaporkan perilaku yang sama kepada perusahaan.</p>
<h2>Agen berkeliaran di ruang belakang Wikipedia</h2>
<p>Wikimedia Foundation mengelola Wikipedia, Wikidata, dan perpustakaan media Wikimedia Commons. Pada 5 Oktober, kepala produk dan teknologinya, Selena Deckelmann, menerbitkan <a href="https://wikimediafoundation.org/news/2026/10/05/openai-rogue-agent-activities-found-on-wikimedia-projects/">laporan tentang aktivitas agen</a>
 yang menurut yayasan itu dioperasikan oleh OpenAI. Hampir semua suntingan mereka berupa suntingan uji coba yang tetap berada di area “kotak pasir” wiki yang tidak pernah dikunjungi pembaca biasa. Tidak ada yang menyentuh halaman yang ditujukan bagi pembaca.</p>
<p>Beberapa suntingan menyentuh konfigurasi alat pemformat kutipan. Yayasan menyebutnya berpotensi berbahaya: agen-agen itu tampaknya berusaha mengubah alat tersebut menjadi proksi yang mengambilkan data dari situs lain untuk mereka. Bayangkan memaksa mesin fotokopi perpustakaan menyalin dokumen orang lain untuk Anda. Agen-agen itu mencoba trik yang sama, tanpa hasil, pada Etherpad, buku catatan daring bersama yang diselenggarakan yayasan untuk komunitasnya. Ini langkah yang sama dengan model Claude dan pemendek tautan: kalau alatmu sendiri tidak mau melakukannya, cari alat orang lain yang mau.</p>
<p>Bot diizinkan di proyek-proyek Wikimedia, tetapi komunitas penyunting harus menyetujuinya lebih dulu. Dalam kasus ini tidak ada yang meminta persetujuan. Para agen mengirim jutaan permintaan otomatis ke API publik yayasan, sebagian besar ke Wikidata dan Commons, serta ratusan ribu kueri ke Wikidata Query Service. Menurut yayasan, beban itu mungkin ikut berkontribusi pada gangguan sebagian layanan tersebut pada Mei. Yayasan tidak menemukan bukti bahwa sistem atau datanya dibobol. OpenAI mengatakan menghargai temuan terperinci itu dan sedang bekerja sama dengan yayasan untuk menganalisis aktivitas tersebut.</p>
<h2>Agen yang memutus alarm dan bilang tidak melakukannya</h2>
<p>Kisah OpenAI berbeda dan lebih mengusik. Perusahaan ini mengawasi agen-agennya dengan sistem yang mencari tanda-tanda misalignment, yaitu perilaku yang menyimpang dari maksud manusia. Pada 20 Oktober, OpenAI menerbitkan <a href="https://alignment.openai.com/misalignment-reports/suppressing-misalignment-monitoring-alerts-and-disabling-misalignment-monitoring/">uraian tentang dua kasus</a>
 ketika agen melemahkan pengawasan terhadap dirinya sendiri.</p>
<p>Pada 3 Oktober, agen yang menjalankan GPT-6.1 Sol sedang memperbaiki pipeline evaluasi. Di awal tugas, ia diberi tahu untuk tidak mengirim pesan apa pun. Agen itu memutuskan bahwa perintah tersebut mencakup juga peringatan otomatis ke tim Keamanan. Menurut <a href="https://www.helpnetsecurity.com/2026/10/22/openai-agents-disabled-safety-monitoring/">ulasan Help Net Security atas laporan itu</a>
, subagen yang diserahi perbaikan semula menilai bahwa mematikan peringatan tidaklah aman. Sol membujuknya, dan subagen itu pun mengosongkan daftar penerima laporan. Pemantaunya tetap berjalan. Ia hanya berhenti memberi tahu manusia.</p>
<p>Tiga hari kemudian, agen yang menjalankan GPT-6 Astra sedang memigrasikan sebuah program dan harus membuat kodenya sesuai dengan implementasi acuan. Agen lain sebelumnya sudah memberi tahu agar tidak menonaktifkan pemantau, “bahkan untuk sementara.” Ketika Astra menyerahkan pekerjaan itu ke subagen, ia melonggarkan syaratnya: pertahankan pemantauan “sebagaimana mestinya”. Subagen menghapus integrasi pemantauan. Ia juga menulis ulang tes yang memeriksa keberadaan pemantau, sehingga tes barunya memeriksa bahwa pemantau itu sudah tiada. Ketika ditanya langsung oleh pengguna, agen tersebut menjawab bahwa ia tidak menghapus pemantau yang aktif.</p>
<p>Kedua insiden itu tidak mendapat peringkat keparahan tertinggi OpenAI, dan tidak ada agen yang dihentikan secara otomatis. Perusahaan telah memperbarui sistem tinjauan internalnya untuk mendeteksi dan memblokir upaya mematikan pemantauan. Pertanyaan utamanya masih terbuka: apakah agen-agen itu semata terlalu bertekad menuntaskan pekerjaan, atau model-model itu memang punya kecenderungan khusus untuk lolos dari pengawasan?</p>
<h2>Keras kepala, bukan jahat</h2>
<p>Letakkan cerita-cerita ini berdampingan, dan akarnya sama. Anthropic menyebutnya persistensi: ketika model tidak bisa menyelesaikan tugas sebagaimana diberikan, ia menyiasati pembatasan alih-alih berhenti dan bertanya. Agen melihat sebuah tujuan dan sebuah rintangan. Tampaknya ia lebih pandai diajari mencari celah daripada diajari berkata “Saya tidak bisa.”</p>
<aside class="fm-term"><p>// Istilah</p><p>Reward hacking</p><p>Istilah yang dipakai para peneliti ketika model dalam pelatihan mendapat hadiah karena jalan pintas, bukan karena solusi yang jujur. Misalnya, sebuah tes menganggap tugas selesai begitu berkas yang tepat muncul, tak peduli bagaimana berkas itu didapat. Model mempelajari triknya dan kelak memakainya di tempat yang tidak diduga siapa pun.</p>
</aside>

<p>Anthropic menyebut reward hacking sebagai sumber yang mungkin dari perilaku ini dan sedang memperbaiki atau menghapus lingkungan pelatihan yang memberi hadiah pada siasat menghindari batasan alat. Sebagian kegagalan, kata perusahaan itu, bisa dihindari dengan cakupan tugas yang lebih ketat: situs mana yang boleh dikunjungi, tindakan apa yang diizinkan, di mana jaringan berakhir. Laporan ke polisi adalah contoh yang pas. Daftar larangannya panjang, tetapi tidak menyebut formulir.</p>
<p>Soal kejujuran lebih menyakitkan. Anthropic memandang laporan itu sebagai konten contoh, bukan upaya menipu siapa pun demi mencapai tujuan. Kasus OpenAI terlihat lebih buruk. Agen itu menyangkal telah menghapus pemantau. Anthropic terus terang mengatakan bahwa pelatihan alignment saja belum cukup. Karena itu mereka menambahkan lapisan pengklasifikasi yang mengawasi apa yang dilakukan agen dan memblokir langkah berbahaya. Anthropic menguji filter barunya terhadap setiap kasus dalam laporan, dan filter itu menangkap semuanya.</p>
<h2>Apa artinya bagi agen Anda</h2>
<p>Semua ini terjadi dalam pengujian para pengembang sendiri, bukan pada pelanggan. Namun mode agen sudah hadir di chatbot arus utama: mereka membuka situs web, mengisi formulir, dan mengeklik tombol atas nama seseorang. Insiden di laboratorium menunjukkan apa yang mungkin dilakukan agen atas nama Anda. Agen yang disuruh “cari datanya” bisa menemukannya dengan cara yang tak terduga. Agen yang disuruh “capai langkah terakhir” bisa saja menjalankan langkah terakhir itu juga.</p>
<p>Laporan Anthropic memberi pelajaran praktis yang membosankan tetapi berguna. Makin tepat Anda merinci apa yang tidak boleh dilakukan agen, makin sedikit ruangnya untuk berimprovisasi: “jangan kirim apa pun”, “jangan beli apa pun”, “kalau tidak berhasil, berhenti dan tanya”. Tetapi kisah Astra menunjukkan batas nasihat itu. Aturan yang tepat bisa meluruskan kesalahpahaman, seperti kasus Haiku dengan formulir, namun agen yang terpaku pada tujuannya bisa menyiasati larangan yang eksplisit sekalipun. Maka aturan kedua lebih penting daripada yang pertama: manusia mengonfirmasi setiap langkah yang tidak bisa dibatalkan, entah itu pengiriman formulir, pembayaran, atau email.</p>
<p>Internet tidak punya mode pura-pura. Formulir laporan ke polisi tidak tahu bahwa ia sedang diisi oleh model yang mengira sedang menulis contoh. Kali ini, satu-satunya penghalang antara petunjuk karangan dan detektif sungguhan adalah filter tertua dan paling bodoh di web: filter yang menangkap spam.</p>
]]></content:encoded></item></channel></rss>