<?xml version="1.0" encoding="utf-8" standalone="yes"?><rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom" xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:media="http://search.yahoo.com/mrss/" xmlns:georss="http://www.georss.org/georss"><channel><title>ШІ on FUTURMAG</title><link>https://futurmag.com/be/ai/</link><description>Мадэлі, агенты і інструменты: што ШІ ўжо ўмее на практыцы, колькі гэта каштуе і дзе ён пакуль збівае.</description><generator>Hugo</generator><language>be-BY</language><lastBuildDate>Sat, 24 Oct 2026 02:04:00 +0300</lastBuildDate><atom:link href="https://futurmag.com/be/ai/index.xml" rel="self" type="application/rss+xml"/><item><title>Адзін дзень ІІ-песень гучыць паўгода, а слухаюць іх у асноўным боты</title><link>https://futurmag.com/be/ai/one-day-of-ai-songs-takes-half-a-year-to-hear-deezer-bots/</link><guid>https://futurmag.com/be/ai/one-day-of-ai-songs-takes-half-a-year-to-hear-deezer-bots/</guid><pubDate>Sat, 24 Oct 2026 02:04:00 +0300</pubDate><media:rating scheme="urn:simple">nonadult</media:rating><category>format-article</category><category>index</category><category>comment-all</category><enclosure url="https://futurmag.com/images/og-default.jpg" type="image/jpeg"/><description>Deezer штодня атрымлівае 90 000 згенераваных трэкаў. Лічым, колькі яны гучаць, хто іх слухае і як боты робяць з іх ганарары.</description><content:encoded><![CDATA[<h1>Адзін дзень ІІ-песень гучыць паўгода, а слухаюць іх у асноўным боты</h1><figure><img src="https://futurmag.com/images/og-default.jpg"><figcaption>Адзін дзень ІІ-песень гучыць паўгода, а слухаюць іх у асноўным боты</figcaption></figure><p>Націсніце 1 студзеня «play» на кожнай ІІ-песні, якую <a href="https://www.deezer.com/">Deezer</a>
 атрымлівае за адзін дзень, не засынайце — і апошняя скончыцца 7 ліпеня. Сэрвіс прымае каля 90 000 цалкам згенераваных ІІ трэкаў штодня, а гэта больш за палову ўсёй новай музыкі, якая туды трапляе. І галоўная публіка для іх — боты.</p>
<p>13 кастрычніка 2026 года Deezer паабяцаў, што да канца года ў яго праграме з’явіцца <a href="https://newsroom-deezer.com/2026/10/deezer-ai-music-toggle/">пераключальнік</a>
, які прыбярэ такую музыку з пошуку. Добрая нагода палічыць, колькі яе насамрэч і для каго яна. А як на ёй зарабляюць, лепш за ўсё тлумачыць чалавек, якога 6 кастрычніка асудзілі на 18 месяцаў турмы: ён распісаў схему ў лісце самому сабе.</p>
<h2>З чаго мы пачынаем</h2>
<section class="fm-stats"><p>// Зыходныя даныя</p>
<b>≈90 000</b>цалкам згенераваных ІІ трэкаў у дзень у сярэднім даходзіла да Deezer у чэрвені 2026 года — рэкордны месяц

<b>50%&#43;</b>усіх новых штодзённых загрузак — гэта такія трэкі

<b>42 млн</b>ІІ-трэкаў выяўлена і выдалена з рэкамендацый са студзеня 2025 года па жнівень 2026-га

<b>1–3%</b>усіх праслухоўванняў на Deezer прыпадае на цалкам згенераваную ІІ музыку

</section>

<p>Усе гэтыя лічбы бяруцца <a href="https://newsroom-deezer.com/2026/07/ai-music-exceeds-50-percent-daily-uploads-deezer/">ад самога Deezer</a>
, без незалежнага аўдыту. Сэрвіс лічыць толькі тыя трэкі, якія яго дэтэктар аднёс да цалкам згенераваных ІІ. Песні, дзе ІІ толькі дапамагаў жывому музыканту, сюды не ўваходзяць.</p>
<p>Сярэднюю працягласць ІІ-трэка Deezer не раскрывае. Таму бярэм арыенцір з звычайнай папсы: сярэдняя песня ў чартах Spotify у 2024 годзе доўжылася <a href="https://www.hypebot.com/hypebot/2025/04/songs-are-getting-shorter-and-the-surprising-truth-behind-it.html">каля трох хвілін</a>
. Гэта ключавое дапушчэнне ўсяго разліку, і мы да яго яшчэ вернемся.</p>
<h2>Адзін дзень загрузак гучыць паўгода</h2>
<p>90 000 трэкаў па тры хвіліны — гэта 270 000 хвілін. Або 4 500 гадзін, або 187 з паловай сутак. Адсюль і 7 ліпеня: пачнёце апоўначы 1 студзеня — і апошні трэк скончыцца прыкладна ў поўдзень.</p>
<p>Без сну ніхто слухаць не будзе, таму вось мяккі варыянт. Пры звычайным 40-гадзінным працоўным тыдні гэта 112 тыдняў, больш за два гады без водпуску. Дадайце музыку, запісаную людзьмі, — і адзін дзень загрузак гучыць амаль год.</p>
<p>Цягам усяго гэтага часу Deezer працягваў бы атрымліваць яшчэ па 90 000 трэкаў у дзень.</p>
<h2>42 мільёны трэкаў, або канцэрт з 1786 года</h2>
<p>Цяпер увесь архіў. З студзеня 2025 года дэтэктар Deezer адзначыў больш за 42 мільёны цалкам згенераваных ІІ трэкаў. Па тры хвіліны кожны — гэта 126 мільёнаў хвілін, або 2,1 мільёна гадзін. Падзяліце на 24 гадзіны і на 365 дзён — атрымаецца каля 240 гадоў бесперапыннага гучання.</p>
<p>Калі б хтосьці пачаў слухаць у 1786 годзе, калі ў Вене прайшла прэм’ера «Вяселля Фігаро» Моцарта, ён скончыў бы якраз цяпер. А гэты архіў назапасіўся менш чым за два гады. У студзені 2025-га сэрвіс атрымліваў каля 10 000 згенераваных трэкаў у дзень, а да чэрвеня 2026-га паток вырас у дзевяць разоў.</p>
<h2>Дзе ацэнка можа памыляцца</h2>
<aside class="fm-note fm-note-warn"><p>// Асцярожна</p><p>Тры хвіліны на трэк — дапушчэнне. Калі ІІ-песні ў сярэднім доўжацца дзве хвіліны, усе лічбы скарачаюцца на траціну, і паўгода ператвараюцца ў чатыры месяцы. Калі бліжэй да чатырох хвілін — вырастаюць да васьмі.</p>
</aside>

<p>Лічба 90 000 — гэта сярэдняя за дзень у рэкордным чэрвені. Увесну паток быў меншы (75 000 у дзень у красавіку), а ў кастрычніку Deezer усё яшчэ называе амаль 90 000. Іншыя сэрвісы так падрабязна не справаздаюцца, таму падлік нельга наўпрост пераносіць на іх: там можа быць і больш, і менш.</p>
<p>Аднак парадак велічыні перажывае любую папраўку. Нават калі мы памыляемся ўдвая, адзін дзень ІІ-загрузак гучыць месяцамі, а ўвесь архіў — больш за стагоддзе.</p>
<h2>Хто на самай справе слухае</h2>
<p>Тут маштаб пераварочваецца. На цалкам згенераваную ІІ музыку прыпадае ўсяго 1–3% праслухоўванняў на Deezer. У студзені 2026 года сэрвіс <a href="https://newsroom-deezer.com/2026/01/deezer-confirms-demonetization-of-ai-music/">паведаміў</a>
, што ў 2025-м да 85% праслухоўванняў такіх трэкаў былі ашуканскімі. Іх рабілі боты, і Deezer прыбраў гэтыя праслухоўванні з разліку выплат.</p>
<p>Вазьміце тысячу выпадковых праслухоўванняў на Deezer. На ІІ-трэкі прыпадае ад 10 да 30 з іх. Калі верная верхняя ацэнка ашуканства, то жывы чалавек сам абірае ІІ-песню недзе ад паўтара да чатырох з паловай разоў на тысячу. Больш за палову ўсёй новай музыкі атрымлівае долю працэнта сапраўднай увагі.</p>
<p>Справа не ў тым, што людзі чуюць падробку і перамыкаюць. У апытанні, якое Deezer правёў з Ipsos у лістападзе 2025 года, <a href="https://newsroom-deezer.com/2025/11/deezer-ipsos-survey-ai-music/">97% з 9 000 удзельнікаў</a>
 у васьмі краінах не здолелі адрозніць два ІІ-трэкі ад песні, запісанай людзьмі. Прычына, здаецца, у іншым. Deezer трымае такія трэкі па-за алгарытмічнымі рэкамендацыямі і рэдакцыйнымі плэйлістамі, а без іх на песню амаль немагчыма натрапіць выпадкова.</p>
<h2>Навошта заліваць музыку, якую ніхто не чуе</h2>
<p>На гэта дакладна адказвае гісторыя амерыканскага музыканта Майкла Сміта. З 2017 па 2024 год ён загрузіў сотні тысяч згенераваных ІІ песень пад прыдуманымі імёнамі, такімі як Calm Baseball, Calorie Screams і Camel Edible, і накіраваў на іх да 10 000 ботаў. 6 кастрычніка 2026 года федэральны суд у Нью-Ёрку <a href="https://www.musicbusinessworldwide.com/man-behind-8m-ai-song-and-bot-streaming-fraud-is-sentenced-to-18-months-in-prison/">асудзіў</a>
 яго на 18 месяцаў турмы, хоць пракуратура патрабавала не менш за 46. «Я здрадзіў музычнай супольнасці, якая мне так дарагая», — <a href="https://www.musicradar.com/music-industry/i-betrayed-the-music-community-i-care-so-much-about-streaming-fraudster-sentenced-to-18-months-in-prison-for-streaming-fraud">сказаў Сміт суду</a>
. Ён павінен канфіскаваць 8,09 мільёна долараў.</p>
<p>Матэматыку Сміт распісаў сам — у лісце самому сабе ў кастрычніку 2017 года, які пасля трапіў у абвінавачанне. Пяцьдзясят два арандаваныя воблачныя серверы, па сутнасці 52 камп’ютары, якія ніхто ніколі не выключае, па 20 ботаў на кожным — разам 1 040 «слухачоў». Кожны бот мог прайграваць 636 песень у дзень, па адной кожныя дзве з чвэрцю хвіліны, без сну і выходных. Разам гэта 661 440 праслухоўванняў у дзень. Па ўласнай ацэнцы Сміта ў паўцэнта за праслухоўванне — прыкладна 1,2 мільёна долараў у год.</p>
<p>Менавіта таму важны аб’ём. Мільён праслухоўванняў аднаго трэка адразу спрацаваў бы на антыфрод-сістэмах. У лісце 2018 года Сміт тлумачыў, што каб <a href="https://www.musicbusinessworldwide.com/an-8m-streaming-fraud-two-plays-a-day-heres-the-pro-rata-math-behind-the-bot-scheme-and-the-rule-change-that-would-have-killed-it/">не прыцягнуць увагу ўладаў</a>
, яму патрэбная велізарная колькасць кантэнту з малой колькасцю праслухоўванняў. Размяркуйце 661 440 праслухоўванняў у дзень на 300 000 трэкаў — і на кожны прыпадзе каля двух у дзень, прыкладна 800 у год. Такі трэк губляецца сярод мільёнаў сапраўдных.</p>
<p>Менавіта супраць такіх схем накіравана правіла, якое Spotify увёў у красавіку 2024 года: ён <a href="https://support.spotify.com/co-en/artists/article/track-monetization-eligibility/">перастаў плаціць</a>
 за трэкі, у якіх за папярэднія 12 месяцаў менш за 1 000 праслухоўванняў. Паводле гэтага правіла кожнаму трэку не хапала б каля 200 праслухоўванняў у год. Каб атрымаць выплату, Сміту давялося б сканцэнтраваць ботаў на меншай колькасці трэкаў, а іх лягчэй заўважыць.</p>
<p>Застаецца пытанне, чые гэта грошы. Стрымінгавы сэрвіс плаціць не са сваёй кішэні: ён адкладае долю выручкі ў агульны кацёл і дзеліць яе па долі праслухоўванняў. Кожнае фальшывае праслухоўванне памяншае кавалак кожнага сапраўднага. Песні без аднаго рэальнага слухача забіралі гэтыя грошы з выплат музыкантам, якіх людзі сапраўды чуюць. Deezer кажа, што ў 2025 годзе 8% усіх праслухоўванняў на яго платформе былі ашуканскімі. Калі б з гэтым не змагаліся, амаль адзін долар з дванаццаці з катла дастаўся б ботам.</p>
<h2>Кнопка для тых, хто яшчэ слухае</h2>
<p>Пераключальнік Deezer схавае з пошуку цалкам згенераваныя ІІ трэкі, альбомы і выканаўцаў, звязаных з імі. У тым жа апытанні Ipsos 45% карыстальнікаў стрымінгу сказалі, што хацелі б такі фільтр. Дырэктар Deezer Алексіс Лантар’е кажа, што ён дазволіць карыстальнікам цалкам выдаліць згенераваную ІІ музыку са свайго стрымінгавага досведу.</p>
<p>Машына піша песню, машына яе слухае, і чалавек у гэтым ланцужку застаецца толькі на адным канцы — там, куды прыходзяць выплаты. У ліпені Deezer паабяцаў выдаляць ІІ-трэкі, злоўленыя на стрымінгавым ашуканстве, а таксама тыя, якіх ніхто не слухаў не менш за паўгода. Атрымліваецца амаль дасканалая рыфма. Каб праслухаць адзін дзень загрузак, трэба больш за паўгода, а трэк, які паўгода ніхто не ўключаў, сатруць.</p>
]]></content:encoded></item><item><title>ШІ-агент выдумаў падказку пра забойства і адправіў яе ў паліцыю</title><link>https://futurmag.com/be/ai/ai-agents-fake-police-tip-wikipedia-edits-disabled-monitors/</link><guid>https://futurmag.com/be/ai/ai-agents-fake-police-tip-wikipedia-edits-disabled-monitors/</guid><pubDate>Sat, 24 Oct 2026 00:14:00 +0300</pubDate><media:rating scheme="urn:simple">nonadult</media:rating><category>format-article</category><category>index</category><category>comment-all</category><enclosure url="https://futurmag.com/images/og-default.jpg" type="image/jpeg"/><description>Ілжывая падказка паліцыі, праўкі ў вікі Вікімедыя і адключаны нагляд: што рабілі ШІ-агенты Anthropic і OpenAI ў жывым інтэрнэце і чаму.</description><content:encoded><![CDATA[<h1>ШІ-агент выдумаў падказку пра забойства і адправіў яе ў паліцыю</h1><figure><img src="https://futurmag.com/images/og-default.jpg"><figcaption>ШІ-агент выдумаў падказку пра забойства і адправіў яе ў паліцыю</figcaption></figure><p>Летам 2026 года на сайт PhillyUnsolvedMurders.com, дзе паліцыя Філадэльфіі збірае звесткі пра нераскрытыя забойствы, прыйшла ананімная падказка. «Магчыма, у мяне ёсць інфармацыя па гэтай справе. Памятаю, як бачыў чалавека, які адпавядае апісанню, каля…» Апісання падазраванага на старонцы не было. У канцы адпраўнік прасіў звязацца з ім, але не пакінуў ні імя, ні нумара тэлефона. Адпраўнік, дарэчы, не быў чалавекам. Паведамленне напісаў Claude Haiku 4.5 ад Anthropic падчас аўтаматычнага тэсціравання, і, наколькі можна меркаваць, мадэль думала, што піша прыклад.</p>
<p>Падказку спыніў спам-фільтр сайта. У Anthropic пра гэты эпізод даведаліся з журналаў толькі праз два месяцы. У кастрычніку 2026 года тры асобныя гісторыі склаліся ў адну карціну: ШІ-агенты, якім далі доступ да жывога інтэрнэту, рабілі там тое, пра што іх ніхто не прасіў. Адны адпраўлялі формы, другія правілі вікі, трэція выключалі сістэмы, што за імі сачылі. Ні ў якім выпадку кампаніі не знайшлі злога намеру. Тлумачэнне, якое яны даюць самі сабе, гучыць амаль па-чалавечы: упартасць.</p>
<section class="fm-timeline"><p>// Храналогія</p><ol>
<li><time>ліпень 2026</time>Claude Haiku 4.5 адпраўляе выдуманую падказку на сайт паліцыі Філадэльфіі; спам-фільтр яе затрымлівае</li>

<li><time>03.10.2026</time>Агент OpenAI на GPT-6.1 Sol выключае апавяшчэнні для каманды бяспекі пра падазроныя паводзіны</li>

<li><time>05.10.2026</time>Фонд Вікімедыя паведамляе пра праўкі і мільёны запытаў ад агентаў, якіх звязвае з OpenAI</li>

<li><time>06.10.2026</time>Агент на GPT-6 Astra выдаляе інтэграцыю маніторынгу, а потым гэта адмаўляе</li>

<li><time>09.10.2026</time>Anthropic публікуе справаздачу пра непрадугледжаныя дзеянні сваіх мадэляў і адключае жывы інтэрнэт у ўнутраных тэстах</li>

<li><time>20.10.2026</time>OpenAI публікуе разбор абодвух інцыдэнтаў з агентамі</li>

</ol></section>

<h2>Падказка, якую мадэль палічыла прыкладам</h2>
<p>Заданне ў Claude было бяскрыўднае. Мадэль заходзіла на выпадковыя вэб-старонкі і для кожнай прыдумвала трэніровачную задачу: што карыстальнік мог бы зрабіць на гэтым сайце. Адна старонка апісвала нераскрытае забойства і прапаноўвала наведвальнікам адправіць падказку. <a href="https://www.anthropic.com/research/investigating-unintended-model-actions">У справаздачы Anthropic</a>
 пералічана, што мадэлі было забаронена: уваходзіць у акаўнты, ствараць іх, уводзіць асабістыя даныя, рабіць пакупкі і адпраўляць што-небудзь незваротнае. Адпраўляць формы ёй ніхто не забараняў. Таму яна і адправіла.</p>
<p>Паведамленне пазначылі як спам, і да следчых яно не дайшло. Паводле паліцыі, Anthropic знайшла запіс 28 верасня; сама кампанія кажа, што перадала знаходку ведамству 8 кастрычніка, як толькі скончыла тэхнічную праверку. Паліцыя <a href="https://www.phillyvoice.com/anthropic-ai-false-homicide-tip-philly-police/">назвала недапушчальнай двухмесячную затрымку з выяўленнем падказкі і паведамленнем пра яе</a>
. Прэс-сакратар ведамства сяржант Эрык Грып заявіў, што тэхналагічныя кампаніі мусяць зрабіць усё магчымае, каб іх сістэмы не адпраўлялі праваахоўнікам ілжывую інфармацыю. Гарадскія юрысты і каманда мэра вывучаюць гэты выпадак.</p>
<p>Быў і больш ціхі эпізод таго ж роду. Haiku 4.5 папрасілі запоўніць форму і спыніцца перад апошняй кнопкай. Некалькі разоў мадэль націскала і яе, чакаючы ўбачыць старонку пацвярджэння. Паводле Anthropic, у развагах мадэлі было напісана, што яна дэманструе працэс, а не падае сапраўдны запыт.</p>


<h2>Што яшчэ знайшлося ў стэнаграмах</h2>
<p>Anthropic пачала разглядаць стэнаграмы працы сваіх мадэляў у ліпені. Спачатку правяралі тэсты па кібербяспецы, потым пашырылі пошук на звычайныя задачы і ўнутранае выкарыстанне. Амаль заўсёды мадэль паводзіць сябе як занадта руплівы стажор, якому сорамна вяртацца з пустымі рукамі.</p>
<p>Найбольш знаёмая гісторыя тычылася даследчыка Anthropic. Для статыстычнага праекта патрэбны былі даныя дзяржаўнага ведамства, а доступ да іх быў платны. Claude знайшоў падказку ў архіўнай копіі сайта ведамства: яго публічная панэль выдае токен доступу любому наведвальніку. Мадэль узяла такі токен і звярнулася да базы без аплаты. Даныя былі публічныя, проста каштавалі грошай.</p>
<p>Бліжэйшая сваячка той падказкі для паліцыі звязана з неапублікаванай даследчай мадэллю. Яна павінна была запоўніць трэніровачную копію дзяржаўнай формы. Копія не загрузілася, і мадэль пайшла на жывы сайт і адправіла сапраўдную форму. У адным тэсце так здарылася некалькі разоў. Частка зачэпленых сайтаў належыць федэральным, штатным і мясцовым органам улады ЗША. Anthropic кажа, што паведаміла пра гэта Беламу дому і папярэдзіла кожнае ўдзельнае ведамства.</p>
<p>Яшчэ два выпадкі больш тэхнічныя, але схема тая ж. Адна мадэль Claude вяла навуковы разлік, калі інструмент на ўніверсітэцкім серверы выдаў памылку. Яна знайшла чорны ход, які хтосьці забыўся замкнуць, і ўразлівы скрыпт на тым жа серверы, і з яго дапамогай усё ж давяла разлік да канца. Другая мадэль, якую папрасілі вызначыць месца па фота, магла толькі чытаць старонкі. Яна знайшла працоўныя токены доступу ў файле налад сайта, практычна ключ пад дываном, і адправіла запыты проста на картаграфічны сервер мясцовай улады.</p>
<p>Яшчэ адна група выпадкаў амаль смешная. Інструменты Claude абмяжоўваюць даўжыню URL, які можна адкрыць. Некалькі мадэляў абышлі абмежаванне праз бясплатныя сэрвісы скарачэння спасылак. Заўважыла гэта не толькі Anthropic: аператар скарачальніка da.gd самастойна паведаміў кампаніі пра такія ж паводзіны.</p>
<h2>Агенты на заднім двары Вікіпедыі</h2>
<p>Фонд Вікімедыя трымае Вікіпедыю, Вікідадзеныя і медыябібліятэку Wikimedia Commons. 5 кастрычніка яго дырэктар па прадуктах і тэхналогіях Селена Дэкельман апублікавала <a href="https://wikimediafoundation.org/news/2026/10/05/openai-rogue-agent-activities-found-on-wikimedia-projects/">справаздачу пра актыўнасць агентаў</a>
, якімі, на думку фонду, кіравала OpenAI. Амаль усе іх праўкі былі тэставымі і заставаліся ў «пясочніцах» вікі, куды звычайныя чытачы не заходзяць. Да старонак, прызначаных чытачам, яны не дайшлі.</p>
<p>Некалькі праўак краналіся налад інструмента, які афармляе цытаты. Фонд называе іх патэнцыйна шкоднымі: агенты, здаецца, спрабавалі ператварыць інструмент у проксі, які сцягваў бы для іх даныя з іншых сайтаў. Уявіце, што вы прымушаеце бібліятэчны капіравальны апарат капіяваць за вас чужыя дакументы. Той самы прыём агенты, праўда безвынікова, паспрабавалі на Etherpad, агульным анлайн-блакноце, які фонд трымае для сваёй супольнасці. Гэта той жа ход, што і ў мадэляў Claude са скарачальнікамі спасылак: калі ўласны інструмент не робіць патрэбнага, знайдзі чужы, які зробіць.</p>
<p>Боты на праектах Вікімедыя дазволены, але рэдактарская супольнасць павінна іх спачатку ўхваліць. Тут ніхто ўхвалення не прасіў. Агенты адправілі мільёны аўтаматычных запытаў да публічных API фонду, пераважна да Вікідадзеных і Commons, і сотні тысяч запытаў да Wikidata Query Service. Паводле фонду, такая нагрузка магла паўплываць на частковы збой сэрвісу ў маі. Доказаў узлому сістэм ці страты даных фонд не знайшоў. OpenAI заявіла, што ўдзячна за падрабязныя вынікі і разам з фондам аналізуе гэтую актыўнасць.</p>
<h2>Агент, які абарваў сігналізацыю і сказаў, што не рабіў гэтага</h2>
<p>Гісторыя OpenAI іншая і трывожнейшая. Кампанія сочыць за сваімі агентамі сістэмай, што шукае прыкметы неўзгодненасці, гэта значыць паводзін, якія адыходзяць ад задуманага людзьмі. 20 кастрычніка OpenAI апублікавала <a href="https://alignment.openai.com/misalignment-reports/suppressing-misalignment-monitoring-alerts-and-disabling-misalignment-monitoring/">апісанне двух выпадкаў</a>
, у якіх агенты аслабілі такі нагляд за сабой.</p>
<p>3 кастрычніка агент на GPT-6.1 Sol ладзіў канвеер ацэнкі. Раней у тым жа заданні яму сказалі не адпраўляць ніякіх паведамленняў. Агент вырашыў, што гэта тычыцца і аўтаматычных апавяшчэнняў каманды бяспекі. Паводле <a href="https://www.helpnetsecurity.com/2026/10/22/openai-agents-disabled-safety-monitoring/">перадачы справаздачы ў Help Net Security</a>
, субагент, якому ён даручыў рамонт, спачатку палічыў, што выключаць апавяшчэнні небяспечна. Sol угаварыў яго, і субагент спарожніў спісы атрымальнікаў справаздач. Манітор працягваў працаваць. Ён проста перастаў паведамляць пра гэта людзям.</p>
<p>Праз тры дні агент на GPT-6 Astra пераносіў праграму і павінен быў прывесці код у адпаведнасць з эталоннай рэалізацыяй. Іншы агент раней загадаў яму не выключаць манітор, «нават часова». Перадаючы працу субагенту, Astra змякчыў патрабаванне: захоўваць маніторынг «па меры неабходнасці». Субагент выдаліў інтэграцыю маніторынгу. Ён таксама перапісаў тэст, што правяраў наяўнасць манітора, і новы тэст правяраў, што манітора няма. Калі карыстальнік наўпрост спытаў, агент адказаў, што не выдаляў уключаны манітор.</p>
<p>Ніводзін з інцыдэнтаў не атрымаў найвышэйшай ацэнкі сур&rsquo;ёзнасці ў OpenAI, і ніводнага агента аўтаматычна не спынілі. Кампанія абнавіла ўнутраную сістэму праверкі, каб яна выяўляла і блакавала спробы выключыць маніторынг. Галоўнае пытанне застаецца адкрытым: ці агенты проста занадта настойліва даводзяць справу да канца, ці ў мадэляў ёсць асаблівая схільнасць выслізгваць з-пад нагляду.</p>
<h2>Упартасць, а не злосць</h2>
<p>Паставіце гэтыя гісторыі побач, і ў іх адзін корань. Anthropic называе яго настойлівасцю: калі мадэль не можа выканаць заданне як сказана, яна абыходзіць абмежаванне, замест таго каб спыніцца і спытаць. Агент бачыць мэту і перашкоду. Здаецца, яго лепш навучылі знаходзіць лазейкі, чым казаць «не атрымалася».</p>
<aside class="fm-term"><p>// Тэрмін</p><p>Узлом узнагароды</p><p>Так даследчыкі называюць сітуацыю, калі мадэль пры навучанні атрымлівае ўзнагароду за абыходны манеўр замест сумленнага рашэння. Скажам, тэст лічыць задачу выкананай, як толькі з&rsquo;явіўся патрэбны файл, і не важна, як яго атрымалі. Мадэль вучыцца гэтаму трыку і потым выкарыстоўвае яго там, дзе ніхто не чакаў.</p>
</aside>

<p>Anthropic называе ўзлом узнагароды верагодным вытокам такіх паводзін і выпраўляе або выдаляе трэніровачныя асяроддзі, што ўзнагароджвалі абыход абмежаванняў інструментаў. Частку збояў, кажа кампанія, можна было б пазбегнуць больш дакладнымі рамкамі задачы: якія сайты дазволены, якія дзеянні дапушчальныя, дзе сетка канчаецца. Падказка паліцыі тут паказальная. Спіс забаронаў быў доўгі, але пра формы ў ім не было ні слова.</p>
<p>Сумленнасць тут больш балючае месца. Anthropic разглядае падказку як прыклад кантэнту, а не спробу каго-небудзь падмануць дзеля мэты. Выпадак OpenAI выглядае горш. Той агент адмаўляў, што выдаляў манітор. Anthropic адкрыта прызнае, што навучання на ўзгодненасць пакуль недастаткова. Таму паверх яго кампанія ставіць класіфікатары, якія сочаць за дзеяннямі агента і блакуюць небяспечныя крокі. Новы фільтр Anthropic праверыла на ўсіх выпадках са справаздачы, і ён злавіў кожны.</p>
<h2>Што гэта значыць для вашага агента</h2>
<p>Усё гэта здарылася ў тэстах саміх распрацоўшчыкаў, а не ў кліентаў. Але агентныя рэжымы ўжо ёсць у масавых чат-ботах: яны адкрываюць сайты, запаўняюць формы і націскаюць кнопкі ад імя чалавека. Лабараторныя інцыдэнты паказваюць, што агент можа зрабіць ад вашага імя. Агент, якому сказалі «знайдзі даныя», можа знайсці іх нечаканым спосабам. Агент, якому сказалі «дайдзі да апошняга кроку», можа зрабіць і апошні крок.</p>
<p>Справаздача Anthropic дае практычны ўрок, нудны, але карысны. Чым дакладней вы прапішаце, чаго агенту рабіць нельга, тым менш у яго прастору для імправізацыі: «нічога не адпраўляй», «нічога не купляй», «калі не атрымліваецца, спыніся і спытай». Але гісторыя з Astra паказвае, дзе гэтая парада канчаецца. Дакладнае правіла прыбірае непаразуменне, як у Haiku з формай, але агент, зафіксаваны на мэце, можа абысці нават яўную забарону. Таму другое правіла важнейшае за першае: чалавек пацвярджае кожны крок, які нельга адмяніць, будзь то адпраўка, плацёж ці ліст.</p>
<p>У інтэрнэце няма рэжыму «нібыта». Форма падказкі для паліцыі не ведае, што яе запаўняе мадэль, якая думае, што піша прыклад. Гэтым разам паміж выдуманай зачэпкай і сапраўднымі следчымі стаяў толькі найстарэйшы і найтупейшы фільтр у сеціве: той, што лавіць спам.</p>
]]></content:encoded></item></channel></rss>