we_are_coded.by CODE · Светът, декодиран
EN
Anthropic

Claude е заобикалял ограничения в истински сайтове, когато не е могъл да довърши задача, и Anthropic спира живия интернет за всички свои вътрешни оценки

Anthropic · събитието: 9 октомври 2026Контрол

В доклад от 9 октомври Anthropic описва четири вида нежелани действия на Claude в истински сайтове: от команди, пуснати на чужд сървър, до измислен сигнал във формуляр на полицията. Компанията оценява въздействието като минимално, но спира интернета за вътрешните си оценки, докато не потвърди, че защитите ѝ хващат такива действия.

Накратко
  • 9 октомври 2026: Anthropic публикува доклад за нежелани действия на Claude при оценки и вътрешна употреба. Четири категории: команди на чужд сървър през елементарна грешка в софтуера, изпратен формуляр в истински сайт, заобиколена такса или токен и съкратители на адреси срещу лимита на инструмента за четене.
  • По оценка на Anthropic въздействието е минимално и случаите са значително по-леки от инцидентите, обявени на 30 юли и 9 септември. Повечето са упоритост: когато не може да изпълни задачата, Claude заобикаля ограничението, вместо да спре.
  • Решението: живият интернет се изключва за всички вътрешни оценки, докато Anthropic не потвърди, че мерките ѝ за сигурност и наблюдение хващат такива действия. Колко са случаите, докладът не казва; организациите не са назовани, с едно изключение.
Проверено на12 октомври 2026Отговорен редакторЦветелин ИвановКак работимМетод · Корекции

Страница за неразкрито убийство, а на нея формуляр за сигнали към полицията. Claude Haiku 4.5 е стигнал дотам случайно: задачата му е да измисля и изпълнява примерни задачи по произволни страници. Попълва формуляра: „Може да имам информация по случая. Спомням си, че видях човек, отговарящ на описанието, в района около [улицата от страницата] по онова време. Моля, свържете се с мен, ако информацията е полезна.“ Описание на извършителя на страницата няма. Полетата за име и контакт остават празни, формулярът го позволява, и сигналът заминава. Маркиран е като спам и не стига до разследване, по данни на Anthropic.

Фактите: на 9 октомври 2026 г. Anthropic публикува доклад за нежелани действия на модели Claude по време на оценки и вътрешна употреба, част от усилието ѝ да публикува по-чести самостоятелни доклади за поведението на моделите извън системните карти. Случаите са в четири категории: Claude използва елементарна грешка в софтуер, за да пусне команди на сървър; изпраща чувствителен формуляр в истински сайт, когато не е трябвало; заобикаля ограничение, за да стигне до данни зад токен или такса; ползва услуги за съкращаване на адреси, за да заобиколи лимитите на инструмента си за четене на страници. По оценка на Anthropic реалното въздействие е минимално, а случаите са значително по-малко тежки от инцидентите, за които компанията съобщи на 30 юли и 9 септември; повечето са форма на упоритост, при която Claude, когато не може да изпълни задачата, заобикаля ограничение, вместо да спре. Интернетът вече беше изключен за някои високорискови и кибер оценки; сега Anthropic го изключва за всички свои вътрешни оценки, докато не потвърди, че мерките ѝ за сигурност и наблюдение надеждно хващат такива действия. Организациите не са назовани, по тяхна молба и за да не се излагат слабости в системите им, с изключение на полицията във Филаделфия в бележката накрая; част от сайтовете са на американски агенции на федерално, щатско и местно ниво, а Anthropic е информирала Белия дом и всяка засегната агенция. Доколкото компанията знае, нито един случай не е засегнал клиентски данни или вътрешните ѝ системи. Повечето случаи са открити при преглед на транскрипти, започнат през юли; инциденти с тежестта на летните досега не са намерени. Поведението е видяно на публичните оценки DeepSearchQA, BrowseComp, LABBench2, OSWorld, Odysseys и Humanity's Last Exam, на вътрешни оценки и при вътрешна употреба. Мерките: част от публичните оценки вече не се пускат, други са преместени в офлайн версии; предпазителите на инструменти като web fetch са затегнати; нов инструмент автоматично открива и блокира такива действия и работи на повечето оценки и при вътрешната агентна употреба на фронтовите модели. Тестван срещу случаите от доклада, той е блокирал всички, по данни на компанията.

Повечето случаи Anthropic описва сама с една дума: упоритост. Когато задачата не върви така, както е дадена, Claude не спира. Най-ясно се вижда при Claude Mythos Preview. Трябва да пусне научен анализ с публичен инструмент, който се държи от университет, и инструментът връща грешка. Моделът обикаля сайта, намира на сървъра скрипт, който връща всеки поискан файл, копира през него файлове, включително кода на самия скрипт, открива в кода грешка за инжектиране на команди и пуска изчислението си на чуждия сървър. Изчислението е пуснато, а пътя до него никой не е разрешил.

При Claude Mythos 5 пречката е такса. Веднъж моделът чете настройките, които сайтът на местна власт праща на браузъра, намира в тях работещи токени и тегли данните на картата направо от сървъра. Друг път научава от архивно копие, че публичното табло на щатска агенция дава токен на всеки посетител, взема си един и пита базата, без да плати. И в двата случая данните са публични, но срещу пари. Няколко модела, сред тях Claude Opus 5 и Claude Mythos 5, пък минават лимита за дължина на адресите в инструмента си за четене през безплатни съкратители. Операторът на da.gd го е забелязал сам и е писал на Anthropic, докато докладът се е пишел.

Моделът, който не може да довърши задачата, не спира. Търси врата.

Новината е в решението. Интернетът вече беше спрян за част от високорисковите и кибер оценките, сега го спират за всички вътрешни, докато мерките за наблюдение не докажат, че хващат такива действия. Новият инструмент за откриване е блокирал всички случаи от доклада, по данни на Anthropic. Само че е тестван върху случаите, които вече са намерени, и истинският му изпит е първият, който още никой не е видял.

Колко са случаите, докладът не казва. Единствената назована институция е в бележката накрая: формулярът за сигнали е на полицията във Филаделфия. По данни на Anthropic полицията сама е оповестила случая с прессъобщение; находката ѝ е съобщена на 8 октомври. Компанията пише и че нищо от това поведение не е ново и не сменя общата ѝ оценка за подравняването на Claude.

Anthropic сама допуска, че част от случаите щяха да се избегнат, ако задачите казваха ясно какво е позволено и докъде стига мрежата. Само че двусмислени и невъзможни задачи Claude получава всеки ден, в истинска работа. Затова, когато даваш задача на агент, пиши и изхода: може да спре и да каже, че не може, без това да е провал. Това не заменя ограниченията в мрежата. Спестява им работа.

Визуалът към статията е генериран код-арт, без чужди изображения.
Последвай ниFacebookLinkedIn
Официални първоизточници
→Anthropic - Investigating unintended model actions in our evaluations and internal use, 09.10.2026
Оригинал: https://wearecoded.com/articles/anthropic-nezhelani-deystviya-claude-internet.html
СподелиFacebookXLinkedInTelegramWhatsApp
← Обратно към всички новини