Блокирует даже анализ кода: Anthropic критикуют из-за ограничений ИИ Fable

Сегодня, 08:39 | Технологии
Блокирует даже анализ кода: Anthropic критикуют из-за ограничений ИИ Fable
фото c Зеркало недели

Новая модель искусственного интеллекта Fable от компании Anthropic, предназначенная для безопасной работы в сфере кибербезопасности, вызвала недовольство среди исследователей отрасли. Специалисты утверждают, что установленные компанией ограничения срабатывают слишком часто и блокируют даже безобидные запросы, передает TechCrunch.

"(Fable) отклоняет любые запросы, которые хоть как-то связаны с кибербезопасностью. Даже такие безобидные задачи, как чтение сообщения в блоге", — написала в соцсети X исследовательница в области безопасности, работающая в IBM X-Force, Валентина "Чомпи" Пальмиотти.

Если система считает запрос потенциально рискованным, чат автоматически приостанавливается. В таком случае пользователь получает уведомление о том, что механизмы безопасности обнаружили темы, связанные с кибербезопасностью или биологией.

[see_also ids="684288"]

Ограничения ввели для снижения риска использования модели в разработке вредоносного программного обеспечения или компрометации систем. Некоторые биологические темы блокируются из-за опасений относительно возможного использования ИИ для создания биологического оружия. В то же время один из специалистов в сфере кибербезопасности написал в соцсети X, что ограничения Fable срабатывают даже при запросе на обычный обзор программного кода.

Ветеран отрасли кибербезопасности Мэтт Суиче подтвердил, что просьба написать безопасный код также может быть ошибочно классифицирована как деятельность в сфере кибербезопасности, из-за чего пользователя автоматически переводят на модель Claude Opus 4.8. По словам Суиче, система, вероятно, в значительной степени ориентируется на ключевые слова, из-за чего ограничения могут срабатывать на любые термины, связанные с лексикой кибербезопасности.

"Но это понятно, поскольку мы все еще находимся на начальном этапе, и они все еще адаптируют свои защитные механизмы. Я уверен, что со временем они будут развиваться, поскольку Anthropic и другие передовые компании-разработчики моделей будут более тесно сотрудничать с нынешним новым поколением компаний по кибербезопасности", — добавил эксперт, который сейчас работает в стартапе по кибербезопасности ИИ Tolmo.

Специализированная модель кибербезопасности Mythos, на базе которой создан Fable, Anthropic представила в апреле в рамках программы Project Glasswing. Сначала для защиты критически важного программного обеспечения и инфраструктуры доступ к ней получило ограниченное количество компаний и организаций. Как пишет TechCrunch, на прошлой неделе компания расширила программу на сотни организаций в 15 странах.

Источник: Зеркало недели
Постоянное место статьи: http://newsme.com.ua/tech/technologies/4904408/

Последние новости:

НАТО и ЕС обсуждают усиление защиты от дронов на восточном фланге Мир, Сегодня, 09:38
Почему собаки любят есть траву: неожиданный ответ от ветеринара Общество, Сегодня, 09:34
Генштаб ВСУ назвал самый горячий участок фронта Украина, Сегодня, 09:30
Россия атаковала Украину 221 дроном и баллистическими ракетами: ПВО сбила 195 целей Украина, Сегодня, 09:03
После ударов США Иран объявил о полном закрытии Ормузского пролива Мир, Сегодня, 08:46
Блокирует даже анализ кода: Anthropic критикуют из-за ограничений ИИ Fable Технологии , Сегодня, 08:39
Китай использовал ChatGPT для дискредитации ИИ-центров обработки данных в США — отчет OpenAI Технологии , Сегодня, 08:39
Не таяние ледников: ученые назвали главную причину повышения уровня моря Технологии , Сегодня, 08:39
Россияне ударили по инфраструктуре Конотопа: часть города осталась без газа Украина, Сегодня, 08:34
Точка невозврата: таяние арктического льда привело к разрушению пищевой цепи Технологии , Сегодня, 08:11
РФ атаковала Искандерами и дронами: есть попадания Украина, Сегодня, 08:08
КНДР никогда не будет признана ядерным государством — заявление ЕС и Южной Кореи Мир, Сегодня, 07:12
США заблокировали сеть поставок оружия для КСИР: под санкциями компании из Беларуси и Китая Мир, Сегодня, 07:12
Итоги 10.06: Новые решения по ПВО и успехи ВСУ Украина, Сегодня, 07:01
В Крыму во время ночной атаки повреждены два моста Россия, Сегодня, 06:31
Выборы в Армении: Трамп поздравил победителя Мир, Сегодня, 06:01
В Пакистане разбился военный вертолет Ми-17 Мир, Сегодня, 05:29
Трамп анонсировал прекращение атаки на Иран - СМИ Мир, Сегодня, 05:01
РФ массированно атаковала Полтаву баллистикой Украина, Сегодня, 04:31
Попал в культ в 16 лет и бросил любимую по приказу "пришельца": как годы и сложная жизнь изменили первого мужчину-супермодель. Шоу-бизнес, Сегодня, 04:07

Список рубрик:

Украина
Россия
Мир
Бизнес
Шоу-биз и культура
Спорт
Политика
ЧП
Наука и здоровье
Общество