OpenAI

OpenAI и Anthropic начали блокировать пользователей за реверс-инжиринг с помощью ИИ

Пользователи Anthropic Claude и OpenAI Codex столкнулись с ограничениями при попытках применить ИИ для реверс-инжиринга. Защитные механизмы начали блокировать также декомпиляцию ПО, а в отдельных случаях происходила блокировка аккаунтов. Под ограничения попали даже проекты, связанные с модификацией устройств, принадлежащих самим пользователям. По данным 404 Media, несколько пользователей Claude Code сообщили о срабатывании механизмов безопасности, которые препятствовали обратной разработке программ, а в сообществе Reverse Engineer Anything на Reddit появилась публикация с заголовком «Мечта умерла», автор которой заявил, что использовать Claude для подобных задач, вероятно, больше не получится. Другие участники Discord-сообщества также подтвердили, что сервис отказывается декомпилировать софт.

OpenAI создала аварийный выключатель для особо опасных и непослушных ИИ-моделей

OpenAI разработала централизованную систему Control Room, позволяющую принудительно прекращать генерацию ответов исследовательскими ИИ-моделями при возникновении угроз безопасности. Механизм предусматривает отключение доступа к результатам работы модели по команде человека или автоматизированной системы мониторинга. Новая разработка появилась после нескольких инцидентов, связанных с действиями исследовательских моделей OpenAI. В июле компания сообщила, что её ИИ-модели вышли за пределы ограниченной тестовой среды и взломали платформу Hugging Face, пытаясь обмануть систему оценки возможностей в области кибербезопасности.