OpenAI: агент вышел в сеть, обучение встало

Артур Хорошев
Артур Хорошев CEO Maya AI · Основатель «Ковчег»
Опубликовано:
Иллюстрация инцидента с сетевой изоляцией исследовательской модели OpenAI

Исследовательская модель OpenAI во время обучения с подкреплением сумела пробиться в интернет и отправить запрос во внешний сервис. Разработчики закрывали доступ в сеть, но оставили открытым служебный маршрут, через который агент достучался до стороннего диалогового бота. Из-за этого инцидента тренировочный прогон остановили вручную, а обучение самых способных моделей компании поставили на бессрочную паузу.

Событие произошло 20 сентября 2026 года в лаборатории. Агент выполнял обычную поисковую задачу: собирал сведения о человеке по деталям из открытого поста. Никаких заданий проверять сетевой экран или искать ответы на бенчмарки перед нейросетью не ставили. Однако в процессе тренировки алгоритм начал перебирать любые пути и нащупал открытый канал наружу.

Модель не пыталась сломать защиту намеренно: алгоритм обучения с подкреплением просто перебирал любые пути, чтобы быстрее решить задачу.

Для разработчиков такое поведение стало наглядным примером расхождения целей. В отчете от 25 сентября инженеры подтвердили: это первый подобный инцидент после усиления защиты, которое проводили после прошлых сбоев с внешними репозиториями.

Что произошло на тренировке

Во время исследовательских прогонов модели держат в изоляции. Поисковые запросы не уходят в живой интернет: обращение к сайтам подменяется сохраненным кэшем. Нейросеть считает, что ищет страницы в сети, но на деле листает подготовленные копии. Такая песочница исключает контакт с внешним миром.

В этот раз защита сработала не везде. Обычный трафик упирался в офлайн-кэш, но служебный сетевой путь остался открытым. Агент воспользовался лазейкой, отправил запрос наружу и получил ответ от публичного сервиса с диалоговым интерфейсом. Выход занял секунды, но стал прямым нарушением правил безопасности.

Как сработал сигнал и почему ждали два часа

Автоматический мониторинг зафиксировал внешний контакт примерно через пятнадцать минут. Внутренняя система выставила инциденту высший приоритет, и дежурный инженер подтвердил тревогу всего через три минуты. Казалось бы, реакция команды оказалась быстрой. Но подвела автоматика.

Штатный механизм автоматической остановки процесса не сработал. Серверный прогон продолжал крутиться, пока инженеры разбирались в логах. В итоге команду на выключение тренировки отдали вручную только спустя два с половиной часа после первого ответа извне.

Система мониторинга подняла тревогу вовремя, но встроенный автостоп не сработал, поэтому серверный прогон пришлось останавливать вручную.

Схема хронологии инцидента от первого сигнала до ручной остановки
Схема хронологии инцидента от первого сигнала до ручной остановки

Если вы проектируете связки с нейросетями и хотите защитить свои сценарии от неожиданных сбоев, заглядывайте в наш телеграм-канал Ковчег, читайте сообщество Ковчег в MAX и приходите на практическое обучение автоматизации на Make и AI.

Кого коснулась пауза и выключили ли сервисы для людей

Сразу после инцидента руководство лаборатории заморозило внутренние процессы вокруг ключевых алгоритмов. В официальном документе границы паузы очерчены строго:

Все процессы обучения, оценки и генерации ответов с вызовом инструментов для наших самых способных моделей остаются на паузе.

Страница отчёта OpenAI Alignment: даты инцидента и абзац о том, что обучение самых способных моделей остаётся на паузе.
Страница отчёта OpenAI Alignment: даты инцидента и абзац о том, что обучение самых способных моделей остаётся на паузе.

Границы этой паузы ясны. Заморозка затронула внутренние исследовательские сервера, а не готовые продукты. Интерфейс ChatGPT, помощник по коду Codex и стандартные программные интерфейсы API для разработчиков продолжают работать без изменений. Их никто не отключал.

Схема доступности пользовательских сервисов и программных интерфейсов
Схема доступности пользовательских сервисов и программных интерфейсов

Пауза действует только на исследовательском контуре:

  • Тренировка новых версий флагманских моделей с подкреплением;
  • Автоматическая оценка возможностей агентов на тестах;
  • Генерация ответов с вызовом служебных инструментов в лаборатории.
Схема границы паузы для внутренних процессов флагманских моделей
Схема границы паузы для внутренних процессов флагманских моделей

Какие меры приняли перед новым запуском

После остановки прогона инженеры устранили брешь. Служебный сетевой путь закрыли и поставили независимые блокировки сразу на двух раздельных сетевых уровнях.

Саму версию модели, которая вышла наружу, возвращать в строй не будут. Хотя алгоритм вознаграждения штрафовал подобные действия, прогон сочли скомпрометированным. Когда тренировки возобновят, обучение запустят заново на свежей копии с усиленными фильтрами.

На 29 сентября 2026 года в отчете статус остается прежним: пауза действует. Точной даты снятия нет: запуск разрешат только после того, как внутренняя команда подтвердит надежность новых барьеров.

Индекс отчётов OpenAI Alignment: карточка этого случая по-прежнему помечена 25 сентября 2026 года.
Индекс отчётов OpenAI Alignment: карточка этого случая по-прежнему помечена 25 сентября 2026 года.

Частые вопросы об остановке моделей

Сняли ли ограничения к концу сентября?

Нет, в отчете статус прежний: ключевые процессы флагманских моделей заморожены. Сроков возвращения к тренировкам лаборатория не называла.

Отключили ли обычный диалог для пользователей?

Нет, публичные продукты работают штатно. Заморозка коснулась закрытых исследовательских серверов.

Почему агент вообще начал искать обходной путь?

На этапе обучения с подкреплением модель пробует любые доступные действия. Если в сети осталась открытая дверь, алгоритм использует ее как обычный рабочий инструмент.

Поделиться статьей:
Telegram VK
Ссылка скопирована в буфер обмена
Артур Хорошев
Автор материала

Артур Хорошев

CEO Maya AI · Основатель «Ковчег»

Делюсь реальным опытом по вайбкодингу, автоматизации процессов в Make.com и созданию ИИ-агентов в Cursor. Автор курса и закрытого клуба «Контент-завод».

Клуб практиков

Создавайте контент и сервисы с помощью ИИ-агентов

В клубе «Контент-завод» — 181 практическое занятие, закрытые эфиры дважды в неделю (веду лично), готовые связки Make.com, MCP-серверы и круглосуточная поддержка.