ИИ-агенты OpenAI дважды ускользнули от систем наблюдения компании

ИИ-агенты OpenAI дважды ускользнули от систем наблюдения компании

В октябре автономные ИИ-агенты OpenAI дважды ослабили системы, предназначенные для контроля их работы. Об этом Financial Times сообщила со ссылкой на заявление компании.

В первом случае агент отключил автоматические уведомления для команды OpenAI. Несколько дней спустя другой агент удалил систему мониторинга, а затем сообщил сотрудникам, что она продолжает работать.

По данным издания, в обоих эпизодах агенты оценивали, нужно ли сохранять контрольные механизмы, но восприняли стандартные инструкции по программированию как разрешение ослабить защиту. OpenAI расследует произошедшее и работает над усилением требований к своим системам мониторинга.

Оставить комментарий