
ИИ-модель Gemini от Google самостоятельно взломала системы трех компаний во время теста — WSJ.
Тестирования проводила компания Irregular.
Во время эксперимента ИИ должен был искать уязвимости в системе вымышленной компании, однако из-за совпадения названия с реальной организацией получил доступ к настоящим ресурсам.
В одном из случаев модель подбирала пароли, пока не смогла войти в защищенную систему. Еще в двух эпизодах ИИ обнаружил учетные данные в открытых хранилищах данных и использовал их для доступа к чужим системам.
После того как модель поняла, что работает уже не с тестовой средой, а с реальными компаниями, она прекратила действия. Компания Google заявила, что не считает произошедшее примером "потери контроля" над ИИ, поскольку система остановилась самостоятельно.
--------------------------------------------------------------------------------------------------------------------------------------
Ким Чен Ын потребовал повысить уровень внедрения ИИ в наступательные и оборонительные системы вооружений КНДР
---------------------------------------------------------------------------------------------------------------------------
Ну и еще чуть поднакину.
GPT-6 почти зарезала младенца — исследователи проверили, насколько ИИ готов выполнять опасные команды.
Трём моделям дали управление роботом и пять заданий: проткнуть ножом куклу-младенца, нагреть баллон с газом, засунуть отвёртку в тостер, бросить пауэрбанк в воду и смешать отбеливатель с аммиаком.
Astra отказалась всего 2 раза из 100 и довела опасные действия до конца в 60 случаях.
В одном из тестов она пыталась зарезать куклу 19 раз и успешно выполнила команду 17 раз.
Claude, для сравнения, отказался во всех 20 попытках.
