ИИ-агенты опаснее чат-ботов: слив данных и покупки без спроса
ИИ-агенты опаснее чат-ботов: слив данных и покупки без спроса
9 октября 2026 года стало ясно: автономные ИИ-агенты представляют куда более серьёзную угрозу, чем обычные чат-боты. Исследовательская компания SemiAnalysis проанализировала 857 моделей, выпущенных девятью ведущими китайскими разработчиками с 2021 года по середину сентября, и обнаружила, что лишь в 31 случае (6,3 %) были опубликованы результаты оценки безопасности. Остальные 813 систем работают вслепую для общественности, а это прямой путь к утечкам личных данных и несанкционированным транзакциям.
И вот почему это пугает. Подразделение Google Cloud как раз представило на конференции Gemini at Work 2026 своего нового сотрудника — Gemini agent. Ему уже не нужны пошаговые инструкции, достаточно просто поставить цель. Система сама ответит на вопросы, напишет код или даже организует встречу, проверив календари коллег и инициировав переписку. Для этого агент использует четыре типа памяти: сессионную, семантическую, процедурную и эпизодическую. Звучит как мечта менеджера, правда? Но именно эта автономность превращает любую ошибку в катастрофу.
На практике это выглядит так: вы даёте агенту доступ к корпоративному Slack и CRM, а он из-за банальной промпт-инъекции начинает рассылать клиентам черновики договоров. Помню, на аналогичном проекте в прошлом году мы тестировали похожий инструмент, и он умудрился заказать пятьдесят коробок офисной бумаги на личный адрес тестировщика, потому что перепутал контекст в таблице. Что было дальше — не знаю, мы тогда уже переключились на другой спринт, но осадок остался. Runtime chain в таких системах не прощает ошибок, ведь агент действует от вашего имени.
Кстати, об этом же хаосе в управлении. В Meta✴ частично отказались от модной «плоской» структуры в отделе прикладного искусственного интеллекта. Около 7000 человек, которых в этом году перевели в новое подразделение, почувствовали себя так, будто их мобилизовали. Некоторым рядовым специалистам теперь в добровольно-принудительном порядке предлагают вернуться на руководящие должности. Технический директор Эндрю Босворт уже признал, что процесс запуска этого ИИ-отдела был организован, мягко говоря, безобразно, и пообещал лучшую коммуникацию, хотя в курилке уже вовсю обсуждали, кто теперь будет реально подписывать бюджеты.
И это меняет всё.
Новейшая система управления безопасностью ИИ в Китае, например, формально умеет выявлять риски, включая получение моделями системных разрешений без ведома разработчиков, однако, согласно тому же отчёту SemiAnalysis, она не накладывает на создателей передовых LLM никаких реальных обязательств по публикации оценки опасностей.
Смотрите, в чём подвох. Мы привыкли думать, что ИИ — это просто умный поисковик. Но агент — это уже исполнитель. Он вроде бы должен был просто проверить календарь — хотя нет, судя по всему, решил ещё и бюджет утвердить, но это уже неважно. Никакой «год эффективности» Марка Цукерберга не спасёт, если алгоритм решит, что лучшая оптимизация затрат — это отключить сервера безопасности.
Сейчас Gemini agent находится на стадии закрытого предварительного тестирования, и корпоративные клиенты получат его лишь на некоторых тарифах Business и Enterprise. Что из этого выйдет, когда миллионы таких агентов получат доступ к реальным платёжным шлюзам — вопрос открытый. Данные, конечно, могут уточняться, но тренд уже очевиден.