Голос отрасли: Цифровизация, Кибербезопасность, Искусственный Интеллект
ИИ в кибербезопасности — нейтральный инструмент, но он ускоряет гонку снаряда и брони
Сергей Марков (ПАО Сбербанк) подчёркивает: ИИ — это область науки и технологий для автоматизации интеллектуальных задач, и сама технология нейтральна. Как молотком можно заколачивать гвозди или разбивать головы, так и ИИ в кибербезопасности может использоваться и защищающимися, и атакующими. Автоматизированные системы для атак, аудита, выявления уязвимостей и защиты применяются очень давно, поэтому прогресс не стоит воспринимать как мгновенный скачок: часто агентные системы просто проверяют то, до чего у людей не доходили руки.
При этом быстрый прогресс меняет модель угроз и создаёт новые вызовы. Нельзя расслабиться: если в гонке снаряда и брони защищающаяся сторона отстаёт, это обернётся против неё. Нужно рационально относиться к инструментам, понимать изменения модели угроз и быстро двигаться в технологическом развитии.
Предприятия ищут доверенный контур внедрения ИИ и бесплатный аудит процессов
Ольга Чернокоз рассказала, что возглавляемая ею ассоциация выстраивает доверенный контур внедрения искусственного интеллекта в российских регионах и на промышленных предприятиях. Она объединяет экспертов по ИИ, предприятия, внедряющие технологии, и IT-/ИИ-компании с готовыми решениями. Фокус — работа именно с предприятиями, а не с органами госвласти, где всё сложнее.
Интерес проявляют и промышленность, и малый-средний бизнес, но есть опасения: многие уже «накололись» на красивые обещания разработчиков и ищут доверенный контур. Ассоциация совместно с федеральным центром компетенции Минпромторга собирает верифицированные кейсы — их более ста, в том числе в каталоге Минцифры. Через региональные центры компетенций (РЦК) при правительствах ассоциация помогает пройти бесплатный аудит и определить процессы для автоматизации; если готового решения нет, задача передаётся разработчикам.
Бизнес осторожно внедряет агентов, начиная с простых и «незаменяемых» функций
Евгений Зеваков (Zevakov Labs) отмечает: экономические сложности диктуют первоочередные задачи — секретарские функции, документооборот и всё, что с ними связано. Но хайп вокруг агентов приводит к запросам от руководителей: почему часть работы до сих пор делают люди? Если полгода назад звучало «заменим 5 секретарей на 2», то сейчас спрашивают: «у нас 10 инженеров-экологов, можем ли оставить 3 и сделать систему, которая сама готовит экологическую экспертизу?»
Это сложные задачи, но в некоторой степени уже решаемые. Предприятия внедряют агентные системы очень осторожно, ограниченно, под контролем — но в сферы, которые год назад казались абсолютно незаменяемыми. Ольга Чернокоз привела пример из промышленности: разбор конструкторской документации и определение комплектующих, чем раньше занимались огромные проектные отделы, теперь может выполняться очень быстро.
Агента нужно воспринимать как сотрудника: разграничение прав, минимум доступов и контроль внешних каналов
Вячеслав Касимов (Точка Банк) предупреждает: как только в LLM загружают большие данные о компании и клиентах, она становится многопользовательской, а тем более получает доступ в интернет — риски резко возрастают. В обычной системе есть чёткие правила доступа, и корректная программа не даёт выйти за рамки. В многопользовательском ИИ доступы размываются: либо архитектурно продуманы изолированные домены, либо получается «коммунальная квартира». Дополнительно есть специфический набор угроз — OWASP Top 10 для генеративных моделей и агентских решений.
Сергей Марков и Евгений Зеваков сходятся: агента следует умозрительно рассматривать как сотрудника компании. Доступы к ERP и внутренним ресурсам надо разграничивать по той же логике, что и для человека: чем меньше возможностей и прав, тем лучше. Выход во внешний интернет для внутреннего агента — по возможности лишний функционал; если он нужен, следует использовать шлюзы и ограничения. Для оборонных предприятий риски выше: логи запросов во внешние модели могут быть доступны третьим сторонам, поэтому разумно разворачивать open source в закрытом контуре и закрывать фаерволами. Универсальных рецептов нет: нужно сопоставлять риски, цену атаки и меры контроля.
Готовые AI-файрволы уже появляются, но защиту можно переиспользовать или строить самим
На вопрос о готовых решениях Вячеслав Касимов ответил, что есть два пути. Первый — найти готовое решение: интеграторы уже предлагают «AI-файрволы», у кого-то они работают, у кого-то нет. Второй — сделать самому. В любом случае нужно понимать особенности своей инфраструктуры и использования ИИ. Если речь о внешних моделях, крайне нежелательно, чтобы в них попадала чувствительная информация, поэтому нужен шлюз. Но если обращение идёт через веб, разницы с обычным уходом на Google Диск может не быть: в компании и так должен работать DLP. Не нужно выращивать из ИИ «могучую химеру» — это такое же приложение, просто с другими алгоритмами. Можно переиспользовать накопленные процессы защиты.
Евгений Зеваков добавляет: организационные меры сами по себе бесполезны, нужны технические. Его команда планирует выпустить в open source библиотеку для обезличивания данных и юридического оформления, включая ведение реестра по требованиям Роскомнадзора. Внешних готовых решений мало; часто это допиленное решение Microsoft, адаптированное под российские данные, но есть риск пропустить важное из-за особенностей русского языка. Своё решение вполне реально.