ITGLOBAL.COM запустил ИИ-файрвол для контроля обмена данными с нейросетями
Компания ITGLOBAL.COM запустила в тестовом режиме защитный модуль для корпоративных данных в рамках сервиса AIaaS. Модуль контролирует обмен данными между корпоративными приложениями и языковыми моделями, отслеживает попытки скрытого управления моделью через внедрённые команды и предотвращает передачу конфиденциальных данных во внешние нейросети. Об этом SecPost сообщили в компании.
ИИ-файрвол размещается между корпоративными приложениями и языковой моделью и обрабатывает каждое обращение по двухуровневой схеме: первый уровень — быстрый классификатор, отсекающий очевидные случаи, второй — модель, оценивающая смысл спорного обращения. Отдельный модуль отвечает за действия ИИ-агентов — какие инструменты им разрешены и какие параметры передаются при вызове, включая попытки обращения к внутренним сетевым ресурсам.
Как сообщили в компании, дополнительно реализована работа с RAG: загружаемые файлы и документы базы знаний проверяются на входе до попадания в поисковый индекс, а не в момент выдачи ответа.
Модуль ориентирован на организации финансового сектора, госструктуры и бизнес, работающий с персональными данными по 152-ФЗ. ИИ-файрвол в составе AIaaS доступен в панели управления сервисом как отдельный подключаемый модуль.

