Машинное обучение против ключевых слов: как Microsoft Purview выявляет рискованные сообщения в чатах
By Mirko Peters ·
Добро пожаловать обратно в блог! Если вы когда-либо занимались ИТ-инфраструктурой или вопросами соответствия требованиям в современной компании, вы прекрасно знаете, насколько радикально изменилась деловая коммуникация за последнее десятилетие…
Automatically translated with AI from the original post. Read the English original

Добро пожаловать обратно в блог! Если вы когда-либо занимались ИТ-инфраструктурой или вопросами соответствия требованиям в современной компании, вы прекрасно знаете, насколько кардинально изменилась деловая коммуникация за последнее десятилетие. Позади те времена, когда корпоративная переписка аккуратно жила внутри почтового клиента, подчиняясь формальным структурам и предсказуемому оформлению. Сегодня сотрудники общаются в обширной цифровой экосистеме: это сообщения в чате Microsoft Teams, быстрые ответы в каналах, обсуждения в Viva Engage, совместная работа с мобильных устройств и даже сложные взаимодействия с инструментами искусственного интеллекта, такими как Microsoft 365 Copilot. Такая гибкая среда заметно повышает производительность, оперативность и инновационность, но вместе с тем порождает совершенно новую парадигму рисков на рабочем месте.
Организациям приходится справляться со сложными задачами: от домогательств и неуместного поведения до утечек конфиденциальных данных, нарушений регуляторных требований, угроз со стороны инсайдеров и конфликтов интересов. Защита предприятия от этих рисков требует надёжного мониторинга, но традиционные методы попросту не успевают за нюансами современного человеческого общения. В этом посте мы подробно разберём технологии, на которых построен коммуникационный мониторинг Microsoft Purview. Мы изучим, как продвинутые модели машинного обучения и сложные классификаторы выходят далеко за рамки простого поиска по ключевым словам и распознают сложные поведенческие риски, при этом уважая конфиденциальность пользователей и поддерживая безопасную цифровую рабочую среду.
Введение в современные риски коммуникаций на рабочем месте
Чтобы понять, почему нужны современные технологии обнаружения, сначала нужно внимательно рассмотреть ландшафт угроз в современных цифровых рабочих пространствах. Раньше специалисты по комплаенсу и сотрудники HR могли опираться на периодические аудиты, выборочную проверку писем или прямые жалобы, чтобы выявить нарушения. Однако динамичные чат-платформы, такие как Microsoft Teams, работают скорее как живой разговор, чем как традиционные письма или официальные служебные записки. Люди используют сленг, эмодзи, внутренние шутки, сокращения и неформальные формулировки, которые способны полностью изменить смысл сообщения.
Кроме того, сам объём ежедневно генерируемых данных делает ручной контроль невозможным. Сотрудники отправляют миллионы сообщений: от необязательной болтовни у кофемашины до крайне конфиденциальных финансовых стратегий, персональных данных клиентов (PII, Personally Identifiable Information) и интеллектуальной собственности. Когда происходят неправомерные действия, домогательства или инсайдерская торговля, они часто спрятаны глубоко внутри разросшихся цепочек переписки. Организациям нужны автоматизированные системы, которые способны просеивать шум, выявлять реальные риски и передавать полезные выводы группам комплаенса, не перегружая их ложными срабатываниями. Это подводит нас к фундаментальному недостатку устаревших архитектур комплаенса: чрезмерной зависимости от жёсткого поиска по ключевым словам.
Ограничения традиционного поиска по ключевым словам
Долгие годы автоматический мониторинг контента почти полностью опирался на статичные списки ключевых слов и регулярные выражения. Если сотрудник вводил определённое запрещённое слово или фразу, система генерировала оповещение. Хотя такой метод несложно настроить, в реальных деловых условиях у него серьёзные операционные недостатки.
Во-первых, традиционному поиску по ключевым словам свойственно крайне высокое количество ложноположительных срабатываний. Представьте политику HR, которая должна выявлять обсуждения домогательств или враждебного поведения на рабочем месте. Статичный фильтр может пометить сообщение только потому, что в нём есть слова «fight», «pressure», «target» или «deal», даже если они используются в совершенно безобидном контексте управления проектами, например: «нам нужно бороться, чтобы выиграть этот новый аккаунт» или «команде приходится очень сильно давить, чтобы выпустить релиз ПО к третьему кварталу». Специалисты по комплаенсу быстро тонут в оповещениях, возникает усталость от них, и legitimate риски по ошибке остаются без внимания.
Во-вторых, недобросовестные пользователи и недовольные сотрудники отличаются изобретательностью. Они легко обходят простые фильтры по ключевым словам с помощью намеренных опечаток, leetspeak, эмодзи, метафор или закодированных выражений. Если фильтр настроен на поиск определённых запрещённых слов, злоумышленнику из числа инсайдеров достаточно изменить несколько букв или использовать синоним, чтобы полностью уйти от обнаружения. Очевидно, что защита современного предприятия требует выхода за рамки жёстких словарей и перехода к по-настоящему контекстному пониманию.
Как обученные классификаторы понимают поведенческий контекст
Здесь искусственный интеллект и машинное обучение полностью меняют правила игры. Microsoft Purview использует продвинутые обучаемые классификаторы, чтобы распознавать более широкие закономерности человеческого поведения и намерения в коммуникации, а не просто искать точные совпадения строк.
Обучаемый классификатор — это модель машинного обучения, которую можно натренировать распознавать определённые типы контента на примерах. Вместо указания системе «ищи именно эти слова» вы передаёте модели примеры положительных совпадений (сообщения, которые содержат угрозы, ненормативную лексику, травлю или нарушения требований регуляторов) и отрицательных совпадений (безопасная, рутинная деловая переписка). Алгоритм анализирует смысл, структуру предложений, тон и контекстные связи между словами.
Когда сотрудник отправляет сообщение в Microsoft Teams или участвует в сообществе Viva Engage, обучаемый классификатор оценивает весь смысловой контекст. Он может распознать враждебность, агрессивные переговоры или неуместные домогательства, даже если в тексте нет классических «триггерных слов». Анализируя ход беседы, включая предыдущие и последующие сообщения, система формирует точную картину намерений, значительно снижая количество ложных срабатываний и выявляя изощрённые попытки обойти средства контроля соответствия требованиям.
Обнаружение конфиденциальной информации и структурированных данных
Поведенческие риски, такие как травля или внутренние угрозы, требуют машинного обучения для интерпретации тона и намерений, а защита структурированных данных требует другого уровня точности. Организации должны постоянно следить за случайным или намеренным раскрытием конфиденциальной информации, например номеров кредитных карт, национальных идентификационных номеров, медицинских записей и закрытых финансовых данных.
Для этого Microsoft Purview использует надёжные типы конфиденциальной информации (Sensitive Information Types, SIT). В отличие от размытых поведенческих классификаторов, SIT опираются на точные математические формулы, проверку контрольной суммы и распознавание шаблонов для поиска структурированных данных. Например, SIT для кредитной карты не просто ищет 16-значное число: он проверяет идентификационный номер эмитента и валидирует контрольную сумму, чтобы убедиться, что это реальный номер карты, а не случайный серийный код программного продукта.
Кроме того, Purview сочетает SIT с анализом близости и словарями ключевых слов. Сообщение с именем и адресом человека может быть совершенно безобидным, но если в том же сообщении в непосредственной близости находятся номер паспорта и банковские реквизиты, система распознаёт более высокий уровень риска. Помимо этого, возможности оптического распознавания символов (OCR) позволяют сканировать изображения, которыми обмениваются в чатах или которые загружаются в документы, так что конфиденциальные данные, спрятанные в скриншотах или инфографике, не останутся незамеченными средствами защиты организации.
Баланс между автоматическим обнаружением, ручной проверкой и конфиденциальностью
Один из самых важных аспектов эффективной программы соответствия требованиям — понимание того, что автоматические инструменты формируют сигналы, а не окончательные вердикты. Искусственный интеллект и машинное обучение отлично справляются с сокращением миллионов сообщений до управляемого списка потенциальных рисков, но они никогда не должны иметь последнее слово в дисциплинарных мерах в отношении сотрудников.
Microsoft Purview построен на принципах ответственного управления и ручной проверки. Когда сообщение соответствует настроенной политике соответствия требованиям, оно попадает в защищённый рабочий процесс проверки с учётом ролей. Обученные проверяющие, такие как специалисты по соответствию требованиям, сотрудники HR или юридический советник, могут изучить отмеченное сообщение в полном контексте беседы. Они могут просмотреть историю цепочки, оценить окружающий диалог и определить, действительно ли произошло нарушение политики.
Не менее важны и встроенные механизмы защиты конфиденциальности. Мониторинг сотрудников быстро становится источником конфликтов, если не установлены надлежащие ограничения. Purview поддерживает такие функции, как псевдонимизация: имена пользователей могут быть скрыты от проверяющих до достижения определённого порога эскалации. Это позволяет сохранять справедливость и соразмерность расследований, уважать права на конфиденциальность и при этом обеспечивать строгую подотчётность и журналы аудита.
Интеграция Communication Compliance в экосистему Microsoft Purview
Эффективное управление соответствием требованиям не существует в отрыве от остального. Мониторинг рабочего чата — лишь один элемент гораздо более крупной головоломки управления данными и безопасности. Microsoft Purview бесшовно интегрирует Communication Compliance с широким набором взаимодополняющих сервисов экосистемы Microsoft 365.
Например, журналы аудита, которые фиксирует Microsoft Purview Audit, отражают административные действия и действия пользователей во всём клиенте. Инструменты поиска содержимого позволяют специалистам по расследованиям находить связанные письма, документы и материалы совместной работы во всей среде. Когда проблема соответствия требованиям переходит в официальное юридическое дело, Microsoft Purview eDiscovery помогает юридическим службам сохранять доказательства, управлять хранителями данных и создавать защищённые кейсы для проверки. Тем временем политики предотвращения утечек данных (DLP) проактивно блокируют рискованные передачи данных на уровне конечных устройств или облака, а Communication Compliance анализирует межличностную динамику того, что именно говорится.
Вместе эти интегрированные возможности образуют комплексную платформу соответствия требованиям, которая помогает организациям защищать конфиденциальные данные, соблюдать сложные отраслевые регуляторные требования и поддерживать здоровую и безопасную корпоративную культуру.
Заключение: построение более безопасного и соответствующего требованиям цифрового рабочего места
По мере развития инструментов цифровой совместной работы должны развиваться и стратегии их защиты. Опора на устаревшие списки ключевых слов уже не защищает современные организации от поведенческих рисков, преследования, утечек данных и штрафов со стороны регуляторов. Сочетая семантическую мощь обучаемых классификаторов машинного обучения с точными типами конфиденциальных сведений и структурированными процессами проверки людьми, Microsoft Purview даёт организациям необходимую видимость, не нарушая конфиденциальности пользователей и не утопая команды по соблюдению требований в ложных срабатываниях.
Если вы хотите глубже разобраться, как внедрить эти инструменты в вашей организации, обязательно посмотрите связанный выпуск подкаста: Communication Compliance - Simply Explained. В этом выпуске мы простым языком разбираем эти концепции и даём IT-администраторам, специалистам по безопасности и профессионалам в области соответствия требованиям практические рекомендации по построению более безопасных и соответствующих требованиям цифровых рабочих мест.