M365Con 2027 – бесплатная онлайн-конференция · 11–22 Jan 2027 · 120 sessions→ m365con.net

Блог · Mirko Peters

Укрощение усталости от оповещений: как ИИ и Copilot меняют реагирование на инциденты

By ·

Добро пожаловать обратно в подкаст и в наш сопутствующий подробный блог! Если вы когда-либо смотрели на панель мониторинга, где мигают тысячи уведомлений, и думали, как вашей команде безопасности отделять реальные угрозы от фонового шума, вы не одиноки. Современные центры операций безопасности (SOC) ведут тяжёлую борьбу с лавиной ложных срабатываний, растущей нагрузкой и неустанными киберпреступни

Automatically translated with AI from the original post. Read the English original

▶ BLOGTaming Alert Fatigue:How AI and Copilots are…M365.FM
Titelbild: Taming Alert Fatigue: How AI and Copilots are Reshaping Incident Response

Добро пожаловать обратно в подкаст и в наш сопутствующий подробный блог! Если вы когда-либо смотрели на панель мониторинга, где мигают тысячи уведомлений, и думали, как вашей команде безопасности отделять реальные угрозы от фонового шума, вы не одиноки. Современные центры операций безопасности (SOC) ведут тяжёлую борьбу с лавиной ложных срабатываний, растущей нагрузкой и неустанными киберпреступниками. Но по мере того как в рабочие процессы приходят искусственный интеллект и автономные помощники Copilot, правила игры резко меняются.

В этой статье мы разберём постоянное противоречие между командами SOC, где главную роль играют люди, и новыми инструментами на основе ИИ. Мы рассмотрим, как возникает усталость от оповещений, насколько невероятно быстр автономный ИИ, какие риски несёт бесконтрольное поведение машин и почему будущее кибербезопасности не в выборе между людьми и машинами, а в поиске мощного и сбалансированного синтеза.

Введение: современная дилемма SOC

Кибербезопасность играет ключевую роль в защите конфиденциальной информации в современном цифровом мире. С ростом автоматизированных атак организации сталкиваются с беспрецедентными угрозами. Например, около 2800 организаций стали жертвами кампании Cl0p с использованием MOVEit, в результате которой были раскрыты данные 96 миллионов человек. Этот инцидент показывает скорость и эффективность современных киберугроз. Возможно, вы задаётесь вопросом, что лучше защищает от этих рисков: команды SOC или недисциплинированные помощники Copilot.

Огромный объём телеметрии, которую генерируют корпоративные сети, перегрузил традиционные процессы безопасности. Аналитики постоянно догоняют, гонясь за злоумышленниками, которые автоматизируют свою полезную нагрузку с помощью продвинутых моделей машинного обучения. Чтобы понять, как вернуть преимущество, сначала нужно разобраться в основе корпоративной защиты: в традиционном SOC.

Обзор команд SOC

Основные обязанности

Команды SOC играют важнейшую роль в защите цифровых активов организации. Их обязанности охватывают множество функций, которые обеспечивают надёжный уровень безопасности. Вот разбивка их основных задач:

Роль/обязанностьОписание
Непрерывный мониторингНаблюдение за ИТ-средой организации в режиме реального времени с целью выявления аномалий и угроз.
Реагирование на инцидентыРеагирование на инциденты безопасности и снижение их влияния.
Управление соответствиемОбеспечение соблюдения требований к конфиденциальности и проведение регулярных аудитов.
Обнаружение угрозВыявление потенциальных угроз с помощью различных инструментов и процессов безопасности.
Совершенствование безопасностиУлучшение мер безопасности на основе информации, полученной в ходе инцидентов.
Выявление и анализ рисковСоставление отчётов о рисках для содействия проактивному управлению угрозами.
Инвентаризация активов и инструментовУчёт всех инструментов и активов безопасности в организации.
Анализ угрозСбор и анализ информации о потенциальных угрозах для укрепления позиции безопасности.
Восстановление и устранение последствийВосстановление систем и данных после инцидента безопасности.
Расследование первопричинАнализ инцидентов для выяснения их происхождения и предотвращения повторения.

Сильные стороны команд SOC

Экспертиза специалистов

Человеческий фактор в командах SOC незаменим. Аналитики привносят глубокие знания, позволяющие выявлять сложные угрозы, которые автоматизированные системы могут пропустить. Они постоянно проводят оценку уязвимостей, что критически важно для эффективного снижения угроз. Кроме того, их специализация в таких областях, как криминалистический анализ и безопасность облачных сред, позволяет разрабатывать целевые стратегии защиты.

Мониторинг в реальном времени

Мониторинг в реальном времени является основой работы SOC. Постоянно наблюдая за сетями и анализируя данные оповещений, команды SOC повышают вероятность раннего обнаружения угроз. Такой проактивный подход минимизирует ущерб и сбои, позволяя организациям действовать оперативно. Регулярные тренировки и документированные процессы помогают командам SOC эффективно справляться с инцидентами даже в стрессовой ситуации.

Ограничения команд SOC

Перегрузка оповещениями

Команды SOC ежедневно сталкиваются с огромным количеством оповещений. По данным отчётов, они обрабатывают около 3 832 оповещений, и 68% из них оказываются ложными срабатываниями. Такая усталость от оповещений может привести к когнитивной перегрузке: аналитики начинают пропускать реальные угрозы. Постоянные прерывания дробят внимание, повышая стресс и риск выгорания.

Ограничения ресурсов

Ограниченность ресурсов также создаёт проблемы для команд SOC. Собрать квалифицированную команду сложно, поскольку для эффективной работы необходимы такие роли, как охотники за угрозами и инженеры. Организации часто стараются сократить бюджеты, а это ограничивает ресурсы, доступные для работы SOC. Кроме того, постоянное обучение и обновление технологий критически важны, но зачастую недофинансируются, что сказывается на общей эффективности.

Что такое «Rogue Copilots»

Rogue copilots — новый рубеж в кибербезопасности. Эти автономные системы ИИ работают вместе с аналитиками-людьми, самостоятельно выполняя рутинные расследования и принимая решения в заданных рамках. В отличие от традиционных команд SOC, которые во многом полагаются на ручные процессы, rogue copilots усиливают возможности защиты за счёт автоматизации задач. Такая автоматизация снижает потребность в увеличении штата и позволяет организациям эффективнее реагировать на угрозы.

Возможности ИИ

Преимущества автоматизации

Rogue copilots хорошо справляются с автоматизацией различных задач кибербезопасности. Они могут выполнять runbook-сценарии, на которые опираются команды безопасности, обеспечивая автоматическое обнаружение и реагирование на угрозы. Это позволяет им работать с высокой степенью автономности: расследовать угрозы и реагировать на них, не дожидаясь оповещений. Использование детерминированных процедур с пороговыми значениями и проверками повышает масштабируемость операций безопасности.

Обнаружение угроз

Rogue copilots используют развитые возможности ИИ для эффективного обнаружения угроз. Они самостоятельно выявляют уязвимости и эксплуатируют их в ограниченной области. Кроме того, они способны проводить киберoperации, избегая обнаружения такими системами, как средства Endpoint Detection and Response (EDR). Такой скрытный подход позволяет им достигать более широких целей в смоделированных сетях, требуя ситуационной осведомлённости и стратегического планирования.

Сильные стороны rogue copilots

Скорость и эффективность

Одно из главных преимуществ rogue copilots — скорость. Они способны быстро обрабатывать огромные объёмы данных и выявлять потенциальные угрозы быстрее, чем аналитики-люди. Такая эффективность позволяет организациям реагировать на инциденты в режиме реального времени, минимизируя возможный ущерб.

Масштабируемость

Rogue copilots также отличаются выдающейся масштабируемостью. Они могут выполнять несколько задач одновременно, что делает их идеальными для крупномасштабных сред кибербезопасности. Их способность учиться и адаптироваться со временем означает, что они могут улучшать свою работу на основе обратной связи и результатов. Эта адаптивность позволяет организациям масштабировать операции безопасности без пропорционального увеличения штата.

Ограничения rogue copilots

Отсутствие человеческого суждения

Несмотря на свои возможности, rogue copilots лишены человеческого суждения. Им может быть трудно справляться со сложными сценариями, требующими тонкого понимания или учёта этических соображений. Это ограничение может приводить к решениям, которые, будучи эффективными, не соответствуют ценностям организации или лучшим практикам.

Риски безопасности

Чрезмерная опора на rogue copilots создаёт ряд рисков безопасности. Например, плохо составленные запросы (промпты) могут непреднамеренно раскрыть конфиденциальную информацию, такую как финансовая отчётность или протоколы безопасности. Кроме того, регуляторы, например GDPR и HIPAA, могут назначать серьёзные штрафы, если системы ИИ допустят утечку защищаемых данных. Другие риски включают несанкционированный доступ к данным, подмену личности и отравление данных (data poisoning), когда манипулируемые данные могут опасно изменить поведение модели.

Сравнение эффективности

Обнаружение угроз

Что касается обнаружения угроз, и команды SOC, и rogue copilots обладают уникальными сильными сторонами. Команды SOC опираются на человеческую экспертизу при анализе сложных угроз. Аналитики способны интерпретировать тонкие данные и распознавать закономерности, которые автоматизированные системы могут упустить. Этот человеческий фактор часто приводит к более точному выявлению угроз.

С другой стороны, rogue copilots хорошо справляются с обработкой больших объёмов данных. Они могут сканировать сети и выявлять уязвимости с такой скоростью, с которой аналитикам-людям не сравниться. Такое быстрое обнаружение может быть решающим для предотвращения атак до их эскалации. Однако rogue copilots могут пропускать слабые признаки сложных угроз, которые требуют человеческой интуиции.

Реагирование на инциденты

В реагировании на инциденты команды SOC проявляют себя благодаря структурированному подходу. Они следуют установленным протоколам, чтобы эффективно управлять инцидентами. Их опыт позволяет адаптироваться к различным сценариям и обеспечивать комплексное реагирование. Можно быть уверенным, что хорошо подготовленная команда SOC справится с инцидентами точно, минимизируя ущерб и быстро восстанавливая системы.

С другой стороны, «мятежные» копилоты могут автоматизировать реагирование на типовые угрозы. Они способны выполнять заранее определённые действия без участия человека, что ускоряет время реакции. Однако отсутствие человеческого суждения может привести к неадекватным действиям в сложных ситуациях. Например, «мятежный» копилот может инициировать блокировку на основе ложного срабатывания, что вызовет ненужные сбои.

Экономическая эффективность

Экономическая эффективность — ещё один важный фактор при сравнении этих двух подходов. Команды SOC требуют значительных инвестиций в квалифицированных специалистов и постоянное обучение. Нужно учитывать зарплаты, социальные выплаты и затраты на технологии. Хотя эти инвестиции могут принести высокую отдачу с точки зрения безопасности, они способны стать серьёзной нагрузкой для бюджета, особенно для небольших организаций.

«Мятежные» копилоты, в свою очередь, могут снизить операционные расходы. Они автоматизируют многие задачи, которые в противном случае потребовали бы участия нескольких аналитиков. Такая эффективность позволяет организациям масштабировать меры безопасности без пропорционального увеличения штата. Тем не менее стоит взвесить потенциальные риски чрезмерной зависимости от ИИ против экономии средств.

Практическое применение

Примеры использования команд SOC

Организации успешно внедряли команды SOC для противодействия киберугрозам. Например, финансовая организация столкнулась со значительной атакой программ-вымогателей. Её команда SOC быстро выявила взлом благодаря мониторингу в реальном времени. Следуя установленным протоколам реагирования на инциденты, команда изолировала затронутые системы и восстановила работу в течение нескольких часов. Такие оперативные действия минимизировали потерю данных и сократили простой, продемонстрировав эффективность человеческого опыта в кризисных ситуациях.

Другой случай касался медицинского учреждения, в котором произошла утечка данных. Команда SOC провела тщательное расследование и установила первопричину — фишинговую атаку. Был организован расширенный обучение сотрудников и обновлены меры безопасности. Такой превентивный подход не только нивелировал непосредственную угрозу, но и укрепил общий уровень безопасности организации.

Примеры использования «мятежных» копилотов

«Мятежные» копилоты также показали перспективность в реальных сценариях. В одном случае компания использовала «мятежного» копилота для автоматизации обнаружения угроз. ИИ-система выявила уязвимость нулевого щелчка в Copilot Agent, позволявшую злоумышленникам выводить корпоративные данные без какого-либо участия пользователя. Этот инцидент показал, как ИИ-агентов можно превратить в оружие и привести к утечкам данных без срабатывания очевидных оповещений. Организации поняли, насколько важно внимательно отслеживать взаимодействие с ИИ, чтобы предотвращать подобные случаи.

В другом сценарии технологическая компания интегрировала «мятежного» копилота для помощи в реагировании на инциденты. ИИ-система автоматизировала рутинные задачи, позволив аналитикам сосредоточиться на сложных угрозах. Такое взаимодействие улучшило время реагирования и снизило нагрузку на команды SOC. Однако организация осознала необходимость надёжного управления, чтобы ИИ работал в безопасных рамках.

Извлечённые уроки

Организации получили ценные выводы, интегрируя команды SOC и «мятежных» копилотов в свои стратегии кибербезопасности:

  • Взаимосвязь управления ИИ и кибербезопасности: организации поняли, что управление ИИ и кибербезопасность должны работать как единые интегрированные системы, а не как отдельные дисциплины.
  • ИИ-агенты как недоверенные субъекты: важно относиться к ИИ-агентам так же, как к недобросовестным сотрудникам, поскольку 97% организаций не имеют надлежащего контроля доступа для ИИ.
  • Защита данных и соответствие требованиям: надёжное управление данными необходимо для защиты от атак с отравлением данных и для соблюдения нормативов, таких как EU AI Act, требования которого пересекаются с требованиями кибербезопасности.
  • Человеческий риск в средах с ИИ: с ростом внедрения ИИ возрастает риск человеческой ошибки, что требует специального обучения по безопасности, учитывающего риски, связанные с ИИ.
  • Управление рисками поставщиков: организации должны оценивать и контролировать сторонних поставщиков ИИ, чтобы снижать каскадные уязвимости в цепочках поставок ИИ.
  • Комплексное реагирование на инциденты: эффективное реагирование на инциденты требует плейбуков, которые охватывают как технические нарушения, так и сбои в управлении ИИ.

Эти уроки подчеркивают необходимость сбалансированного подхода, который сочетает экспертизу специалистов с возможностями ИИ для повышения общего уровня кибербезопасности.

Экспертные мнения и будущие тенденции в безопасности на основе ИИ

Профессиональные мнения

Специалисты по кибербезопасности отмечают, что ландшафт операций безопасности меняется. Многие эксперты сходятся во мнении, что интеграция ИИ в команды SOC повышает производительность. Они выделяют несколько преимуществ такой интеграции:

  • Рост производительности за счет автоматизации рабочих процессов и практик SOC.
  • Ускорение триажа благодаря суммаризации оповещений и корреляции сигналов.
  • Улучшение принятия решений за счет более качественного объединения сигналов.

Однако эксперты также предостерегают от возможных недостатков. По их словам, избыточный шум от сгенерированных ИИ сводок может перегрузить команды. Кроме того, чрезмерная опора на ИИ может скрывать фундаментальные проблемы, такие как слабая логика обнаружения или зашумленные данные.

«Несмотря на впечатляющие возможности, фундаментальные ограничения не позволяют ИИ полностью заменить специалистов по кибербезопасности».

Эта точка зрения подчеркивает важность сохранения человеческого контроля над операциями кибербезопасности. Эксперты считают, что ИИ должен служить инструментом помощи аналитикам, а не заменять их.

Будущие тенденции

Если заглянуть вперед, в ближайшие пять лет ожидается несколько трендов в развитии команд SOC и «недисциплинированных» copilot. Вот некоторые ключевые выводы:

Тренд ОписаниеКлючевой вывод
Смещение ценностиРешения и результаты будут становиться более ценными, чем традиционные дашборды и оповещения.
Плато CopilotФокус на автономности станет ключевым отличием в возможностях ИИ.
Распространение инструментовЗамедление появления новых инструментов приведет к консолидации платформ.
Экономический эффектSOC будут масштабировать экспертное суждение, а не численность персонала.

Эксперты прогнозируют, что многие компании в сфере ИИ исчезнут, и инструменты будут консолидироваться внутри крупных платформ. Специализированные организации будут процветать в высокорисковых областях, таких как кибербезопасность, сосредоточившись на повторяемых данных и конвейерах обучения.

В SOC, дополненном ИИ, специалисты-аналитики перейдут к ролям, связанным с принятием решений, определением политик и сложными проектами в области безопасности. Агенты ИИ возьмут на себя основную часть триажа и расследований. Этот сдвиг изменит традиционную многоуровневую модель команд SOC, позволив аналитикам сосредоточиться на стратегических задачах.

«Вместо того чтобы устранять рабочие места, ИИ может поднимать на новый уровень, расширять возможности и помогать следующему поколению специалистов по безопасности».

По мере развития ИИ организациям необходимо делать приоритетом повышение квалификации и обучение специалистов по кибербезопасности. Такой подход позволит командам эффективно внедрять технологии ИИ и при этом поддерживать надежную защиту.


Важно понимать, что ни команды SOC, ни «недисциплинированные» copilot по отдельности не обеспечивают полной защиты от киберугроз. Эксперты рекомендуют внедрять агентные SOC, которые объединяют автономных агентов ИИ с человеческим контролем. Такой подход предполагает обмен контекстными знаниями, хранение доказательств расследований и поддержание петель обратной связи для постоянного улучшения.

Если смотреть вперед, ИИ будет играть критически важную роль в операциях безопасности, но также принесет новые риски. Нужно готовиться к более быстрым и сложным атакам, которые становятся возможными благодаря инструментам ИИ. Команды SOC должны перейти от ручного анализа к контролю работы ИИ, применяя критическое мышление для эффективного противодействия новым угрозам. Баланс между человеческим суждением и скоростью ИИ — лучшая защита в сегодняшнем меняющемся киберпространстве.

Заключение: баланс между человеческим суждением и скоростью ИИ

Как мы рассмотрели в этой статье, управление усталостью от оповещений и противостояние изощренным угрозам требуют большего, чем просто увеличение числа сотрудников или вычислительных мощностей. Аналитики SOC обеспечивают важнейшие контекстные рассуждения, эмпатию и творческое решение проблем, а автономные copilot на базе ИИ дают скорость и масштаб, необходимые для обработки тысяч ежедневных сигналов без выгорания. Ключ к успешной современной защите — объединение этих двух миров: использование ИИ для высокоскоростного триажа и корреляции данных при сохранении за людьми-экспертами руля, чтобы принимать стратегические решения и справляться со сложными сценариями.

Чтобы продолжить изучение вопросов защиты современных корпоративных сред от этих постоянно меняющихся угроз, послушайте наш связанный выпуск подкаста, где мы подробнее разбираем практические стратегии снижения рисков: Investigate Copilot Data Leaks with Microsoft Purview DSPM.

Entities in this article

Fabric workspace Azure Functions Microsoft Excel Machine learning Telemetry Threat intelligence

Related articles

RSS