M365Con 2027 – безкоштовна онлайн-конференція · 11–22 Jan 2027 · 120 sessions m365con.net

Блог · Mirko Peters

Microsoft Purview Data Map простими словами: що це таке і як він вписується в Purview

By ·

Що таке Microsoft Purview Data Map, як сканування наповнює його, чим він відрізняється від Unified Catalog, як тарифікуються одиниці ємності та яке повідомлення про припинення підтримки Microsoft тепер показує на сторінках управління даними.

Automatically translated with AI from the original post. Read the English original

Microsoft Purview Data Map є інвентарем метаданих. Він сканує ваші джерела даних, фіксує, що існує і що в них міститься, і підтримує цей запис актуальним, щоб люди могли знаходити дані та керувати ними. Він не копіює і не відкриває ваші дані для користувачів. Одне застереження перед початком: на огляді управління даними Microsoft тепер є повідомлення про припинення підтримки, про яке йдеться ближче до кінця статті.

Головне

  • Data Map є рівнем метаданих управління даними в Purview. Він зберігає метадані про джерела даних, а не самі дані.
  • Сканування підключається до джерела, збирає технічні метадані, витягує схеми та застосовує класифікації. Потім інжестія завантажує результат у Data Map.
  • Unified Catalog розташований над Data Map. Там відповідальні за дані курують data products, терміни глосарію та домени.
  • Тарифікація ґрунтується на одиницях ємності: кожна одиниця охоплює 25 операцій на секунду та 10 ГБ метаданих. Облікові записи починаються з 1 і автоматично масштабуються до 10.
  • Огляд управління даними Microsoft повідомляє, що Unified Catalog і класичне управління даними припиняються: нових облікових записів створювати не можна, а режим обслуговування триватиме до 12 листопада 2027 року.

Де Data Map розташований у Purview

Microsoft Learn описує Microsoft Purview як набір рішень для управління, захисту та адміністрування даних, доступних через портал Microsoft Purview. Вони поділяються на три напрямки:

  • Безпека даних, наприклад Data Loss Prevention, Information Protection та Insider Risk Management.
  • Управління даними, до якого належать Data Map та Unified Catalog.
  • Відповідність вимогам щодо даних, наприклад Audit, eDiscovery, Compliance Manager і Records Management.

Мітки конфіденційності, класифікатори та конектори є спільними можливостями, які використовуються в кількох із цих напрямків. Data Map належить до напрямку управління, тому це інше завдання, ніж маркування файлів у Microsoft 365.

Що робить Data Map

Microsoft Learn називає Data Map основою для виявлення даних і управління ними. Він збирає метадані про дані в аналітичних системах, SaaS-застосунках та операційних системах у гібридних, локальних і мультихмарних конфігураціях. Вбудовані механізми сканування та класифікації підтримують його в актуальному стані.

Метадані поділяються на кілька груп: технічні метадані, такі як схеми, типи даних і стовпці; семантичні метадані, такі як класифікації та зіставлення колекцій; операційні метадані, такі як статуси запусків лінійності; і бізнес-метадані, такі як описи та терміни глосарію.

Для оглядів безпеки є одне важливе правило. Microsoft стверджує, що всі дані в Data Map і Unified Catalog є метаданими. Жодні дозволи в цих рішеннях не надають доступу до самих даних.

Data Map і Unified Catalog: у чому різниця

Ці два продукти часто плутають. Рекомендації Microsoft щодо планування розділяють їх так:

  • Data Map — це технічний рівень. Він зберігає метадані про активи, отримані через сканування джерел.
  • Unified Catalog — це бізнес-рівень. Тут відповідальні за дані куратори підтримують дані, а споживачі знаходять продукти даних.

В Unified Catalog основними об'єктами є домени управління (наприклад, Marketing або Finance), продукти даних, терміни глосарію, критичні елементи даних, OKR та оцінки якості даних. Data Map наповнює цей каталог. Реєстрація та сканування джерел виконуються в Data Map, а продукти даних створюються в Unified Catalog.

Як сканування наповнює Data Map

Сканування підключається до джерела даних і збирає технічні метадані, такі як назви, розмір файлів і стовпці. Для структурованих джерел воно витягує схему та застосовує класифікації. Якщо Data Map підключено до порталу Microsoft Purview, воно також застосовує мітки конфіденційності. Потім приймання аналізує результати сканування, застосовує шаблони наборів ресурсів, додає доступну лінійність і завантажує Data Map. Активи можна кураторувати лише після завершення приймання.

Кожне сканування має рівень:

| Рівень | Що витягується | |---|---| | L1 | Базові метадані, такі як назва файлу, розмір і повна кваліфікована назва | | L2 | Схема для структурованих типів файлів і таблиць бази даних | | L3 | Схема, де це застосовно, а також вибірка та класифікація |

Автовизначення є типовим і застосовує найвищий рівень, який підтримує джерело. Для Azure SQL Database це рівень 3. Користувацькі рівні сканування доступні лише в середовищі виконання інтеграції Azure та в середовищі виконання інтеграції Managed Virtual Network v2.

Набір правил сканування визначає, які типи файлів і класифікації шукає сканування. Для багатьох джерел є системні набори правил, а також можна створювати власні. Сканування можна запускати одноразово або за розкладом: щодня, щотижня чи щомісяця. Microsoft радить щодня або щотижня для джерел, які активно розробляються, і щомісяця для джерел, які змінюються рідко.

Для облікових даних Microsoft рекомендує, де це можливо, керовану ідентичність, адже так не потрібно зберігати облікові дані для кожного джерела. Сам Purview паролі та секрети безпосередньо не зберігає.

Видалення визначається порівнянням останнього сканування з поточним, тож для обробки видалених активів може знадобитися кілька успішних сканувань.

Одиниці ємності та тарифікація

Data Map тарифікується в одиницях ємності (CU). Кожна CU відповідає за пропускну здатність операцій і зберігання метаданих:

  • 25 операцій за секунду на одну CU
  • 10 ГБ сховища метаданих на одну CU
  • Кожен обліковий запис починає з 1 CU і за замовчуванням автоматично масштабується до 10 CU
  • Типового ліміту на обсяг сховища метаданих немає

До операцій належать створення активу, додавання зв'язку, редагування бізнес-метаданих і виконання пошуку за ключовими словами. Тарифікація щогодинна і базується на найбільшій кількості CU, потрібній за цю годину, з мінімумом 1. Саме зберігання може збільшити вартість: за 25 операцій за секунду та 15 ГБ ви платите за 2 CU. Наведений Microsoft приклад на шість годин дає разом 22 години одиниць ємності.

Щоб стежити за використанням, відкрийте Microsoft Purview accounts в порталі Azure, виберіть обліковий запис і перегляньте Monitoring на сторінці Overview. Для детальнішої інформації перейдіть до Monitoring > Metrics і виберіть Data Map Capacity Units або Data Map Storage Size. Сповіщення можна створити з тієї самої сторінки.

Поради Microsoft щодо витрат практичні: використовуйте інкрементальні сканування після першого повного, обмежуйте обсяг сканування, рознесіть розклади в часі, зменшуйте частоту, якщо це дозволяє актуальність даних, вимикайте витягування лінійності, яка вам не потрібна, і очищайте історичну лінійність.

Розумний порядок для початку роботи

На сторінці Microsoft «початок роботи» з управління даними наведено такі базові кроки налаштування, які виконуються після передумов: екземпляр Purview Enterprise і зареєстровані та відскановані джерела даних:

  1. Призначте роль Data Governance Administrator.
  2. Побудуйте домени управління: призначте роль творця доменів управління, створіть принаймні один домен і призначте принаймні одного власника домену.
  3. Зареєструйте джерела даних у Data Map і запустіть їх сканування.
  4. Побудуйте продукти даних: призначте власників продуктів даних і створіть принаймні один продукт даних.
  5. Надайте доступ читача каталогу в домени управління, щоб користувачі могли переглядати продукти даних.

На сторінці планування наведено схожий порядок дій, а також згадано створення колекції в Data Map і призначення адміністратора джерел даних перед першим скануванням. Там пропонується починати з тих зацікавлених сторін, яким найбільше важливе управління даними, наприклад команд бізнес-аналітики чи озера даних, а не з усієї організації.

Повідомлення про виведення з експлуатації та питання, які джерела не розв’язують

На сторінці Microsoft Learn з оглядом управління даними повідомлення починається так: Unified Catalog і класичні можливості управління даними Microsoft Purview, раніше відомі як Azure Purview, виводяться з експлуатації, а Microsoft консолідує свої можливості управління даними в Microsoft Fabric. Далі сказано, що створювати нові облікові записи більше не можна, а наявні можливості залишаються в режимі обслуговування до 12 листопада 2027 року.

Джерела розходяться в тоні. Сторінка місткості Data Map, яку я переглянув, досі описує створення облікового запису в порталі Azure і не містить жодного повідомлення про виведення з експлуатації, так само як і сторінка планування. Повного оголошення, на яке посилається огляд, для цієї статті прочитати не вдалося. Перш ніж будувати щось на Data Map, прочитайте це оголошення, перевірте, як налаштовано ваш клієнт, і уточніть у Microsoft, що означає шлях через Fabric для ваших джерел.

Пов’язане

Джерела

Підписатися на подкастApple PodcastsSpotify

FAQ

Що таке Microsoft Purview Data Map?

За даними Microsoft Learn, Data Map є основою для виявлення даних і управління ними в Microsoft Purview. Він збирає метадані про дані в аналітичних, SaaS і операційних системах у гібридних, локальних та мультихмарних середовищах. Вбудовані механізми сканування та класифікації підтримують його в актуальному стані.

Чим Data Map відрізняється від Unified Catalog?

Microsoft Learn описує Data Map як технічний рівень, що зберігає метадані, зібрані скануванням джерел даних. Unified Catalog є бізнес-рівнем, де відповідальні за дані (stewards) курують їх, а споживачі знаходять data products. В обох сховищах зберігаються лише метадані, і жодне з них не надає доступу до самих даних.

Як тарифікується Purview Data Map?

Microsoft Learn повідомляє, що Data Map тарифікується щогодини на основі найбільшої кількості одиниць ємності, потрібної в цю годину, але не менше однієї. Кожна одиниця ємності включає 25 операцій на секунду та 10 ГБ сховища метаданих. Якщо обсяг даних перевищує поточну одиницю, оплачується наступна одиниця, навіть коли пропускна здатність не використовується.

Чи припиняється підтримка Purview Data Map?

Повідомлення на огляді управління даними Microsoft Learn каже, що Unified Catalog і класичні можливості управління даними Purview, раніше відомі як Azure Purview, припиняються, оскільки Microsoft консолідує управління даними в Microsoft Fabric. Там зазначено, що створювати нові облікові записи більше не можна, а наявні можливості залишаються в режимі обслуговування до 12 листопада 2027 року. На сторінці ємності Data Map, яку я переглянув, такого повідомлення немає, тож перед плануванням впровадження перевірте пов'язане оголошення.

Чи надає Data Map доступ до моїх файлів і таблиць?

Ні. Microsoft Learn стверджує, що всі дані в Data Map і Unified Catalog є метаданими, а не самими даними, і жодна з ролей чи дозволів в обох рішеннях не надає доступу до базових даних.

Entities in this article

Теми цієї статті:

Microsoft Purview Data Map – Частина Microsoft Purview Microsoft Purview – Інструмент ідентифікації та безпеки від Microsoft Microsoft Purview Unified Catalog – Частина Microsoft Purview Data governance – Поняття

Related articles

Інші статті на тему Microsoft Purview:

RSS