M365Con 2027 – bezpłatna konferencja online · 11–22 Jan 2027 · 120 sessions m365con.net

Blog · Mirko Peters

Microsoft Purview Data Map – proste wyjaśnienie: co robi i jak wpisuje się w Purview

By ·

Czym jest Microsoft Purview Data Map, jak skanowanie ją zasila, czym różni się od Unified Catalog, jak naliczane są jednostki pojemności oraz jaki komunikat o wycofaniu usługi pojawia się teraz na stronach Microsoft poświęconych zarządzaniu danymi.

Automatically translated with AI from the original post. Read the English original

Microsoft Purview Data Map to inwentarz metadanych. Skanuje źródła danych, rejestruje, co istnieje i co zawierają, i utrzymuje ten zapis w aktualności, aby ludzie mogli znajdować dane i nimi zarządzać. Nie kopiuje danych ani nie udostępnia ich użytkownikom. Zanim zaczniesz, jedna uwaga: strona Microsoft poświęcona zarządzaniu danymi zawiera teraz informację o wycofaniu, którą omawiam pod koniec tego artykułu.

Najważniejsze wnioski

  • Data Map jest warstwą metadanych w zarządzaniu danymi w Purview. Przechowuje metadane o źródłach danych, a nie same dane.
  • Skanowania łączą się ze źródłem, pobierają metadane techniczne, wyodrębniają schematy i stosują klasyfikacje. Następnie wczytywanie (ingestion) ładuje wynik do Data Map.
  • Unified Catalog znajduje się nad Data Map. Opiekunowie danych kuratorują tam produkty danych, terminy słownikowe i domeny.
  • Rozliczanie opiera się na jednostkach pojemności: każda obejmuje 25 operacji na sekundę i 10 GB metadanych. Konta zaczynają od 1 jednostki i automatycznie skalują się do 10.
  • Przegląd zarządzania danymi w Microsoft informuje, że Unified Catalog i klasyczne zarządzanie danymi są wycofywane: nie można zakładać nowych kont, a funkcje pozostają w trybie konserwacji do 12 listopada 2027 r.

Miejsce Data Map w Purview

Microsoft Learn opisuje Microsoft Purview jako zestaw rozwiązań do zarządzania, ochrony i administrowania danymi, dostarczanych przez portal Microsoft Purview. Grupuje je w trzy obszary:

  • Zabezpieczenie danych, na przykład Data Loss Prevention, Information Protection i Insider Risk Management.
  • Zarządzanie danymi, do którego należą Data Map i Unified Catalog.
  • Zgodność danych, na przykład Audit, eDiscovery, Compliance Manager i Records Management.

Etykiety poufności, klasyfikatory i łączniki to wspólne funkcje wykorzystywane w kilku z tych obszarów. Data Map należy do obszaru zarządzania, więc pełni inne zadanie niż etykietowanie plików w Microsoft 365.

Co robi Data Map

Microsoft Learn określa Data Map jako podstawę wykrywania danych i ich zarządzania. Przechowuje metadane o danych w systemach analitycznych, aplikacjach SaaS i systemach operacyjnych, w konfiguracjach hybrydowych, lokalnych i multicloud. Wbudowane skanowanie i klasyfikacja utrzymują ją w aktualności.

Metadane dzielą się na kilka grup: metadane techniczne, takie jak schematy, typy danych i kolumny; metadane semantyczne, takie jak klasyfikacje i mapowania kolekcji; metadane operacyjne, takie jak statusy przebiegów pochodzenia danych (lineage); oraz metadane biznesowe, takie jak opisy i terminy ze słownika pojęć.

Jedna zasada ma znaczenie podczas przeglądów bezpieczeństwa. Microsoft podkreśla, że wszystkie dane w Data Map i Unified Catalog są metadanymi. Żadne uprawnienia w żadnym z tych rozwiązań nie zapewniają dostępu do samych danych.

Data Map a Unified Catalog

Te dwa produkty są często mylone. Wytyczne Microsoft dotyczące planowania rozdzielają je w następujący sposób:

  • Data Map to warstwa techniczna. Przechowuje metadane o zasobach zebranych podczas skanowania źródeł.
  • Unified Catalog to warstwa biznesowa. Administratorzy danych (data stewards) kuratorują tam dane, a odbiorcy znajdują produkty danych.

W Unified Catalog głównymi obiektami są domeny zarządzania (na przykład Marketing lub Finanse), produkty danych, terminy słownika pojęć, krytyczne elementy danych, OKR-y i wyniki jakości danych. Data Map zasila ten katalog. Rejestrowanie i skanowanie źródeł odbywa się w Data Map, a produkty danych tworzy się w Unified Catalog.

Jak skanowanie wypełnia Data Map

Skanowanie łączy się ze źródłem danych i pobiera metadane techniczne, takie jak nazwy, rozmiar plików i kolumny. W przypadku źródeł strukturalnych wyodrębnia schemat i stosuje klasyfikacje. Jeśli Data Map jest połączona z portalem Microsoft Purview, stosuje również etykiety poufności. Następnie przetwarzanie (ingestion) analizuje wynik skanowania, stosuje wzorce zestawów zasobów, dodaje dostępne informacje o pochodzeniu danych i ładuje Data Map. Zasoby można kuratorować dopiero po zakończeniu przetwarzania.

Każde skanowanie ma swój poziom:

| Poziom | Co wyodrębnia | |---|---| | L1 | Podstawowe metadane, takie jak nazwa pliku, rozmiar i w pełni kwalifikowana nazwa | | L2 | Schemat dla strukturalnych typów plików i tabel baz danych | | L3 | Schemat tam, gdzie ma zastosowanie, oraz próbkowanie i klasyfikacja |

Opcja „Auto detect” (automatyczne wykrywanie) jest domyślna i stosuje najwyższy poziom obsługiwany przez dane źródło. W przypadku Azure SQL Database jest to poziom 3. Niestandardowe poziomy skanowania są dostępne tylko w środowisku uruchomieniowym integracji Azure oraz w środowisku uruchomieniowym integracji Managed Virtual Network w wersji 2.

Zestaw reguł skanowania określa, jakich typów plików i klasyfikacji szuka skanowanie. Wiele źródeł ma zestawy systemowe, ale możliwe są również zestawy niestandardowe. Skanowania mogą być uruchamiane jednorazowo lub według harmonogramu dziennego, tygodniowego albo miesięcznego. Microsoft sugeruje harmonogram dzienny lub tygodniowy dla źródeł aktywnie rozwijanych, a miesięczny dla źródeł, które zmieniają się rzadko.

W kwestii poświadczeń Microsoft zaleca, tam gdzie to możliwe, użycie tożsamości zarządzanej, ponieważ dzięki temu nie trzeba przechowywać poświadczeń dla każdego źródła. Sam Purview nie przechowuje bezpośrednio haseł ani sekretów.

Usunięcie zasobu wykrywane jest przez porównanie ostatniego skanowania z bieżącym, dlatego może być potrzebnych kilka udanych skanowań, zanim usunięte zasoby zostaną uwzględnione.

Jednostki pojemności i rozliczenia

Data Map jest rozliczana w jednostkach pojemności (CU). Każda CU reprezentuje przepustowość operacji oraz przechowywanie metadanych:

  • 25 operacji na sekundę na jedną CU
  • 10 GB przechowywania metadanych na jedną CU
  • Każde konto zaczyna od 1 CU i domyślnie skaluje się automatycznie do 10 CU
  • Domyślnie nie ma limitu przechowywania metadanych

Operacje obejmują tworzenie zasobu, dodawanie relacji, edycję metadanych biznesowych oraz wykonywanie wyszukiwania po słowach kluczowych. Rozliczenie odbywa się co godzinę, na podstawie najwyższej liczby CU potrzebnej w danej godzinie, z minimum 1. Sam magazyn może generować koszty: przy 25 operacjach na sekundę i 15 GB rozliczana jest 2 CU. Sześciogodzinny przykład Microsoft daje łącznie 22 jednostkogodziny pojemności.

Aby monitorować wykorzystanie, otwórz Konta Microsoft Purview w portalu Azure, wybierz konto i sprawdź sekcję Monitorowanie na stronie Przegląd. Aby uzyskać więcej szczegółów, przejdź do Monitorowanie > Metryki i wybierz Data Map Capacity Units lub Data Map Storage Size. Alerty można utworzyć z tej samej strony.

Wskazówki Microsoft dotyczące kosztów są praktyczne: stosuj skanowania przyrostowe po pierwszym pełnym skanowaniu, ogranicz zakres skanowania, rozłóż harmonogramy w czasie, zmniejsz częstotliwość, jeśli pozwala na to aktualność danych, wyłącz wyodrębnianie pochodzenia danych, którego nie potrzebujesz, oraz wyczyść historyczne informacje o pochodzeniu danych.

Rozsądna kolejność rozpoczęcia pracy

Strona „Wprowadzenie” Microsoft dotycząca zarządzania danymi wymienia te podstawowe kroki konfiguracji, wykonywane po spełnieniu wymagań wstępnych: instancji Purview Enterprise oraz zarejestrowanych i przeskanowanych źródeł danych:

  1. Przypisz rolę Data Governance Administrator.
  2. Zbuduj domeny zarządzania: przypisz rolę twórcy domeny zarządzania, utwórz co najmniej jedną domenę i przypisz co najmniej jednego właściciela domeny.
  3. Zarejestruj źródła danych w Data Map i przeskanuj je.
  4. Zbuduj produkty danych: przypisz właścicieli produktów danych i utwórz co najmniej jeden produkt danych.
  5. Przyznaj dostęp czytelnika katalogu w domenach zarządzania, aby użytkownicy mogli przeglądać produkty danych.

Strona planowania podaje podobną kolejność i wymienia też utworzenie kolekcji w Data Map oraz dodanie administratora źródła danych przed pierwszym skanowaniem. Sugeruje rozpoczęcie od interesariuszy, na których najbardziej zależy zarządzaniu danymi, takich jak zespoły business intelligence lub data lake, a nie od całej organizacji.

Komunikat o wycofaniu i kwestie, których źródła nie rozstrzygają

Przegląd zarządzania danymi w Microsoft Learn otwiera komunikat: „Unified Catalog oraz klasyczne możliwości zarządzania danymi w Microsoft Purview, dawniej Azure Purview, są wycofywane, a Microsoft konsoliduje swoje możliwości zarządzania danymi w Microsoft Fabric”. Dodaje, że nie można już tworzyć nowych kont, a istniejące możliwości pozostają w trybie konserwacji do 12 listopada 2027 r.

Źródła różnią się tonem. Strona pojemności Data Map, którą czytałem, nadal opisuje tworzenie konta w portalu Azure i nie zawiera żadnego komunikatu o wycofaniu, podobnie jak strona planowania. Pełnego ogłoszenia, do którego odsyła przegląd, nie udało się odczytać na potrzeby tego artykułu. Zanim zbudujesz coś na Data Map, przeczytaj to ogłoszenie, sprawdź, jak skonfigurowana jest twoja dzierżawa, i zapytaj Microsoft, co ścieżka Fabric oznacza dla twoich źródeł.

Powiązane

Źródła

Obserwuj podcastApple PodcastsSpotify

FAQ

Czym jest Microsoft Purview Data Map?

Według Microsoft Learn Data Map jest podstawą wykrywania danych i zarządzania nimi w usłudze Microsoft Purview. Przechowuje metadane o danych w systemach analitycznych, aplikacjach SaaS i systemach operacyjnych w środowiskach hybrydowych, lokalnych i multicloud. Wbudowane skanowanie i klasyfikacja utrzymują ją w aktualności.

Jaka jest różnica między Data Map a Unified Catalog?

Microsoft Learn opisuje Data Map jako warstwę techniczną, która przechowuje metadane zebrane przez skanowanie źródeł danych. Unified Catalog to warstwa biznesowa, w której opiekunowie danych kuratorują dane, a konsumenci znajdują produkty danych. Obie przechowują wyłącznie metadane, a żadna z nich nie daje dostępu do samych danych.

Jak rozliczana jest usługa Purview Data Map?

Microsoft Learn podaje, że Data Map jest rozliczana co godzinę na podstawie największej liczby jednostek pojemności potrzebnej w danej godzinie, z minimum 1. Każda jednostka pojemności obejmuje 25 operacji na sekundę i 10 GB magazynu metadanych. Jeśli magazyn przekroczy bieżącą jednostkę, naliczana jest następna jednostka, nawet gdy przepustowość nie jest wykorzystana.

Czy Purview Data Map jest wycofywana?

Komunikat na stronie przeglądu zarządzania danymi w Microsoft Learn informuje, że funkcje Unified Catalog i klasycznego zarządzania danymi w Purview, dawniej Azure Purview, są wycofywane, ponieważ Microsoft konsoliduje zarządzanie danymi w Microsoft Fabric. Nie można już tworzyć nowych kont, a istniejące funkcje pozostają w trybie konserwacji do 12 listopada 2027 r. Strona pojemności Data Map, którą przeglądałem, nie zawiera takiego komunikatu, więc przed zaplanowaniem wdrożenia sprawdź powiązane ogłoszenie.

Czy Data Map daje użytkownikom dostęp do moich plików i tabel?

Nie. Microsoft Learn stwierdza, że wszystkie dane w Data Map i Unified Catalog są metadanymi, a nie danymi źródłowymi, oraz że żadne role ani uprawnienia w żadnym z tych rozwiązań nie zapewniają dostępu do danych źródłowych.

Entities in this article

Tematy tego artykułu:

Microsoft Purview Data Map – Część Microsoft Purview Microsoft Purview – Narzędzie do tożsamości i bezpieczeństwa firmy Microsoft Microsoft Purview Unified Catalog – Część Microsoft Purview Data governance – Pojęcie

Related articles

Więcej artykułów (temat: Microsoft Purview):

RSS