M365Con 2027 – gratis online conferentie · 11–22 Jan 2027 · 120 sessions m365con.net

Unity Catalog

Product

De governancelaag van Databricks die gecentraliseerde toegangscontrole, auditing, lineage en detectie over werkruimten heen biedt.

◆ PRODUCTUnity CatalogM365.FM
Title graphic: Unity Catalog (Product)

Ook besproken

De aflevering over Unity Catalog gaat ook over Azure Databricks, Delta Lake, Apache Spark en Machine learning.

Beschrijving

Unity Catalog is de governancelaag van Databricks. In Azure Databricks wordt het beschreven als de uniforme governancelaag voor data en AI. Zodra het voor een werkruimte is ingeschakeld, werkt het onder alle data- en AI-interacties in die werkruimte. Het biedt gecentraliseerde toegangscontrole, auditing, lineage en detectie over werkruimten heen, zodat regels over wie data mag zien of wijzigen op één plaats worden vastgelegd in plaats van in elke werkruimte afzonderlijk te worden herhaald.

De documentatie beschrijft hoe dit in de praktijk werkt. Unity Catalog bepaalt de toegang telkens wanneer een tabel wordt bevraagd of een model wordt aangeroepen. Het legt lineage automatisch vast en registreert activiteit voor auditdoeleinden. Toegang tot de catalogus is beschikbaar via Catalog Explorer, SQL, de Databricks CLI en REST-API's. Alles wat wordt bestuurd, is een beveiligbaar object, en rechten op deze objecten worden toegekend aan gebruikers, serviceprincipals of groepen. Tabellen, weergaven, volumes, functies en modellen zijn georganiseerd in een naamruimte met drie niveaus, bestaande uit een catalogus, een schema en het object zelf.

Een onderscheid dat belangrijk is bij beslissingen over opslag, is dat tussen beheerde en externe objecten. Tabellen en volumes kunnen beheerd zijn, waarbij Unity Catalog zowel de governance als de levenscyclus van de opslag afhandelt. Ze kunnen ook extern zijn, waarbij Unity Catalog alleen de governance verzorgt en de opslag buiten het beheer van de levenscyclus blijft. Het kiezen tussen beide is een typische ontwerpbeslissing wanneer data al in bestaande opslaglocaties staat.

De functionele gebieden die in de Microsoft Learn-documentatie worden genoemd, reiken verder dan basale rechten. Ze omvatten toegangscontrole met op attributen gebaseerde beleidsregels en rij- en kolomfilters, detectie, lineage, auditlogs die als systeemtabel beschikbaar worden gesteld, dataclassificatie, monitoring van de datakwaliteit, datadeling over organisaties en clouds heen, en AI-governance. Dit betekent dat één laag zowel analytische data als AI-assets zoals modellen dekt, in plaats van ze als afzonderlijke governanceproblemen te behandelen.

Wat de beschikbaarheid betreft, wordt Unity Catalog automatisch ingeschakeld voor werkruimten die na november 2023 zijn aangemaakt. Werkruimten die eerder zijn aangemaakt, moeten worden geüpgraded om het te kunnen gebruiken. De documentatie vermeldt ook dat er een open-sourceimplementatie van Unity Catalog bestaat, en verwijst naar een aparte pagina met vereisten en beperkingen die moet worden gecontroleerd voordat een uitrol wordt gepland.

De M365.FM-aflevering "Azure Databricks - Simply Explained" plaatst Unity Catalog binnen het overzicht van het platform. De opbouw omvat wat Azure Databricks is, waarom het lakehouse-idee bestaat, Apache Spark, notebooks, clusters en Delta Lake, en groepeert daarna "Workspaces, Accounts, and Unity Catalog" als één onderwerp. De aflevering sluit ook af met richtlijnen over wanneer Databricks, Fabric of Synapse moet worden gebruikt. In die context is Unity Catalog het onderdeel dat uitlegt hoe meerdere werkruimten onder één account een consistent governancemodel kunnen delen, wat relevant is bij het vergelijken van Databricks met andere Microsoft-dataplatforms.

Voor mensen die naar de term zoeken, komt het er kort op neer dat Unity Catalog antwoord geeft op de vragen wie toegang heeft tot welke data of welk model, waar die data vandaan komt, wie die heeft gebruikt, en hoe die kan worden gevonden of gedeeld. Omdat het wordt afgedwongen op het moment dat tabellen worden bevraagd of modellen worden aangeroepen, en omdat lineage- en auditrecords automatisch worden gegenereerd, vormt het de basis voor governance in Azure Databricks in plaats van een optionele toevoeging.

Overzicht samengesteld met AI op basis van M365.FM-afleveringen en de feiten op deze pagina. Je kunt het verbeteren met de bewerkknop hieronder.

TypeProduct

Veelgestelde vragen

Vragen met AI zijn met AI geschreven op basis van de feiten op deze pagina.

Wat is Unity Catalog in Azure Databricks? (AI)

Unity Catalog is de uniforme governancelaag voor data en AI in Azure Databricks. Het beheert de toegang, legt lineage automatisch vast en registreert activiteit voor auditdoeleinden over werkruimten heen.

Hoe zijn objecten georganiseerd in Unity Catalog? (AI)

Tabellen, weergaven, volumes, functies en modellen gebruiken een naamruimte met drie niveaus: catalogus, schema en object. Rechten op deze beveiligbare objecten worden toegekend aan gebruikers, serviceprincipals of groepen.

Is Unity Catalog standaard ingeschakeld? (AI)

Volgens Microsoft Learn staat het automatisch aan voor werkruimten die na november 2023 zijn aangemaakt. Werkruimten die daarvoor zijn aangemaakt, moeten worden geüpgraded om het te gebruiken.

Woordenlijst

Community wiki

Short info above, community knowledge below: add practical tips, examples or corrections. New contributions are reviewed first; trusted members publish directly.

Experts en bedrijven voor dit onderwerp

Niemand heeft dit onderwerp nog opgegeven. Voeg het toe aan je profiel.

Beheerd door Mirko Peters (Microsoft MVP) · Laatst bijgewerkt: