M365Con 2027 – konferensi online gratis · 11–22 Jan 2027 · 120 sessions m365con.net

Unity Catalog

Product

Lapisan tata kelola Databricks yang menyediakan kontrol akses terpusat, audit, lineage, dan penemuan data lintas workspace.

◆ PRODUCTUnity CatalogM365.FM
Title graphic: Unity Catalog (Product)

Juga dibahas

Episode tentang Unity Catalog itu juga membahas Azure Databricks, Delta Lake, Apache Spark, dan Pembelajaran mesin.

Description

Unity Catalog adalah lapisan tata kelola Databricks. Di Azure Databricks, layanan ini digambarkan sebagai lapisan tata kelola terpadu untuk data dan AI. Setelah diaktifkan untuk sebuah workspace, Unity Catalog bekerja di bawah semua interaksi data dan AI di workspace tersebut. Layanan ini menyediakan kontrol akses terpusat, audit, lineage, dan penemuan data lintas workspace, sehingga aturan tentang siapa yang boleh melihat atau mengubah data didefinisikan di satu tempat, bukan diulang di setiap workspace.

Dokumentasi menjelaskan cara kerjanya dalam praktik. Unity Catalog mengontrol akses setiap kali sebuah tabel di-query atau sebuah model dipanggil. Layanan ini melacak lineage secara otomatis dan mencatat aktivitas untuk keperluan audit. Akses ke katalog tersedia melalui Catalog Explorer, SQL, Databricks CLI, dan REST API. Semua yang diatur dalam tata kelola merupakan securable object, dan privilege atas objek-objek ini diberikan kepada pengguna, service principal, atau grup. Tabel, view, volume, fungsi, dan model diatur dalam namespace tiga tingkat yang terdiri dari katalog, skema, dan objek itu sendiri.

Perbedaan yang penting untuk keputusan penyimpanan adalah antara objek managed dan external. Tabel dan volume dapat bersifat managed, dalam hal ini Unity Catalog menangani siklus hidup penyimpanan sekaligus tata kelolanya. Tabel dan volume juga dapat bersifat external, dalam hal ini Unity Catalog hanya menangani tata kelola dan penyimpanannya tetap berada di luar pengelolaan siklus hidupnya. Memilih di antara keduanya merupakan keputusan desain yang umum ketika data sudah berada di lokasi penyimpanan yang ada.

Area fungsional yang disebutkan dalam dokumentasi Microsoft Learn melampaui izin dasar. Area tersebut mencakup kontrol akses dengan kebijakan berbasis atribut serta filter baris dan kolom, penemuan data, lineage, log audit yang ditampilkan sebagai system table, klasifikasi data, pemantauan kualitas data, berbagi data lintas organisasi dan lintas cloud, serta tata kelola AI. Artinya, satu lapisan mencakup data analitik sekaligus aset AI seperti model, alih-alih memperlakukannya sebagai masalah tata kelola yang terpisah.

Dari sisi ketersediaan, Unity Catalog diaktifkan secara otomatis untuk workspace yang dibuat setelah November 2023. Workspace yang dibuat sebelumnya harus ditingkatkan agar dapat menggunakannya. Dokumentasi juga mencatat bahwa terdapat implementasi open-source dari Unity Catalog, dan merujuk ke halaman terpisah tentang persyaratan dan batasan yang sebaiknya diperiksa sebelum merencanakan penerapan.

Episode M365.FM "Azure Databricks - Simply Explained" menempatkan Unity Catalog dalam ikhtisar platform tersebut. Garis besarnya mencakup apa itu Azure Databricks, mengapa konsep lakehouse ada, Apache Spark, notebook, cluster, dan Delta Lake, lalu mengelompokkan "Workspaces, Accounts, and Unity Catalog" sebagai satu topik. Episode ini juga ditutup dengan panduan kapan menggunakan Databricks, Fabric, atau Synapse. Dalam kerangka tersebut, Unity Catalog adalah bagian yang menjelaskan bagaimana beberapa workspace di bawah satu account dapat berbagi model tata kelola yang konsisten, yang relevan saat membandingkan Databricks dengan platform data Microsoft lainnya.

Bagi orang yang mencari istilah ini, ringkasannya adalah bahwa Unity Catalog menjawab pertanyaan tentang siapa yang dapat mengakses data atau model mana, dari mana data tersebut berasal, siapa yang menggunakannya, dan bagaimana data itu dapat ditemukan atau dibagikan. Karena ditegakkan pada saat tabel di-query atau model dipanggil, dan karena catatan lineage serta audit dihasilkan secara otomatis, layanan ini menjadi dasar tata kelola di Azure Databricks, bukan tambahan opsional.

Overview compiled with AI from M365.FM episodes and the facts on this page. You can improve it with the edit button below.

TypeProduct

Frequently asked questions

Questions marked with AI were written with AI from the facts on this page.

Apa itu Unity Catalog di Azure Databricks? (AI)

Unity Catalog adalah lapisan tata kelola terpadu untuk data dan AI di Azure Databricks. Layanan ini mengontrol akses, melacak lineage secara otomatis, dan mencatat aktivitas untuk audit di seluruh workspace.

Bagaimana objek diatur dalam Unity Catalog? (AI)

Tabel, view, volume, fungsi, dan model menggunakan namespace tiga tingkat, yaitu katalog, skema, dan objek. Privilege atas securable object ini diberikan kepada pengguna, service principal, atau grup.

Apakah Unity Catalog diaktifkan secara default? (AI)

Menurut Microsoft Learn, layanan ini aktif secara otomatis untuk workspace yang dibuat setelah November 2023. Workspace yang dibuat sebelum tanggal tersebut harus ditingkatkan agar dapat menggunakannya.

Glossary

Community wiki

Short info above, community knowledge below: add practical tips, examples or corrections. New contributions are reviewed first; trusted members publish directly.

Experts and companies for this topic

Nobody has listed this topic yet. Add it to your profile.

Maintained by Mirko Peters (Microsoft MVP) · Last updated: