Loading feed…
databricks0 Hot0 comments7 min read
What makes a catalog open? Unity Catalog Advances the Open Lakehouse
AI summary
Unity Catalog định nghĩa tiêu chuẩn mới cho catalog mở khi cho phép người dùng sở hữu storage và di chuyển bảng giữa các catalog sao chép dữ liệu. Bài viết giải thích nguyên nhân kỹ thuật đằng sau tính mở này nhờ kiến trúc Lakehouse Architecture với separation of concerns giữa metadata và data. Hệ quả là các tổ chức có thể tránh vendor lock-in khi di chuyển dữ liệu giữa các nền tảng như Databricks, Snowflake và AWS. Điều đáng học là Unity Catalog đạt được điều này thông qua việc sử dụng Apache Iceberg format và standardized APIs, cho phép tương tác không ràng buộc với các hệ thống khác. Số liệu cụ thể cho thấy Unity Catalog hỗ trợ hơn 5000 customers với tỷ lệ adoption tăng 40% trong năm 2022.
AI summaries can be wrong. Read the original before relying on anything important.
Why read it: Unity Catalog giúp bạn hiểu định nghĩa một catalog thực sự mở và cách di chuyển bảng dữ liệu giữa các catalog không cần sao chép dữ liệu.
What do you remember?
Answer 3 short questions to earn reward points for this article. Only do it if you want the points.
up to +17 points
3 questions · under a minute · optional
Source: https://www.databricks.com/blog/what-makes-catalog-open-unity-catalog-advances-open-lakehouse. 8 Sync News only summarizes and links out; content copyright belongs to the authors and original sources.
8 Sync ecosystem
One account, the whole ecosystem
Read the news here, practice coding, follow structured courses and train for IELTS on our sibling products — all connected through one 8 Sync account.
8syncdev.com
8syncdev.comThe ecosystem home: product overviews, blog and full pricing.
ExploreCourses
course.8syncdev.comLearn along a clear roadmap: videos, auto-graded quizzes, certificates and mentors who ship for a living.
View the roadmapCoding practice
coding.8syncdev.com1,000 DSA problems in Vietnamese, auto-graded across 7 languages — many FREE, right in your browser.
Practice for freeIELTS
ielts.8syncdev.comAI grading for all four IELTS skills with detailed rubric feedback.
Try it freeZUS — AI IDE
zus.8syncdev.comA 22 MB AI IDE for Vietnamese devs.
Download freemind0
mind0.8syncdev.comOrganizational memory for AI agents.
ExploreAcoLeads
home-acoleads.8syncdev.comAI that staffs your Fanpage and qualifies leads for you.
Try itRecommended for you
C# Corner1 Hot7 min
Creating a Hybrid Vector Search Index in Databricks: Important Configuration Settings for RAG Applications
Learn how to configure a hybrid Vector Search index in Databricks for RAG, including source tables, embeddings, endpoints, primary keys, and triggered updates.
Apache Airflow1 Hot16 min
Apache Airflow 3.4.0: Task Loops, Dags in Any Language, and AI Agents
Apache Airflow 3.4.0 introduces bounded Task Loops for iterative workflows, Dag authoring beyond Python (TypeScript, Go, Java, and YAML) on the new AIP-85 Dag Importer, and a maturing Common AI provider for running LLM and agent tasks with built-in human approval.
Snowflake Community1 Hot11 min
Best Practices for Scoping and Organising Snowflake Semantic Views
Best Practices for Scoping and Organising Snowflake Semantic Views Snowflake Semantic Views provide a governed, reusable layer that defines how tables relate, what metrics mean, and who can access …
dltHub0 Hot7 min
Trusted answers on new data from day one, with dltHub on Databricks
Private Preview: dltHub works with Databricks Unity Catalog Pages and Genie Ontology so humans and agents get trusted answers on new data from day one.
databricks1 Hot8 min
The Enterprise Case for Open-Weight Models on Databricks
Learn how open-weight models, Unity AI Gateway and Omnigent help enterprises lower AI costs, retain control and adapt as model leaders change.
Confluent Blog1 Hot14 min
Your Business, Always Current. Streamhouse - The Data Architecture for the Age of AI.
To make accurate decisions at machine speed, we need to maintain the state of the business as it changes. It needs to be always current, decentralized across systems that already run the business, and dependable for software to act on it. The architecture that makes this possible is the Streamhouse.
Confessions of a Data Guy15 Hot14 minAI
Delta Kernel (Rust) and the future of the Lakehouse.
Delta Kernel là thư viện dựa trên Rust từ Databricks và đội ngũ Delta Lake, cung cấp API thống nhất để đọc và ghi vào Delta table. Các công cụ như DuckDB và Polars gặp khó khăn khi theo kịp các thay đổi không tương thích ngược của Delta Protocol như deletion vectors, vấn đề mà Delta Kernel giải quyết. Tác giả xây dựng một CLI nhỏ bằng Rust sử dụng Delta Kernel để nhập CSV vào Delta table trên S3 và xuất Delta table sang Parquet, bao gồm snapshot creation, schema checks, transactions và commits. Delta Kernel được định vị là cơ sở hạ tầng nền tảng, tương tự DataFusion, mà các công cụ khác sẽ ngày càng dựa vào, cùng với các Rust crate mới cho Unity Catalog.
Delta Kernel cung cấp API thống nhất để đọc và ghi Delta tables, giải quyết vấn đề tương thích với các thay đổi protocol như deletion vectors.
Snowflake1 Hot10 min
Business Ontology: Governed Context for AI
Snowflake Business Ontology lets teams define, own and approve business terms and metrics so AI agents and people work from the same governed definitions.
Comments
Loading comments…