Too many tables are bad for you

Having tens of thousands of tables in a single PostgreSQL database can cause serious memory and performance problems. Each long-lived backend connection caches metadata for every relation it touches in CacheMemoryContext, which has no size limit. A test with 20,000 tables shows this cache growing from ~4 MB to 221 MB after querying all tables. Additionally, PostgreSQL system catalog tables (pg_class, pg_attribute, etc.) balloon in size, slowing down metadata queries like those used by PostGIS views. Mitigations include setting idle_session_timeout to recycle connections, reducing table count through schema redesign, and simplifying expensive metadata views. The root fix is keeping the number of database objects moderate.

Nguồn: https://postgr.es/p/9nN. 8sync News chỉ tóm tắt và dẫn link; bản quyền nội dung thuộc tác giả và nguồn gốc.

Đề xuất cho bạn

gitconnected2 Hot6 phút3 giờ trướcAI

Weather Analytics Made Simple with Airflow, PostgreSQL, and Metabase

Bài viết hướng dẫn xây dựng pipeline dữ liệu thời tiết toàn diện bằng các công cụ mã nguồn mở: Airflow điều phối, PostgreSQL lưu trữ, Metabase tạo dashboard BI, tất cả chạy trên Docker. Dữ liệu được thu thập mỗi giờ từ WeatherAPI cho các thủ phủ bang Brazil, xử lý qua DAG nhiều tầng của Airflow, rồi hiển thị dưới dạng dashboard thời tiết hiện tại, lịch sử và dự báo trên Metabase.

Lập trình viên muốn tự động hóa và tích hợp các công cụ phân tích dữ liệu từ API đến báo cáo trực quan sẽ tìm hiểu cách xây dựng một pipeline hoàn chỉnh với Airflow, PostgreSQL và Metabase để tối ưu hóa quy trình xử lý và chia sẻ thông tin thời tiết hiệu quả.