#compression

Compress Links For Optimal QR Codes

Dự án Ha.mr nén URL thay vì rút gọn như các công cụ truyền thống, cho phép người dùng tự kiểm tra hoặc tự lưu trữ nhờ mã nguồn mở. Nó tạo mã QR tối ưu cho bộ ký tự alphanumeric, dễ quét hơn ở kích thước nhỏ, nhưng không đảm bảo hoạt động lâu dài do là dự án phụ.

Lập trình viên nên đọc bài này để khám phá cách tạo giải pháp tự chủ, hiệu quả hơn các dịch vụ link shortener truyền thống bằng cách áp dụng kỹ thuật nén URL và mã hóa mở nguồn, giúp tối ưu hóa khả năng mở rộng và kiểm soát dữ liệu của riêng mình.

Building Groovie, an Advanced Web-Based Drum Machine / Beat Sequencer

Groovie là drum machine/beat sequencer web-based mã nguồn mở, chạy hoàn toàn tĩnh bằng JavaScript, hỗ trợ 150+ samples, 32 patterns, chế độ polyrhythm, hiệu ứng trên từng sample (filter, delay, volume, panning) và giao diện responsive. Dự án giải quyết thách thức lưu trữ toàn bộ project trong URL dưới 2000 ký tự bằng các kỹ thuật nén như prefix codes, run-length encoding, gating bits và phát hiện lặp motif, đồng thời hỗ trợ xuất MIDI clock qua Web MIDI API (trình duyệt Chrome/Chromium).

Nếu bạn đang tìm hiểu về cách tối ưu hóa lưu trữ và truyền dữ liệu cho ứng dụng web, đặc biệt là khi phải xử lý các cấu hình phức tạp như sequencer với giới hạn URL dài, bài viết này sẽ cung cấp những kỹ thuật hiệu quả như mã hóa prefix biến dài, mã hóa chuỗi run-length và giải pháp gating bit để giải quyết vấn đề này một cách sáng tạo.

Gzip 1.15 Released With Many Bug Fixes For Issues Present Since Its Inception

Gzip 1.15 has been released, succeeding Gzip 1.14 from April 2025, with over one hundred commits primarily fixing long-standing bugs. Fixes include a file-deletion race condition, uninitialized memory usage, a buffer overflow when decompressing LZH files after Z files, and corruption issues in LZH decompression that have existed since gzip's inception. The release also adds proper locale support instead of always assuming the C locale, and drops support for FreeBSD 4.11, HP-UX 11.00, Minix 3.1.8, and Windows 8.1 via MinGW without UCRT.

Why .tar.gz files can't be combined with cat

To combine archives safely, I had to start by understanding the tar and gzip file formats. I learnt about tape drives, patent laws, and end-of-file markers.

Zstd Improvement For Linux 7.4 To Avoid Redundant Initialization

Kernel developer Usama Arif đã gửi một series patch cho Linux 7.4 nhằm loại bỏ việc khởi tạo cstream và dstream dư thừa trong code Zstd. Nguyên nhân kỹ thuật là việc trì hoãn việc khởi tạo stream đến lần đầu tiên trong iteration walk thay vì thực hiện nó hai lần. Kết quả benchmark với workload crypto_acomp 4KB cho thấy tốc độ nén tăng một con số, giải nén nhanh hơn 13% trên bare metal và 35% bên trong VM. Những patch này đã được merge vào branch cryptodev Git và dự kiến sẽ được gửi cho merge window của Linux 7.4.

Bài viết này cung cấp thông tin quan trọng về cải thiện hiệu năng nén và giải nén Zstd trong Linux 7.4 qua loại bỏ khởi tạo trùng lặp.

bzip3: A better and stronger spiritual successor to BZip2

Bzip3 là thế hệ kế thừa của BZip2, được phát triển bởi iczelia nhằm giải nén file hiệu quả hơn. Công nghệ sử dụng thuật toán block-sorting compression và Burrows-Wheeler transform (BWT) với tối ưu hóa entropy coding. Bzip3 nén file nhanh hơn BZip2 2-3 lần và đạt tỷ lệ nén cao hơn khoảng 5-15%. Với mã nguồn mở trên GitHub, dự án này mang lại cơ hội nghiên cứu và cải tiến các thuật toán nén dữ liệu.

Bzip3 mang lại giải pháp nén dữ liệu hiệu quả hơn đáng kể so với BZip2 tiền nhiệm.

I compressed my Steam library instead of buying another SSD, and got 400GB back

Người dùng đang gặp tình trạng thiếu dung lượng trên SSD chứa thư viện Steam và đang cân nhắc mua thêm một ổ SSD mới. Thay vì mua mới, họ đã áp dụng tính năng nén NTFS (hoặc công cụ CompactGUI) lên thư mục chứa các trò chơi Steam. Sau khi nén, dung lượng được thu hồi khoảng 400GB, trong khi chi phí chỉ là khoảng 6 USD cho một dây hoặc adaptor nhỏ cần thiết. Hệ quả là thư viện vẫn có thể chạy mà không thấy rõ sự chậm xuống đáng kể trên phần cứng hiện có. Điều đáng học là nén hệ thống file có thể là giải pháp rẻ tiền để mở rộng lưu trữ, nhưng cần kiểm tra tác động CPU và thời gian tải trước khi áp dụng trên các trò chơi đòi hỏi I/O cao.

Bài viết tiết lộ cách bạn có thể lấy lại 400GB dung lượng ổ đĩa chỉ với chi phí sáu đô la đơn giản.

Cloudflare Implements Cache Transcoding to Optimize Cache Storage with Zstandard

Cloudflare employs Cache Transcoding, compressing text assets like HTML and CSS with Zstandard before caching them. This method significantly reduces storage and costs by accepting a small, repeated decode cost for frequently read cached data.

How we could save petabytes of cache storage with Zstandard and Pingora

Could we get more cache space with the same hardware? We prototyped compression inside Cloudflare's cache to find out.

Database Animations: The Difference Between Row Compression and Page Compression

SQL Server cung cấp hai kỹ thuật nén cho indexes: row compression thu gọn datatypes có độ dài cố định, còn page compression bổ sung xây dựng từ điển cấp trang để loại bỏ giá trị trùng lặp (như Location), nhưng tốn nhiều CPU hơn. Row compression phù hợp với cột có độ dài cố định và VARCHAR trong NVARCHAR, trong khi page compression hiệu quả trên indexes không clustered có nhiều giá trị trùng lặp, nhưng không hỗ trợ chuỗi lớn ngoài trang (JSON/XML) và lãng phí CPU khi dữ liệu khó nén hoặc cập nhật thường xuyên.

Lập trình viên nên đọc bài này để hiểu cách tối ưu hóa hiệu suất cơ sở dữ liệu bằng cách lựa chọn đúng kỹ thuật nén (row vs. page compression) cho từng trường hợp cụ thể, đặc biệt khi cần giảm chi phí CPU hoặc I/O trong các ứng dụng có dữ liệu lặp đi lặp lại hoặc kiểu dữ liệu đặc biệt.

Game Compressor freed up 300GB on my SSD without deleting a single game

Game Compressor đã giải phóng 300GB dung lượng SSD mà không cần xóa bất kỳ game nào nhờ nén hiệu quả dung lượng lưu trữ.

Lập trình viên nên đọc bài này để hiểu cách tối ưu hóa bộ nhớ trên thiết bị cứng bằng cách áp dụng kỹ thuật game compression hiệu quả, giúp tiết kiệm không gian mà không ảnh hưởng đến chất lượng chơi game.

Compression is prediction

Nén dữ liệu và mô hình ngôn ngữ lớn (LLMs) đều giải quyết cùng một bài toán: dự đoán nội dung tiếp theo. Tìm hiểu cơ bản về nén dữ liệu và cách cải thiện khả năng dự đoán giúp tối ưu dung lượng hiệu quả hơn.

Lập trình viên nên đọc bài này để hiểu cách các thuật toán nén dữ liệu và mô hình ngôn ngữ lớn (LLM) cùng giải quyết vấn đề cơ bản là dự đoán chuỗi dữ liệu, giúp hiểu sâu hơn về cơ chế hiệu quả của cả hai trong việc tối ưu hóa dung lượng và tăng tốc xử lý.