Đang tải bảng tin…
Hacker News0 Hot0 bình luận3 phút đọc
Zuck saves Meta bucks by reusing memory from old servers with a custom CXL ASIC
Meta has developed a custom CXL (Compute Express Link) ASIC that allows the company to repurpose memory from decommissioned servers, deploying it across millions of machines. The approach has delivered a 25% reduction in the number of servers needed for certain AI inference workloads, representing significant cost and hardware savings at hyperscaler scale.
Nguồn: https://www.theregister.com/systems/2026/06/29/zuck-saves-meta-bucks-by-reusing-memory-from-old-servers-with-a-custom-cxl-asic/5263483. 8sync News chỉ tóm tắt và dẫn link; bản quyền nội dung thuộc tác giả và nguồn gốc.
Đề xuất cho bạn
DigitalOcean Community1 Hot10 phútAI
Choosing the Right Model for Your Inference Use Case
Lựa chọn mô hình phù hợp là yếu tố quan trọng nhất ảnh hưởng đến chi phí và chất lượng của GenAI, chứ không phải cơ sở hạ tầng hay tinh chỉnh prompt. Bài viết đề xuất phương pháp đánh giá lặp lại: xác định ngưỡng độ chính xác tối thiểu cho tác vụ, sau đó tìm mô hình nhỏ nhất vượt qua ngưỡng đó. Kết quả benchmark cho thấy DeepSeek V4 Flash cung cấp chất lượng dịch thuật ngang bằng Claude Sonnet 4.6 nhưng chi phí đầu vào thấp hơn 27 lần; độ dài đầu ra (verbosity) có thể triệt tiêu lợi thế giá thành của các mô hình như GLM-5.2 và Qwen3-32B. Ngoài ra, bài viết nhấn mạnh không nên phụ thuộc hoàn toàn vào benchmark công khai do tình trạng bão hòa (MMLU) hay nhiễm dữ liệu (SWE-bench), mà nên đánh giá trên dữ liệu riêng.
Lập trình viên nên đọc bài này để tránh lãng phí chi phí và thời gian trong AI inference bằng cách chọn mô hình phù hợp nhất với yêu cầu thực tế của dự án, từ đó tối ưu hóa chất lượng và hiệu suất.
