Richard Geldreich's Blog: Neural block textures vs. GPU textures

Một nhà nghiên cứu đồ họa đang thử thay thế bộ giải mã cứng như ASTC/BC1‑7 bằng một MLP nhỏ có thể cấu hình, kết hợp với lấy mẫu endpoint bilinear kiểu PVRTC1. MLP này chỉ có khoảng 250‑1200 trọng số, hoạt động trên một bản đồ màu latent độ phân giải thấp (1/4‑1/16 của texture gốc) và các kênh selector mỗi texel, được huấn luyện bằng backprop hoặc chiến lược di tiến. Kết quả cho thấy tỷ lệ bit/chất lượng cạnh tranh với các phương pháp nén dựa trên biến đổi của GPU trên texture đơn, và vì chi phí giải mã được chia sẻ giữa các kênh, khả năng mở rộng tốt hơn khi áp dụng cho vật liệu đa kênh. Một triển khai hoạt động trên CUDA đã được cung cấp, kèm phiên bản CPU SIMD dự phòng, trong khi mã hóa BC7 nhanh vẫn sử dụng kỹ thuật bc7f hiện có mà không cần sideband giống NTC. Điều này cho thấy một mạng neural nhẹ có thể đạt hiệu quả bằng hoặc vượt qua bộ giải mã cứng truyền thống, đồng thời mang lại sự linh hoạt và lợi thế chi phí khi mở rộng sang nhiều kênh, gợi hướng phát triển cho các pipeline texture trong tương lai.