I Tested GhostCLI’s “Claude” Models. Here’s Why I Don’t Trust the Labels

GhostCLI quảng cáo mô hình Claude của mình với các nhãn Fable 5.1, Opus 5 và Fable 5, đồng thời cam kết sử dụng không giới hạn. Khi kiểm tra thực tế, ba mô hình này cho kết quả gần như identical trong các tác vụ tạo mã và trả lời câu hỏi, cho thấy sự khác biệt về hiệu suất thực tế rất nhỏ. Điều này khiến người dùng dễ nhầm lẫn rằng họ đang truy cập vào các phiên bản có khả năng khác nhau rõ rệt. Vì vậy, sự tin tưởng vào nhãn sản phẩm có thể dẫn đến lựa chọn không phù hợp và lãng phí thời gian đánh giá. Bài học là luôn tự benchmark mô hình trước khi dựa vào các nhãn nhà cung cấp để đánh giá khả năng thực sự.