Together AI expands fine-tuning service with more models, live metrics, and finer controls

I Use AI Almost Every Day — But I Realized I Didn’t Actually Understand How It Works

Tác giả nhận ra mình sử dụng AI hàng ngày nhưng không hiểu nguyên lý hoạt động thực sự. Sau khi nghiên cứu, phát hiện các mô hình như GPT hoạt động bằng cách dự đoán từ tiếp theo dựa trên xác suất thống kê từ lượng dữ liệu khổng lồ gồm 1.75 tỷ parameter. Cách tiếp cận này giải thích tại sao AI đôi khi tạo ra nội dung hợp lý về mặt ngữ pháp nhưng thiếu hiểu biết sâu về bối cảnh. Đây là bài học quan trọng về việc hiểu bản chất kỹ thuật đằng sau các công cụ AI trước khi áp dụng chúng vào công việc hàng ngày.

Bài viết này giúp lập trình viên hiểu rõ nguyên lý hoạt động của AI để sử dụng hiệu quả và giải quyết vấn đề tốt hơn.

Fine-Tuning Agentic AI: A Practical Guide

Bài hướng dẫn thực tế xem việc tinh chỉnh agentic AI như bốn công cụ liên kết thay vì một bước đơn lẻ: xây dựng bộ dữ liệu huấn luyện tool-calling được xác thực, áp dụng QLoRA cho training hiệu quả về mặt tham số, điều chỉnh hyperparameter runtime như temperature và retry policy, cùng sử dụng Direct Preference Optimization (DPO) để dạy ra quyết định mà SFT không thể biểu đạt. Thí dụ với agent xử lý ticket hỗ trợ cho thấy cách validate tool-calling example với schema, cấu hình QLoRA với r=4/alpha=32/dropout=0.05, thêm temperature-0 retry tăng tỷ lệ thành công lên 98.7%. Bài viết cũng trình bày dùng DPO pairs để dạy phán đoán tinh tế và xây dựng hàm đánh giá dựa trên verdict để phát hiện catastrophic forgetting, như khi khả năng tổng thể giảm 7.2 điểm dù độ chính xác tool-call tăng từ 61% lên 97%.

Bài hướng dẫn thực tế này sẽ giúp lập trình viên tối ưu hóa AI agent thông qua kỹ thuật fine-tuning bốn cấp độ, từ dataset đến DPO, với ví dụ cụ thể và số liệu đo lường rõ ràng.

Demystifying Anthropic's J-Space: A Mathematical Primer

Clarifying the math behind Anthropic’s representation workspace

How LinkedIn Trains AI Job Search 8x Faster with Multi-Teacher Distillation

LinkedIn has published details of the training infrastructure behind its AI-powered job search, describing a multi-teacher distillation pipeline that compresses knowledge from large teacher models int

Why Multi-turn Agents Need More Than a Task Graph

Bối cảnh Multi-turn Agents cần xử lý hội thoại nhiều lượt nhưng gặp thách thức trong việc quản lý trạng thái giữa các lượt. Nguyên nhân kỹ thuật là việc tối ưu hóa task graph cho mỗi lượt riêng lẻ làm mất đi bối cảnh hội thoại tổng thể, dẫn đến hiệu suất giảm 30-40% theo nghiên cứu từ Anthropic. Hệ quả là Agents đưa ra câu trả lời không nhất quán hoặc thiếu bối cảnh, đặc biệt với hội thoại dài trên 5 lượt. Điều đáng học là việc thiết kế state management mechanism riêng biệt cho hệ thống agents, kết hợp retrieval-augmented generation và attention mechanism để duy trì context window tối ưu.

Bài viết giải thích rõ ràng về trạng thái cần duy trì và cần đặt lại trong các tác vụ agent đa lượt, giúp lập trình viên tối ưu hóa hiệu năng hệ thống AI.

What “AI Agent” Actually Means: I Built a Defect Investigator to Find Out

Tác giả đã xây dựng một AI Agent để tự động kiểm tra logs và theo dõi lỗi, trong một thử nghiệm cuối tuần. Sử dụng kỹ thuật Retrieval-Augmented Generation (RAG) kết hợp với vector embeddings, hệ thống có thể hiểu ngữ cảnh log và đưa ra giả thuyết về nguyên nhân lỗi. Kết quả cho thấy AI Agent có thể tự động xác định 70% các lỗi thông thường trong ứng dụng web, nhưng gặp khó khăn với các lỗi logic phức tạp. Trải nghiệm này chỉ ra rằng dù AI Agent hiệu quả cho các tác vụ đơn giản, lập trình viên vẫn cần can thiệp thủ công cho các vấn đề phức tạp, và việc kết hợp AI với kiến thức chuyên môn là chìa khóa để phát triển hệ thống thực sự mạnh mẽ.

Bài viết này giúp lập trình viên hiểu rõ khái niệm "AI Agent" thông qua ví dụ thực tế về việc xây dựng một hệ thống kiểm lỗi tự động.

Why token cost is hidden by design in most agent UIs

Trong không gian AI, hầu hết các giao diện agent UI đều cố tình ẩn chi phí token như một dark pattern gây khó hiểu cho người dùng. Nguyên nhân kỹ thuật này xuất phát từ việc các nhà phát triển muốn tạo trải nghiệm liền mạch mà không làm gián đoạn luồng tương tác của người dùng, dẫn đến việc công cụ tính toán token cost như OpenAI's pricing calculator bị giấu đi. Hệ quả là người dùng không thể kiểm soát chi tiêu thực tế, dễ dẫn đến các khoản hóa đơn bất ngờ khi sử dụng dịch vụ dài hạn. Điều đáng học hỏi là các giao diện cần minh bạch hơn trong việc hiển thị chi phí token, ngay cả khi điều này có thể phá vỡ trải nghiệm liền mạch, để người dùng có thể đưa ra quyết định sáng suốt hơn khi tương tác với AI.

Bài này giúp lập trình viên hiểu rõ cách giao diện agent UI ẩn chi phí token một cách có chủ đích để nhận ra các thiết kế có thể gây hại.

NVIDIA Nemotron 3 Ultra: 10x cheaper than GPT-4o

NVIDIA vừa ra mắt Nemotron 3 Ultra, mô hình open weights với khả năng xử lý 1M token context, chi phí chỉ bằng 1/10 so với GPT-4o trên các benchmark agent. Sự chênh lệch giá này đến từ kiến trúc tối ưu và chiến lược cloud hosting của NVIDIA, cho phép người dùng tải weights, tự host và fine-tune hoàn toàn. Hệ quả là lập trình viên có thể triển khai Nemotron 3 Ultra với chi phí thấp đáng kể mà không phụ thuộc vào API trả phí của các dịch vụ đám mây. Bài này đáng đọc nếu bạn đang tìm kiếm một giải pháp LLM tiết kiệm chi phí, đặc biệt khi xây dựng các ứng dụng agent cần context window lớn.

NVIDIA Nemotron 3 Ultra mang đến lựa chọn AI mở với chi phí chỉ 1/10 GPT-4o, cho phép lập trình viên tự lưu trữ và tinh chỉnh mô hình.