SAP’s Sean Kask: software firms must become AI companies or perish

How Netflix Taught an LLM to Recommend Movies So That You Keep Watching

Netflix đã phát triển hệ thống GenRec để tăng thời gian xem phim của người dùng. …

The LLM Blindspot: Why Models Forget What’s in the Middle of Your Prompt

Các mô hình LLM (Large Language Model) thường bỏ qua thông tin nằm ở giữa prompt, hiện …

Production-grade LLMs and agents: a field guide

Bối cảnh là việc triển khai production-grade LLMs và agents từ demo sang hệ thống đáng tin cậy. Nguyên nhân kỹ thuật là thiếu mô trường thức cho việc đánh giá và phát triển hệ thống LLM agents. Hệ quả là nhiều tổ chức gặp khó khăn trong việc scaling các solution LLM agents. Điều đáng học là bài viết cung cấp maturity model với 4 layers (Foundation, Orchestration, Autonomy, Evolution) để tự đánh giá và định hướng phát triển. Bài còn đi sâu vào từng layer với các practice và tool cụ thể như LangChain, Autogen, DSPy.

Bài viết này giúp lập trình viên hiểu cách xây dựng hệ thống LLM và agent từ thử nghiệm thành giải pháp thực tế đáng tin cậy.

Dear Coder: Open This If You're Feeling AI FOMO

Thị trường AI hiện đang cực kỳ cạnh tranh với các công ty liên tục tung ra model đạt hiệu suất X% cao hơn. Nguyên nhân kỹ thuật chính là sự phát triển nhanh chóng của transformer architecture và công nghệ training distributed như DeepSpeed. Hệ quả là các lập trình viên cảm thấy FOMO (sợ bỏ lỡ) và phải liên tục cập nhật kiến thức mới để không tụt hậu. Điều đáng học là tập trung vào fundamentals thay vì đuổi theo hype, vì nền tảng vững chắc giúp bạn hiểu và áp dụng công nghệ AI một cách hiệu quả hơn trong dài hạn.

Bài viết này giúp lập trình viên vượt qua cảm giác bỏ lỡ xu hướng AI và nắm bắt cơ hội phát triển trong thời đại công nghệ mới.

The hardest parts about agents can’t fit on a billboard

Tại MongoDB.local NYC, cuộc trò chuyện với Max Marcon của MongoDB đã tiết lộ rằng yếu tố quan trọng nhất giúp nâng cao khả năng của agents là context. Các agent hiện đại gặp khó khăn khi xử lý lượng lớn thông tin không được cấu trúc, đòi hỏi các cơ chế context window hiệu quả hơn như trong các framework LangChain hay LlamaIndex. Việc mở rộng context window lên tới 100K tokens giúp agent duy trì trạng thái hội thoại và phân tích dữ liệu phức tạp mà không bị mất mát thông tin quan trọng. Các công ty đang đầu tư mạnh vào kỹ thuật indexing và retrieval để tối ưu hóa việc truy xuất context, đây là bài học quý cho ai xây dựng hệ thống agent tiên tiến.

Bài viết giải thích tại sao bối cảnh là yếu tố quyết định giúp nâng cao năng lực của các agents trong lập trình.

Bag of Decisions Reranker

Bối cảnh nghiên cứu sử dụng Large Language Model (LLM) để tạo câu hỏi cho một hệ thống reranker tên là Jev. Nguyên nhân kỹ thuật đến từ nhu cầu cải thiện độ chính xác của quá trình reranking bằng cách tận dụng khả năng hiểu ngữ cảnh của LLM. Hệ quả cho thấy phương pháp này có thể đánh đổi giữa độ chính xác và hiệu suất xử lý, đặc biệt khi xử lý các query phức tạp. Điều đáng học là cách tiếp cận này mở ra hướng nghiên cứu mới về kết hợp LLM với các hệ thống retrieval chuyên sâu.

Bài viết này giúp bạn hiểu cách dùng LLM để tạo câu hỏi reranking hiệu quả cho hệ thống Jev.

AI Is Making It Too Easy to Avoid Thinking

Ngày nay nhiều lập trình viên sử dụng AI như một phần không thể thiếu trong công việc hàng ngày. Việc phụ thuộc vào AI khi viết code, build sản phẩm và học hỏi công nghệ mới đang dẫn đến thói quen lười tư duy. Nghiên cứu chỉ ra 65% lập trình viên trẻ sử dụng ChatGPT cho mọi vấn đề gặp phải mà không tự phân tích. Hệ quả là kỹ năng giải quyết vấn đề cơ bản bị suy yếu khi các công cụ AI như Copilot làm mọi thứ quá dễ dàng. Chúng ta nên cân nhắc sử dụng AI như trợ lý chứ không thay thế hoàn toàn quá trình tư duy logic.

Bài viết giúp bạn nhận diện cách AI đang vô tình làm giảm khả năng tư duy độc lập của lập trình viên.