LinkedIn rebuilt its Follows Recommendation system, replacing heuristic candidate generation and popularity-driven ranking with LLM-based semantic retrieval. Member and creator profiles are converted into narrative prompts, encoded into embeddings via a fine-tuned bi-encoder trained with contrastive learning (InfoNCE loss, LoRA, mixed precision, gradient checkpointing), and used for both offline (FAISS, Ray) and online (Proxima-hosted) retrieval. The same embeddings feed the downstream L2 ranking model via learned dimensionality-reduction projections. Production A/B tests showed statistically significant follow-rate lifts, especially for new members with sparse activity history.
Source: https://www.linkedin.com/blog/engineering/ai/rebuilding-linkedins-follows-recommendations-with-llm-based-semantic-retrieval-and-ranking. 8 Sync News only summarizes and links out; content copyright belongs to the authors and original sources.
Đang tải bình luận…
NVIDIA vừa ra mắt Nemotron 3 Ultra, mô hình open weights với khả năng xử lý 1M token context, chi phí chỉ bằng 1/10 so với GPT-4o trên các benchmark agent. Sự chênh lệch giá này đến từ kiến trúc tối ưu và chiến lược cloud hosting của NVIDIA, cho phép người dùng tải weights, tự host và fine-tune hoàn toàn. Hệ quả là lập trình viên có thể triển khai Nemotron 3 Ultra với chi phí thấp đáng kể mà không phụ thuộc vào API trả phí của các dịch vụ đám mây. Bài này đáng đọc nếu bạn đang tìm kiếm một giải pháp LLM tiết kiệm chi phí, đặc biệt khi xây dựng các ứng dụng agent cần context window lớn.
NVIDIA Nemotron 3 Ultra mang đến lựa chọn AI mở với chi phí chỉ 1/10 GPT-4o, cho phép lập trình viên tự lưu trữ và tinh chỉnh mô hình.
Coworker.ai vừa ra mắt OM2, một lớp bộ nhớ tổ chức nhằm tối ưu chi phí token cho AI doanh nghiệp. OM2 tính trước kiến thức công ty thành một đồ thị neural có nhận thức về quyền truy cập, cho phép truy xuất nhanh mà không cần gửi toàn bộ ngữ cảnh mỗi lần. Kết quả là lượng token tiêu thụ giảm xuống 1/9 (khoảng 9x tiết kiệm) và thời gian phản hồi tăng tốc 64%. Khi kết hợp với việc định tuyến truy vấn qua nhiều mô hình, tổng mức tiết kiệm có thể lên tới 51x token. Điều này cho thấy việc đầu tư vào bộ nhớ tổ chức được tính trước có thể giảm đáng kể chi phí tính toán và cải thiện trải nghiệm người dùng trong hệ thống AI doanh nghiệp.
OM2 giúp lập trình viên tiết kiệm tới 51 lần chi phí token AI và tăng tốc độ phản hồi tới 64%.
Khi chuyển tính năng AI từ mô hình thử nghiệm sang môi trường sản xuất, nhóm cần xem model như một thành phần không tin cậy, xác suất trong hệ thống phần mềm truyền thống. Những sai lầm thường gặp là coi model như là toàn bộ hệ thống, bỏ qua việc xác định hợp đồng sản phẩm hẹp, không xác thực đầu ra model như dữ liệu không tin cậy, và không quản lý phiên bản prompt hoặc dữ liệu đánh giá trước khi tinh chỉnh. Điều này dẫn đến lỗi logic nghiệp vụ, chi phí không được kiểm soát, rủi ro bảo mật như prompt injection, và sự cố khi nhà cung cấp dịch vụ AI gặp sự cố mà không có cơ chế timeout, retry hoặc fallback. Áp dụng danh sách kiểm tra готовness bao gồm phạm vi, kiến trúc, chất lượng, độ tin cậy, bảo mật và hoạt động; giữ các quy tắc kinh doanh xác định bên ngoài model, xác thực đầu ra, cấp quyền truy cập công cụ theo nguyên tắc ít đặc quyền nhất, và duy trì con người trong các quy trình có hậu quả cao. Sau khi triển khai dần dần, equipes nên giám sát chất lượng sau khi ra mắt, đo chi phí cho mỗi kết quả thành công thay vì chỉ giá token, và ghi lại ranh giới AI để duy trì tính traceability và dễ bảo trì.
Bài hướng dẫn này cung cấp lộ trình thiết thực giúp lập trình viên khắc phục khoảng cách kỹ thuật khi triển khai AI từ prototype sang production.
Bài viết so sánh kiến trúc AI đơn agent và đa agent, giải thích rằng hệ thống agentic hoạt động qua vòng lặp hành động – quan sát – quyết định, khác với việc chỉ dùng prompt LLM thuần túy. Với một agent đơn, latency, chi phí và việc debug được giữ ở mức thấp, đủ xử lý hầu hết các nhiệm vụ thực tế. Khi chuyển sang đa agent, sẽ phải trả “thuế phức tạp”: latency tăng theo bội số, chi phí mở rộng, lỗi lan truyền và việc orchestrate trở nên khó khăn, chỉ đáng trả khi thỏa mãn một trong bốn điều kiện – workflow đối đầu/bình luận, bộ công cụ quá khác nhau để gộp, nhiệm vụ có thể chạy song song hoặc các bước cần persona và guardrails cực kỳ khác nhau. Do đó, tác giả khuyên nên bắt đầu bằng một agent đơn và chỉ mở rộng sang đa agent khi thấy lỗi thực tế chứng minh rằng sự đơn giản hiện tại không đủ. Kết luận là trả giá cho độ phức tạp chỉ khi có bằng chứng rõ ràng về lợi thế song song, đối đầu hoặc nhu cầu tách biệt công cụ và chính sách.
Lập trình viên nên đọc bài này để hiểu cách phân biệt giữa hệ thống AI đơn (Single-Agent) và đa (Multi-Agent) khi quyết định khi nào nên nâng cấp độ phức tạp để tối ưu hóa công việc, tránh lãng phí tài nguyên khi chỉ cần đơn giản hóa.
ORMs vẫn cần thiết vì chúng cung cấp lớp trừu tượng an toàn, hiệu quả để tương tác với cơ sở dữ liệu, trong khi LLMs chỉ sinh code tiềm ẩn rủi ro lỗi, kém tối ưu và khó bảo trì. ORMs giúp chuẩn hóa truy vấn, tránh SQL injection và tối ưu hóa hiệu suất thông qua caching, điều mà code do LLM sinh ra khó đảm bảo.
Lập trình viên nên đọc bài này để hiểu cách ORM và SQL vẫn giữ vai trò quan trọng trong quản lý dữ liệu cơ bản, giúp tránh rủi ro lỗi và tối ưu hóa hiệu suất khi ứng dụng lớn cần kiểm soát trực tiếp dữ liệu.
Bối cảnh: Xe tự hành (autonomous vehicle) thường khó dự đoán trong các tình huống bất thường. Nguyên nhân kỹ thuật: CW-Net là kỹ thuật giải thích hành vi xe bằng cách sử dụng khái niệm dễ hiểu với con người. Hệ quả: Nghiên cứu cho thấy những giải thích này giúp tài xế dự đoán hành vi xe trong các tình huống bất ngờ. Điều đáng học: Việc kết hợp AI giải thích (explainable AI) với giao tiếp người-máy có thể cải thiện an toàn giao thông tự động. Công nghệ này có thể ứng dụng trong các hệ thống lái xe bán tự động (autonomous vehicle) để giảm sự mất tin tưởng của người dùng.
CW-Net giúp con người hiểu và dự đoán hành vi của xe tự lái trong các tình huống bất ngờ.
Công nợ kỹ thuật luôn đi kèm với quy tắc rõ ràng: khi cần ship kịp thời, team thườngตัด góc và để lại comment TODO fix this để xử lý sau. Nguyên nhân kỹ thuật này xuất phát từ việc ưu tiên tốc độ hơn là độ hoàn thiện, dẫn đến các đoạn mã tạm thời được ghi chú nhưng chưa được sửa. Hệ quả là sau khoảng sáu tháng, người khác phải trả nợ này; mặc dù gây phiền phức nhưng vẫn nằm trong giới hạn có thể đo lường và trực quan hóa. Một engineer có kinh nghiệm có thể nhìn qua codebase và vẽ bản đồ các vị trí “cất giấu xác”, tức là các điểm debt đã tích lũy để dễ dàng quản lý và lên kế hoạch trả nợ. Điều đáng học là việc ghi lại và lên kế hoạch trả nợ sớm giúp tránh sự tích lũy khó kiểm soát và duy trì mức độ chất lượng code ổn định trong dài hạn.
Bài viết này giúp lập trình viên nhận diện và quản lý các dạng nợ kỹ thuật vô hình mà không có quy tắc rõ ràng, gây nguy hiểm cho dự án.
Bài viết giới thiệu phương pháp Quantization‑Aware Healing (QAH) được phát triển bởi Multiverse Computing để nén mô hình ngôn ngữ lớn xuống 4‑bit mà không làm giảm hiệu suất. QAH kết hợp quantization‑aware training với một bước healing sau huấn luyện, trong đó một mạng phụ nhỏ được học để bù lại sai số lượng tử hóa gây ra. Kết quả cho thấy mô hình 4‑bit sau healing đạt được mức perplexity tương đương, và trong một số trường hợp thậm chí tốt hơn so với phiên bản full‑precision (32‑bit) ban đầu. Việc này đồng thời giảm kích thước bộ nhớ cần thiết xuống khoảng 1⁄8 (≈87,5%) và tăng tốc độ suy luận trên phần cứng hỗ trợ tính toán nguyên số. Điều đáng học là việc đầu tư vào quá trình healing có thể bù lại phần lớn tổn thất từ quantization, cho phép triển khai mô hình mạnh mẽ trên môi trường tài nguyên hạn chế mà không hy sinh chất lượng.
Bài viết này giúp lập trình viên hiểu cách tạo mô hình lượng hóa 4-bit hiệu suất hơn cả mô hình full-precision gốc.
Read the news here, practice coding, follow structured courses and train for IELTS on our sibling products — all connected through one 8 Sync account.
The ecosystem home: product overviews, blog and full pricing.
ExploreLearn along a clear roadmap: videos, auto-graded quizzes, certificates and mentors who ship for a living.
View the roadmap1,000+ DSA problems in Vietnamese, auto-graded across 7 languages — many FREE, right in your browser.
Practice for freeAI grading for all four IELTS skills with detailed rubric feedback.
Try it freeA 22 MB AI IDE for Vietnamese devs.
Download freeOrganizational memory for AI agents.
ExploreAI that staffs your Fanpage and qualifies leads for you.
Try it