#opensearch

Watch AWS engineers troubleshoot agentic AI with OpenTelemetry and OpenSearch

AWS tổ chức buổi webinar ngày 22/7 do Dotan Horovits và Rekha Thottan dẫn dắt, giới thiệu cách kết hợp OpenTelemetry và OpenSearch để giám sát và khắc phục sự cố cho hệ thống AI agent. Buổi demo trình bày luồng dữ liệu logs, metrics, traces trong pipeline OTel và giới thiệu framework mã nguồn mở Agent Health nhằm phát hiện sớm hành vi bất thường của agent trước khi triển khai sản xuất. Bài viết nhấn mạnh rằng các phương pháp quan sát truyền thống không đủ cho AI agent phi tất định, và các giải pháp mã nguồn mở giúp tránh silo dữ liệu, tối ưu hóa ROI cho AI.

Lập trình viên phát triển hệ thống AI nên đọc bài này để tìm hiểu cách áp dụng OpenTelemetry và OpenSearch để theo dõi và debug các hệ thống AI có tính chất hành động (agentic) một cách hiệu quả, tránh bị mắc kẹt trong các công cụ đóng gói và phân tán dữ liệu.

Amazon OpenSearch Service now supports automatic semantic enrichment for VPC domains

Discover more about what's new at AWS with Amazon OpenSearch Service now supports automatic semantic enrichment for VPC domains

Building search experiences for JSON data with Amazon OpenSearch Service

Amazon OpenSearch Service cung cấp lớp khám phá chuyên dụng cho dữ liệu JSON từ các kho lưu trữ vận hành như DynamoDB, DocumentDB hay Aurora, tích hợp tìm kiếm toàn văn, vector và không gian địa lý trong cùng một truy vấn. Bài viết minh họa qua ứng dụng khám phá nhà hàng, đề cập chiến lược mapping (chỉ mục theo trường, đối tượng lồng nhau, knn_vector cho embeddings), phân tích văn bản với bộ phân tích tiếng Anh và mở rộng từ đồng nghĩa, tìm kiếm vector dựa trên HNSW cho khớp ngữ nghĩa, lọc theo vị trí bằng geo_point, cũng như truy vấn kết hợp ba phương thức. Ngoài ra, bài viết còn đề cập đến ingestion dữ liệu qua CDC bằng OpenSearch Ingestion, các lỗi mapping phổ biến và quyết định giữ dữ liệu tại nguồn hay đồng bộ sang OpenSearch.

Lập trình viên cần đọc bài này để hiểu cách tối ưu hóa và tích hợp các cơ sở dữ liệu JSON với Amazon OpenSearch để xây dựng trải nghiệm tìm kiếm đa chiều—từ tìm kiếm văn bản, vector đến địa lý—với các chiến lược hiệu quả như HNSW, CDC và hybrid queries.

Amazon OpenSearch Serverless now supports up to 10,000 collections per collection group

Amazon OpenSearch Serverless nâng giới hạn lên 10.000 collections mỗi collection group, giúp quản lý khối lượng dữ liệu lớn hơn hiệu quả.

Lập trình viên cần đọc bài này để hiểu cách tối ưu hóa quy mô dữ liệu cho ứng dụng tìm kiếm và phân tích với OpenSearch Serverless, giúp tiết kiệm chi phí và cải thiện hiệu suất khi xử lý hàng triệu dữ liệu trong các nhóm tập hợp lớn.

OpenSearch Is Done Being Called "the Elasticsearch Fork"

OpenSearch chính thức không còn bị gọi là "bản fork của Elasticsearch" sau cuộc phỏng vấn với Bianca Lewis tại Open Source Summit India.

Lập trình viên nên đọc bài này để hiểu rõ cách OpenSearch đã tái định nghĩa bản thân qua sự phân biệt rõ ràng với Elasticsearch, giúp bạn cập nhật kiến thức về xu hướng phát triển công nghệ tìm kiếm vector và mở rộng ứng dụng cho các dự án của mình.

Amazon OpenSearch Service now supports OpenSearch version 3.7

Dịch vụ Amazon OpenSearch giờ đây hỗ trợ phiên bản OpenSearch 3.7, cung cấp các tính năng và cải tiến mới nhất từ AWS.

Lập trình viên cần đọc để cập nhật kiến thức về các tính năng mới trong OpenSearch 3.7, đặc biệt là những cải tiến về hiệu suất tìm kiếm, bảo mật và tích hợp với AWS để tối ưu hóa ứng dụng của mình.

Online index migration and shard-scaling in OpenSearch with AOSC

Learn how Atlassian built AOSC, an OpenSearch plugin to reshape indices and scale their shards online.

OpenSearch Optimizations for Production RAG, Part 2: Lexical Retrieval

Optimizing OpenSearch for production RAG, Part 2. Master lexical retrieval: BM25 scoring, analyzers, fuzzy versus edge-ngram trade-offs, filters and boosts, multilingual, and where BM25 breaks.

How Uber Builds Zone-Failure-Resilient OpenSearch Clusters

Uber duy trì hoạt động OpenSearch khi một zone gặp sự cố nhờ cơ chế phân bổ shard sẵn có và hệ thống isolation-group do chính họ phát triển, tận dụng khả năng sao lưu dữ liệu giữa các zone.

Lập trình viên nên đọc bài này để hiểu cách thiết kế hệ thống phân tán mạnh mẽ bằng OpenSearch, giúp ứng dụng như Uber tự động phục hồi khi gặp sự cố vùng (zone failure) mà không cần phụ thuộc vào kiến trúc phức tạp hoặc quản lý thủ công.

Amazon OpenSearch Service now supports the Agent Toolkit for AWS with a curated skill

Dịch vụ Amazon OpenSearch giờ đây hỗ trợ Agent Toolkit cho AWS kèm theo kỹ năng được tuyển chọn sẵn.

Lập trình viên nên đọc bài này vì Amazon OpenSearch Service kết hợp với Agent Toolkit AWS có thể giúp tối ưu hóa việc xây dựng các ứng dụng tự động hóa tìm kiếm, xử lý dữ liệu lớn và tích hợp AI/ML thông qua các skill được cá nhân hóa, mở rộng khả năng xử lý và tương tác với hệ thống tìm kiếm của họ.

AWS aims to lower log analytics costs with new analytics engine for managed OpenSearch

AWS has launched a new analytics engine for Amazon OpenSearch Service optimized for log analytics, claiming up to 70% storage cost reduction. The engine stores data in Apache Parquet format, uses Apache Calcite for query optimization, routes analytical operations to Apache DataFusion and search predicates to Lucene, and supports SQL and PPL. It was motivated by AI and agentic workloads driving a 93% increase in log volumes, forcing enterprises to drop retention windows or sample logs. Analysts note potential benefits including longer retention, better compliance, and reduced observability tool sprawl, but warn that adoption requires standing up a new domain and migrating ingestion pipelines, and the lack of DSL support may force rewrites of dashboards and automation workflows.