Running PII detection locally with the Rampart NER model

Arcjet extended its sensitive information detection SDK with an optional local NER model backend using the open source Rampart model (14MB ONNX). The post details the engineering decisions: a pluggable SensitiveInfoBackend interface to keep the rule stable across model changes, offset reconstruction from BERT-style subword tokens back to original character positions, hybrid detection combining deterministic regex/Luhn recognizers for structured data with the NER model for names and addresses, a span merge algorithm that resolves overlaps by length and source priority, lazy model loading with failure-safe caching, overlapping 480-character chunking to handle inputs beyond the 512-token model window, and Next.js bundling guidance to avoid packaging native ONNX binaries. The feature ships in server runtimes (Node.js, Bun, Deno) with p50 latency around 6.5ms.

Nguồn: https://blog.arcjet.com/running-pii-detection-locally-with-the-rampart-ner-model. 8sync News chỉ tóm tắt và dẫn link; bản quyền nội dung thuộc tác giả và nguồn gốc.

Đề xuất cho bạn

Docker1 Hot11 phút9 giờ trướcAI

Why AI Agents Need Isolation with Docker SBX

Các tác nhân AI có thể tự thực thi code, cài đặt gói và tương tác API, nhưng điều này tiềm ẩn rủi ro bảo mật khi chạy trên máy chủ của nhà phát triển. Docker SBX cung cấp cơ chế cô lập sandbox dựa trên microVM, quản lý thông tin đăng nhập qua proxy và kiểm soát truy cập mạng. Sandbox Kits đóng gói môi trường làm việc (công cụ, biến môi trường, chính sách mạng, thông tin đăng nhập) thành các blueprint tái sử dụng, gồm hai loại: Mixin Kits (bổ sung tính năng) và Agent Kits (xây dựng môi trường hoàn chỉnh).

Lập trình viên nên đọc bài này để hiểu cách Docker SBX và Sandbox Kits giúp bảo vệ môi trường phát triển khỏi rủi ro an ninh khi AI tự động hóa các tác vụ lập trình, đồng thời tối ưu hóa cách xây dựng các môi trường phát triển an toàn và tái sử dụng.