Quản lý Context & Độ tin cậy

5.1 — Xây Dựng Bộ Quản Lý Context Với Khối Dữ Kiện Vụ Việc Bền Vững

Độ khó: Trung cấp - Thời lượng: 45 phút

Triển khai mẫu hình khối dữ kiện vụ việc bền vững để bảo vệ dữ liệu giao dịch khỏi bị tóm tắt
Cắt gọn kết quả tool dài dòng xuống các trường liên quan trước khi chúng tích tụ trong context
Nhận diện và giảm thiểu bẫy tóm tắt lũy tiến đối với giá trị số, ngày tháng, và định danh
Áp dụng biện pháp giảm hiệu ứng "lạc giữa dòng" bằng cách đặt các phát hiện chính ở đầu đầu vào tổng hợp
Hiểu rằng Claude API là stateless và mỗi yêu cầu phải bao gồm toàn bộ lịch sử hội thoại

Độ khó: Trung cấp - Thời lượng: 40 phút

Triển khai ba yếu tố kích hoạt leo thang hợp lệ: yêu cầu tường minh từ con người, lỗ hổng/ngoại lệ chính sách, và không thể tiến triển
Xác định và tránh hai yếu tố kích hoạt không đáng tin cậy: leo thang dựa trên cảm xúc và điểm tự tin do mô hình tự báo cáo
Xử lý sắc thái của sự thất vọng: khách hàng bực bội nhưng vấn đề có thể giải quyết được, so với yêu cầu tường minh gặp con người
Thiết kế cơ chế khớp khách hàng mơ hồ, yêu cầu thêm định danh thay vì chọn theo suy đoán
Bổ sung tiêu chí leo thang tường minh kèm ví dụ few-shot vào system prompt như phản ứng đầu tiên phù hợp

Độ khó: Nâng cao - Thời lượng: 50 phút

Thiết kế ngữ cảnh lỗi có cấu trúc với bốn yếu tố bắt buộc: loại lỗi, hành động đã thử, kết quả một phần, và các phương án thay thế
Phân biệt lỗi truy cập (timeout, lỗi kết nối) với kết quả rỗng hợp lệ (truy vấn thành công, không có kết quả khớp)
Xác định và tránh hai anti-pattern: che giấu trong im lặng và chấm dứt quy trình
Triển khai logic retry cục bộ cho lỗi tạm thời trước khi lan truyền lên coordinator
Bổ sung chú thích độ bao phủ vào output tổng hợp để minh bạch về khoảng trống thông tin

Độ khó: Nâng cao - Thời lượng: 60 phút

Nhận diện suy giảm ngữ cảnh là vấn đề chất lượng chú ý, không phải vấn đề giới hạn token
Triển khai file nháp (scratchpad) để lưu giữ các phát hiện quan trọng bên ngoài context của cuộc hội thoại
Dùng ủy quyền cho subagent để cô lập context, không chỉ để song song hóa
Thiết kế khôi phục sau sự cố bằng bản kê khai trạng thái có cấu trúc để tăng khả năng phục hồi của phiên
Áp dụng tiêm bản tóm tắt giữa các giai đoạn khám phá để tránh lặp lại việc khởi động nguội

Độ khó: Nâng cao - Thời lượng: 50 phút

Nhận diện bẫy chỉ số tổng hợp: độ chính xác tổng thể 97% có thể che giấu tỷ lệ lỗi 40% ở một số loại tài liệu cụ thể
Triển khai theo dõi độ chính xác được chia nhỏ theo cả loại tài liệu VÀ phân đoạn trường dữ liệu
Hiệu chỉnh điểm độ tin cậy thô bằng tập xác thực đã gán nhãn để đưa ra ngưỡng định tuyến đáng tin cậy
Thiết kế lấy mẫu ngẫu nhiên phân tầng bao gồm cả các trích xuất có độ tin cậy cao để xác minh liên tục
Ưu tiên năng lực review có hạn cho các mục có độ bất định cao nhất bằng thứ tự hàng đợi động

Độ khó: Nâng cao - Thời lượng: 60 phút

Thiết kế ánh xạ khẳng định-nguồn có cấu trúc với khẳng định, URL nguồn, tên tài liệu, đoạn trích, và ngày xuất bản
Bảo toàn attribution xuyên suốt các pipeline tổng hợp nhiều bước mà không bị mất trong quá trình tóm tắt
Xử lý các nguồn mâu thuẫn bằng cách chú thích cả hai giá trị thay vì tùy tiện chọn một
Dùng nhận thức về thời gian (ngày xuất bản) để phân biệt xu hướng với mâu thuẫn
Áp dụng cách trình bày phù hợp với nội dung: bảng cho dữ liệu tài chính, văn xuôi cho tin tức, danh sách cho các phát hiện kỹ thuật