CCAR-F Day 9 - Prompting & Context

false positive

Dương tính giả (báo nhầm) | Định nghĩa: Báo có lỗi trong khi thực ra không có; nhiều false positive làm người dùng mất tin cậy. | Ví dụ: Quá nhiều false positive khiến dev bỏ qua review (Too many false positives make developers ignore the review.)

precision

Độ chính xác (trong số bị gắn cờ, bao nhiêu đúng) | Định nghĩa: Trong các mục model gắn cờ, tỉ lệ mục đúng thật. | Ví dụ: Siết tiêu chí để tăng precision (Raise precision by tightening the criteria.) | Bẫy thi: precision = ít báo nhầm; recall = ít bỏ sót.

recall

Độ phủ (trong số đúng thật, tìm ra bao nhiêu) | Định nghĩa: Trong các mục đúng thật, tỉ lệ model tìm ra được. | Ví dụ: Recall cao nghĩa là ít bỏ sót lỗi thật (High recall means few real issues are missed.)

independent review

Review độc lập | Định nghĩa: Dùng một lượt/instance khác để kiểm tra, vì model dễ thiên vị với chính câu trả lời của nó. | Ví dụ: Dùng một lượt review độc lập thay vì tự review (Use an independent review pass instead of self-review.) | Bẫy thi: Model tự review chính mình thì kém hơn review độc lập.

multi-pass review

Review nhiều lượt | Định nghĩa: Review nhiều lượt: từng file riêng, rồi một lượt xem tương tác giữa các file. | Ví dụ: Chạy lượt riêng cho từng file rồi một lượt tích hợp liên file (Run per-file passes and then a cross-file integration pass.)

confidence score

Điểm tin cậy | Định nghĩa: Điểm tự đánh giá độ tin cậy của model; dùng để chọn kết quả cần người duyệt. | Ví dụ: Chuyển các mục có độ tin cậy thấp cho người duyệt (Route low confidence items to human review.)

output format consistency

Định dạng đầu ra nhất quán | Định nghĩa: Dùng cùng schema, cùng ví dụ để đầu ra đồng nhất, dễ xử lý tự động. | Ví dụ: Đưa ví dụ mẫu để giữ định dạng đầu ra nhất quán (Show examples to keep the output format consistent.)

context window

Cửa sổ ngữ cảnh | Định nghĩa: Số token tối đa model xử lý được trong một lần (gồm prompt, lịch sử và câu trả lời). | Ví dụ: Phiên dài sắp chạm giới hạn context window (The long session is close to the context window limit.)

token

Token (đơn vị văn bản nhỏ nhất) | Định nghĩa: Đơn vị nhỏ model dùng để đọc và tính phí; chi phí và giới hạn context đều tính theo token. | Ví dụ: Output tool dài dòng làm tốn token (Verbose tool output wastes tokens.)

context degradation

Suy giảm chất lượng ngữ cảnh | Định nghĩa: Phiên càng dài, model càng dễ quên hoặc nhầm các chi tiết cũ. | Ví dụ: Hiện tượng này xuất hiện ở các phiên rất dài (Context degradation appears in very long sessions.)

lost in the middle

Mất thông tin nằm ở giữa | Định nghĩa: Model chú ý kém thông tin nằm giữa ngữ cảnh dài; nên đặt ý quan trọng ở đầu hoặc cuối. | Ví dụ: Đặt phát hiện chính ở đầu để tránh hiệu ứng này (Put key findings at the start to avoid the lost-in-the-middle effect.)

progressive summarization

Tóm tắt dần | Định nghĩa: Tóm tắt dần lịch sử cũ; dễ làm mất số liệu cụ thể như số tiền, ngày, mã đơn. | Ví dụ: Tóm tắt dần làm mất số tiền hoàn chính xác (Progressive summarization lost the exact refund amount.) | Bẫy thi: Số liệu chính xác nên giữ trong khối case facts, đừng để bị tóm tắt.

case facts

Khối dữ kiện vụ việc | Định nghĩa: Khối dữ kiện cố định (số tiền, ngày, trạng thái) giữ nguyên văn trong mọi prompt, ngoài phần tóm tắt. | Ví dụ: Giữ một khối case facts cố định trong mọi prompt (Keep a persistent case facts block in every prompt.)

scratchpad

Sổ nháp (file ghi chú ngoài ngữ cảnh) | Định nghĩa: File ghi chú ngoài ngữ cảnh để lưu phát hiện quan trọng khi làm việc dài. | Ví dụ: Ghi phát hiện chính vào một file scratchpad (Write key findings to a scratchpad file.)

prompt caching

Lưu đệm prompt | Định nghĩa: Lưu lại phần đầu prompt lặp đi lặp lại để các lần gọi sau rẻ và nhanh hơn. | Ví dụ: Dùng prompt caching cho system prompt lớn, lặp lại (Use prompt caching for a large, repeated system prompt.)