Kiểm chứng câu trả lời AI: ảo giác, nguồn và phép thử chéo

AI trả lời rất nhanh. Phần khó là biết câu nào có thể dùng ngay, câu nào phải kiểm tra và câu nào nên bỏ. Một đoạn văn trôi chảy, có ngày tháng, tên người và vài đường dẫn nhìn khá thuyết phục. Nhưng vẻ tự tin ấy không phải bằng chứng.

NIST dùng từ “confabulation” cho trường hợp hệ thống AI tạo sinh trình bày nội dung sai hoặc không có thật với giọng chắc chắn. Khái niệm này còn bao gồm đầu ra lệch khỏi dữ liệu đầu vào hoặc tự mâu thuẫn trong cùng ngữ cảnh.[1] Nói đơn giản, AI có thể viết một câu nghe hợp lý mà không có cái móc nào nối câu ấy với sự thật.

Bài này hướng dẫn kiểm chứng thông tin AI bằng một checklist 7 bước. Bạn sẽ thực hành với một câu trả lời mẫu, tạo phiếu kiểm chứng có thể dùng lại và biết lúc nào cần dừng để hỏi người có chuyên môn. Mục tiêu không phải nghi ngờ mọi dấu chấm phẩy. Ta tập trung công sức vào chỗ sai có thể gây hậu quả.

Sau bài này, bạn làm được gì?

Bạn có thể:

• tách một câu trả lời dài thành các tuyên bố cần kiểm tra;
• phân loại mức rủi ro để không mất một buổi chỉ đi xác minh chuyện vụn vặt;
• lần từ đường dẫn AI đưa ra về nguồn gốc thật;
• đối chiếu số liệu, ngày tháng, trích dẫn và phép tính;
• ghi kết luận theo bốn trạng thái: đúng, sai, chưa đủ bằng chứng, đã lỗi thời.

Sản phẩm bắt buộc của bài là Checklist kiểm chứng 7 bước kèm một phiếu đã điền cho tình huống thực tế. Bài trước, Làm việc nhiều lượt với AI, giúp bạn quản lý ngữ cảnh và phản hồi. Bài này nối thêm một việc quan trọng: không để cuộc trao đổi kết thúc ở câu “nghe có vẻ đúng”.

Vì sao AI có thể nói sai mà vẫn rất tự tin?

Mô hình ngôn ngữ tạo câu trả lời bằng cách dự đoán phần tiếp theo phù hợp với ngữ cảnh. Nó giỏi tạo ra chuỗi chữ có hình thức hợp lý. Cơ chế đó không tự biến mỗi câu thành một bản ghi đã được xác minh.

Một nghiên cứu của các tác giả thuộc OpenAI và Georgia Tech chỉ ra thêm một nguyên nhân: cách huấn luyện và chấm điểm thường thưởng cho việc đoán hơn là thừa nhận không chắc.[2] Điều này không có nghĩa mọi câu trả lời đều sai. Nó có nghĩa ta không nên dùng độ lưu loát làm thước đo độ đúng.

Các lỗi hay gặp gồm:

• bịa tên tài liệu, tác giả, đường dẫn hoặc số trang;
• ghép hai sự kiện có thật thành một kết luận sai;
• dùng số liệu cũ nhưng viết như thông tin hiện tại;
• tóm tắt đúng ý lớn nhưng đổi mất ngoại lệ quan trọng;
• làm đúng công thức nhưng thay nhầm đơn vị;
• trích nguồn có thật, song nguồn không hề nói điều được gắn cho nó.

Loại cuối khá tinh quái. Đường dẫn mở được khiến ta dễ gật đầu, trong khi đoạn được dẫn lại nói chuyện khác. Một chiếc cầu có thật chưa chắc dẫn tới đúng nhà.

Kiểm chứng thông tin AI theo 7 bước

Bước 1: Khoanh vùng từng tuyên bố

Đừng kiểm tra cả đoạn như một khối. Hãy gạch dưới những phần có thể đúng hoặc sai rõ ràng:

• tên người, tổ chức, sản phẩm;
• ngày, phiên bản, giá, số lượng, tỷ lệ;
• câu trích dẫn;
• quan hệ nguyên nhân và kết quả;
• kết luận pháp lý, y tế, tài chính hoặc an toàn;
• đường dẫn và tài liệu tham khảo.

Ví dụ, câu “Nghị định X có hiệu lực từ ngày Y và bắt buộc mọi doanh nghiệp làm Z” chứa ít nhất ba tuyên bố: văn bản có tồn tại không, ngày hiệu lực là ngày nào và phạm vi áp dụng có thật sự là mọi doanh nghiệp không.

Bước 2: Xếp rủi ro trước khi kiểm tra

Dùng ba mức đơn giản:

• Thấp: sai thì sửa trong vài phút, chưa phát tán ra ngoài.
• Vừa: sai làm người khác mất thời gian, ảnh hưởng báo cáo, bài học hoặc quyết định nội bộ.
• Cao: liên quan sức khỏe, pháp luật, tiền, an toàn, dữ liệu cá nhân, vận hành hệ thống hoặc thông tin công khai của cơ quan.

Với mức thấp, kiểm tra nhanh có thể đủ. Với mức vừa, cần nguồn gốc và ít nhất một phép thử chéo. Với mức cao, AI chỉ nên hỗ trợ tìm điểm cần xem; quyết định cuối phải dựa vào tài liệu có thẩm quyền và người chịu trách nhiệm.

Bước 3: Yêu cầu nguồn cụ thể

Hỏi AI cung cấp:

1. tên tài liệu hoặc trang;
2. tổ chức phát hành;
3. ngày phát hành hay cập nhật;
4. đường dẫn trực tiếp;
5. mục, trang hoặc đoạn chứa dữ kiện.

Một prompt có thể dùng:

Với từng dữ kiện quan trọng trong câu trả lời, hãy ghi nguồn trực tiếp, ngày của nguồn và vị trí chứa thông tin. Nếu không tìm được nguồn, ghi “chưa có nguồn”, không tạo đường dẫn thay thế.

Yêu cầu này giúp lộ chỗ AI đang suy đoán. Tuy nhiên, danh sách nguồn do AI tạo vẫn chỉ là danh sách cần kiểm tra, chưa phải kết quả kiểm chứng.

Bước 4: Mở nguồn và đọc đúng đoạn

Kiểm tra bốn việc:

• đường dẫn có tồn tại không;
• tác giả hoặc tổ chức có phù hợp với chủ đề không;
• tài liệu còn hiệu lực và đúng phiên bản không;
• đoạn gốc có thật sự hỗ trợ cho tuyên bố không.

Đừng dừng ở tiêu đề hoặc phần mô tả của công cụ tìm kiếm. Nếu AI nói “theo báo cáo”, hãy mở báo cáo. Nếu AI trích một điều luật, hãy đọc điều đó cùng phần phạm vi và ngoại lệ. Nếu dữ kiện nằm trong bảng, kiểm tra cả đơn vị, chú thích và mốc thời gian.

Bước 5: Lần về nguồn gốc

Nguồn gốc là nơi dữ kiện được công bố đầu tiên hoặc nơi có thẩm quyền giữ bản chính: văn bản pháp luật, thông báo của nhà cung cấp, dữ liệu thống kê, bài nghiên cứu, tài liệu kỹ thuật hay biên bản đã được phê duyệt.

Phương pháp SIFT của Mike Caulfield gói việc kiểm tra thành bốn động tác: dừng lại, tìm hiểu nguồn, tìm nguồn đưa tin tốt hơn và lần tuyên bố hoặc nội dung đa phương tiện về ngữ cảnh ban đầu.[3] Cách này hợp với câu trả lời AI vì ta rất dễ bị cuốn vào việc đọc một trang đẹp mắt mà quên hỏi thông tin bắt đầu từ đâu.

Nguồn gốc không mặc nhiên đúng tuyệt đối. Nhưng nó cho ta đúng ngữ cảnh để đánh giá, thay vì đối chiếu hai bài viết cùng sao chép từ một lỗi ban đầu.

Bước 6: Thử chéo bằng một đường khác

Phép thử chéo phải đủ độc lập. Hai trang chép cùng một thông cáo không phải hai bằng chứng độc lập.

Bạn có thể:

• tìm nguồn khác bằng từ khóa không giống câu AI đã viết;
• kiểm tra phép tính bằng bảng tính hoặc máy tính;
• chạy đoạn mã với dữ liệu mẫu;
• tra ngày trên lịch và kiểm tra múi giờ;
• so sánh bản dịch với nguyên văn;
• hỏi một công cụ khác, nhưng vẫn buộc công cụ đó đưa nguồn để mở;
• nhờ người có chuyên môn duyệt khi hậu quả cao.

Nếu hai nguồn đáng tin mâu thuẫn, đừng chọn nguồn hợp ý hơn. Hãy ghi rõ điểm mâu thuẫn, ngày của từng nguồn và lý do tạm thời ưu tiên một nguồn. Có khi nguồn cũ đúng vào thời điểm cũ, còn nguồn mới đã cập nhật quy định.

Bước 7: Ghi kết luận và giới hạn sử dụng

Mỗi tuyên bố nên nhận một trong bốn nhãn:

• Đúng: có bằng chứng trực tiếp và phép thử phù hợp.
• Sai: nguồn gốc hoặc phép tính bác bỏ.
• Chưa đủ bằng chứng: chưa tìm được tài liệu đủ mạnh.
• Đã lỗi thời: từng đúng nhưng không còn đúng ở thời điểm sử dụng.

Cuối phiếu, ghi ai đã kiểm tra, ngày kiểm tra và kết quả được phép dùng vào việc gì. Một dữ kiện đủ cho bản nháp nội bộ chưa chắc đủ cho thông báo khách hàng. Dòng này nhỏ nhưng cứu khá nhiều cuộc tranh luận kiểu “tôi tưởng đã kiểm tra rồi”.

Thực hành: kiểm tra một câu trả lời mẫu

Giả sử AI trả lời:

“Từ ngày 1/1/2026, mọi hóa đơn điện tử đều phải lưu tối thiểu 15 năm. Quy định này nằm trong Thông tư 99/2025/TT-BTC.”

Đây là dữ liệu thực hành giả định. Không dùng câu trên làm tư vấn pháp lý.

1. Tách tuyên bố

Ta có bốn điểm cần kiểm tra:

1. có Thông tư 99/2025/TT-BTC hay không;
2. văn bản có nói về hóa đơn điện tử không;
3. ngày 1/1/2026 có phải ngày áp dụng không;
4. thời hạn 15 năm có áp dụng cho mọi hóa đơn không.

2. Xếp mức rủi ro

Đây là mức cao vì liên quan tuân thủ và lưu trữ hồ sơ của doanh nghiệp. Không được kết luận chỉ từ chatbot hoặc một bài viết tổng hợp.

3. Tìm nguồn gốc

Tra cứu trên cơ sở dữ liệu văn bản pháp luật hoặc cổng thông tin chính thức của cơ quan ban hành. Tìm theo số hiệu trước. Nếu không thấy, tìm theo cụm chủ đề và khoảng thời gian. Không tìm thấy văn bản đã là một dấu hiệu cảnh báo, nhưng chưa đủ để kết luận số hiệu chắc chắn bị bịa.

4. Đọc phạm vi và điều khoản

Nếu văn bản tồn tại, kiểm tra đối tượng áp dụng, điều khoản chuyển tiếp, ngày hiệu lực và các văn bản được sửa đổi. Từ “mọi” cần soi kỹ vì quy định thường có phạm vi, loại chứng từ và ngoại lệ.

5. Thử chéo

Tìm hướng dẫn của cơ quan thuế hoặc một bản phân tích từ đơn vị chuyên môn có dẫn đúng điều khoản. Hai bài SEO cùng lặp lại con số 15 năm không giúp bằng một điều khoản gốc.

6. Ghi kết luận

Nếu chưa có văn bản chính thức hỗ trợ, ghi: “Chưa xác minh. Không dùng để thay đổi chính sách lưu trữ.” Đó là một kết quả có ích. Kiểm chứng không bắt buộc phải biến mọi câu hỏi thành câu trả lời chắc chắn.

Mẫu phiếu kiểm chứng dùng lại

Hãy lưu phiếu cùng đầu ra AI. Nếu chỉ giữ bản cuối, vài tuần sau rất khó nhớ dữ kiện nào do AI đề xuất, dữ kiện nào đã được người kiểm tra và nguồn nào đã thay đổi.

Những lỗi thường gặp

Thấy có nguồn là yên tâm

AI có thể đưa đường dẫn thật nhưng gắn sai nội dung. Luôn mở đúng đoạn.

Dùng hai chatbot làm hai nguồn

Hai mô hình có thể học từ cùng dữ liệu hoặc cùng lặp một lỗi phổ biến. Chatbot thứ hai là công cụ gợi ý phép kiểm tra, không phải nguồn độc lập.

Chỉ kiểm tra ý lớn, bỏ qua con số

Một bản tóm tắt có thể đúng chủ đề nhưng sai ngày, tỷ lệ hoặc đơn vị. Chính các chi tiết nhỏ này thường đi thẳng vào báo cáo.

Dùng nguồn cũ cho câu hỏi hiện tại

Giá, tính năng, phiên bản phần mềm, quy định và số liệu thay đổi. Luôn ghi ngày của nguồn và ngày bạn kiểm tra.

Bảo AI “hãy chắc chắn chính xác”

Câu nhắc này có thể làm đầu ra cẩn thận hơn, nhưng không thay thế việc mở nguồn. Sự tự tin được yêu cầu vẫn là sự tự tin, chưa phải bằng chứng.

Quên giới hạn an toàn

Đừng tải hợp đồng mật, hồ sơ sức khỏe, thông tin khách hàng, mật khẩu hay khóa API lên công cụ chưa được phép chỉ để kiểm tra một câu trả lời. Hãy dùng dữ liệu giả, bản đã ẩn danh hoặc hệ thống được đơn vị phê duyệt.

Bài tập bắt buộc: tạo checklist 7 bước của bạn

Chọn một câu trả lời AI dài 150–300 từ về chủ đề bạn hiểu tương đối rõ. Không dùng dữ liệu nhạy cảm. Tạo một phiếu gồm:

1. ít nhất năm tuyên bố đã tách;
2. mức rủi ro cho từng tuyên bố;
3. đường dẫn nguồn gốc;
4. bằng chứng hoặc vị trí cụ thể;
5. một phép thử chéo;
6. kết luận bốn trạng thái;
7. ngày và phạm vi được phép sử dụng.

Sản phẩm đạt khi người khác có thể mở phiếu và lặp lại quá trình kiểm tra mà không phải hỏi bạn “nguồn này nằm ở đâu”.

Quiz tự kiểm tra

1. Vì sao câu trả lời viết trôi chảy chưa chứng minh là đúng?
2. Khi nào một tuyên bố nên được xếp rủi ro cao?
3. Hai trang cùng chép một thông cáo có phải hai nguồn độc lập không?
4. Nếu nguồn có thật nhưng không hỗ trợ tuyên bố, kết luận nên là gì?
5. Bốn trạng thái cuối của một tuyên bố đã kiểm tra là gì?

Đáp án ngắn: 1) độ lưu loát không phải bằng chứng; 2) khi sai có thể gây hậu quả về sức khỏe, pháp luật, tiền, an toàn, dữ liệu hoặc vận hành; 3) không; 4) tuyên bố chưa được nguồn đó chứng minh, và có thể sai nếu nguồn gốc bác bỏ; 5) đúng, sai, chưa đủ bằng chứng, đã lỗi thời.

Rubric chấm sản phẩm

Mỗi tiêu chí 25 điểm:

• Đúng mục tiêu: tách đúng các tuyên bố có thể kiểm tra.
• Kiểm chứng được: có nguồn trực tiếp, vị trí và phép thử chéo rõ ràng.
• An toàn dữ liệu: không đưa dữ liệu nhạy cảm vào công cụ không được phép.
• Dùng lại được: phiếu có ngày, người kiểm tra, kết luận và phạm vi sử dụng.

Từ 75/100 là đạt. Nếu thiếu nguồn gốc hoặc có dữ liệu nhạy cảm, sản phẩm chưa đạt dù tổng điểm các phần khác cao. Đây không phải bài thi mà cộng điểm để lách; hai lỗi ấy làm cả quy trình mất ý nghĩa.

Trước khi dùng kết quả vào việc thật

Hãy tự hỏi ba câu: nguồn gốc đã mở chưa, thông tin có còn mới không, và nếu sai thì ai chịu hậu quả? Với quyết định quan trọng, giữ bước phê duyệt ở con người có chuyên môn. AI có thể giúp tìm nhanh chỗ cần kiểm tra, nhưng không nhận trách nhiệm thay bạn.

Bài tiếp theo là Dữ liệu riêng tư, bản quyền và thiên lệch khi dùng AI. Checklist của bài này sẽ được dùng lại để kiểm tra nguồn dữ liệu, quyền sử dụng và những kết luận có thể bất công với một nhóm người.

Nguồn tham khảo

[1] https://nvlpubs.nist.gov/nistpubs/ai/NIST.AI.600-1.pdf — NIST AI 600-1: Generative AI Profile
[2] https://arxiv.org/pdf/2509.04664.pdf — Why Language Models Hallucinate (OpenAI/Georgia Tech)
[3] https://hapgood.us/2019/05/12/sift-and-a-check-please-preview — Mike Caulfield: Introducing SIFT