Chúng tôi công khai đúng những gì công cụ làm được và KHÔNG làm được — kể cả điểm yếu. Kết quả là ước tính RỦI RO bị gắn cờ, không phải phán quyết "đây là AI".
Điểm rủi ro được ghép từ ba tín hiệu, mỗi tín hiệu chỉ là một proxy (dấu hiệu gián tiếp), không tín hiệu nào là bằng chứng. Trọng số đã được nắn lại theo đúng kết quả benchmark bên dưới.
Đây là kết quả spike Giai đoạn 0: dựng engine tối giản, chạy trên model Qwen2.5-0.5B, đo trên 107 mẫu Việt + Anh có cài các ca khó (văn đã humanize, hybrid, văn ngắn, văn trang trọng/ESL).
AUC càng gần 1.0 càng tốt; 0.5 là đoán mò. Perplexity đơn AUC 0.573 (gần như tung đồng xu); văn phong AUC 0.754 (khá hơn nhưng vẫn chưa đủ tin để phán quyết). FPR (tỉ lệ gắn cờ oan văn người) ở ngưỡng chung là 10.3%.
| Nhóm văn AI | Perplexity đơn | Combined (ensemble) | Ghi chú |
|---|---|---|---|
| AI sạch (chưa chỉnh) | 56.7% (17/30) | 100.0% (30/30) | Ca dễ — bắt tốt |
| AI đã humanize | 0.0% (0/20) | 0.0% (0/20) | Điểm mù cốt lõi |
| AI ngắn | 10.0% (1/10) | 70.0% (7/10) | Yếu, độ tin cậy thấp |
| Hybrid (người + AI trộn) | 0.0% (0/8) | 0.0% (0/8) | Điểm mù cốt lõi |
Chỉ cần văn được viết lại (humanize) một lượt, hoặc trộn người + AI (hybrid), thì recall về 0% ở cả ba phương pháp — không phương pháp nào của chúng tôi bắt được. Chúng tôi nói thẳng điều này thay vì giấu, vì đó mới là sự thật.
Đồng hồ hiển thị mức rủi ro bị gắn cờ 0-100%, chia ba dải màu. Nhãn nói về RỦI RO, không nói về "phần trăm là AI".
Đo đặc trưng cách viết (độ dài câu, lặp cụm, nhịp từ). Khá hơn perplexity nhưng vẫn xa mức đủ tin để phán quyết.
Đo mức "bất ngờ" của văn với model ngôn ngữ. Gần như tung đồng xu — phân bố người và AI chồng lấn nặng, nên KHÔNG còn trọng số cao.
Hỏi một LLM "văn này có phải AI không". Bắt oan quá nhiều (23% văn người bị gắn cờ, nhất là văn trang trọng và ESL) nên bị TẮT mặc định.
Mỗi kết quả luôn kèm mức độ tin cậy (cao / vừa / thấp). Độ tin cậy tự động HẠ khi văn bản rơi vào các trường hợp benchmark cho thấy engine kém ổn định:
Độ tin cậy thấp KHÔNG có nghĩa "chắc chắn là người" — nó có nghĩa "đừng dựa vào con số này để kết luận".
Detector chỉ ước tính khả năng một hệ thống khác gắn cờ văn của bạn. Vì humanize/hybrid = 0% recall, chúng tôi không thể — và không được — tuyên bố "đây là AI".
Ngưỡng được calibrate CHẶT để giữ tỉ lệ gắn cờ oan thấp. Khi phân vân, hệ thống nghiêng về giả định "người viết" — vì một lời buộc oan gây hại hơn một lần bỏ sót.
Kể cả công cụ này. Đó là giới hạn thật của mọi detector hiện nay, không phải lời bào chữa. Chúng tôi công khai để bạn không đặt niềm tin sai chỗ.
Chúng tôi không hứa "qua mặt Turnitin/GPTZero", không hứa "100% không bị phát hiện", không bán mình là công cụ gian lận. Minh bạch về giới hạn chính là lợi thế của chúng tôi: bạn biết chính xác con số này đáng tin đến đâu.
Chạy thử miễn phí. Nhớ rằng đây là ước tính rủi ro tham khảo để bảo vệ bạn khỏi bị nghi oan — không phải bản án.