Kiểm bot AI: site có cho ChatGPT, Claude, Gemini đọc không
Máy kiểm đọc robots.txt của bạn theo đúng tên từng bot AI công khai, xem có llms.txt không, và đếm số chữ máy đọc được khi không chạy JavaScript.
Hai nhóm bot, hai quyết định khác nhau
Bot đưa site vào câu trả lời
Googlebot (cả AI Overviews), Bingbot, OAI-SearchBot, ChatGPT-User, Claude-SearchBot, Claude-User, PerplexityBot. Chặn nhóm này là tự rút site khỏi chỗ người ta đang hỏi.
Bot thu dữ liệu huấn luyện
GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot, Meta-ExternalAgent. Chặn hay cho là lựa chọn kinh doanh; chặn nhóm này không làm site rớt khỏi Google.
Đọc thêm: Cho hay chặn bot AI trong robots.txt · llms.txt là gì, có cần không · AI Overviews và lượt bấm.