Kiểm tra URL có bị robots.txt chặn không

Tải robots.txt rồi so path với Disallow.

Bị chặn bởi Disallow (User-agent *).

Cách dùng

  1. Dán HTML/file hoặc nhập tên miền.
  2. Đọc kết quả.

Tải robots.txt rồi so path với Disallow.

Ví dụ

Danh sách gốcTuỳ chọnKết quả
MẫuMặc địnhKết quả trên máy

Câu hỏi thường gặp

Có fetch URL hộ không?

SEO có thể nhờ server toolxin GET HTML công khai (cắt 400KB). DNS/RDAP/tỷ giá từ trình duyệt.