Trình thu thập BoostSEO-Audit
Thông tin về trình thu thập tải các trang khi người dùng chạy kiểm tra BoostSEO.
Khi ai đó chạy kiểm tra một website trên BoostSEO, máy chủ của chúng tôi thay mặt họ tải các trang công khai của website đó. Yêu cầu được gửi với tốc độ vừa phải, tuân thủ quy tắc robots.txt cho user agent BoostSEO và tự nhận diện bằng user agent sau:
Mozilla/5.0 (compatible; BoostSEO-Audit/1.0; +https://seo.toolcmb.com/bot)
Việc kiểm tra do con người khởi chạy, không theo lịch. Để ngăn BoostSEO thu thập website của bạn, hãy thêm vào robots.txt:
User-agent: BoostSEO
Disallow: /
Nếu bạn cho rằng trình thu thập của chúng tôi gây ra sự cố, vui lòng Liên hệ.