Tạo file robots.txt

Tick chọn những phần cần chặn: trang quản trị, tìm kiếm, giỏ hàng, bot AI. Thêm sitemap và nhận file robots.txt đúng cú pháp.

Cách dùng

Chặn trong robots.txt có làm trang biến khỏi Google không?

Không chắc. Robots.txt chỉ bảo bot đừng đọc trang. Muốn ẩn hẳn khỏi kết quả, dùng thẻ noindex và để bot vẫn đọc được trang đó.

Có nên chặn bot AI không?

Tuỳ bạn. Chặn thì nội dung không bị lấy để huấn luyện AI, nhưng có thể ít xuất hiện trong câu trả lời của các công cụ AI.

Vì sao vẫn cho phép admin-ajax.php?

Nhiều giao diện và plugin WordPress gọi file này từ trang ngoài. Chặn nó có thể làm Google thấy trang hiển thị sai.