Bỏ qua tới nội dung
Công cụ

Trình tạo robots.txt

Bao gồm cả các trình thu thập AI mà không nơi nào khác cho bạn bật/tắt

Chạy trong trình duyệt của bạn. Không up gì cả.

Kiến thức cơ bản về WordPress
Trình thu thập dữ liệu AI

Chặn một bot ở đây là đề nghị nó đừng thu thập dữ liệu. Đó là một lời đề nghị, không phải hàng rào — một trình thu thập bỏ qua robots.txt sẽ chẳng bị ảnh hưởng bởi bất cứ thứ gì trên trang này. Cũng nên biết: chặn một bot AI gắn với tìm kiếm có thể khiến bạn biến mất khỏi phần trích dẫn của sản phẩm đó, mà đôi khi đó lại chính là lượng truy cập bạn muốn có.

Sơ đồ trang web
robots.txt

WordPress phục vụ một robots.txt ảo trừ khi có một tệp thật tồn tại ở thư mục gốc web của bạn. Hãy tải tệp này lên và nó sẽ được ưu tiên sử dụng.

Về Trình tạo robots.txt

Tạo tệp robots.txt cho WordPress với các quy tắc tiêu chuẩn — và tùy chọn bật/tắt riêng cho từng bot: GPTBot, ClaudeBot, PerplexityBot, CCBot và Google-Extended. Quyết định thứ gì được huấn luyện trên nội dung bạn viết, từng ô đánh dấu một.

Liên quan

Các công cụ khác bạn có thể cần

Trình tạo .htaccess cho WordPress

Những quy tắc WordPress cần, cộng thêm các quy tắc tăng cường bảo mật mà nó không có sẵn

Câu hỏi thường gặp

Câu hỏi

Chặn Google-Extended có làm hại thứ hạng tìm kiếm của tôi không?

Không. Google-Extended kiểm soát việc nội dung của bạn có được dùng để huấn luyện Gemini hay không. Nó không ảnh hưởng gì đến Googlebot, đến việc lập chỉ mục, hay vị trí của bạn trên Google Search. Đây là hiểu lầm phổ biến nhất về các chỉ thị dành cho crawler AI.

robots.txt có thực sự ngăn được các công ty AI cào trang của tôi không?

Nó ngăn được những bên tôn trọng nó, tức là hầu hết những bên có tên. Đó là một lời đề nghị, không phải hàng rào — một crawler bỏ qua robots.txt thì hoàn toàn không bị ảnh hưởng. Ai bán robots.txt như một biện pháp bảo vệ chống cào dữ liệu đều đang nói quá lên.

File robots.txt đặt ở đâu?

Trong web root của trang bạn, cạnh wp-config.php, để nó truy cập được tại example.com/robots.txt. WordPress phục vụ một robots.txt ảo khi không có file thật; up một file thật lên sẽ thay thế nó.