ตัวสร้าง robots.txt
รวมถึงบอตรวบรวมข้อมูลของ AI ที่ไม่มีเครื่องมืออื่นให้คุณเปิด-ปิดได้
ทำงานในเบราว์เซอร์ของคุณ ไม่มีการอัพโหลดอะไร
เกี่ยวกับ ตัวสร้าง robots.txt
สร้าง robots.txt สำหรับ WordPress พร้อมกฎมาตรฐาน และปุ่มเปิด-ปิดแยกตามบอตสำหรับ GPTBot, ClaudeBot, PerplexityBot, CCBot และ Google-Extended ตัดสินใจว่าจะให้อะไรนำงานเขียนของคุณไปฝึกโมเดลได้บ้าง ทีละช่องทำเครื่องหมาย
ที่เกี่ยวข้อง
เครื่องมืออื่นที่คุณอาจต้องใช้
คำถามที่พบบ่อย
คำถาม
การบล็อก Google-Extended ทำร้ายอันดับการค้นหาของฉันไหม?
ไม่ Google-Extended ควบคุมว่าเนื้อหาของคุณจะถูกใช้เทรน Gemini หรือไม่ มันไม่มีผลต่อ Googlebot ต่อการทำ index หรือต่อตำแหน่งของคุณใน Google Search นี่เป็นความเข้าใจผิดที่พบบ่อยที่สุดเกี่ยวกับ directive ของ crawler AI
robots.txt จะหยุดบริษัท AI ไม่ให้ scrape เว็บของฉันได้จริงไหม?
มันหยุดพวกที่เคารพมัน ซึ่งก็คือส่วนใหญ่ของตัวที่มีชื่อระบุไว้ มันเป็นคำขอ ไม่ใช่รั้ว — crawler ที่เพิกเฉยต่อ robots.txt ไม่ได้รับผลกระทบใดๆ เลย ใครก็ตามที่ขาย robots.txt ว่าเป็นการป้องกัน scraping กำลังพูดเกินจริง
ไฟล์ robots.txt วางไว้ที่ไหน?
ใน web root ของเว็บคุณ อยู่ข้างๆ wp-config.php เพื่อให้มันเข้าถึงได้ที่ example.com/robots.txt WordPress ให้บริการ robots.txt เสมือนเมื่อไม่มีไฟล์จริง การอัพโหลดไฟล์จริงจะเข้ามาแทนที่มัน