ตัวสร้าง Robots.txt
สร้างไฟล์ robots.txt สำหรับเว็บไซต์ของคุณ ควบคุมการรวบรวมข้อมูลของเครื่องมือค้นหาด้วยกฎอนุญาต/ไม่อนุญาต การอ้างอิง sitemap และการตั้งค่าเฉพาะสำหรับ crawler
User-agent: * Disallow:
เคล็ดลับ
- วาง robots.txt ในไดเรกทอรีรากของเว็บไซต์
- ใช้ * เป็น wildcard ในเส้นทาง
- จำไว้ว่า robots.txt สามารถเข้าถึงได้สาธารณะ
เครื่องมือที่เกี่ยวข้อง
🔒 ผลลัพธ์ทันที เร็วกว่า AI ไม่ต้องสมัคร 100% ส่วนตัว