หากกฎของ robots.txt บล็อกไม่ให้ Google เข้าถึงหน้าเว็บ หน้านั้นจะไม่ปรากฏในผลการค้นหาของ Google และในกรณีที่ปรากฏ (ซึ่งมีโอกาสน้อยมาก) ผลการค้นหาดังกล่าวจะไม่มีคําอธิบาย
1. ยืนยันว่าหน้าเว็บถูกบล็อกโดย robots.txt
หากคุณได้ยืนยันการเป็นเจ้าของเว็บไซต์ใน Search Console แล้ว ให้ทำดังนี้
- เปิดเครื่องมือตรวจสอบ URL
- ตรวจสอบ URL ที่แสดงสำหรับหน้าเว็บในผลการค้นหาของ Google ตรวจสอบว่าคุณได้เลือกพร็อพเพอร์ตี้ Search Console ที่มี URL นี้แล้ว
- ในผลการตรวจสอบ ให้ดูสถานะของส่วนการจัดทำดัชนีหน้าเว็บ หากข้อความระบุว่าถูกบล็อกโดย robots.txt แสดงว่ามีการบล็อกจริงๆ เลื่อนไปที่ส่วนถัดไปเพื่อแก้ไข
หากคุณยังไม่ได้ยืนยันเว็บไซต์ใน Search Console ให้ทำดังนี้
- ค้นหาโปรแกรมตรวจสอบ robots.txt
- ในโปรแกรมตรวจสอบ ให้ป้อน URL ของหน้าเว็บที่ไม่มีคำอธิบาย ใช้ URL ที่แสดงสําหรับหน้านั้นในผลการค้นหาของ Google
- หากโปรแกรมตรวจสอบระบุว่าหน้าเว็บถูกบล็อกไม่ให้ Google เข้าถึง แสดงว่าคุณถูกบล็อกจริงๆ เลื่อนไปที่ส่วนถัดไปเพื่อแก้ไข
2. แก้ไขกฎ
- ใช้โปรแกรมตรวจสอบ robots.txt เพื่อดูว่ากฎใดบล็อกหน้าเว็บของคุณอยู่และดูตำแหน่งของไฟล์ robots.txt
- แก้ไขหรือนํากฎออก โดยทําดังนี้
- หากคุณใช้บริการโฮสติ้งเว็บไซต์ เช่น หากเว็บไซต์ใช้ Wix, Joomla หรือ Drupal เราไม่สามารถให้คำแนะนำในการอัปเดตไฟล์ robots.txt อย่างเจาะจงได้ เนื่องจากผู้ให้บริการโฮสติ้งแต่ละรายต่างมีวิธีจัดการของตัวเอง ค้นหาเอกสารขอผู้ให้บริการโฮสติ้งเพื่อดูวิธีเลิกบล็อกหน้าเว็บหรือเว็บไซต์ต่อ Google คำสำหรับการค้นหาที่แนะนำ ได้แก่ "robots.txt ชื่อผู้ให้บริการ" หรือ "เลิกบล็อกหน้าเว็บต่อ Google ชื่อผู้ให้บริการ" ตัวอย่างคำค้นหา ได้แก่ robots.txt Wix
- หากคุณแก้ไขไฟล์ robots.txt ได้โดยตรง ให้นำกฎดังกล่าวออก หรืออัปเดตกฎตามไวยากรณ์ robots.txt
