คำว่าไม่ถูกจัดทำดัชนีเป็นผลลัพธ์ ไม่ใช่สาเหตุเดียวกันทั้งหมด การเปลี่ยน robots.txt หรือส่ง sitemap ซ้ำโดยไม่ดูสถานะอาจไม่ตรงปัญหา คู่มือนี้เสนอวิธีเก็บหลักฐานทีละหน้า เพื่อให้เจ้าของเว็บกับผู้ดูแลคุยกันด้วยข้อมูลชุดเดียว โดยไม่ถือว่า HTTP 200 หรือการทดสอบสดผ่านเป็นคำรับประกันว่าจะได้ index
เริ่มจากสถานะและวันที่ของ URL เดียวกัน
เลือกหน้าที่มีความสำคัญกับลูกค้าก่อน เช่น หน้าบริการหลัก บทความที่ตอบคำถามเฉพาะ และหน้าผลงาน เก็บ URL เต็ม สถานะใน Page indexing และวันรวบรวมข้อมูลล่าสุดไว้ในบันทึกเดียวกัน Discovered หมายถึง Google รู้จัก URL แต่ยังไม่ได้รวบรวมข้อมูล ส่วน Crawled หมายถึงอ่านหน้าแล้วแต่ยังไม่จัดทำดัชนี หากลิงก์รายงานกับข้อความที่เห็นไม่ตรงกัน ให้ยึดผลตรวจของ URL นั้นแทนการนำสถานะของทั้งเว็บมาเหมารวม การทดสอบสดใช้ตรวจสภาพปัจจุบัน แต่ไม่ย้อนแก้วันที่หรือสถานะในรายงานทันที
ตรวจเส้นทางการเข้าถึงก่อนตัดสินเรื่องเนื้อหา
เปิด URL จากภายนอกโดยไม่เข้าสู่ระบบ ตรวจรหัสตอบกลับ robots.txt และคำสั่ง noindex ทั้งใน HTML และ HTTP header จากนั้นเปรียบเทียบ canonical ที่เว็บไซต์ระบุกับหน้าหลักที่ Google เลือก หากมี HTTP และ www หลายรุ่นให้ตรวจว่าการเปลี่ยนทางรักษาพาธเดิมและไม่วนลูป สำหรับ Discovered ให้ดู Crawl stats และบันทึกเซิร์ฟเวอร์ประกอบว่ามีปัญหาตอบสนองหรือบล็อกคำขอหรือไม่ การตั้ง User-Agent ให้เป็น Googlebot จากเครื่องทั่วไปไม่ใช่หลักฐานว่า Googlebot จริงเข้าได้
ประเมินหน้าที่อ่านแล้วแต่ยังไม่ถูกเลือก
สำหรับ Crawled ให้เปรียบเทียบกับหน้าที่ตอบคำถามเดียวกันบนเว็บก่อน เนื้อหาหน้านี้ช่วยเลือกบริการ ประเมินขอบเขต หรือแก้ปัญหาข้อใดที่หน้าอื่นยังไม่ตอบหรือไม่ ทดลองซ่อนชื่อจังหวัดหรือคำหลักจากข้อความแล้วอ่านอีกครั้ง หากสาระยังเหมือนกันทั้งหมด ให้เพิ่มข้อมูลที่ใช้ตัดสินใจจริงหรือพิจารณารวมหน้า แยกข้อเท็จจริงของธุรกิจออกจากตัวอย่างสมมติ และเพิ่มหลักฐานที่มีสิทธิ์เผยแพร่ เช่น ขอบเขตงาน วิธีดำเนินงาน หรือภาพงานพร้อมคำอธิบาย ไม่เติมคำเพื่อให้ครบจำนวนคำที่ตั้งเอง
บันทึกสิ่งที่แก้และตรวจผลโดยไม่เปลี่ยนหลายอย่างพร้อมกัน
กำหนดผู้รับผิดชอบ วันแก้ และเหตุผลของแต่ละ URL เช่น แก้ canonical ที่ผิด รวมเนื้อหาที่ซ้ำ หรือเพิ่มข้อมูลบริการที่ขาด เก็บภาพหรือข้อความก่อนแก้เพื่อเทียบภายหลัง เมื่อเปลี่ยนสาระสำคัญให้ปรับ lastmod ตามจริงและตรวจลิงก์จากหน้าหมวดหมู่ ไม่จำเป็นต้องกดส่ง URL เดิมซ้ำเพียงเพราะยังเป็น Crawled นัดตรวจผลหลังมีการรวบรวมข้อมูลรอบใหม่ โดยดูทั้งสถานะและหน้าหลักที่ Google เลือก หากยังไม่ทราบสาเหตุให้ระบุว่าไม่ทราบ แทนการสรุปว่าเป็นโทษจากระบบค้นหา
ตารางนำไปใช้กับงานจริง
| ช่องที่บันทึก | ใช้ตอบคำถามอะไร |
|---|---|
| URL และสถานะล่าสุด | กำลังตรวจหน้าเดียวกับในรายงานหรือไม่ |
| วัน crawl ล่าสุด | Google อ่านก่อนหรือหลังการแก้ไข |
| HTTP / robots / noindex | เปิดให้เข้าถึงและจัดทำดัชนีหรือไม่ |
| Canonical ของเว็บ / Google | ทั้งสองฝ่ายเลือกหน้าเดียวกันหรือไม่ |
| สิ่งที่หน้านี้ตอบได้เฉพาะ | มีเหตุผลให้เก็บหน้านี้แยกหรือไม่ |
| สิ่งที่แก้ / วันตรวจรอบต่อไป | แยกผลของแต่ละการเปลี่ยนแปลงได้หรือไม่ |
ตัวอย่างสมมติ: หน้าบริการ A เปิดได้ 200 แต่ canonical ชี้ไปหน้าแรก จึงแก้หน้าหลักให้ถูกก่อน ส่วนหน้า B มี canonical ถูกต้องแต่เนื้อหาเหมือนหน้า C จึงทบทวนขอบเขตและประโยชน์ของสองหน้าแยกกัน ไม่ใช้วิธีแก้เดียวกับหน้า A
ก่อนนำไปใช้ ลองเช็ก 3 ข้อนี้
- จดสถานะและวัน crawl ของ URL ที่ตรวจจริง
- แยกปัญหาการเข้าถึงออกจากความซ้ำและคุณค่าของหน้า
- บันทึกสิ่งที่เปลี่ยนพร้อมตรวจอีกครั้งเมื่อมีข้อมูลใหม่
