Sitemap.xml และ robots.txt: ทำยังไงให้ Google เข้าใจเว็บไซต์

หากคุณลงทุนทำเว็บไซต์ มีบทความดี มีหน้าสินค้าใหม่อัปเดตตลอด แต่ Google ยังไม่ Index หน้าใหม่ หรือแสดงผลในอันดับต่ำ
สาเหตุอาจเป็นเพราะคุณยัง ไม่ได้บอกทางให้ Google อย่างชัดเจน

เครื่องมือสำคัญที่สุดในการทำให้ Google เข้าใจโครงสร้างเว็บไซต์ของคุณ คือ Sitemap.xml และ robots.txt

Sitemap.xml คืออะไร?

Sitemap.xml คือไฟล์ที่รวบรวมรายการหน้า (URL) สำคัญทั้งหมดในเว็บไซต์ของคุณ
โดยส่งให้ Google รู้ว่า:

• มีหน้าอะไรบ้างในเว็บไซต์

• หน้าไหนอัปเดตล่าสุดเมื่อไหร่
  
  หน้าไหนสำคัญที่สุด (ผ่าน Priority)
  
  

ประเภท Sitemap ที่ควรมี:

• หน้า Content (Blog, Article)

• หน้า Product

• หน้า Category

• หน้า Landing Page
  
  

robots.txt คืออะไร?

robots.txt คือไฟล์ที่อยู่ที่รากของเว็บไซต์ (/robots.txt) มีหน้าที่บอก Search Engine ว่า:

• หน้าไหน “ห้ามเข้า” (Disallow)

• หน้าไหนเข้าได้

• อยู่ที่ไหนของ Sitemap
  
  

ความผิดพลาดที่พบบ่อย

• ลืมใส่ Sitemap ใน robots.txt

• ใส่ Disallow ผิด → บล็อกหน้า SEO สำคัญ

• ไม่ส่ง Sitemap ใน Google Search Console

• หน้าใหม่สร้างแล้วไม่มีใน Sitemap → Google ไม่รู้
  
  

วิธีตั้งค่า Sitemap และ robots.txt อย่างถูกต้อง

1. สร้าง Sitemap ด้วยปลั๊กอิน (เช่น Yoast SEO, Rank Math) หรือ Generator (เช่น xml-sitemaps.com)

2. ใส่ลิงก์ Sitemap ไว้ท้ายไฟล์ robots.txt

3. ไม่บล็อกหน้า SEO เช่น /product/, /blog/ โดยไม่ตั้งใจ

4. ส่ง Sitemap ที่ Google Search Console และตรวจสถานะ

5. อัปเดต Sitemap อัตโนมัติเมื่อเพิ่มหรือลบหน้าใหม่
   
   

กรณีศึกษา: Srichand เพิ่ม Sitemap สำหรับหน้า Product แล้วหน้าใหม่ถูก Index ภายใน 6 ชั่วโมง

Srichand แบรนด์เครื่องสำอางชั้นนำในไทยมีการเพิ่มหน้าผลิตภัณฑ์ใหม่ทุกเดือน แต่ก่อนหน้านี้:

ปัญหาที่พบ:

• หน้า Product ใหม่ใช้เวลาเกือบ 3 วันกว่าจะถูก Index

• ไม่มี sitemap เฉพาะสำหรับหน้าสินค้า

• robots.txt ไม่มีการชี้ไปยัง Sitemap
  
  

แนวทางที่ทำ:

• แยก Sitemap สำหรับ /product/ และ /blog/ ออกจากกัน

• ใส่ลิงก์ Sitemap ใหม่ใน robots.txt และส่งผ่าน Google Search Console

• ตรวจสอบ Error และ Coverage หลังการส่ง Sitemap
  
  

ผลลัพธ์:

• หน้า Product ใหม่ถูก Google Index ภายใน 6 ชั่วโมง

• Googlebot เข้าถึงหน้าใหม่เร็วขึ้นจาก Crawl Stats

• SEO ทีมสามารถวางแผน Content รอบการเปิดตัวสินค้าได้แม่นยำมากขึ้น
  
  

สรุป

Sitemap.xml และ robots.txt คือเครื่องมือชี้ทางให้ Google รู้ว่าเว็บไซต์คุณมีอะไรอยู่ตรงไหน
การตั้งค่าให้ถูกและอัปเดตตลอดเวลาช่วยให้:

• หน้าใหม่ถูก Index เร็วขึ้น

• ป้องกันการ Index หน้าไม่จำเป็น

• เพิ่มโอกาสแสดงผลในหน้าแรกของ Google