บรรทัดเดียวใน robots.txt บอก AI ห้ามเอาเว็บไปฝึก เริ่มปี 2027
ป้ายนี้ชื่อ __usage_ai-training มาจากร่างมาตรฐานของ IETF และยังไม่เสร็จ ระหว่างนี้ Google-Extended ยังใช้ได้ และไม่กระทบการติดอันดับบน Google Search
ไปที่หัวข้อ
เจ้าของเว็บข่าว บล็อก หรือร้านออนไลน์ อยากให้คนค้นเจอผ่าน Google แต่หลายคนไม่อยากให้บทความที่เขียนเองถูกเอาไปฝึก AI ปัญหาคือบริษัท AI แต่ละเจ้าใช้ชื่อ crawler ของตัวเอง ใครอยากห้ามทุกเจ้าก็ต้องเขียนบล็อกทีละชื่อ
นี่คือโจทย์ที่ Google บอกว่าจะช่วยแก้ เมื่อวันที่ 30 ตุลาคม 2026 John Mueller ตำแหน่ง Search Advocate ของ Google เขียนในบล็อก Google Search Central ว่า Google มีแผนรองรับสัญญาณกลางใน robots.txt ไฟล์ที่เว็บใช้บอก crawler ว่าเข้าส่วนไหนได้บ้าง สัญญาณนี้มาจากร่างมาตรฐานของกลุ่ม AIPREF ใน IETF องค์กรที่ร่างมาตรฐานอินเทอร์เน็ต
ลองนึกภาพป้ายห้ามที่หน้าบ้าน เดิมต้องติดป้ายแยกให้คนส่งของแต่ละบริษัท ตอนนี้กำลังจะมีป้ายเดียวที่ทุกบริษัทที่เข้าร่วมอ่านเข้าใจตรงกัน
ป้ายนี้ชื่อ __usage_ai-training และเริ่มต้นปี 2027
หน้าเอกสาร crawler ของ Google ระบุว่า Google ตั้งใจรองรับสัญญาณนี้ในช่วงต้นปี 2027 โดยเขียนเป็นบรรทัด user-agent: __usage_ai-training ส่วนบล็อกของ Mueller บอกว่า Google ตั้งเป้ารองรับพร้อมผู้ให้บริการ AI รายอื่นในปี 2027 และจะแจ้งความคืบหน้า
Search Engine Roundtable รายงานว่า Google บอกว่าบริษัทเดินตาม Bing, OpenAI และ Anthropic ที่ทำเรื่องคล้ายกันไปแล้ว
ถ้าใช้ป้ายนี้ Google จะถือเหมือนห้าม Google-Extended
Google บอกว่าถ้าเว็บใช้ป้ายนี้เพื่อไม่ให้นำเนื้อหาไปฝึก และไม่ได้ระบุ Google-Extended ไว้ Google จะถือเหมือนเว็บนั้นห้าม Google-Extended ส่วนป้ายเฉพาะของแต่ละบริษัทที่มีอยู่แล้วยังใช้ได้ควบคู่กัน
Google-Extended คือป้ายที่ Google ใช้แยกเรื่องการฝึก AI ออกจากการค้นหา เอกสารของ Google ระบุว่าป้ายนี้คุมว่าเนื้อหาที่ Google เก็บไปจะใช้ฝึกโมเดล Gemini รุ่นต่อไปและใช้อ้างอิงคำตอบได้หรือไม่ และไม่กระทบการแสดงผลของเว็บใน Google Search ทั้งไม่ใช่ปัจจัยจัดอันดับ
ข้อแลกเปลี่ยนที่ควรรู้คือ เว็บที่อนุญาต Google-Extended ยังมีสิทธิ์ถูกอ้างอิงในคำตอบของแอป Gemini ตามที่บล็อกของ Google ระบุ
มาตรฐานยังไม่เสร็จ และยังมีข้อโต้แย้ง
ร่างนี้ยังอยู่ระหว่างทำใน IETF Search Engine Roundtable ยกความเห็นของ Nate Hake ที่บอกว่ายังมีข้อโต้แย้งสำคัญ และเขาไม่พอใจที่ร่างตอนนี้ยกเว้นการกระทำที่ผู้ใช้สั่งเอง Search Engine Roundtable ยังระบุว่า Google มีอีกช่องทางหนึ่งใน Search Console สำหรับเรื่อง AI ใน Search ซึ่งแยกจากป้ายนี้
เจ้าของเว็บทำอะไรได้ตอนนี้
- ถ้าไม่อยากให้ Google ใช้เนื้อหาฝึก Gemini วันนี้ใช้ Google-Extended ได้เลย โดยเพิ่มสองบรรทัดนี้ใน robots.txt คือ User-agent: Google-Extended และ Disallow: /
- เก็บบรรทัดเดิมที่ห้าม crawler ของบริษัท AI อื่นไว้ เพราะป้ายกลางยังไม่เริ่มใช้
- ชั่งใจก่อนห้าม เพราะเว็บที่อนุญาต Google-Extended ยังถูกอ้างอิงในคำตอบของแอป Gemini ได้
- ติดตามประกาศของ Google ช่วงต้นปี 2027 แล้วค่อยเพิ่มป้าย __usage_ai-training เมื่อเริ่มรองรับจริง
เปิดไฟล์ robots.txt ของเว็บคุณดูได้วันนี้ ว่าตอนนี้อนุญาตหรือห้ามใครอยู่บ้าง
คำถามที่พบบ่อย
ห้าม Google-Extended แล้วเว็บจะหายจาก Google Search ไหม
ไม่หาย เอกสารของ Google ระบุว่า Google-Extended ไม่กระทบการแสดงผลของเว็บใน Google Search และไม่ใช่ปัจจัยจัดอันดับ
ใช้ป้าย __usage_ai-training ได้เลยไหม
Google ตั้งใจรองรับในช่วงต้นปี 2027 ตอนนี้ร่างมาตรฐานยังไม่เสร็จ ระหว่างนี้ให้ใช้ป้ายเฉพาะของแต่ละบริษัทไปก่อน
บริษัท AI เจ้าไหนจะอ่านป้ายนี้บ้าง
บล็อกของ Google พูดถึงผู้ให้บริการ AI รายอื่นที่เข้าร่วมโดยไม่ระบุชื่อ ส่วน Search Engine Roundtable รายงานว่า Google บอกว่า Bing, OpenAI และ Anthropic ทำเรื่องคล้ายกันแล้ว
ป้ายนี้หยุดไม่ให้ AI สรุปเว็บใน Google Search ได้ไหม
บล็อกของ Google ไม่ได้บอกว่าป้ายนี้มีผลกับ Search Search Engine Roundtable ระบุว่าเรื่อง AI ใน Search มีช่องทางแยกใน Search Console
