การรองรับการควบคุมการฝึก AI ที่ใช้ร่วมกันสำหรับเว็บไซต์

วันศุกร์ที่ 30 ตุลาคม 2569

วันนี้เราขอประกาศแผนการรองรับการควบคุมการฝึก AI ที่ใช้ร่วมกันใน robots.txt ซึ่งจะช่วยให้เว็บไซต์แสดงค่ากำหนดการฝึก AI ในผู้ให้บริการ AI หลายรายได้ในขั้นตอนเดียว และอิงตามงานจากกลุ่มทำงาน AIPREF ที่คณะทำงานเฉพาะกิจด้านวิศวกรรมอินเทอร์เน็ต (IETF) แผนการนี้ต่อยอดมาจากประวัติอันยาวนานของเราในการมอบการควบคุมที่ชัดเจนให้แก่เจ้าของเว็บไซต์ ซึ่งรวมถึงผ่าน Google-Extended ซึ่งเป็นการควบคุมการฝึก AI ที่เรานำเสนอมาตั้งแต่ปี 2566

วิธีการทำงานของการควบคุมใหม่

เจ้าของเว็บไซต์จะสามารถใช้ "โทเค็นนโยบาย" ที่ใช้ร่วมกันภายใน robots.txt เพื่อตั้งค่ากำหนดแบบกว้างๆ สำหรับผู้ให้บริการ AI ที่เข้าร่วม แทนที่จะต้องจัดการวิธีการแยกต่างหากสำหรับนักพัฒนา AI แต่ละราย

เมื่อเว็บไซต์ใช้โทเค็นนโยบายนี้เพื่อเลือกไม่ใช้การฝึกในไฟล์ robots.txt (และไม่ได้ระบุ Google-Extended ไว้อย่างชัดเจน) Google จะตีความว่าผู้เผยแพร่เนื้อหาไม่อนุญาตให้ใช้ Google-Extended ผู้ให้บริการ AI รายอื่นๆ สามารถจัดการเรื่องนี้ในลักษณะเดียวกันได้ ซึ่งช่วยให้เจ้าของเว็บไซต์เลือกไม่ใช้บริการจากผู้ให้บริการทั้งหมดหรือเลือกใช้บริการจากผู้ให้บริการบางรายได้อย่างง่ายดาย

การควบคุมเฉพาะบริษัทที่มีอยู่จะยังคงทํางานควบคู่ไปกับสัญญาณร่วมใหม่นี้ ดังนั้นเจ้าของเว็บไซต์จึงสามารถแสดงตัวเลือกที่หลากหลายได้อย่างง่ายดายโดยใช้สัญญาณอุตสาหกรรม ขณะเดียวกันก็ปรับแต่งวิธีการสำหรับนักพัฒนา AI แต่ละราย เช่น Google ผ่านการควบคุมต่างๆ เช่น Google-Extended ได้ด้วย เว็บไซต์ที่อนุญาต Google-Extended โดยเฉพาะจะมีสิทธิ์ปรากฏในคำตอบและได้รับการคลิกผ่านการเชื่อมต่อแหล่งข้อมูลในแอป Gemini

กลไกใหม่นี้ช่วยให้เจ้าของเว็บไซต์ได้รับประโยชน์จากคำจำกัดความของการฝึก AI ที่พัฒนาขึ้นที่ IETF ขณะที่การพูดคุยของผู้มีส่วนเกี่ยวข้องหลายฝ่ายยังคงดำเนินต่อไปเกี่ยวกับคำศัพท์ AIPREF ที่เหลือ เมื่อผู้เล่นในอุตสาหกรรมจำนวนมากขึ้นนำกลไกนี้มาใช้ เจ้าของเว็บไซต์จะเข้าถึงสัญญาณค่ากำหนดได้ตั้งแต่เนิ่นๆ และเข้าถึงได้มากขึ้น

ข้อเสนอฉบับร่างนี้สะท้อนถึงความคิดเห็นจากผู้เผยแพร่เนื้อหา กลุ่มประชาสังคม หน่วยงานกำกับดูแล และผู้มีส่วนเกี่ยวข้องอื่นๆ ที่เรียกร้องให้มีการควบคุมการฝึก AI ทั่วทั้งอุตสาหกรรม การสนับสนุนข้อเสนอนี้จากผู้ให้บริการ AI รายใหญ่จะช่วยสร้างมาตรฐานในอนาคตที่ใช้ได้กับทุกอุตสาหกรรม มีประสิทธิภาพ และยั่งยืน ข้อเสนอนี้สอดคล้องกับระเบียบปฏิบัติของสหภาพยุโรปสำหรับผู้ให้บริการโมเดล AI อเนกประสงค์ (GPAI) ภายใต้กฎหมายว่าด้วยเรื่อง AI ของสหภาพยุโรป ซึ่งยอมรับ robots.txt เป็นวิธีหลักสำหรับผู้เผยแพร่เนื้อหาบนเว็บในการแสดงค่ากำหนดที่เครื่องอ่านได้ เราจะทำงานร่วมกับผู้มีส่วนเกี่ยวข้องเหล่านี้ต่อไปเพื่อปรับแต่งและกำหนดมาตรฐานผ่านคณะทำงาน IETF

เราตั้งเป้าที่จะรองรับการควบคุมใหม่นี้ร่วมกับผู้ให้บริการ AI รายอื่นๆ ในปี 2570 และจะแจ้งข้อมูลอัปเดตความคืบหน้า