Gary Illyes จาก Google นำเสนอภาพรวมที่ตรงไปตรงมาของ Googlebot โดยอธิบายว่ามีโปรแกรมรวบรวมข้อมูลหลายร้อยรายการที่ไม่ได้จัดทำเป็นเอกสารต่อสาธารณะ
โพสต์ Google กล่าวว่าพวกเขาปรับใช้โปรแกรมรวบรวมข้อมูลที่ไม่มีเอกสารหลายร้อยรายการ ปรากฏตัวครั้งแรกใน Search Engine Journal