เครื่องมือฟรี · AI Crawler Checker

AI Crawler Checker เช็คว่าบอท AI เข้าอ่านเว็บคุณได้ไหม

เช็คว่าบอทของ ChatGPT Claude Perplexity และ Google เข้าอ่านเว็บไซต์ได้หรือเปล่า พร้อมดูกฎที่บล็อกไว้แบบชัด ๆ

เช็คเว็บไซต์ของคุณ ฟรี

เราดึงหน้าเว็บสาธารณะที่คุณกรอกมาเพื่อเช็ค ผลเช็คเก็บไว้ราว 10 นาทีเพื่อให้เช็คซ้ำได้เร็วขึ้น แล้วลบทิ้ง ส่วน IP เราแปลงเป็นรหัสและเก็บไว้ 1 นาทีเพื่อกันการใช้งานผิดวิธี

เช็คได้เฉพาะหน้าที่เป็นของคุณหรือได้รับอนุญาต ห้ามใช้แบบจำนวนมากหรือใช้โปรแกรมอัตโนมัติ เราอาจจำกัดหรือบล็อกการเช็คเพื่อกันการใช้งานผิดวิธี

ฟรี · ไม่ต้องใช้บัตร · ไม่ต้องสมัคร

Grixy

ผลการเช็ค

ผลลัพธ์แยกให้ทีละบอท

เข้าได้

บอทตัวนี้อ่านหน้าเว็บได้ตามกฎใน robots.txt

โดนบล็อก

มีกฎใน robots.txt ที่ห้ามบอทตัวนี้ และเห็นได้เลยว่าเป็นกฎข้อไหน

ควรเช็คไฟร์วอลล์

robots.txt เปิดให้แล้ว แต่ไฟร์วอลล์หรือ CDN อาจยังกันบอทไว้

ไม่มีกฎเฉพาะ

ไม่มีกฎที่ระบุชื่อบอทตัวนี้ จึงใช้กฎกลางของเว็บ

วิธีใช้

วิธีใช้ทีละขั้น

  1. 1

    ใส่เว็บไซต์

    เริ่มจากหน้าแรกก่อนก็ได้

  2. 2

    เครื่องมืออ่าน robots.txt

    เช็คกฎของบอท AI หลัก ๆ ทีละตัว

  3. 3

    ดูผลแยกตามบอท

    เข้าได้หรือโดนบล็อก พร้อมกฎที่เกี่ยวข้อง

  4. 4

    เลือกว่าจะเปิดให้ใคร

    ตัดสินใจว่ายอมให้ AI ใช้เว็บแบบไหน

  5. 5

    แก้แล้วเช็คซ้ำ

    แก้ robots.txt แล้วกดเช็คอีกครั้ง

คู่มือ

รู้จักบอทก่อนตัดสินใจบล็อก

1

บอทสำหรับการค้นหา

OAI-SearchBot Claude-SearchBot และ PerplexityBot ช่วยให้เว็บไปโผล่และได้ลิงก์ในคำตอบของ AI Search

2

บอทสำหรับเทรนโมเดล

GPTBot และ ClaudeBot เก็บเนื้อหาไปใช้เทรน AI การบล็อกบอทกลุ่มนี้เป็นเรื่องการเทรน ไม่เกี่ยวกับการค้นหา

3

บอทที่ผู้ใช้สั่ง

ChatGPT-User Claude-User และ Perplexity-User เข้าเว็บเมื่อมีคนสั่งให้ AI เปิดหน้า OpenAI และ Perplexity แจ้งว่ากฎ robots.txt อาจใช้กับบอทกลุ่มนี้ไม่ได้

4

Google-Extended

เป็นชื่อสำหรับใส่ใน robots.txt ไม่ใช่บอทแยก ใช้คุมการนำไปใช้กับ Gemini และ Google ระบุว่าไม่มีผลกับ Google Search หรืออันดับ

บอทบริษัทหน้าที่หลัก
OAI-SearchBotOpenAIค้นหาใน ChatGPT
GPTBotOpenAIเทรนโมเดล
ChatGPT-UserOpenAIเข้าเว็บตามที่ผู้ใช้สั่ง
Claude-SearchBotAnthropicค้นหาใน Claude
ClaudeBotAnthropicเทรนโมเดล
PerplexityBotPerplexityค้นหาใน Perplexity
Google-ExtendedGoogleใช้กับ Gemini ไม่เกี่ยวกับ Search
CCBotCommon Crawlชุดข้อมูลเว็บแบบเปิด

ทำไมสำคัญ

ทำไมสำคัญกับธุรกิจไทย

โรงแรมและทัวร์

นักท่องเที่ยวถาม AI ว่าพักที่ไหนดี ถ้าบอทค้นหาโดนบล็อก AI ก็อ่านหน้าห้องพักไม่ได้

ค่าตั้งต้นของโฮสติ้ง

โฮสติ้ง ปลั๊กอินความปลอดภัย หรือ CDN บางเจ้าบล็อกบอทไว้โดยไม่บอก การเช็คช่วยให้เห็นชัด

เว็บไทยและอังกฤษ

กฎแยกตามเว็บและซับโดเมน ถ้ามีหลายซับโดเมนต้องเช็คให้ครบ

ควรใช้ตอนไหน

ควรใช้ตอนไหน

1

ก่อนเริ่มทำ AEO

2

หลังย้ายโฮสติ้ง เปลี่ยน CDN หรือปลั๊กอินความปลอดภัย

3

เมื่อ AI ไม่เคยพูดถึงธุรกิจเลย

4

หลังนักพัฒนาแก้ robots.txt

เหมาะกับใคร

เหมาะกับใคร และไม่เหมาะกับใคร

เหมาะกับ

  • เจ้าของธุรกิจที่อยากให้ AI หาเจอ
  • นักการตลาดที่เริ่มทำ AEO
  • นักพัฒนาที่เช็คเว็บก่อนเปิดตัว

ไม่เหมาะกับ

  • เช็คว่า AI พูดถึงแบรนด์จริงไหม (ใช้ AI Visibility Checker)
  • ลบเนื้อหาที่ AI เก็บไปแล้ว

ข้อผิดพลาดที่เจอบ่อย

ข้อผิดพลาดที่ควรเลี่ยง

บล็อกบอท AI ทุกตัวพร้อมกัน

วิธีแก้: จะบล็อกบอทเทรนก็ได้ แต่ถ้าอยากโผล่ในคำตอบ AI ควรเปิดบอทค้นหาไว้

คิดว่า Google-Extended มีผลกับ Google Search

วิธีแก้: Google ระบุว่าไม่มีผล ใช้คุมแค่ Gemini

ลืมซับโดเมน

วิธีแก้: แต่ละซับโดเมนมี robots.txt ของตัวเอง

ดูแค่ robots.txt

วิธีแก้: ไฟร์วอลล์หรือระบบกันบอทอาจบล็อกอยู่ ต้องเช็คทั้งสองจุด

บล็อกด้วย IP

วิธีแก้: Anthropic แจ้งว่าการบล็อก IP ไม่แน่นอน ควรใช้ robots.txt

ตัวอย่าง

ตัวอย่าง โรงแรมในภูเก็ต

ก่อน

ปลั๊กอินความปลอดภัยใส่ “Disallow: /” ให้บอทที่ไม่รู้จักทุกตัว บอทค้นหาของ AI จึงอ่านหน้าห้องพักไม่ได้

→
หลัง

เจ้าของเปิดให้ OAI-SearchBot Claude-SearchBot และ PerplexityBot แต่ยังบล็อก GPTBot ไว้ แล้วเช็คซ้ำ

ตัวอย่างประกอบเท่านั้น

Grixy

ข้อจำกัด

สิ่งที่เครื่องมือนี้บอกไม่ได้

  • เช็คจากกฎเท่านั้น บอกไม่ได้ว่า AI จะพูดถึงหรือใส่ลิงก์ให้แน่นอน
  • มองไม่เห็นการตั้งค่าไฟร์วอลล์ทุกแบบจากภายนอก
  • บอทที่ทำงานตามคำสั่งผู้ใช้อาจไม่ทำตาม robots.txt
  • กฎเปลี่ยนได้ ควรเช็คซ้ำทุกครั้งที่แก้เว็บ

FAQ

คำถามที่พบบ่อย

AI Crawler คืออะไร

AI Crawler คือบอทที่เข้าอ่านเว็บให้บริษัท AI เพื่อใช้ตอบคำถาม เทรนโมเดล หรือเปิดหน้าเว็บตามที่ผู้ใช้สั่ง

ควรบล็อก GPTBot ไหม

ขึ้นอยู่กับคุณ OpenAI ระบุว่า GPTBot ใช้เทรนโมเดล และการบล็อก GPTBot ไม่ได้หยุด OAI-SearchBot ที่ใช้ค้นหาใน ChatGPT

บล็อกบอท AI แล้วอันดับ Google ตกไหม

ถ้าบล็อก Google-Extended ไม่ตก Google ระบุว่าไม่มีผลกับ Google Search และไม่ใช่ปัจจัยจัดอันดับ แต่ห้ามบล็อก Googlebot

OAI-SearchBot กับ GPTBot ต่างกันอย่างไร

OAI-SearchBot ช่วยให้เว็บโผล่ในคำตอบค้นหาของ ChatGPT ส่วน GPTBot เก็บเนื้อหาไปเทรน OpenAI แยกการตั้งค่าของสองตัวนี้ออกจากกัน

บอท AI ทำตาม robots.txt ไหม

บอทค้นหาและบอทเทรนของ OpenAI Anthropic และ Perplexity แจ้งว่าทำตาม แต่บอทที่ผู้ใช้สั่ง เช่น ChatGPT-User หรือ Perplexity-User อาจไม่ทำตาม

robots.txt เปิดแล้ว ทำไมยังโดนบล็อก

ไฟร์วอลล์ CDN หรือระบบกันบอทอาจกันไว้ก่อนอ่าน robots.txt ลองเช็คกับผู้ให้บริการโฮสติ้ง

robots.txt กับ llms.txt เหมือนกันไหม

ไม่เหมือน robots.txt บอกว่าบอทอ่านอะไรได้ ส่วน llms.txt เป็นไฟล์สรุปเว็บแบบไม่บังคับ และ Google ระบุว่าไม่จำเป็นสำหรับ Google Search

ใช้กับเว็บภาษาไทยได้ไหม

ได้ กฎใช้เหมือนกันทั้งหน้าไทยและอังกฤษ ควรเช็คทุกซับโดเมนที่ใช้

ใช้ฟรีไหม

ฟรี ไม่ต้องใช้บัตร

เครื่องมือที่เกี่ยวข้อง

ใช้คู่กับ

ฟรี

llms.txt Generator

สร้างไฟล์ llms.txt ให้ AI อ่านเว็บได้ง่าย

ใช้ฟรีเลย →

AI Visibility Checker

ChatGPT Gemini และ Google AI Mode พูดถึงคุณบ่อยแค่ไหน

ดูรายละเอียด →
ฟรี

Schema Markup Generator

สร้าง JSON-LD ได้เอง ไม่ต้องเขียนโค้ด

ใช้ฟรีเลย →
Grixy

ยังไม่แน่ใจว่าควรเปิดให้บอทไหน

นัดคุยฟรีกับทีมเรา

นัดคุยกับทีมคุยกับเรา