راهنمای عوامل GEO › دسترسی رباتهای هوش مصنوعی
رباتهای آموزش مدل (اطلاعاتی)
بهروزرسانی: · گروه «دسترسی رباتهای هوش مصنوعی» (۲۵٪ امتیاز GEO) · وزن عامل در گروه: بدون اثر در امتیاز
چرا مهم است؟
GPTBot، ClaudeBot، Google-Extended و CCBot محتوا را برای آموزش مدلها جمع میکنند و ربطی به نمایش شما در جوابهای جستجو ندارند. بستن یا باز گذاشتن آنها تصمیم تجاری خود شماست و در امتیاز حساب نمیشود؛ فقط گزارش میکنیم کدام بسته است.
چطور درستش کنم؟
- تصمیم بگیرید محتوای شما در آموزش مدلها استفاده شود یا نه.
- اگر نه، فقط همین رباتها را در robots.txt ببندید و رباتهای جستجو (OAI-SearchBot، Claude-SearchBot، PerplexityBot، Googlebot) را باز بگذارید.
نمونه:
User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: CCBot
Disallow: / ژئورنک این عامل را چطور میسنجد؟
اطلاعاتی، بدون اثر در امتیاز.
منابع
- OpenAI: GPTBot platform.openai.com
- Google: Google-Extended و کنترل استفاده در هوش مصنوعی developers.google.com
- Common Crawl: CCBot commoncrawl.org