عن هذه الأداة
تحقق من ملف robots.txt لموقع، واختبر إن كان مسار ما مسموحًا لزاحف (بما فيها روبوتات الذكاء الاصطناعي)، أو ولّد ملفي robots.txt وllms.txt.
يُقرأ robots.txt سطرًا سطرًا إلى مجموعات، وتُطابق كل قاعدة كما توثقها Google: تفوز القاعدة المطابقة الأكثر تحديدًا، وتفوز Allow عند التساوي، وتعمل * و$ كرموز بديلة. يُبلَّغ عن الحقول المجهولة والقواعد خارج المجموعات وحد 500 كيلوبايت، وتُدرج زواحف الذكاء الاصطناعي على حدة.
مثال: افحص الموقع = https://www.google.com, اختبر مسارًا (اختياري) = /search, للزاحف = Googlebot.
يتحكم robots.txt في الزحف لا في الفهرسة، والروبوتات الملتزمة تتبعه طوعًا. وllms.txt مقترح غير رسمي.
خطوات سريعة
- أدخل عنوان صفحة أو نطاق عام.
- اضغط افحص. يزوره خادم 1CLIK، وقد يستغرق ذلك بضع ثوانٍ.
- اقرأ كل سطر — جيد أو يحتاج تحسين أو مشكلة أو معلومة — مع تلميح لما يجب إصلاحه.
يجلب خادم 1CLIK العنوان العام الذي تدخله فقط. تُرفض العناوين الخاصة والداخلية، وتُخزَّن النتائج مؤقتًا لبضع دقائق ولا تُحفظ في حسابك.
أسئلة شائعة
كيف تعمل مدقق ومولّد robots.txt وllms.txt؟
يُقرأ robots.txt سطرًا سطرًا إلى مجموعات، وتُطابق كل قاعدة كما توثقها Google: تفوز القاعدة المطابقة الأكثر تحديدًا، وتفوز Allow عند التساوي، وتعمل * و$ كرموز بديلة. يُبلَّغ عن الحقول المجهولة والقواعد خارج المجموعات وحد 500 كيلوبايت، وتُدرج زواحف الذكاء الاصطناعي على حدة.
ما الذي يجب مراعاته؟
يتحكم robots.txt في الزحف لا في الفهرسة، والروبوتات الملتزمة تتبعه طوعًا. وllms.txt مقترح غير رسمي.
لماذا قد تختلف النتيجة عما أراه في متصفحي؟
يرى الفحص ما يرسله الخادم إلى 1CLIK قبل تشغيل أي JavaScript. وقد ترد المواقع على الطلبات الآلية بشكل مختلف أو تحجبها أو تختلف حسب الدولة.