مثال استخدام
مثال: أدخل /private/ كمسار محجوب، ثم نزّل robots.txt.
حدود الأداة
robots.txt ليس حماية للملفات الخاصة ولا بديلًا عن التحكم في الوصول.
هل يتم رفع المدخلات؟
لا؛ الحساب وتوليد الملفات محليان. فتح رابط X للتواصل ينتقل إلى منصة خارجية.
مولّد robots.txt
أنشئ تعليمات الزحف من المسارات ورابط خريطة موقعك.