منشئ Robots.txt

حول هذه الأداة

أنشئ ملف robots.txt لموقعك للتحكم في كيفية وصول زواحف محركات البحث إلى صفحاتك. قم بتكوين قواعد وكيل المستخدم والمسارات المسموحة والممنوعة وإضافة عناوين Sitemap URL من خلال واجهة نموذج بسيطة. تتم جميع المعالجات محليًا في المتصفح.

الميزات الرئيسية

• تكوين وكيل المستخدم لاستهداف زواحف محددة
• قواعد مسارات Allow و Disallow مع دعم إدخال متعدد الأسطر
• تضمين Sitemap URL لتحسين SEO
• تحميل قالب نموذجي بنقرة واحدة للبدء السريع
• مسح المخرجات وإعادة تعيين جميع الحقول بنقرة واحدة
• نسخ robots.txt المُنشأ إلى الحافظة

معاينة سريعة

حالات الاستخدام

• التحكم في الصفحات التي يمكن لمحركات البحث زحفها على موقعك
• منع الوصول إلى لوحات الإدارة والأدلة الخاصة
• إضافة عناوين Sitemap URL لمساعدة محركات البحث في اكتشاف محتواك
• إنشاء robots.txt قبل إطلاق الموقع
• إنشاء قواعد زحف محددة لوكلاء مستخدم مختلفين