Step 1
اختر ما إذا كنت تريد السماح بالزحف للكل، حظره، أو تخصيص مسارات.
استخدم NewTools من أجل إنشاء قواعد robots.txt مباشرة داخل المتصفح. ينشئ قواعد السماح والمنع والمسارات المخصصة وخريطة الموقع لملف robots.txt بسيط.
إعداد سريع لملف Robots. قم بإنشاء ملف robots.txt قياسي لتوجيه زواحف البحث بنقرة واحدة.
اختر ما إذا كنت تريد السماح بالزحف للكل، حظره، أو تخصيص مسارات.
أضف رابط خريطة الموقع (Sitemap) اختياريًا.
أنشئ وحمّل ملف robots.txt.
إنشاء ملف السماح للجميع لموقع ويب جديد.
استخدم مسارات مخصصة لمنع أرشفة مجلدات /admin الخاصة.
إنشاء ملف حظر بالكامل لمنع ظهور مواقع الاختبار في نتائج البحث.
تأكد من رفع الملف الناتج إلى المسار الجذري بدقة (مثل example.com/robots.txt).
تأكد أن مسارات الحظر المخصصة تبدأ بشرطة مائلة (/).
راجع الإعدادات وتأكد من عدم اختيار 'حظر الجميع' لموقع يعمل فعليًا.
تقوم الأداة بتجميع توجيهات الـ SEO القياسية محليًا في متصفحك بدون الحاجة للاتصال بخوادم خارجية.
لا. الأداة تولد النص فقط. يجب عليك تحميله ورفعه إلى المجلد الجذري لموقعك بنفسك.
لا. تقوم فقط بإضافة الرابط الذي تدخله إلى ملف الإعدادات.
تُطبّق هذه الأداة القواعد على جميع الزواحف باستخدام 'User-agent: *'.