صانع ملف Robots.txt
تحكم في كيفية زحف محركات البحث إلى موقعك بسهولة
استخدمه فقط إذا كان السيرفر ضعيفاً جداً.
عن أداة "صانع ملف Robots.txt"
يُعد ملف Robots.txt هو "حارس البوابة" لموقعك الإلكتروني. هو أول ملف تزوره عناكب محركات البحث (مثل Googlebot) لتعرف ما هي الصفحات المسموح لها بأرشفتها وما هي الصفحات المحظورة. تتيح لك هذه الأداة إنشاء هذا الملف الحساس بدقة برمجية عالية، وبدون الحاجة لكتابة أي كود يدوي، مما يضمن لك تحكماً كاملاً في زحف العناكب ويحمي لوحة تحكم موقعك وملفاتك الخاصة من الظهور في نتائج البحث.
حماية الملفات الحساسة
تسهل عليك الأداة حظر المجلدات الخاصة مثل (Admin, Login, Private) عن محركات البحث لضمان أمان وخصوصية موقعك.
حظر العناكب الضارة
تتضمن الأداة خيارات جاهزة لحظر البوتات المزعجة (مثل MJ12bot و Ahrefs) التي تستهلك موارد السيرفر دون فائدة.
ربط خريطة الموقع
تتيح لك إضافة رابط Sitemap.xml داخل الملف تلقائياً، مما يساعد جوجل على اكتشاف محتوى موقعك الجديد بشكل أسرع.
معاينة حية وتصدير
شاهد الكود يتم كتابته أمامك لحظة بلحظة أثناء تعديل الخيارات، مع إمكانية نسخه أو تحميله كملف .txt بضغطة زر.
خطوات إنشاء الملف الصحيح
-
1
إذن الوصول الافتراضي: اختر "سماح للكل" (Allow All) لضمان أرشفة موقعك بالكامل. لا تختر "منع" إلا إذا كنت تريد إخفاء الموقع تماماً (مثل مواقع تحت الإنشاء).
-
2
إضافة خريطة الموقع: انسخ رابط ملف السايت ماب الخاص بك (مثلاً: https://site.com/sitemap.xml) وضعه في الخانة المخصصة.
-
3
حظر المسارات: إذا كان لديك صفحات لا تريد ظهورها في جوجل (مثل صفحة البحث الداخلي أو تسجيل الدخول)، اكتب مساراتها في خانة الحظر (مثال: /search).
-
4
التحميل والرفع: اضغط على "تحميل الملف"، ثم قم برفع ملف
robots.txtالناتج إلى المجلد الرئيسي (Root) في استضافتك.
تنبيه هام: كن حذراً عند استخدام خيار
Disallow: / لأنه سيمنع جوجل من أرشفة موقعك بالكامل. تأكد دائماً من أنك تحظر فقط المجلدات التي لا تريد ظهورها.
