اسهل و اسرع طريقة اختبر ملف الربوت الخاص بك
مقدّمة عن ملف robots.txt؟
يحدد ملف robots.txt عناوين URL التي يمكن لبرامج زحف محركات البحث الوصول إليها على موقع الويب الخاص بك غالبًا ما تُستخدم هذه المعلومات لتجنب إثقال موقع الويب الخاص بك بطلبات الزحف ، وهي ليست آلية لإخفاء صفحة ويب من نتائج بحث Google ولكن إذا كنت تريد إخفاء صفحات معينة من النتائج ، فيمكنك القيام بذلك باستخدام ملف robots.txt ابحث عن الحظر في Google باستخدام علامة noindex أو قم بحماية الصفحة بكلمة مرور
ما هو ملف robots.txt؟ وما فائدته؟
يساعد ملف robots.txt محركات البحث في تنظيم سلوك العناكب داخل موقع ما بشكل خاص ، حيث يوجههم إلى حيث يجب أن يذهبوا ، ويمنعهم من الذهاب إلى أماكن معينة
من هنا يجب إنشاء هذا الملف بشكل صحيح ، بناءً على هيكل الموقع ومن خلال هذه المقالة ستتعرف على كيفية القيام بذلك تابعنا
من هنا اختبر ملف الربوت الخاص بك
ستوضح لك أداة اختبار ملف robots.txt ما إذا كان ملف robots.txt يمنع زاحف الويب الخاص بـ Google من الوصول إلى عناوين URL معينة على موقع الويب الخاص بك على سبيل المثال ، يمكنك استخدام هذه الأداة لاختبار ما إذا كان يمكن لزاحف Googlebot-Image الوصول إلى موقعك
الزحف إلى عنوان URL للصورة ليتم حظره من الوصول إلى بحث الصور من Google ويمكنك اختبار ملف bot بشكل عام ومن خلال الاختبار يمكنك إعادة إرسال ملف bot بعد التعديل إلى مشرفي مواقع Google
فتح أداة اختبار ملف robots.txt
|
يمكنك اختبار الروبوت عن طريق إرسال عنوان URL الخاص بك إلى أداة الاختبار ستعمل الأداة وفقًا لمتطلبات Googlebot وتضمن حظر عنوان URL الخاص بك من الوصول العادي
قم بتعديل ملف robots.txt وتحقق من الأخطاء
اختبار ملف robots.txt.
اختبر ملف robots.txt باستخدام أداة اختبار ملف الروبوت
افتح أداة اختبار موقع الويب الخاص بك وانتقل عبر رمز robots.txt للوصول إلى تحذيرات بناء الجملة والمنطق المميزة يتم عرض عدد تحذيرات النحو والمنطق أسفل المحرر مباشرة
اكتب عنوان الويب لموقع الويب الخاص بك في مربع النص أسفل الصفحة
حدد المتصفح المراد محاكاته من القائمة المنسدلة على الجانب الأيسر من مربع النص
يمكنك إجراء اختبار لملف الروبوت من هذه المقالة بالنقر فوق اختبار
انقر فوق الزر "اختبار" لاختبار إدخال ملف robots.txt
تحقق مما إذا كان الزر "اختبار" يعرض الآن "مقبولة أو محظورة" لمعرفة ما إذا كان عنوان URL الذي أدخلته قد تم حظره من الوصول إلى محرك بحث الويب من Google
اختبر الملفات في هذه الصفحة قم بتحرير الملفات وإعادة اختبارها إذا لزم الأمر يرجى ملاحظة أنه لن يتم حفظ التغييرات التي تجريها على هذه الصفحة
تم حفظ هذا في موقعك! انظر الخطوة التالية
انسخ تغييراتك إلى ملف robots.txt على موقع الويب الخاص بك لا تغير الأداة الملفات الفعلية الموجودة على موقع الويب الخاص بك
يمكنك فقط تشغيل الاختبارات مع الإصدار الذي تستضيفه الأداة
قيود أداة اختبار ملف robots_txt
التغييرات التي تجريها في محرر الأداة لا يتم حفظها تلقائيًا على الخادم يجب نسخ المحتوى من المحرر ولصقه في ملف robots.txt المخزن على الخادم
لن تختبر الأداة أي ملفات Robots-txt باستثناء برامج الروبوت التي تحتوي على وكلاء المستخدم أو الباحثين على الويب من Google (مثل Googlebot) لا يمكننا توقع كيف ستفسرها برامج زحف الويب الأخرى
ملف الربوت الصحيح اقدمة لكم.
User-agent: *
Disallow: /search
Allow: /
Allow: /ads.txt
خريطة الموقع: https://ey-need.blogspot.com/sitemap.xml
--------------
--------------
|
