ماذا تعني قيمة معدل الزحف (crawl-delay: 10) التي يتم وضعها في ملف robots.txt المودود في جذر الموقع الإلكتروني؟
إن تعليمة التأخير الزاحف هي تعليمة غير رسمية تهدف إلى إبلاغ برامج الزحف بضرورة إبطاء عملية الزحف حتى لا يتم تحميل خادم الويب بشكل زائد.
لا تدعم بعض محركات البحث تعليمة التأخير الزاحف، وتختلف طريقة تفسير تعليمة التأخير الزاحف عبر محركات البحث.
كيف يفسر Google أمر crawl-delay: 10؟
لا يدعم Google أمر crawl-delay، لذا فإن برامج الزحف التابعة له ستتجاهله ببساطة.
إذا كنت تريد أن تطلب من Google الزحف بشكل أبطأ، فيتعين عليك تعيين معدل الزحف في Google Search Console: ← ←
أقرأ من هنــا: الإيقاف النهائي المرتقب لأداة تحديد معدل الزحف
محركات بحث: Bing وYahoo و crawl-delay: 10 يدعم Bing وYahoo توجيه crawl-delay، وفي حالة crawl-delay: 10، سيقومان بتقسيم اليوم إلى نوافذ مدتها 10 ثوانٍ، وفي كل نافذة سيقومان بزحف صفحة واحدة كحد أقصى. هذه المقالة عن محر ك البحث الخاص بــ: Bing ← ←
تعامل محرك الزحف من To crawl or not to crawl, that is BingBot's question
محركات بحث: Yandex و crawl-delay: 10
يدعم Yandex توجيه crawl-delay، وفي حالة crawl-delay: 10، سينتظرون 10 ثوانٍ على الأقل قبل طلب عنوان URL آخر.
في حين يدعم Yandex هذا التوجيه، فإنه يوصي باستخدام Yandex.Webmaster — إصداره من Google Search Console لتحديد إعدادات سرعة الزحف.
وهنا المقالة الخاصة بتعليمات مرحك بحث: Yandex Using robots.txt
← ← موقع خط الطيران في محرك بحث : Yandex
محركات بحث: Baidu و crawl-delay: 10
لا يدعم Baidu توجيه crawl-delay، لذا على غرار Google ← سيتجاهلون توجيه crawl-delay. يمكنك تحديد معدل الزحف المفضل لديك من خلال أدوات مشرفي المواقع في Baidu.
إن تعليمة التأخير الزاحف هي تعليمة غير رسمية تهدف إلى إبلاغ برامج الزحف بضرورة إبطاء عملية الزحف حتى لا يتم تحميل خادم الويب بشكل زائد.
لا تدعم بعض محركات البحث تعليمة التأخير الزاحف، وتختلف طريقة تفسير تعليمة التأخير الزاحف عبر محركات البحث.
كيف يفسر Google أمر crawl-delay: 10؟
لا يدعم Google أمر crawl-delay، لذا فإن برامج الزحف التابعة له ستتجاهله ببساطة.
إذا كنت تريد أن تطلب من Google الزحف بشكل أبطأ، فيتعين عليك تعيين معدل الزحف في Google Search Console: ← ←
أقرأ من هنــا: الإيقاف النهائي المرتقب لأداة تحديد معدل الزحف
محركات بحث: Bing وYahoo و crawl-delay: 10 يدعم Bing وYahoo توجيه crawl-delay، وفي حالة crawl-delay: 10، سيقومان بتقسيم اليوم إلى نوافذ مدتها 10 ثوانٍ، وفي كل نافذة سيقومان بزحف صفحة واحدة كحد أقصى. هذه المقالة عن محر ك البحث الخاص بــ: Bing ← ←
تعامل محرك الزحف من To crawl or not to crawl, that is BingBot's question
محركات بحث: Yandex و crawl-delay: 10
يدعم Yandex توجيه crawl-delay، وفي حالة crawl-delay: 10، سينتظرون 10 ثوانٍ على الأقل قبل طلب عنوان URL آخر.
في حين يدعم Yandex هذا التوجيه، فإنه يوصي باستخدام Yandex.Webmaster — إصداره من Google Search Console لتحديد إعدادات سرعة الزحف.
وهنا المقالة الخاصة بتعليمات مرحك بحث: Yandex Using robots.txt
← ← موقع خط الطيران في محرك بحث : Yandex
محركات بحث: Baidu و crawl-delay: 10
لا يدعم Baidu توجيه crawl-delay، لذا على غرار Google ← سيتجاهلون توجيه crawl-delay. يمكنك تحديد معدل الزحف المفضل لديك من خلال أدوات مشرفي المواقع في Baidu.