السلام عليكم

ارجو شرح طريقة هذا الكلام مع انه عربي الا انني لم افهمه




مساعدة أدوات مشرفي المواقع
انتهت المدة المحددة للخادم عندما كنا نحاول الوصول إلى ملف robots.txt الخاص بك. قبل أن نزحف إلى صفحات موقعك، حاولنا تدقيق ملف robots.txt الخاص بك للتأكد من أننا لم نزحف إلى أي صفحات قمت بمنع وصول برامج الروبوت إليها. ومع ذلك، فقد تلقينا خطأ انتهاء المدة المحددة عندما حاولنا الوصول إلى ملف robots.txt الخاص بك. وحتى نتأكد من أننا لم نزحف إلى أي صفحات مدرجة في الملف، قمنا بتأجيل زحفنا. وعندما يتأكد لنا ذلك، نرجع إلى موقعك بعد ذلك ونزحف إليه بمجرد ما نستطيع الوصول إلى ملف robots.txt الخاص بك. لاحظ أن هذا يختلف عن استجابة 404 عندما نبحث عن ملف robots.txt. فإذا تلقينا 404، فإننا نفترض أن ملف robots.txt غير موجود ونتابع الزحف.





©المشاركات المنشورة تعبر عن وجهة نظر صاحبها فقط، ولا تُعبّر بأي شكل من الأشكال عن وجهة نظر إدارة المنتدى©