بسم الله الرحمن الرحيم
السلام عليكم ورحمة الله وبركاته



كثيرة هي الشروحات في القسم تتحدث عن كيفيه التعامل مع ملف robots.txt
لكن لماذا التعقيد ياترى على آصحاب المواقع؟
وخصوصاً هذا الملف أقل خطأ يكلف صاحب الموقع ألكثير!
تابعوآ معي هذا المقال من صفحة مساعدة مشرفين المواقع

اقتباس
إخفاق برامج الروبوت


قبل زحف Googlebot إلى موقعك، يدخل إلى ملف robots.txt لتحديد إذا كان موقعك يمنع محرك بحث Google من الزحف إلى أية صفحات أو عناوين URL. إذا كان ملف robots.txt موجودًا ولكن لا يمكن الوصول إليه (بمعنى آخر، إذا لم يعرض رمز حالة HTTP لخطأ 200 أو 404)، فسنؤجل الزحف بدلاً من المخاطرة بالزحف إلى عناوين URL غير مسموح بها. وعندما يحدث هذا، فسيعود Googlebot إلى موقعك ويزحف إليه فور تمكننا من الدخول بنجاح إلى ملف robots.txt. مزيد من المعلومات حول بروتوكول استبعاد برامج الروبوت.
(ولا حاجة إلى ملف robots.txt إلا إذا كان موقعك يتضمن محتوى لا تريد أن تفهرسه محركات البحث. أما إذا أردت أن تفهرس محركات البحث جميع محتوى موقعك، فلا حاجة إلى ملف robots.txt—حتى ولو كان فارغًا. إذا لم يتوفر لديك ملف robots.txt، فإن خادمك سيعرض خطأ 404 عندما يطلب Googlebot هذا الملف، وسنستمر في الزحف إلى موقعك. ليست هناك مشكلة.)



الخلاصة:اذا كنت لاتريد ان تحجب شيء معين عن روبورتات محركات البحث لاداعي لوجود الملف من آصله,قُم بحذفه فـ بوجوده او عدم وجوده الروبورت سيتم الزحف بدون أي مشاكل تذكر
سؤال صاحب موقع يستخدم فيبويلتن في بي vBulletin:طيب أنا بحجب الحاجات الغير مهمه بواسطة هذا الملف ياترى هل أقدر أستثني هذه الأشياء؟
أقول لك نعم أخي العزيز بكل بساطه مجرد تلاعب قليلاً على
قوالب الستايل style+اللغات والعبارات+صلاحيات المجموعة رقم 1
وسنأخذ أقتباس من موضوع ألعمدة:حل مشكلة " جوجل GOOGLE يشاهد التقويم "
بالنسبة لصلاحيات المجموعة رقم 1=مجموعة الزوار او البعض يسميها الضيوف
لوحة تحكم المنتدى forum-مجموعة الاعضاء-التحكم بالمجموعات-أضغط تعديل على مجموعة الزوار التي تحمل الرقم 1


 اقتباس
يستطيع مشاهدة التقويم = لا
يستطيع استخدام البريد إلى الأصدقاء=لا
يستطيع البحث في المنتديات=لا
تراخيص المواضيع / المشاركات كل الأختيارات لا ماعدى يتبع قوانين الموقع
تراخيص المتواجدون الآن كل الاختيارات =لا
التراخيص العامة كل الاختيارات =لا


باقي لدينا هذه الملفات الغير مهمه والتي تكون أرشفتها سريعه جداً وطبعاً نستغلها بعمل توجيه لرئيسية المنتدى forum : calendar.php+faq.php
أعطي تحرير للملفات المذكور آحذف محتواها وضع الكود code التالي

 رمز PHP:
<code style="white-space:nowrap"> <code> </head><META http-equiv="refresh" content="0;URL=http://www.dzbatna.net/vb"><body></html>
</code> </code>



لاتنسى تغيير TRAIDNT FORUM الى رابط موقعك

باقي أرتباط الملفات الشخصية التي يعشقها روبورت محرك البحث Search Engine بشكل عجيب
آلحل : لوحة تحكم المنتدى forum-اللغات والعبارات-البحث بالعبارات-ابحث عن

by_x
واضغط على تعديل وأستبدله بهذا: بواسطة {2}
وللجيل الرابع VBULLETIN G4:حذف ارتباط الملفات الشخصية من الرئيسية لتقوية ارشفة indexation الموقع

وأيضاً احذف ارتباط الملف الشخصي من قالب template postbit_legacy

حل مشكلة عناكب البحث مع الملفات الشخصية للأعضاء




أيش باقي؟ حاجب ايضا رابط مشاهدة طاقم الادارة بسيطة ايضاً البحث بالعبارات
ابحث عن مشاهدة طاقم الادارة احذف العبارة الموجودة + اعطي فارغ بواسطة زر الكيبورد +حفظ
مثال فراغ مثال فراغ أظن واضحه

والآهم ياآخوان:الأبتعاد ثم الأبتعاد عن تركيب install الهاك productات العشوائية وألكم الهائل منها لأنها قاتل موكد لأرشفة indexation موقعك + ضمان مؤكد لهجر الأعضاء بسبب كثرة توقفات ومشاكل وبطيء الموقع
+عدم تطبيق كل موضوع يحمل أسم أرشفة indexation أو سيو بدون ان تتأكد من مصداقية الكاتب 100% ومن مراجعه التي يستخدمها
تحياتي وتقديري للجميع
أخوكم/محمد الجنابي:ابو زينب






©المشاركات المنشورة تعبر عن وجهة نظر صاحبها فقط، ولا تُعبّر بأي شكل من الأشكال عن وجهة نظر إدارة المنتدى©