ملف robots.txt بالكامل

[linnou]

بسم الله الرحمن الرحيم

شرح طريقة ملف robots.txt بالكامل

مثال
http://dzbatna.net/robots.txt
اولا كود code لتوجيه العناكب جميعا
رمز PHP:

<code style="white-space:nowrap"> <code> User-agent: *
</code> </code>

ما هذا الكود code ؟
هذا الكود code لجميع العناكب و هذا افضل من غيره اي تضع عناكب قوقل google بكود code وياهو بكود code واللخ
و النجمة * تعني جميع العناكب

ثانيا
رمز PHP:

<code style="white-space:nowrap"> <code> Disallow:
</code> </code>

هذا يمنع العناكب من الدخول لملفات معينة
رمز PHP:

<code style="white-space:nowrap"> <code> Disallow: /vb/announcement.php
Disallow: /vb/calendar.php
Disallow: /vb/cron.php
Disallow: /vb/editpost.php
Disallow: /vb/faq.php
Disallow: /vb/joinrequests.php
Disallow: /vb/login.php
Disallow: /vb/misc.php
Disallow: /vb/moderator.php
Disallow: /vb/newreply.php
Disallow: /vb/newthread.php
Disallow: /vb/online.php
Disallow: /vb/attachment.php
Disallow: /vb/private.php
Disallow: /vb/profile.php
Disallow: /vb/register.php
Disallow: /vb/search.php



Disallow: /vb/sendmessage.php
Disallow: /vb/showgroups.php
Disallow: /vb/showpost.php
Disallow: /vb/subscription.php
Disallow: /vb/subscriptions.php
Disallow: /vb/threadrate.php
Disallow: /vb/usercp.php
Disallow: /vb/payments.php
Disallow: /vb/memberlist.php
Disallow: /vb/image.php
Disallow: /vb/images/
</code> </code>

مع تغيير images/ بمجلد الاستايل style الحالي لتصفح اسرع للعناكب http://www.iraq12.com/forums/images/smilies/1/6.gif

ثالثا
رمز PHP:

<code style="white-space:nowrap"> <code> Allow:
</code> </code>

هذا يسمح للعناكب في الدخول الى اي مجلد
ينصح
رمز PHP:

<code style="white-space:nowrap"> <code> Allow: /
Allow: /vb
Allow: /directory
Allow: /host
</code> </code>

مع تغيير vb و directory و host بمجلدات موقعك http://www.iraq12.com/forums/images/smilies/1/26.gif

رابعا

اضافة ملفات الخرائط
رمز PHP:

<code style="white-space:nowrap"> <code> Sitemap:
</code> </code>

وهي اضافة خرائط موقعك لتوجيه العناكب لها

ينصح بهذا
رمز PHP:

<code style="white-space:nowrap"> <code> Sitemap: http://www.dzbatna.net/vb/external.php
Sitemap: http://www.dzbatna.net/vb/external.php?type=rss
Sitemap: http://www.dzbatna.net/vb/external.php?type=rss2
Sitemap: http://www.dzbatna.net/vb/external.php?type=xml
Sitemap: http://www.dzbatna.net/vb/archive/index.php
</code> </code>

انتهى الموضوع بحمد الله تعالى
يوجد ملف الروبوتس بالمرفق
http://www.iraq12.com/forums/images/smilies/1/36.gif
المصدر
شركة عسل بغداد (http://host.3salbaghdad.com/)
محترف vb (http://www.dzbatna.com/u90714/)




الملفات المرفقة
http://www.traidnt.net/vb/images/attach/txt.gif robots.txt (http://www.traidnt.net/vb/attachments/592029d1312303919-robots.txt) (1.1 كيلوبايت, عدد مرات المشاهدة 3653 مرة)


https://fbcdn-sphotos-d-a.akamaihd.net/hphotos-ak-ash4/482113_236967293114455_1193518507_n.png (http://www.dzbatna.com)
©المشاركات المنشورة تعبر عن وجهة نظر صاحبها فقط، ولا تُعبّر بأي شكل من الأشكال عن وجهة نظر إدارة المنتدى (http://www.dzbatna.com)©