شرح ملف Robots.TXT لتوجيه العناكب لصفحات المهمه للأرشفه

السلام عليكم ورحمة الله وبركاته
بسم الله الرحمن الرحيم
مسائـكـم / صباحـكـم سعادهـ وفرح يارب
كيفكم اعضاء حزن العشاق
عساكم بخير
اليوم حبيت نشوف جديدتطويرالمنتدى

السلام عليكم

كلنا نعرف ان عناكب قوقل تدخل لكل صفحات المواقع لكي تأرشفها
وهذه الارشفه تزيد من انتشار الموقع وتحقق عدد اكبر من الزوار
لكن هناك صفحات لا تغير شيئ اذا ارشفة ام لم تأرشف
صفحات كثيره
منها على سبيل المثال الملف الشخصي او صفحة موضوع جديد
و الكثير غيرهم من الصفحات

فلابد من توجيه هذه العناكب لصفحات التي لابد ارشفتها


يتم التوجيه العناكب من خلال ملف اسمه Robots.TXT

يتم رفعه الى داخل مجلد www

اليكم هذا الملف

كود PHP User-agent: *
Disallow: /vb/announcement.php
Disallow: /vb/calendar.php
Disallow: /vb/cron.php
Disallow: /vb/editpost.php
Disallow: /vb/faq.php
Disallow: /vb/joinrequests.php
Disallow: /vb/login.php
Disallow: /vb/misc.php
Disallow: /vb/moderator.php
Disallow: /vb/newreply.php
Disallow: /vb/newthread.php
Disallow: /vb/online.php
Disallow: /vb/attachment.php
Disallow: /vb/private.php
Disallow: /vb/profile.php
Disallow: /vb/register.php
Disallow: /vb/search.php
Disallow: /vb/sendmessage.php
Disallow: /vb/showgroups.php
Disallow: /vb/showpost.php
Disallow: /vb/sub******ion.php
Disallow: /vb/sub******ions.php
Disallow: /vb/threadrate.php
Disallow: /vb/usercp.php
Disallow: /vb/payments.php
Disallow: /vb/memberlist.php
Disallow: /vb/includes/



وهذا الملف عن تجربه خاصه انه مفيد كثيراً