المساعد الشخصي الرقمي

مشاهدة النسخة كاملة : الـ robots.txt والإستعمال الصحيح ... لارشفة موقعك بالشكل الصحيح & الـ robots RSS



المظفر بالله
24-01-2008, 12:46 AM
http://www.geek4arab.com/vb/imgcache2/2008/01/31.png

robots هو عباره عن عناكب البحث والتي تقوم بأرشفة صفحات الموقع ليسهل الوصول إليها عبر محركات البحث .
هل تريد ان تقوم العناكب بفهرسه موقعك ولكنك خائف من الصفحات ان تصل لمحركات البحث؟ مثل صفحة المدير ولوحة التحكم ومجلدات خاصه ؟
User-agent: *
Disallow: /forums/install
احفظ الملف بأسم robots.txt وارفعه للموقع
المثال السابق منعنا محركات البحث من فهرسه مجلد install الموجود مع سكريبت المنتدى الشهير vBulletin
طبعا ً غالبيه اصحاب المواقع يعرف هذا الملف سأطرح الملف للمنتديات واتبع الطريقة في بقيه موقعك لمنع المسارات التي تريد إخفاءها والسماح بالبقيه !
سوف ارفق ملف روبوت خاص للمنتدى قم برفعه لمنع بعض المسارات المهمه من الأرشفه

User-agent: *
Disallow: /forums/install
Disallow: /forums/admincp
Disallow: /forums/attachments
Disallow: /forums/attachment.php
Disallow: /forums/arcade.php
Disallow: /forums/calendar.php?do=add
Disallow: /forums/cron.php
Disallow: /forums/editpost.php
Disallow: /forums/login.php
Disallow: /forums/modcp
Disallow: /forums/moderator.php
Disallow: /forums/membermap.php
Disallow: /forums/newreply.php
Disallow: /forums/newthread.php
Disallow: /forums/online.php
Disallow: /forums/payments.php
Disallow: /forums/pda
Disallow: /forums/postings.php
Disallow: /forums/printthread.php
Disallow: /forums/private.php
Disallow: /forums/profile.php
Disallow: /forums/register.php
Disallow: /forums/report.php
Disallow: /forums/reputation.php
Disallow: /forums/sendtofriend.php
Disallow: /forums/search.php
Disallow: /forums/sendmessage.php
Disallow: /forums/showpost.php
Disallow: /forums/subscription.php
Disallow: /forums/threadrate.php
Disallow: /forums/usercp.php
Disallow: /forums/spy.php
Disallow: /forums/tags/بهذا الامر Disallow قمنا بمنع محركات البحث من الوصول إلى المجلد او الملف المحدد
المصدر : http://super.arab4services.com/?p=3"

تكملة


http://www.geek4arab.com/vb/imgcache2/2008/01/15.jpg


في الموضوع السابق شرحنا كيفيه تنظيم الإرشفه عن طريق الربوت بالسماح / منع الربوت من أرشفه بعض الملفات والمجلدات وكما ذكر العضو SpyAngel_2005 عبر هذا الرابط http://www.arab4services.com/forums/...35&postcount=2 (http://www.arab4services.com/forums/showpost.php?p=8735&postcount=2)
انه على الاقل تحمي من الإختراق العشوائي , اذن الآن سنتكلم عن الخطوة الآخرى وهي كيفيه عمل ربوت بنظام التغذيه RSS لنشر الأخبار او الاعلانات عبر المنتدى نسخة VB3.6.4
مثال : http://www.arab4services.com/forums/...splay.php?f=51 (http://www.arab4services.com/forums/forumdisplay.php?f=51) بهذا القسم والمختص في نشر الثغرات الآمنيه تم عمل ربوت خاص من الموقع الشهير Milw0rm عبر نظام التغذيه RSS
اولا ً اذهب إلى لوحة التحكم الخاصه بالمنتدى
وبعد ذلك إلى نظام التغذيه RSS
وعبر هذا الرابط تحديدا ً الا وهو اضافه RSS
http://www.yoursite.com/forum/admincp/index.php?do=nav

ستظهر لديك خيارات عديده الاول العنوان لايهم والمربع الثاني نظام التغذيه ضع فيه رابط RSS من اي موقع يقدم هذه الخدمه
مثال : http://www.milw0rm.com/rss.php قد تجد rss.php و rss.xml وايضا ً في منتدى عرب سيرفس يوجد نظام التغذيه rss تستطيع وضعه لنشر اخبار المنتدى عبر قسم مخصص لك في منتداك مثلا ً
في الخيارات الاخرى ستجد تحديد المنتدى المخصص وايضا ً اسم الربوت تستطيع تركه بعضويتك او اختيار عضويه خاصه له ..


منقووووووووووووووول

http://file7azm.info/do.php?img=807