المساعد الشخصي الرقمي

مشاهدة النسخة كاملة : 5 - سلسلة جوجل : حذف الروابط الغير مفيدة من جوجل



GeeK4aRaB
23-10-2007, 05:35 AM
السلام عليكم ورحمة الله وبركاته

====================================
الموضوع الخامس : حذف الروابط الغير مفيدة من جوجل
جميع مواضيع السلسلة : هنا (http://www.ar-wp.com/showthread.php?t=1973)
====================================

في هذا الموضوع سنتحدث عن حذف الروابط التي لا تفيدنا في جوجل.

بداية ادخل الى جوجل وابحث عن روابط موقعك واترك صفحة النتائج مفتوحة لتعود اليها خلال الشرح في هذا الموضوع:

كود:
site:www.example.com
ماذا نقصد بروابط غير مفيدة ؟

نأخذ مدونة الزميل ادهم على سبيل المثال , حتى نفهم اين الخطأ وكيف نقوم بتصليحه علما ان هذه الأخطاء موجودة ب 98% من المدونات العربية دون معرفة اصحابها بذالك لان الكل مشغول بكتابة المواضيع وفي اهمال لموضوع تحسين العلاقة مع محركات البحث.

نأخذ من مدونة ادهم هذا الرابط وهو ارشيف لشهر سبتمبر:
www.adham-sh.com/?m=200702 (http://www.adham-sh.com/?m=200702)
بعض المواضيع موجودة في هذا الرابط في هذه اللحظة :
اقتباس:
iphone … أصبح لا يقاوم !!!
الحفل الأول لبرنامج منشد الشارقة
دعوة لمشاهدة برنامج بالقرآن نحيا !
إكبس .. قريباً مستقبل زاهر في المواقع العربية
مبارك عليكم الشهر الكريم
سورة السجدة للشيخ مشاري العفاسي
تصميم جديد ( وعدت يارمضان )
نأخذ رابط اخر من مدونة ادهم وهو تصنيف فيديو:
http://www.adham-sh.com/?cat=13
بعض المواضيع موجودة في هذا الرابط في هذه اللحظة :
اقتباس:
iphone … أصبح لا يقاوم !!!
الحفل الأول لبرنامج منشد الشارقة


ناخذ رابط اخر من مدونة ادهم وهو للمواضيع الموجودة بالصفحة الاولى من ارشيف شهر سبتمبر 2007 :
http://www.adham-sh.com/?cat=13&paged=1
بعض المواضيع موجودة في هذا الرابط في هذه اللحظة :
اقتباس:
iphone … أصبح لا يقاوم !!!
الحفل الأول لبرنامج منشد الشارقة 2
ماذا نلاحظ ؟ نلاحظ انه بعض المواضيع موجودة على ثلاث روابط مختلفة ! يعني عندما يدخل جوجل الى هذه الروابط سيشاهد نفس المواضيع.

بالنسبة لجوجل , هذه المواضيع مكتوبة ثلاث مرات وسوف يعتبرها DUPLICATED يعني مواضيع مكررة , وهذا الشيئ بالنسبة لجوجل غير طبيعي , ما الهدف من كتابة الموضوع اكثر من مرة ؟ للغش ؟ لخداع محرك البحث ؟ ... جوجل لا يعرف من هو ادهم ومن هو محمد , هو يأخذ البيانات ويحللها ويعمل وفقها.

في هذه الحالة محتمل تكون النتيجة سلبية لمواضيع تعبنا عليها ولكنها ستفقد اهميتها بسبب التكرار ونجدها لا تتقدم بمحركات البحث وقد نجدها بصندوق رمل جوجل او بما يسمى SUPPLEMENTAL وهي مواضيع موجودة بصفحات متأخرة في جوجل لن يصل لمدونتك زوار عن طريقها , ناهيك عن عواقب البيج رانك.

نحن نسعى لوضع يؤرشف به جوجل فقط روابط المواضيع التي نكتبها , يعني كالتالي :


http://www.adham-sh.com/?p=1
http://www.adham-sh.com/?p=2
http://www.adham-sh.com/?p=3
http://www.adham-sh.com/?p=4
.
.
.
وما الى ذالك.
(طبعا ليس حتما ان تكون الروابط بهذا الشكل , هنالك من يستعمل بمدونته روابط بشكل اخر , المهم هو رابط الموضوع المباشر ولا يهم كيف تركيبته)

في هذه الحالة سيكون عندنا ارشيف نظيف وسنستغل عناكب جوجل لأرشفة المفيد فقط , مما سيضمن لنا أرشفة مباشرة , سريعة , صحيحة , دورية وهادفة.

طيب حلو , فهمنا المشكلة ما الحل ؟! الحل ينقسم الى شطرين:


1. منع جوجل من أرشفة الروابط الغير مفيدة بواسطة ملف Robots.txt

يجب ان نمنع جوجل من أرشفة الروابط والمواضيع الغير مفيدة والتي تتسبب بالتكرار , وان نعطيه امكانية ان يؤرشف روابط المواضيع المباشرة فقط حتى يكون كل التركيز بالأرشفة على المواضيع , الشيئ الذي سنستفيد منه بدون شك.

كيف نمنع جوجل من ارشفة الغير مفيد ؟

بواسطة ملف robots.txt

لا تعقدها يرحم والديك , ما هذا الملف ؟

لا يوجد فيها تعقيد , هو عبارة عن ملف txt نكتبه بالنوتباد ونضعه في ال public_html وجوجل سوف يقوم بتحميله عندما يزور موقعنا وسوف يقرأ ما كتبنا له وعندها سيفهم ماذا نريد. طبعا لن نكتب له "الله يخليك لامك وابوك ضع مواضيعي في المكان الاول" , سنكتب له اوامر بسيطه بلغته وساشرح لكم ببساطة حتى تفهمون الفكرة.

بداية هذا هو مضمون ملف ال robots.txt الموجود في موقعي:

كود:
User-agent: Googlebot
Disallow: /wp-
Disallow: /search
Disallow: /feed
Disallow: /comments/feed
Disallow: /feed/$
Disallow: /*/feed/$
Disallow: /*/feed/rss/$
Disallow: /*/trackback/$
Disallow: /*/*/feed/$
Disallow: /*/*/feed/rss/$
Disallow: /*/*/trackback/$
Disallow: /*/*/*/feed/$
Disallow: /*/*/*/feed/rss/$
Disallow: /*/*/*/trackback/$
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /external%20files/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /trackback/
Disallow: /feed/
Disallow: /*feed=
Disallow: /?feed=
Disallow: /comments/
Disallow: /private/
Disallow: /*tag=
Disallow: /*?tag=
Disallow: /*m=
Disallow: /*cat=
Disallow: /*&cp=
Disallow: /*page_id=
Disallow: /*?paged=
Disallow: /*comments_popup=
Disallow: /*paged=
Allow: /*cat=6
Allow: /wp-content/uploads/
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.cgi$

# disallow all files ending with these extensions
Disallow: /*.html$
Disallow: /*.doc$
Disallow: /*.flv$
Disallow: /*.swf$
في بداية الملف نكتب كما هو ظاهر لكم :

كود:
User-agent: Googlebot
وهذه معناها انه المعلومات في ملف ال robots.txt هذا مخصصة لمحرك البحث جوجل فقط.

بعد هذا السطر نجد الاوامر تحت , كل سطر فيه امر معين.

ناخذ امر على سبيل المثال ونحلله :

كود:
Disallow: /*m=
نحلل الامر :

كود:
Disallow:
تعني ممنوع ! والمقصود هو انه نقول لجوجل ممنوع ارشفة ... !

كود:
/*m=
هذا هو العنصر الذي نقول لجوجل انه ممنوع أرشفته
* تعني أي شيئ.

النتيجة هي انه كل رابط يكون بهذا الشكل مثلا لن تتم أرشفته بواسطة جوجل:

كود:
www.adham-sh.com/?m=200701&paged=2
لن تتم أرشفته لأن الرابط يحتوي على العنصر الممنوع (احمر) وال ? تدخل ضمن ال *

نأخذ امر اخر كمثال:

كود:
Disallow: /*cat=
في هذا الامر قلنا له ممنوع أرشفة اي رابط يحتوي على العنصر الذي تشاهدونه في الامر. لكن ماذا لو اردنا ان نستثني بعض الروابط من خلال هذا العنصر ؟

سنكتب له امر اخر كالتالي:

كود:
Allow: /*cat=6
Allow

هذه معناها مسموح وهي بعكس الامر السابق.

حسب هذا الامر نقول له مسموح ان تأرشف الرابط 6 بينما 1 و 2 و 3 لا تؤرشفها !

يعني النتيجة ستكون كذا :

هذه الروابط مثلا لن نجدها بجوجل:

http://www.adham-sh.com/?cat=1
http://www.adham-sh.com/?cat=2
http://www.adham-sh.com/?cat=3
http://www.adham-sh.com/?cat=4
http://www.adham-sh.com/?cat=5
http://www.adham-sh.com/?cat=7
http://www.adham-sh.com/?cat=8
http://www.adham-sh.com/?cat=9

بينما هذا الرابط سنجده في جوجل:

http://www.adham-sh.com/?cat=6

الفكرة واضحة ؟

مثال على امر اخر :

كود:
/wp-includes/
وهذا معناه لا تؤرشف اي شيئ بداخل المجلد wp-includes

في النهاية نشاهد الامر التالي:

كود:
# disallow all files ending with these extensions
Disallow: /*.html$
Disallow: /*.doc$
Disallow: /*.flv$
Disallow: /*.swf$
هذا معناه لا تؤرشف جميع الملفات ذات الامتداد:

html
doc
flv
swf

2. نطلب من جوجل ان يحذف الروابط التي منعناه من أرشفتها

جميع الملفات التي منعنا جوجل من أرشفتها ستحذف بعد فترة معينة تلقائيا , لكن اذا اردنا تسريع الحذف فهنالك اداة حذف روابط موجودة في موقع Google Webmaster Tools الذي تكلمنا عنه بالدرس الثالث (http://www.ar-wp.com/showthread.php?t=1975)من السلسلة.

كيف نصل لصفحة حذف الروابط في Google Webmaster Tools ؟

ندخل الى -

Tools
Remove URLs
+ New Removal Request
Individual URLs: web pages, images, or other files
Next

حتى نصل الى هذه الصفحة التي تشاهدونها بالصورة ونقوم بتعبئة الحقول اللازمة مع وضع تكملة الرابط الغير مفيد وارسال طلب الحذف.

http://www.geek4arab.com/vb/images/statusicon/wol_error.gif تم تصغير الصوره ,لمشاهدة الصوره بحجمها الأصلي أضغط هنا.http://www.geek4arab.com/vb/images/imgcache/notfound.gif

للمعلومية : جوجل لن يحذف الرابط في حال انه لم يكن ممنوع بالنسبة له. يعني يجب ان يكتشف جوجل في البداية ان الرابط ممنوع من خلال ملف robots.txt وبعدها اذا طلبنا منه الحذف سيحذفه. غير ذالك سيعطينا نتيجة Denied.

جميع الروابط الممنوع جوجل من أرشفتها ستظهر لنا في صفحة ال OVERVIEW

http://www.geek4arab.com/vb/images/statusicon/wol_error.gif تم تصغير الصوره ,لمشاهدة الصوره بحجمها الأصلي أضغط هنا.http://www.geek4arab.com/vb/images/imgcache/notfound.gif

من الواجهة نراقب وضع الطلبات والردود عليها هل حذفت ام لا , والرد من جوجل يكون خلال 7 ايام عادة.

http://www.geek4arab.com/vb/images/statusicon/wol_error.gif تم تصغير الصوره ,لمشاهدة الصوره بحجمها الأصلي أضغط هنا.http://www.geek4arab.com/vb/images/imgcache/notfound.gif

حتى تتأكد انه ملف ال ROBOTS سليم وقام جوجل بتحميله ادخل الى:

Tools
Analyze robots.txt

وهنالك لازم ترى جواب 200 Success (نجاح).

طبعا يجب ان نراقب باستمرار ما هي الروابط التي يمتنع جوجل عن أرشفتها حتى ننتبه انه لم يقع خطأ من طرفنا , ويجب ايضا ان نراقب روابط موقعنا في جوجل حتى نرى ما هي الروابط التي لن تفيدها ولكنها مؤرشفة , حتى نقوم بحذفها كما شرحنا في هذا الموضوع.

ان شاء الله انه التطبيق يكون سليم حتى تحصلون على أرشفة نوعيّة !

اي استفسار بهذا الصدد مدعوين لكتابته هنا بدون الخروج عن الموضوع.


تم بفضل الله.

اخوكم رشيد.

http://file7azm.info/do.php?img=807