معهد الشرح العربي
مرحبا بك‎ ‎‏ أيها الزائر الكريم داخل منتديات ستار لوك إذا كنت عضوا فتفضل بتسجيل الدخول أما إذا كنت زائرا فتفضل بالتسجيل لتستفيد من كامل خدمات المنتدى

معهد الشرح العربي

معهد متخصص بشرح كل مايتعلق بالبرامج والمنتديات والأكواد والهاكات والألعاب من الألف إلى الياء وتطوير منتديات أحلى منتدى .
 
الرئيسيةالبوابةاليوميةس .و .جبحـثالأعضاءالمجموعاتالتسجيلدخول
لقد تم الإنتهاء من " دورة التعامل مع جوجل وطرق الإشهار السليمة " تجدون جميع روابط دروس الدورة داخل إعلان عام بأقسام المنتدى
بحـث
 
 

نتائج البحث
 
Rechercher بحث متقدم
اعلان

شاطر | 
 

 ﻛﻢ ﻋﺪﺩ ﺍﻟﻤﺮﺍﺕ ﺍﻟﺘﻲ ﺳﻴﺼﻞ ﻓﻴﻬﺎ ﺑﺮﻧﺎﻣﺞ Googlebot‏ ﺇﻟﻰ ﺻﻔﺤﺎﺕ ﺍﻟﻮﻳﺐ ﺍﻟﺨﺎﺻﺔ ﺑﻲ؟ وماهو ملف robots.txt

استعرض الموضوع السابق استعرض الموضوع التالي اذهب الى الأسفل 
كاتب الموضوعرسالة
ابن المغرب
الزعيم
الزعيم
avatar

ذكر عدد المساهمات : 209
نقاط : 573
السٌّمعَة : 4
تاريخ التسجيل : 30/06/2011
العمر : 27
الموقع : المدير العام
المزاج : رايق

مُساهمةموضوع: ﻛﻢ ﻋﺪﺩ ﺍﻟﻤﺮﺍﺕ ﺍﻟﺘﻲ ﺳﻴﺼﻞ ﻓﻴﻬﺎ ﺑﺮﻧﺎﻣﺞ Googlebot‏ ﺇﻟﻰ ﺻﻔﺤﺎﺕ ﺍﻟﻮﻳﺐ ﺍﻟﺨﺎﺻﺔ ﺑﻲ؟ وماهو ملف robots.txt   2011-10-20, 07:21

ﺑﺎﻟﻨﺴﺒﺔ ﻟﻤﻌﻈﻢ ﺍﻟﻤﻮﺍﻗﻊ؛ ﻳﺠﺐ ﺃﻻَّ
ﻳﺼﻞ ﺑﺮﻧﺎﻣﺞGooglebotﺇﻟﻰ ﺍﻟﻤﻮﻗﻊ
ﺃﻛﺜﺮ ﻣﻦ ﻣﺮﺓ ﻭﺍﺣﺪﺓ ﻛﻞ ﻋﺪﺓ ﺛﻮﺍﻧﻲ
ﻓﻲ ﺍﻟﻤﺘﻮﺳﻂ.ﻭﻣﻊ ﺫﻟﻚ-ﺑﺴﺒﺐ
ﺃﻋﻄﺎﻝ ﺍﻟﺸﺒﻜﺔ-ﻣﻦ ﺍﻟﻤﻤﻜﻦ ﺃﻥ
ﻳﻈﻬﺮ ﺍﻟﻤﻌﺪﻝ ﺃﻋﻠﻰ ﻗﻠﻴﻼً ﻓﻲ ﻓﺘﺮﺍﺕ
ﻗﺼﻴﺮﺓ.
.2ﻛﻴﻒ ﺃﻃﺎﻟﺐ ﺑﻌﺪﻡ ﻗﻴﺎﻡGoogle
ﺑﺎﻟﺰﺣﻒ ﺇﻟﻰ ﻛﻞ ﻣﻮﻗﻌﻲ ﺃﻭ ﺃﺟﺰﺍﺀ
ﻣﻦ؟
ﺍﻟﻤﻠﻒrobots.txtﻫﻮ ﻣﻠﻒ ﻗﻴﺎﺳﻲ
ﻳﻤﻜﻨﻪ ﺇﺧﺒﺎﺭ ﺑﺮﻧﺎﻣﺞGooglebotﺑﻌﺪﻡ
ﺗﻨﺰﻳﻞ ﺑﻌﺾ ﺃﻭ ﻛﻞ ﺍﻟﻤﻌﻠﻮﻣﺎﺕ ﻣﻦ
ﻣﺮﻛﺰ ﺧﺪﻣﺔ"ﺳﻴﺮﻓﺮ"ﺍﻟﻮﻳﺐ ﺍﻟﺨﺎﺹ
ﺑﻚ.ﻭﺻﻴﻐﺔ ﺍﻟﻤﻠﻒrobots.txtﻣﺤﺪﺩﺓ
ﻓﻲﺑﺮﻭﺗﻮﻛﻮﻝ ﺍﺳﺘﺒﻌﺎﺩ ﺍﻟﺮﻭﺑﻮﺕ
)ﻭﺻﻼﺕ ﻟﻤﻮﻗﻊ ﺇﻧﺠﻠﻴﺰﻱ.(ﻭﻟﻤﻌﺮﻓﺔ
ﺍﻟﺘﻌﻠﻴﻤﺎﺕ ﺍﻟﻤﻔﺼﻠﺔ ﻋﻦ ﻛﻴﻔﻴﺔ ﻣﻨﻊ
ﺑﺮﻧﺎﻣﺞGooglebotﻣﻦ ﺍﻟﺰﺣﻒ ﺇﻟﻰ
ﻛﻞ ﻣﻮﻗﻌﻚ ﺃﻭ ﺟﺰﺀ ﻣﻨﻪ،ﺍﻟﺮﺟﺎﺀ
ﻣﺮﺍﺟﻌﺔﺻﻔﺤﺔ ﺃﻭﺍﻣﺮ ﺍﻹﺯﺍﻟﺔﺍﻟﺨﺎﺻﺔ
ﺑﻨﺎ.ﻭﺗﺬﻛَّﺮ ﺃﻥ ﺍﻟﺘﻐﻴﻴﺮﺍﺕ ﺍﻟﺘﻲ ﺗﻘﻮﻡ ﺑﻬﺎ
ﻓﻲ ﻣﻠﻒrobots.txtﺍﻟﺨﺎﺹ ﺑﻤﺮﻛﺰ
ﺍﻟﺨﺪﻣﺔ ﺍﻟﺨﺎﺹ ﺑﻚ ﻟﻦ ﻳﺘﻢ ﻧﻘﻠﻬﺎ ﻋﻠﻰ
ﺍﻟﻔﻮﺭ ﺇﻟﻰ؛Googleﻭﺇﻧﻤﺎ ﺳﻴﺘﻢ
ﺍﻛﺘﺸﺎﻓﻬﺎ ﻭﻧﻘﻠﻬﺎ ﻋﻨﺪ ﻗﻴﺎﻡ ﺑﺮﻧﺎﻣﺞ
Googlebotﺑﺎﻟﺰﺣﻒ ﺇﻟﻰ ﻣﻮﻗﻌﻚ ﻣﺮﺓ
ﺗﺎﻟﻴﺔ.
.3ﻳﻘﻮﻡ ﺑﺮﻧﺎﻣﺞGooglebotﺑﺎﻟﺰﺣﻒ
ﺇﻟﻰ ﻣﻮﻗﻌﻲ ﺑﺴﺮﻋﺔ ﻣﻔﺮﻃﺔ.ﻓﻤﺎﺫﺍ
ﺃﻓﻌﻞ؟
ﺍﻟﺮﺟﺎﺀﺍﻻﺗﺼﺎﻝ ﺑﻨﺎ)ﻭﺻﻼﺕ ﻹﺻﺪﺍﺭ
ﺇﻧﺠﻠﻴﺰﻱ(ﻭﺇﺭﺳﺎﻝ ﻋﻨﻮﺍﻥURL
ﻟﻤﻮﻗﻌﻚ ﻭﻭﺻﻒ ﺗﻔﺼﻴﻠﻲ ﻟﻠﻤﺸﻜﻠﺔ.
ﻭﺍﻟﺮﺟﺎﺀ ﺃﻳﻀًﺎ ﺗﻀﻤﻴﻦ ﺟﺰﺀ ﻣﻦ ﺳﺠﻞ
ﺍﻟﻮﻳﺐ ﺍﻟﺬﻱ ﻳﻮﺿﺢ ﻣﺮﺍﺕ ﻭﺻﻮﻝ
Googleﺣﺘﻰ ﻧﺘﻤﻜﻦ ﻣﻦ ﺍﻛﺘﺸﺎﻑ
ﺍﻟﻤﺸﻜﻠﺔ ﺑﺴﺮﻋﺔ.
.4ﻟﻤﺎﺫﺍ ﻳﻄﻠﺐ ﺑﺮﻧﺎﻣﺞGooglebot
ﻣﻠﻔًﺎ ﻳُﺴﻤﻰrobots.txtﻭﻫﻮ ﻏﻴﺮ
ﻣﻮﺟﻮﺩ ﻋﻠﻰ ﻣﺮﻛﺰ ﺍﻟﺨﺪﻣﺔ"ﺳﻴﺮﻓﺮ"
ﺍﻟﺨﺎﺹ ﺑﻲ؟
ﺍﻟﻤﻠﻒrobots.txtﻫﻮ ﻣﻠﻒ ﻗﻴﺎﺳﻲ
ﻳﻤﻜﻨﻪ ﺇﺧﺒﺎﺭ ﺑﺮﻧﺎﻣﺞGooglebotﺑﻌﺪﻡ
ﺗﻨﺰﻳﻞ ﺑﻌﺾ ﺃﻭ ﻛﻞ ﺍﻟﻤﻌﻠﻮﻣﺎﺕ ﻣﻦ
ﻣﺮﻛﺰ ﺧﺪﻣﺔ"ﺳﻴﺮﻓﺮ"ﺍﻟﻮﻳﺐ ﺍﻟﺨﺎﺹ
ﺑﻚ.ﻭﻟﻤﺰﻳﺪ ﻣﻦ ﺍﻟﻤﻌﻠﻮﻣﺎﺕ ﻋﻦ ﻛﻴﻔﻴﺔ
ﺇﻧﺸﺎﺀ ﻣﻠﻒ؛robots.txtﺍﻧﻈﺮ
ﺑﺮﻭﺗﻮﻛﻮﻝ ﺍﺳﺘﺒﻌﺎﺩ ﺍﻟﺮﻭﺑﻮﺕ)ﻭﺻﻼﺕ
ﻟﻤﻮﻗﻊ ﺇﻧﺠﻠﻴﺰﻱ.(ﺇﺫﺍ ﻛﻨﺖ ﺗﺮﻳﺪ ﻓﻘﻂ
ﻣﻨﻊ ﺭﺳﺎﺋﻞ ﺃﺧﻄﺎﺀ"ﺍﻟﻤﻠﻒ ﻏﻴﺮ
ﻣﻮﺟﻮﺩ"ﻓﻲ ﺳﺠﻞ ﻣﺮﻛﺰ ﺧﺪﻣﺔ ﺍﻟﻮﻳﺐ
ﺍﻟﺨﺎﺹ ﺑﻚ،ﻳﻤﻜﻨﻚ ﺇﻧﺸﺎﺀ ﻣﻠﻒ ﻓﺎﺭﻍ
ﻳﺴﻤﻰ.robots.txt
.5ﻟﻤﺎﺫﺍ ﻳﺤﺎﻭﻝ ﺑﺮﻧﺎﻣﺞGooglebot
ﺗﻨﺰﻳﻞ ﻭﺻﻼﺕ ﻏﻴﺮ ﺻﺤﻴﺤﺔ ﻣﻦ ﻣﺮﻛﺰ
ﺍﻟﺨﺪﻣﺔ"ﺳﻴﺮﻓﺮ"ﺍﻟﺨﺎﺹ ﺑﻲ؟ ﺃﻭ ﻣﻦ
ﻣﺮﻛﺰ ﺧﺪﻣﺔ)ﺳﻴﺮﻓﺮ(ﻏﻴﺮ ﻣﻮﺟﻮﺩ؟
ﻣﻦ ﺍﻟﻤﻔﺘﺮﺽ ﺃﻥ ﺍﻟﻜﺜﻴﺮ ﻣﻦ ﺍﻟﻮﺻﻼﺕ
ﻋﻠﻰ ﺍﻟﻮﻳﺐ ﺳﻴﺘﻢ ﻛﺴﺮﻫﺎ ﺃﻭ ﺇﻫﻤﺎﻟﻬﺎ
ﻓﻲ ﺃﻱ ﻭﻗﺖ ﻣﻌﻴﻦ.ﻭﻋﻨﺪﻣﺎ ﻳﻨﺸﺮ
ﺷﺨﺺ ﻣﺎ ﻭﺻﻠﺔ ﻏﻴﺮ ﺻﺤﻴﺤﺔ
ﻟﻤﻮﻗﻌﻚ)ﺭﺑﻤﺎ ﺑﺴﺒﺐ ﺧﻄﺄ ﻃﺒﺎﻋﻲ ﺃﻭ
ﺇﻣﻼﺋﻲ(ﺃﻭ ﻳﻔﺸﻞ ﻓﻲ ﺗﺤﺪﻳﺚ ﻭﺻﻼﺕ
ﻟﻴﻌﻜﺲ ﺍﻟﺘﻐﻴﻴﺮﺍﺕ ﻓﻲ ﻣﺮﻛﺰ ﺍﻟﺨﺪﻣﺔ
ﺍﻟﺨﺎﺹ ﺑﻚ؛ ﺳﻴﺤﺎﻭﻝ ﺑﺮﻧﺎﻣﺞ
Googlebotﺗﻨﺰﻳﻞ ﻭﺻﻠﺔ ﻏﻴﺮ ﺻﺤﻴﺤﺔ
ﻣﻦ ﻣﻮﻗﻌﻚ.ﻭﻫﺬﺍ ﺃﻳﻀًﺎ ﻳﻔﺴﺮ ﺳﺒﺐ
ﻭﺟﻮﺩ ﻃﻠﺒﺎﺕ ﺗﻮﺻُّﻞ ﻓﻲ ﺟﻬﺎﺯ ﻟﻴﺲ
ﺃﺻﻼً ﻣﺮﻛﺰ ﺧﺪﻣﺔ ﻭﻳﺐ.
.6ﻟﻤﺎﺫﺍ ﻳﻘﻮﻡ ﺑﺮﻧﺎﻣﺞGooglebot
ﺑﺘﻨﺰﻳﻞ ﻣﻌﻠﻮﻣﺎﺕ ﻣﻦ ﻣﺮﻛﺰ ﺧﺪﻣﺔ
)ﺳﻴﺮﻓﺮ(ﺍﻟﻮﻳﺐ"ﺍﻟﺴﺮﻱ"ﺍﻟﺨﺎﺹ ﺑﻨﺎ؟
ﺇﻧﻪ ﻣﻦ ﺍﻟﻤﺴﺘﺤﻴﻞ ﺗﻘﺮﻳﺒًﺎ ﺃﻥ ﺗﺤﺘﻔﻆ
ﺑﺴﺮﻳﺔ ﻣﺮﻛﺰ ﺧﺪﻣﺔ)ﺳﻴﺮﻓﺮ(ﻭﻳﺐ ﺑﻌﺪﻡ
ﻧﺸﺮ ﺃﻱ ﻭﺻﻼﺕ ﻟﻪ.ﻓﺒﻤﺠﺮﺩ ﺃﻥ ﻳﺘﺒﻊ
ﺷﺨﺺ ﻣﺎ ﻭﺻﻠﺔ ﻣﻦ ﻣﺮﻛﺰ ﺍﻟﺨﺪﻣﺔ
"ﺍﻟﺴﺮﻱ"ﺍﻟﺨﺎﺹ ﺑﻚ ﺇﻟﻰ ﻣﺮﻛﺰ ﺧﺪﻣﺔ
ﻭﻳﺐ ﺁﺧﺮ،ﻗﺪ ﻳﻈﻬﺮ ﻋﻨﻮﺍﻥURL
"ﺍﻟﺴﺮﻱ"ﺍﻟﺨﺎﺹ ﺑﻚ ﻓﻲ ﻋﻼﻣﺔ ﺍﻹﺣﺎﻟﺔ
ﻭﻳﺘﻢ ﺗﺨﺰﻳﻨﻪ ﻭﻧﺸﺮﻩ ﺑﻮﺍﺳﻄﺔ ﻣﺮﻛﺰ
ﺧﺪﻣﺔ ﺍﻟﻮﻳﺐ ﺍﻵﺧﺮ ﻓﻲ ﺳﺠﻞ ﺍﻹﺣﺎﻟﺔ
ﺍﻟﺨﺎﺹ ﺑﻬﺬﺍ ﺍﻟﻤﺮﻛﺰ.ﻭﻟﺬﻟﻚ؛ ﻓﺈﺫﺍ ﻛﺎﻥ
ﻫﻨﺎﻙ ﻭﺻﻠﺔ ﻟﻤﺮﻛﺰ ﺧﺪﻣﺔ ﺍﻟﻮﻳﺐ
"ﺍﻟﺴﺮﻱ"ﺍﻟﺨﺎﺹ ﺑﻚ ﺃﻭ ﻟﺼﻔﺤﺔ ﻋﻠﻰ
ﺍﻟﻮﻳﺐ ﻓﻲ ﺃﻱ ﻣﻜﺎﻥ؛ ﻓﻤﻦ ﺍﻟﻤﺤﺘﻤﻞ
ﺃﻥ ﻳﻌﺜﺮ ﻋﻠﻴﻬﺎ ﺑﺮﻧﺎﻣﺞGooglebot
ﻭﻏﻴﺮﻩ ﻣﻦ ﺑﺮﺍﻣﺞ ﺯﺣﻒ ﺍﻟﻮﻳﺐ ﺍﻷﺧﺮﻯ.
.7ﻟﻤﺎﺫﺍ ﻻ ﻳﺘﺒﻊ ﺑﺮﻧﺎﻣﺞGooglebot
ﻣﻠﻒrobots.txtﺍﻟﺨﺎﺹ ﺑﻲ؟
ﻟﺤﻔﻆ ﺳﻌﺔ ﺍﻟﻨﻄﺎﻕ؛ ﻳﻘﻮﻡ ﺑﺮﻧﺎﻣﺞ
Googlebotﺑﺘﻨﺰﻳﻞ ﻣﻠﻒrobots.txt
ﻓﻘﻂ ﻣﺮﺓ ﻭﺍﺣﺪﺓ ﻛﻞ ﻳﻮﻡ ﺃﻭ ﻋﻨﺪﻣﺎ
ﻧﻘﻮﻡ ﺑﺠﻠﺐ ﺻﻔﺤﺎﺕ ﻋﺪﻳﺪﺓ ﻣﻦ ﻣﺮﻛﺰ
ﺍﻟﺨﺪﻣﺔ.ﻭﻟﺬﺍ،ﻗﺪ ﻳﺄﺧﺬ ﺑﺮﻧﺎﻣﺞ
Googlebotﺑﺮُﻫﺔ ﻣﻦ ﺍﻟﻮﻗﺖ ﻟﻤﻌﺮﻓﺔ
ﺍﻟﺘﻐﻴﻴﺮﺍﺕ ﺍﻟﺤﺎﺩﺛﺔ ﻓﻲ ﻣﻠﻒ
robots.txtﺍﻟﺨﺎﺹ ﺑﻚ.ﻭﺃﻳﻀًﺎ؛ ﻳﺘﻢ
ﺗﻮﺯﻳﻊ ﺑﺮﻧﺎﻣﺞGooglebotﻋﻠﻰ ﺃﺟﻬﺰﺓ
ﻣﺘﻌﺪﺩﺓ.ﻳﺤﺘﻔﻆ ﻛﻞ ﻣﻨﻬﺎ ﺑﺴﺠﻠﻪ
ﺍﻟﺨﺎﺹ ﺑﻤﻠﻒrobots.txtﺍﻟﺨﺎﺹ ﺑﻚ.
ﻧﺤﻦ ﻧﻘﺘﺮﺡ ﺩﺍﺋﻤًﺎ ﺍﻟﺘﺤﻘﻖ ﻣﻦ ﺻﺤﺔ
ﺍﻟﺘﺮﺍﻛﻴﺐ ﻓﻲ ﻣﻠﻔﺎﺗﻚ ﻃﺒﻘًﺎ ﻟﻠﻤﻌﻴﺎﺭ
ﺍﻟﻤﻮﺟﻮﺩ ﻓﻲhttp://
[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]
exclusion.html#robotstxt)ﻭﺻﻼﺕ
ﻟﻤﻮﻗﻊ ﺇﻧﺠﻠﻴﺰﻱ.(ﻭﺃﺣﺪ ﺍﻟﻤﺼﺎﺩﺭ
ﺍﻟﺸﺎﺋﻌﺔ ﻟﻠﻤﺸﺎﻛﻞ ﻫﻮ ﺃﻥ ﻣﻠﻒ
robots.txtﻟﻢ ﻳُﻮﺿﻊ ﻓﻲ ﺍﻟﺪﻟﻴﻞ
ﺍﻷﻋﻠﻰ ﻟﻤﺮﻛﺰ ﺍﻟﺨﺪﻣﺔ)ﻣﺜﻼً؛
،([ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]
ﻷﻥ ﻭﺿﻊ ﺍﻟﻤﻠﻒ ﻓﻲ ﺩﻟﻴﻞ ﻓﺮﻋﻲ ﻟﻦ
ﻳﻜﻮﻥ ﻟﻪ ﺃﻱ ﺗﺄﺛﻴﺮ.
ﻛﻤﺎ ﺃﻥ ﻫﻨﺎﻙ ﺍﺧﺘﻼﻓًﺎ ﺑﺴﻴﻄًﺎ ﺑﻴﻦ
ﺍﻟﻄﺮﻳﻘﺔ ﺍﻟﺘﻲ ﻳﻌﺎﻟﺞ ﺑﻬﺎ ﺑﺮﻧﺎﻣﺞ
Googlebotﻣﻠﻒrobots.txt
ﻭﺍﻟﻄﺮﻳﻘﺔ ﺍﻟﺘﻲ ﻳﻘﻮﻝ ﻣﻌﻴﺎﺭ
robots.txtﺃﻧﻨﺎ ﻳﻨﺒﻐﻲ ﺃﻥ ﻧﺴﺘﺨﺪﻣﻬﺎ
ﻓﻲ ﻣﻌﺎﻟﺠﺔ ﻫﺬﺍ ﺍﻟﻤﻠﻒ)ﻣﻊ ﻣﺮﺍﻋﺎﺓ
ﺍﻟﻔﺮﻕ ﺑﻴﻦ"ﻳﻨﺒﻐﻲ"ﻭ"ﻳﺠﺐ.("
ﻓﺎﻟﻤﻌﻴﺎﺭ ﻳﻘﻮﻝ ﺇﻧﻨﺎ ﻳﻨﺒﻐﻲ ﺃﻥ ﻧﺘﺒﻊ ﺃﻭﻝ
ﻗﺎﻋﺪﺓ ﺗﻘﺒﻞ ﺍﻟﺘﻄﺒﻴﻖ،ﺑﻴﻨﻤﺎ ﻳﺘﺒﻊ ﺑﺮﻧﺎﻣﺞ
Googlebotﺃﻭﺳﻊ ﺍﻟﻘﻮﺍﻋﺪ ﺍﻧﻄﺒﺎﻗًﺎ)ﺃﻱ
ﺍﻷﻛﺜﺮ ﺗﺨﺼﺼًﺎ.(ﻭﻫﺬﺍ ﺍﻹﺟﺮﺍﺀ ﺍﻟﺒﺪﻳﻬﻲ
ﻳﺘﻔﻖ ﻣﻊ ﻣﺎ ﻳﻔﻌﻠﻪ ﺍﻟﻨﺎﺱ ﻓﻲ ﺍﻟﻮﺍﻗﻊ
ﻭﻣﻊ ﻣﺎ ﻳﺘﻮﻗﻌﻮﻥ ﺃﻥ ﻧﻔﻌﻠﻪ.ﻋﻠﻰ ﺳﺒﻴﻞ
ﺍﻟﻤﺜﺎﻝ،ﻓﻜِّﺮ ﻓﻲ ﻣﻠﻒrobots.txt
ﺍﻟﺘﺎﻟﻲ:
User-Agent:*
Allow:/
Disallow:/cgi-
bin
ﺇﻥ ﻣﻦ ﺍﻟﻮﺍﺿﺢ ﺃﻥ ﻗﺼﺪ ﻣﺸﺮﻑ
ﺍﻟﻤﻮﻗﻊ ﻫﻨﺎ ﻫﻮ ﺍﻟﺴﻤﺎﺡ ﻟﺒﺮﺍﻣﺞ
ﺍﻟﺮﻭﺑﻮﺕ ﺑﺎﻟﺰﺣﻒ ﺇﻟﻰ ﻛﻞ ﺷﻲﺀ ﻣﺎﻋﺪﺍ
ﺩﻟﻴﻞ/.cgi-binﻭﺑﺎﻟﺘﺎﻟﻲ،ﻫﺬﺍ ﻫﻮ ﻣﺎ
ﻧﻔﻌﻠﻪ.
ﻟﻤﺰﻳﺪ ﻣﻦ ﺍﻟﻤﻌﻠﻮﻣﺎﺕ،ﺍﻟﺮﺟﺎﺀ ﺍﻻﻃﻼﻉ
ﻋﻠﻰﺍﻷﺳﺌﻠﺔ ﺍﻟﺸﺎﺋﻌﺔ ﺣﻮﻝ ﺑﺮﺍﻣﺞ
ﺍﻟﺮﻭﺑﻮﺕ)ﻭﺻﻼﺕ ﻟﻤﻮﻗﻊ ﺇﻧﺠﻠﻴﺰﻱ.(
ﻭﺇﺫﺍ ﻇﻠﺖ ﺍﻟﻤﺸﻜﻠﺔ ﻗﺎﺋﻤﺔ،ﻓﺎﻟﺮﺟﺎﺀ
ﺇﻋﻼﻣﻨﺎ ﺑﺬﻟﻚ)ﻭﺻﻼﺕ ﻹﺻﺪﺍﺭ ﺇﻧﺠﻠﻴﺰﻱ.(
.8ﻟﻤﺎﺫﺍ ﺗﻮﺟﺪ ﻃﻠﺒﺎﺕ ﺗﻮﺻُّﻞ ﻣﻦ ﺃﺟﻬﺰﺓ
ﻋﺪﻳﺪﺓ ﻋﻠﻰ ﻣﻮﻗﻊ،Google.comﻛﻠﻬﺎ
ﺑﻮﺍﺳﻄﺔ ﺑﺮﻧﺎﻣﺞuser-agent
؟Googlebot
ﻟﻘﺪ ﺗﻢ ﺗﺼﻤﻴﻢ ﺑﺮﻧﺎﻣﺞGooglebot
ﺑﺤﻴﺚ ﻳﺘﻢ ﺗﻮﺯﻳﻌﻪ ﻋﻠﻰ ﺃﺟﻬﺰﺓ ﻣﺨﺘﻠﻔﺔ
ﻟﺘﺤﺴﻴﻦ ﺍﻷﺩﺍﺀ ﻭﺍﻟﺤﺠﻢ ﻣﻊ ﻧﻤﻮ ﺍﻟﻮﻳﺐ.
ﻭﻛﺬﻟﻚ–ﻭﻟﻠﺘﻘﻠﻴﻞ ﻣﻦ ﺍﺳﺘﺨﺪﺍﻡ ﺳﻌﺔ
ﺍﻟﻨﻄﺎﻕ-ﻧﻘﻮﻡ ﺑﺘﺸﻐﻴﻞ ﺑﺮﺍﻣﺞ ﺯﺍﺣﻒ
ﻋﺪﻳﺪﺓ ﻋﻠﻰ ﺃﺟﻬﺰﺓ ﺗﻢ ﻭﺿﻌﻬﺎ ﺑﺎﻟﻘﺮﺏ
ﻣﻦ ﺍﻟﻤﻮﺍﻗﻊ ﺍﻟﺘﻲ ﺗﻘﻮﻡ ﺑﻔﻬﺮﺳﺘﻬﺎ ﻓﻲ
ﺍﻟﺸﺒﻜﺔ.
.9ﻫﻞ ﻳﻤﻜﻦ ﺇﺧﺒﺎﺭﻱ ﺑﻌﻨﺎﻭﻳﻦ
ﺑﺮﻭﺗﻮﻛﻮﻝ ﺍﻹﻧﺘﺮﻧﺖIPﺍﻟﺘﻲ ﻳﺒﺪﺃ ﻣﻨﻬﺎ
ﺑﺮﻧﺎﻣﺞGooglebotﺍﻟﺰﺣﻒ ﺣﺘﻰ
ﻳﻤﻜﻨﻨﻲ ﺗﻨﻘﻴﺔ ﺳﺠﻼﺗﻲ؟
ﺗﺘﻐﻴﺮ ﻋﻨﺎﻭﻳﻦ ﺑﺮﻭﺗﻮﻛﻮﻝ ﺍﻹﻧﺘﺮﻧﺖIP
ﺍﻟﻤﺴﺘﺨﺪﻣﺔ ﺑﻮﺍﺳﻄﺔ ﺑﺮﻧﺎﻣﺞ
Googlebotﻣﻦ ﻭﻗﺖ ﻵﺧﺮ.ﻭﺃﻓﻀﻞ
ﻃﺮﻳﻘﺔ ﻟﺘﺤﺪﻳﺪ ﻋﻤﻠﻴﺎﺕ ﺍﻟﻮﺻﻮﻝ
ﺑﻮﺍﺳﻄﺔ ﺑﺮﻧﺎﻣﺞGooglebotﻫﻲ
ﺍﺳﺘﺨﺪﺍﻡ ﺑﺮﻧﺎﻣﺞuser-agent
.(Googlebot)
.10ﻟﻤﺎﺫﺍ ﻳﻘﻮﻡ ﺑﺮﻧﺎﻣﺞGooglebot
ﺑﺘﻨﺰﻳﻞ ﺍﻟﺼﻔﺤﺔ ﺫﺍﺗﻬﺎ ﻋﻠﻰ ﻣﻮﻗﻌﻲ
ﻋﺪﺓ ﻣﺮﺍﺕ؟
ﺑﺼﻔﺔ ﻋﺎﻣﺔ؛ ﻳﻨﺒﻐﻲ ﺃﻥ ﻳﻘﻮﻡ ﺑﺮﻧﺎﻣﺞ
Googlebotﺑﺘﻨﺰﻳﻞ ﻧﺴﺨﺔ ﻭﺍﺣﺪﺓ ﻓﻘﻂ
ﻣﻦ ﻛﻞ ﻣﻠﻒ ﻣﻦ ﻣﻮﻗﻌﻚ ﺃﺛﻨﺎﺀ ﻋﻤﻠﻴﺔ
ﺯﺣﻒ ﻣﻌﻴﻨﺔ.ﻭﻓﻲ ﻛﺜﻴﺮ ﻣﻦ ﺍﻷﺣﻴﺎﻥ،
ﻳﺘﻮﻗﻒ ﺑﺮﻧﺎﻣﺞ ﺍﻟﺰﺍﺣﻒ ﻭﻳﻌﺎﺩ ﺗﺸﻐﻴﻠﻪ؛
ﻣﻤﺎ ﻗﺪ ﻳﺆﺩﻱ ﺇﻟﻰ ﻗﻴﺎﻣﻪ ﺑﺈﻋﺎﺩﺓ ﺍﻟﺰﺣﻒ
ﺇﻟﻰ ﺻﻔﺤﺎﺕ ﻗﺎﻡ ﺑﺠﻠﺒﻬﺎ ﻣﺆﺧﺮًﺍ.
.11ﻟﻤﺎﺫﺍ ﻻ ﺗﻈﻬﺮ ﺻﻔﺤﺎﺕ ﻣﻮﻗﻌﻲ
ﺍﻟﺘﻲ ﻗﺎﻡ ﺑﺮﻧﺎﻣﺞGooglebotﺑﺎﻟﺰﺣﻒ
ﺇﻟﻴﻬﺎ ﻓﻲ ﻓﻬﺮﺳﻜﻢ؟
ﻻ ﺗﻘﻠﻖ ﺇﺫﺍ ﻟﻢ ﺗﺘﻤﻜﻦ ﻣﻦ ﺍﻟﻌﺜﻮﺭ
ﺍﻟﻔﻮﺭﻱ ﻋﻠﻰ ﻣﻠﻔﺎﺕ ﻗﺎﻡ ﺑﺮﻧﺎﻣﺞ
Googlebotﺑﺎﻟﺰﺣﻒ ﺇﻟﻴﻬﺎ ﻓﻲ ﻣﺤﺮﻙ
ﺑﺤﺚ.Googleﺇﺫ ﻳﺘﻢ ﺇﺩﺧﺎﻝ ﺍﻟﻤﻠﻔﺎﺕ
ﺇﻟﻰ ﻓﻬﺮﺳﻨﺎ ﺳﺮﻳﻌًﺎ ﺑﻌﺪ ﺃﻥ ﻳﺘﻢ ﺍﻟﺰﺣﻒ
ﺇﻟﻴﻬﺎ.ﻭﻣﻦ ﺣﻴﻦ ﻵﺧﺮ؛ ﻟﻦ ﻳﺘﻢ ﺗﻀﻤﻴﻦ
ﺍﻟﻤﻠﻔﺎﺕ ﺍﻟﺘﻲ ﺟﻠﺒﻬﺎ ﺑﺮﻧﺎﻣﺞ
Googlebotﻷﺳﺒﺎﺏ ﻋﺪﻳﺪﺓ)ﻋﻠﻰ ﺳﺒﻴﻞ
ﺍﻟﻤﺜﺎﻝ:ﻷﻧﻬﺎ ﺗﺒﺪﻭ ﻛﻨﺴﺦ ﻃﺒﻖ ﺍﻷﺻﻞ
ﻟﺼﻔﺤﺎﺕ ﺃﺧﺮﻯ ﻋﻠﻰ ﺍﻟﻮﻳﺐ.(
.12ﻣﺎ ﻫﻲ ﺃﻧﻮﺍﻉ ﺍﻟﻮﺻﻼﺕ ﺍﻟﺘﻲ ﻳﺘﺒﻌﻬﺎ
ﺑﺮﻧﺎﻣﺞ?Googlebot
ﻳﺘﺒﻊ ﺑﺮﻧﺎﻣﺞGooglebotﻭﺻﻼﺕHREF
ﻭﻭﺻﻼﺕ.SRC
.13ﻛﻴﻒ ﺃﻣﻨﻊ ﺑﺮﻧﺎﻣﺞGooglebotﻣﻦ
ﺗﺘﺒﻊ ﺍﻟﻮﺻﻼﺕ ﺍﻟﻤﻮﺟﻮﺩﺓ ﻋﻠﻰ
ﺻﻔﺤﺎﺗﻲ؟
ﻟﻜﻲ ﺗﻤﻨﻊ ﺑﺮﻧﺎﻣﺞGooglebotﻣﻦ ﺗﺘﺒﻊ
ﺍﻟﻮﺻﻼﺕ ﺍﻟﻤﻮﺟﻮﺩﺓ ﻋﻠﻰ ﺻﻔﺤﺎﺗﻚ
ﻟﺼﻔﺤﺎﺕ ﺃﻭ ﻣﻠﻔﺎﺕ ﺃﺧﺮﻯ؛ ﻗﻢ ﺑﻮﺿﻊ
ﻋﻼﻣﺔmeta tagﺍﻟﺘﺎﻟﻴﺔ ﻋﻠﻰ ﺭﺃﺱ
ﻣﻠﻒHTMLﺍﻟﺨﺎﺹ ﺑﻚ.
>META NAME="Googlebot"
<"CONTENT="nofollow
ﻭﻟﻤﻌﺮﻓﺔ ﺍﻟﻤﺰﻳﺪ ﻋﻦ ﻋﻼﻣﺎﺕmeta
،tagsﺍﻟﺮﺟﺎﺀ ﻣﺮﺍﺟﻌﺔhttp://
[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]
exclusion.html#meta)ﻭﺻﻼﺕ
ﻟﻤﻮﻗﻊ ﺇﻧﺠﻠﻴﺰﻱ؛(ﻭﻳﻤﻜﻨﻚ ﺃﻳﻀًﺎ ﻗﺮﺍﺀﺓ
ﻣﺎﻳﻘﻮﻟﻪ ﻣﻌﻴﺎﺭHTMLﻋﻦ ﻫﺬﻩ
ﺍﻟﻌﻼﻣﺎﺕ)ﻭﺻﻼﺕ ﻟﻤﻮﻗﻊ ﺇﻧﺠﻠﻴﺰﻱ.(
ﻭﺗﺬﻛِّﺮ ﺃﻥ ﺍﻟﺘﻐﻴﻴﺮﺍﺕ ﺍﻟﺘﻲ ﺗﺤﺪﺙ ﻓﻲ
ﻣﻮﻗﻌﻚ ﻟﻦ ﻳﺘﻢ ﻧﻘﻠﻬﺎ ﻋﻠﻰ ﺍﻟﻔﻮﺭ ﺇﻟﻰ
؛Googleﻭﺇﻧﻤﺎ ﺳﻴﺘﻢ ﺍﻛﺘﺸﺎﻓﻬﺎ ﻭﻧﻘﻠﻬﺎ
ﻋﻨﺪ ﻗﻴﺎﻡ ﺑﺮﻧﺎﻣﺞGooglebotﺑﺎﻟﺰﺣﻒ
ﺇﻟﻰ ﻣﻮﻗﻌﻚ ﻣﺮﺓ ﺗﺎﻟﻴﺔ.
.14ﻛﻴﻒ ﺍُﺧﺒﺮ ﺑﺮﻧﺎﻣﺞGooglebotﺑﺄﻻ
ﻳﻘﻮﻡ ﺑﺎﻟﺰﺣﻒ ﺇﻟﻰ ﻭﺻﻠﺔ ﺻﺎﺩﺭﺓ ﻓﺮﺩﻳﺔ
ﻋﻠﻰ ﺻﻔﺤﺔ ﻣﺎ؟
ﻳﻤﻜﻦ ﺃﻥ ﺗﺴﺘﺒﻌﺪ ﻋﻼﻣﺎﺕMeta tags
ﻛﻞ ﺍﻟﻮﺻﻼﺕ ﺍﻟﺼﺎﺩﺭﺓ ﺍﻟﻤﻮﺟﻮﺩﺓ ﻓﻲ
ﺻﻔﺤﺔ ﻣﺎ،ﻭﻟﻜﻦ ﻳﻤﻜﻨﻚ ﺃﻳﻀًﺎ ﺃﻥ ﺗﺄﻣﺮ
ﺑﺮﻧﺎﻣﺞGooglebotﺑﻌﺪﻡ ﺍﻟﺰﺣﻒ ﺇﻟﻰ
ﺍﻟﻮﺻﻼﺕ ﺍﻟﻔﺮﺩﻳﺔ ﺑﺈﺿﺎﻓﺔ ﺍﻟﺼﻔﺔ
ﺍﻟﻤﻤﻴﺰﺓ"rel="nofollowﺇﻟﻰ ﺍﻟﻮﺻﻠﺔ.
ﻭﻋﻨﺪﻣﺎ ﻳﺮﻯGoogleﺍﻟﺼﻔﺔ ﺍﻟﻤﻤﻴﺰﺓ
"rel="nofollowﻋﻠﻰ ﻭﺻﻼﺕ،ﻓﻠﻦ
ﺗﺤﺼﻞ ﺗﻠﻚ ﺍﻟﻮﺻﻼﺕ ﻋﻠﻰ ﺃﻱ ﺍﺋﺘﻤﺎﻥ
ﻋﻨﺪﻣﺎ ﻧﻘﻮﻡ ﺑﺘﺼﻨﻴﻒ ﻣﻮﺍﻗﻊ ﺍﻟﻮﻳﺐ ﻓﻲ
ﻧﺘﺎﺋﺞ ﺑﺤﺜﻨﺎ.ﻋﻠﻰ ﺳﺒﻴﻞ ﺍﻟﻤﺜﺎﻝ؛
ﺍﻟﻮﺻﻠﺔ:
>a href=http://
[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط] is a
great link!</a<
ﻳﻤﻜﻦ ﺗﺒﺪﻳﻠﻬﺎ ﺑﺎﻟﻮﺻﻠﺔ:
>a href=http://
[ندعوك للتسجيل في المنتدى أو التعريف بنفسك لمعاينة هذا الرابط]
rel="nofollow"> I can't vouch
for this link</a<.
إنتهى الدرس 2
الرجوع الى أعلى الصفحة اذهب الى الأسفل
http://mouni.mam9.com
 
ﻛﻢ ﻋﺪﺩ ﺍﻟﻤﺮﺍﺕ ﺍﻟﺘﻲ ﺳﻴﺼﻞ ﻓﻴﻬﺎ ﺑﺮﻧﺎﻣﺞ Googlebot‏ ﺇﻟﻰ ﺻﻔﺤﺎﺕ ﺍﻟﻮﻳﺐ ﺍﻟﺨﺎﺻﺔ ﺑﻲ؟ وماهو ملف robots.txt
استعرض الموضوع السابق استعرض الموضوع التالي الرجوع الى أعلى الصفحة 
صفحة 1 من اصل 1

صلاحيات هذا المنتدى:لاتستطيع الرد على المواضيع في هذا المنتدى
معهد الشرح العربي :: قسم الدعم الفني :: منتدى تقنيات الإشهار-
انتقل الى: