نظرة سريعة على مجريات يوم سوالف
بعض التغييرات في أماكن وأسلوب الإعلان في سوالف سوفت

 

العودة   سوالف سوفت > قسم تطوير وبرمجة المواقع للمتقدمين > تقنية محركات البحث والـSearch Engine Optimization
المدوّنات البحث مشاركات اليوم اجعل كافة المشاركات مقروءة

رد
 
LinkBack أدوات الموضوع
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#1 (permalink)  
robots.txt كيف تستفيد منه وتجعل العناكب تعشش في موقعك


السلام عليكم

أخواني شد انتباهي تقنية robots.txt المستخدمة في كثير من المواقع الأجنبية
فأحببت ان ألخص لكم ما فهمته ة ما استطعت تحصيلة من مواقع الانترنت الاجنبية ولبحث يوم كامل و اعطيكم الخلاصة على طبق من ذهب...

بسم الله الرحمن الرحيم

أولا الروبوتس هو عبارة عن ملف نصي يوضع في المجلد الرئيسي للموقع www و يوضع فيه أوامر لا يستطيع قرائتها غير عناكب الإنترنت
كانت التقنية قد ظهرت في عام 1994 ميلادي و قد انتشرت مع الزمن حتى اصبحت ذات انتشار واسع...

لن أطيل عليكم

اوامر ملف الريبورتس... مع امثلة...

أذا كنت ترغب بان تزور عناكب البحث موقعك ولكن لاتريدها ان تزور صفحات معينة من موقعك مثل admin او اي صفحات أخرى لا ترغب بأن تظهر للزوار كل ما عليك فعلة هو انشاء ملف و تسميتة بـ robots.txt و ثم قم بفتحة ووضع البرمجية التالية:

User-agent: * = السماح لجميع انواع العناكب بدخول الموقع

كود PHP:
Disallow: /admin/password/  =   عادا هذا الملف
 
Disallow
: /tmp/                      =   وهذا
 
Disallow
: /mypage.html           وهذا ايضاً 

User-agent: * = تكتب اسم عنكبوت معين أو نجمة تعني السماح لجميع عناكب البحث

Disallow: = تعني منع ثم المجلد او الأمتداد أو اسم الملف الممنوع ارشفتة في محركات البحث


طيب لو اردنا ان نسمح لعناكب معينة ان تزور ملف معين دون غيرها
مثل العنكبوتxxxx تابع لشركة بحث ضخمة و تريدة هو فقط ان يطلع على جميع محتوى الموقع و المجلدات .



كود PHP:
User-agent: *
 
Disallow: /admin/passwords
 
User-agentxxxx   =  اسم العنكبوت المستثنى من المنع
 
Disallow
:      =  فارغ يعني عدم منع 


طيب تبغى تطرد جميع العناكب وش تسوي...

حط الكود هذا
كود PHP:
 
User
-agent: *
 
Disallow: / 

والسماحة للعناكب بجميع أنواعها يكون كالتالي



كود PHP:
User-agent: *
 
Disallow

أتمنى انكم إستفدتم ولاتنسونا من دعائكم






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 15-03-2008, 02:45 AM
رد مع اقتباس
MMuz
تاريخ التسجيل: Sep 2006-
#2 (permalink)  

مشكور اخى صراحة على الموضوع ولكن هل يوجد امر فى الريبوتس من خلاله استطيع ان احدد للعناكب زيارة الموقع او صفحة معينة فى الموقع كل ساعة مثلا او نصف ساعة؟؟






شبكة ميوزك غير متواجد حالياً   قديم 15-03-2008, 05:59 AM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#3 (permalink)  
طريقة تحديد وقت معين للروبورتس

نعم أخي الكريم يمكنك و بسهولة تحديد وقت زيارة معين للروبورتس

سأكتب لك مثال واضح جدا

كود PHP:
User-agent: *
Disallow: /downloads/   # ممنوع الملف هذا
Request-rate1/5         #   معدل الطلب للروبورتس وهو صفحة لكل 5 ثواني
Visit-time0600-0845     #وقت زيارة  محدد هنا بتوقيت غرنش وهو واضخ 






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 15-03-2008, 08:46 PM
رد مع اقتباس
MMuz
تاريخ التسجيل: Sep 2006-
#4 (permalink)  

شكرا لك اخى على ردك لكن انا الكود الى سأل عنه هو كود يطلب من جوجل بوت زيارة مثلا صفحة موقعى كل ساعتين مثلا






شبكة ميوزك غير متواجد حالياً   قديم 16-03-2008, 01:11 AM
رد مع اقتباس
عضو فعال جدا
تاريخ التسجيل: Feb 2003-
#5 (permalink)  

طيب اخوي فايز .. (نفس اسمي )

انا ابي جميع العناكب تزور موقعي .. مع منعها من دخول مجلد admin داخل مجلد vb

هل هذا الكود صحيح
كود:
User-agent: *
Disallow: /vb/admin/






fayz متواجد حالياً   قديم 16-03-2008, 11:43 AM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#6 (permalink)  

وعليكم السلام

اقتباس:
كود يطلب من جوجل بوت زيارة مثلا صفحة موقعى كل ساعتين مثلا
قد تستطيع من خلال التعديل على الأمر التالي

اقتباس:
Request-rate: 1/5
لكن لست متأكد

اقتباس:
طيب اخوي فايز .. (نفس اسمي )

انا ابي جميع العناكب تزور موقعي .. مع منعها من دخول مجلد admin داخل مجلد vb

هل هذا الكود صحيح
كود:
User-agent: *Disallow: /vb/admin/


فايز سميي حياك الله

والكود

اقتباس:
User-agent: *
Disallow: /vb/admin/
صحيح...






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 16-03-2008, 06:31 PM
رد مع اقتباس
عضو نشيط
تاريخ التسجيل: Feb 2008-
#7 (permalink)  

مشكور اخى ... وتسلم يدك

هذا سكربت من برمجتى لعمل ملف الربوت بطريقة سهلة


:+: لجمع عناكب محركات البحث :+:






omardealo غير متواجد حالياً   قديم 20-03-2008, 01:40 PM
رد مع اقتباس
عضو فعال
تاريخ التسجيل: Aug 2007-
#8 (permalink)  

لكن لي ملحوظة قد لا تكون مهمة
هو انا هذا الملف لا يعتبر جدار ناري تمنع به محركات البحث من زيارة بعض الصفحات
ولكنه يعتبر كدليل ارشادي للمحركات تدلها فيه علي ما يجب زيارته وما يجب تجاهله

شكرا علي الموضوع اخي الكريم






__________________
سحاب اون لاين غير متواجد حالياً   قديم 20-03-2008, 05:32 PM
رد مع اقتباس
عضو نشيط
تاريخ التسجيل: May 2007-
#9 (permalink)  

شكرا لك اخى الفاضل

ممكن الملف المثالى من وجة نظرك وياليت تضيف لة زيارة عناكب قوقل كل ساعتين لانى اعانى من عدم دخول عناكب قوقل حاليا






__________________
منتديات تواصل العربية
www.tawsl.net/vb
خطوة الالف ميل تبدا بخطوة
tawsl.net@hotmail.com
الهاجس متواجد حالياً   قديم 21-03-2008, 01:52 PM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#10 (permalink)  

افضل و اسرع طريقة لجلب عناكب جوجل هو انك تشترك في جوجل ويب ماسترز


http://www.google.com/webmasters/tools

فهو امثل حل

اما ملف الربيورتس فلا يجلب العناكب بل يوجهها و ينظمها






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 22-03-2008, 04:40 PM
رد مع اقتباس
عضو نشيط
تاريخ التسجيل: Feb 2008-
#11 (permalink)  

مشكور يالغالي






__________________
www.nzzzn.com
يوسف الحبلاني غير متواجد حالياً   قديم 22-03-2008, 11:06 PM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#12 (permalink)  

حياك الله يايوسف






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 23-03-2008, 10:01 PM
رد مع اقتباس
عضو جديد
تاريخ التسجيل: Jan 2008-
#13 (permalink)  
Talking

اخوي انا عندي الموقع

:: موقع الـولــه ::


وحاط المنتدى على السب دومين

forum.al-wlh.net

يعني احط الملف robots.txt

كذا al-wlh.net/robots.txt

سـ / هل يأرشف السب دومين






__________________
موقع ومنتديات الوله :
ServeR00T
ServeR00T غير متواجد حالياً   قديم 25-03-2008, 09:53 PM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#14 (permalink)  

السب دومين هو ملف داخل الدومين نفسة

نعم يقوم بأرشفتة على أنه دومين سفلي

ولكن الاوامرتكتب على انه ملف داخل الدومين نفسة
وبالتوفيق






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 29-03-2008, 02:44 AM
رد مع اقتباس
عضو جديد
تاريخ التسجيل: May 2006-
#15 (permalink)  

حياك الله أخي فائز
هل هناك خطأ لو تم وضع ملف الروبوت داخل مجلد الفي بي نفسه ؟






__________________
مفضلتي الشخصية :
المشروع الدعوي في كاري كوم
العمل من الجميع و الاجر من الله
www.karicom.com/vb
karicom غير متواجد حالياً   قديم 30-03-2008, 05:57 PM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#16 (permalink)  

مكان الملف في المجلد الرئيسي
يمكن وضع الملف في مجلد الفي بي و يحتوي اوامر تخص مجلد الفي بي

ولكن اسهل للعناكب وجودة في المجلد الرئيسي للموقع






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 31-03-2008, 12:52 PM
رد مع اقتباس
عضو نشيط
تاريخ التسجيل: Mar 2008-
#17 (permalink)  

مشكور اخوي وبارك الله فيك


لكن هذا الملف معقدني ماقدرت افهمه






__________________
شبكة عرب كوم

www.rr3r.com

منتديات عرب كوم

www.rr3r.com/vb

أضف موقعك في دليل عرب كوم


http://www.rr3r.com/dalil/add_web.php
عرب كوم غير متواجد حالياً   قديم 31-03-2008, 04:11 PM
رد مع اقتباس
عضو جديد
تاريخ التسجيل: May 2006-
#18 (permalink)  
Thumbs up

اقتباس:
المشاركة الأصلية كتبت بواسطة fayez مشاهدة المشاركة
مكان الملف في المجلد الرئيسي
يمكن وضع الملف في مجلد الفي بي و يحتوي اوامر تخص مجلد الفي بي

ولكن اسهل للعناكب وجودة في المجلد الرئيسي للموقع


تسلم أخي فايز






__________________
مفضلتي الشخصية :
المشروع الدعوي في كاري كوم
العمل من الجميع و الاجر من الله
www.karicom.com/vb
karicom غير متواجد حالياً   قديم 31-03-2008, 11:35 PM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#19 (permalink)  

يسلمك ويعافيك ولو اخي الغالي






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 09-04-2008, 11:06 AM
رد مع اقتباس
عضو نشيط
تاريخ التسجيل: Aug 2007-
#20 (permalink)  

مدري
احس ان الموضوع ليس بهذه البساطة..
طيب
ماذا عن الملفات المقفلة بجدار ناري

؟؟

هذه لا حاجة لمنع العناكب من دخولها لان العناكب لن تتمكن من دخولها اصلا!

أم أن الأمر بخلاف ذلك؟






medfan2003 غير متواجد حالياً   قديم 13-04-2008, 07:49 PM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#21 (permalink)  

الملفات المقفلة لا يمكن للعناكب دخولها

نعم و الموضوع بسيط جداً






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 13-04-2008, 10:28 PM
رد مع اقتباس
عضو جديد
تاريخ التسجيل: Jan 2008-
#22 (permalink)  

السلام عليكم
شكرا أخي على الموضوع
بعك إنشاء ملف robots.txt ورفعه إلى الموقع هل يجب إضافتة إلى google webmaster أم نكتفي برفعه للموقع
وشكرا






drioud غير متواجد حالياً   قديم 14-04-2008, 05:43 PM
رد مع اقتباس
عضو نشيط
تاريخ التسجيل: May 2007-
#23 (permalink)  

مشكور اخى fayez

لدى مشكلة قوقل ويب ماستر اتوع انها بسيطة

هل بالامكان مساعدتك اذا موافق ايميلى فى التوقيع الله يطول فى عمرك






__________________
منتديات تواصل العربية
www.tawsl.net/vb
خطوة الالف ميل تبدا بخطوة
tawsl.net@hotmail.com
الهاجس متواجد حالياً   قديم 15-04-2008, 02:29 AM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#24 (permalink)  

اقتباس:
السلام عليكم
شكرا أخي على الموضوع
بعك إنشاء ملف robots.txt ورفعه إلى الموقع هل يجب إضافتة إلى google webmaster أم نكتفي برفعه للموقع
وشكرا

نعم يجب ان تذهب لجوجل ويب ماستر و تتأكد من أضافتة بوضع رابطة وسهل جداً






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 22-04-2008, 05:22 PM
رد مع اقتباس
عضو سوبر نشيط
تاريخ التسجيل: Sep 2007-
#25 (permalink)  

اقتباس:
لدى مشكلة قوقل ويب ماستر اتوع انها بسيطة

هل بالامكان مساعدتك اذا موافق ايميلى فى التوقيع الله يطول فى عمرك
تأمر أمر أخي الفاضل

أضفني في المسنجر
وحياك الله
لكني هاليومين مققل من النت بسبب الإختبارات

fayez.sa (a.t) gmail .com






__________________
تشرفة بالتعامل مع:
حراج
شبكة حياة
تطوير
سوق
تجارة
fayez غير متواجد حالياً   قديم 22-04-2008, 05:24 PM
رد مع اقتباس
رد


أدوات الموضوع

تعليمات المشاركة
لا تستطيع كتابة مواضيع
لا تستطيع كتابة ردود
لا تستطيع إرفاق ملفات
لا تستطيع تعديل مشاركاتك

كود [IMG] متاحة
كود HTML معطلة
Trackbacks are متاحة
Pingbacks are متاحة
Refbacks are متاحة


المواضيع المتشابهه
الموضوع كاتب الموضوع المنتدى مشاركات آخر مشاركة
دليلك كيف تشهر موقعك على الإنترنت wael2 تطوير الويب 16 15-10-2005 01:11 AM
بلش الشغ شباب wael2 تطوير الويب 2 12-12-2003 10:46 AM
مشكله اخلاقيه (مطلوب رأيكم) LATE قسم تبادل خبرات الاستضافة 30 12-05-2003 04:53 AM
سلسلة كيف ( 4 ) : كيف يكون تصميم موقعك متقناً ؟!! رضا تطوير الويب 19 21-04-2003 12:12 PM


الساعة الآن: 01:39 AM بتوقيت المملكة العربية السعودية