السلام عليكم ورحمة الله وبركاته
القصة باختصار انو كان يا ما كان في قديم الزمان وضعت ملف robots.txt في مجلد الرووت بالموقع ومثل ما الكل يعرف الملف هذا لمحركات البحث ووضعت في هذا الملف تعليمات لمنع محركات البحث من ارشفة بعض مجلدات داخل الموقع ولكن المشكلة أين؟!
لاحظت انو صفحاتي بدأت تنحذف من google شوي شوي حتى بالأخير بقي فقط حوالي 1000 صفحة
أنا انطمزت ودحلت لل google wbmasters tools بعدين رحت robots analysis ولا الاقي العم google يخبرني انو ملف robots.txt مانعو من ارشفة الموقع كلو
أنا هون قلت ال google أكيد بمزح معي رحت اشوف شو النص حق ال robots.txt اللي عندي بالموقع لاقيتو مثل مو هو مافي اي مشكلة ارجع لل google حتى اشوف شو النص اللي ال google شايفو ولا الاقي ال google شايفو على هالشكل:
استغربت أنا جدا انو ليش ال google يشوف محتوى النص على غير المجتوى الحقيقي اللي هو عليه؟!كود:User-agent:* disallow: /
قلت لحالي يا رجل استعيذ من الشيطان واطلب الملف بالمستعرض شوف وش يطلعلك
توقعت يطلعلي المحتوى اللي انا حاطو بالملف اصلا
ولا يطلعلي:
فهمنا google بمزح معي لأنو في بيني وبين google مزح بس الانترنت اكسبلورر ما يمزح معي ابدا غريبة!كود:User-agent:* disallow: /
رحت للملف وقلت اخذفو مالت عليه مافي داعي نستخدم robots.txt من اصلو خلاص بلا يسوي وجع راس
ما كذبت خبر حذفت الملف وكل علمي انو المسألة تمام ولا اروح للمستعرض واطلب الملف ولا يطلعلي
يا رجل أنا حذفت الملف بيدي!!كود:User-agent:* disallow: /
قلت المسألة مسألة casche ولا كلام من هالقبيل حذفت كل الملفات حق الاوفلاين مع الكوكيز مع كل شي ورديت طلبت الملف بالمستعرض ولا يطلعلي نفس الكلام
أخوكم هون صار عقلو بكفو
عطيت لصاحبي الرابط وقلتلو اقلط هنا وشوف شو يطلعلك ولا يقلي انو يطلعلو نفس الحكي!!
يا جماعة قعدت احلفلو يمين اني حاذف الملف ولا يصدق ادخل المجلد وشوف مافي ملف اسمو robots.txt خالص ومع ذلك لما تطلبو تلاقيه بعدو موجود ولا كأني حذفتو
جنيت لدرجة اني قلت في مشكلة بالسيرفر بمسالة حذف الملفات وحطيت ملف test.txt وحذفتو وطلبتو ولا الوضع نظامي 404 not found كل شي تمام الا robots.txt هذا لسا طالع ولا كأني حذفت شي
المشكلة انو الملف هذا يحدد لمحركات البحث وش يأرشف من موقعي وش اللي ما يقرب منه
والنص اللي بيطلعلك لما تضغط على الرابط www.sitamol.net/robots.txt
هذا النص اللي شايفينو يقول لمحركات البحث: "اقلبوا ويهكم وروحوا العبوا بعيد ما أبي حد يأرشف شي من عندي"
يا إخوة اللي عندو أي حل لا تبخلوا علينا ترا أخوكم انجن
وعذرا على الإطالة
والسلام عليكم ورحمة الله وبركاته