السلام عليكم و رحمة الله و بركاته
اتقدم لخبراء تطوير المواقع بهذه الاسئلة :
ما حكاية robots.txt ؟
كيف يتم انشائه ؟
اين يوضع بالموقع ؟
ما الفوائد التي يحققها ؟
و ما ضرره على الموقع ؟ ( حيث رأيت ان الملف يتطلب ان احدد قائمة بالـAllow و الـ Disallow )
زادكم الله من علمه ونفعكم به و جزاكم عنا خير الجزاء