السلام عليكم ورحمة الله وبركاته
الأخوة الأعزاء فى موقع سوالف سوفت
عندى ملفات كتير مسحتها من الموقع واريد امنع جوجل ومحركات البحث من ارشفتها باستخدام ملف الروبوت robot.txt
حيث تظهر كأخطاء فى حسابى بجوجل ويب ماستر
مثال على شكل الرابط
http://www.example.com/article-friend-1.html
الملفات عديدة جدا تصل الى 2000 ملف مرقمين بنفس الشكل الى
http://www.example.com/article-friend-2000.html
جربت استخدم هذا الامر لمنع كل الصفحات ولم ينجح
Disallow: /article-friend-*.htmlعلما بانى مركب كود يحول جميع الصفحات الممسوحة والروابط الخاطئة الى الرئيسية
ولم تختفى أخطاء الزحف من جوجل ويب ماستر
شكرا لكم وفى انتظار ردودكم