السلام عليكم
بالنسبة لتقنية google
فأنا اللي اعرفه انهم احد المشاركين في "مشروع الدليل المفتوح - open directory project"
هذا المشروع عنوانه dmoz.org
وأي واحد يستطيع ان يصبح محرر لديهم ،لذلك فهو مفتوح ولديهم الكثير من المحررين (53,505 محررين)
شئ آخر، هم ولا شك يستخدمون تقنية Web Sipders أو Web Bots ، لا اعرف تفاصيل كثيرة عنها، لكن ابحث في google.com عنها
تحياتي