ماهي محركات البحث وكيف تعمل ؟

تستخدم محركات بحث جوجل المستندة إلى الزحف برامج آلية لاستقصاء صفحات الويب وتصنيفها.

تسمى البرامج المستخدمة من قبل محرك البحث للوصول إلى صفحات الويب الخاصة بك “العناكب” ، “الزواحف” أو “الروبوتات” ومن أشهر هذه المحركات الآن جوجل يليه ياهو وبينج.

هذا النوع من المحركات يعتمد على العنصر البشري حيث يقوم أحد المحررين بإنشاء دليل للمواقع يضم عدد كبير من المواقع بداخلها مصنفة حسب الموضوع الفئة، ويمكن لأصحاب المواقع الأخري طلب الإضافة في هذا الدليل وانتظار الموافقة على الإضافة من محررو الدلائل، الذين يعملون على فحص المواقع بطريقتهم الخاصة قبل إضافتها بالموقع.

تستخدم المحركات البحثية المختلطة مزيجًا من النتائج المستندة إلى نتائج البحث عبر الدلائل ونتائج البحث عبر زواحف الويب من أشهر هذه المحركات MSN Search.

تأخذ محركات بحث Meta النتائج من جميع نتائج محركات البحث الأخرى ، وتدمجها في قائمة واحدة كبيرة عن طريق الوصف أو الميتا ولكن هذه الطريقة تعطي نتائج ضعيفة جدًا.

تم تطوير محركات البحث المتخصصة لتلبية احتياجات مناطق متخصصة أو بداخل مواقع خاصة بها إلا أن هذه المحركات أقل انتشارًا من أنواع المحركات الأخري لأنها ليست عامة.

الزحف هو أول خطوة لمحركات البحث حيث يتم في هذه المرحلة الحصول على بيانات حول موقع الويب.

يتضمن ذلك فحص المواقع وجمع تفاصيل حول كل صفحة مثل العناوين و الصور و الكلمات المفتاحية والصفحات المرتبطة الأخرى وغيرها .

ولكن كيف يتم الزحف على موقع الويب؟

يزور برنامج روبوت آلي (يسمى “العنكبوت”) الصفحة بعد الصفحة بأسرع وقت ممكن ، باستخدام روابط الصفحات للعثور على وجهتها التالية، يمكن للعناكب لدى Google قراءة آلاف الصفحات في الثانية.

عندما تزور عناكب البحث موقع فإنها تجمع كل المعلومات عن الصفحة التي قامت بزيارتها ثم تكرر الزيارة مرة أخري لقياس التطورات والتحديثات التي طرأت على الصفحات

الفهرسة هي  الخطوة التي تلي جمع البيانات في عملية الزحف حيث تتم معالجة البيانات ووضعها في قاعدة بيانات أعطيك مثال واقعي تخيّل إنشاء قائمة بجميع الكتب التي تملكها مكتبة ضخمة ، وناشريها ، ومؤلفيها ، وأنواعها ، وعدد صفحاتها ، إلخ. الزحف هو عندما تتصفح الكتب لجمع هذة المعلومات أما الفهرسة فهي عملية تسجيلها في قائمة هذا ماتفعله محركات البحث ولكن ليس مع مجموعة من الكتب بل مع عدد هائل من البيانات المحدثة بشكل مستمر.

عندما تقوم بالبحث عن شئ ما عبر محرك البحث تبدأ عملية جلب المحتوى حيث يعرض لك محرك البحث أكثر النتائج المناسبة لما تبحث عنه .

تتميز محركات البحث عن بعضها من خلال أساليب استرجاعها: فهي تستخدم معايير مختلفة لاختيار أفضل الصفحات التي تناسب ما تبحث عنه،  ولهذا تختلف نتائج البحث بين Google و Bing على سبيل المثال، ولهذا تفوق جوجل بشكل كبير لاهتمامه بتطوير آلية جلب نتائج البحث التي تعطي أدق النتائج عما تبحث عنه.