كيف تعمل محركات البحث: 1- نظرة عامة

كيف تعمل محركات البحث: الزحف والفهرسة والتصنيف

محركات البحث هي آلات إجابات. إنهم موجودون لاكتشاف وفهم وتنظيم محتوى الإنترنت من أجل تقديم النتائج الأكثر صلة بالأسئلة التي يطرحها الباحثون.
لكي يظهر موقعك في نتائج البحث ، يجب أن يكون المحتوى الخاص بك مرئيًا أولاً لمحركات البحث. ويمكن القول أنه هذا الجزء هو أهم جزء من لغز تحسين محركات البحث، فإذا لم يتم العثور على موقعك ، فلا توجد طريقة لتظهر بها في صفحة نتائج محرك البحث (SERPs).

{tocify} $title={ محتويات المقال }

ما هي محركات البحث؟

محركات البحث هو مجموعة منسقة من البرامج التي تبحث عن العناصر وتعرفها في قاعدة بيانات تطابق المعايير المحددة. تستخدم محركات البحث للوصول إلى المعلومات على شبكة الويب العالمية. تتيح محركات البحث للمستخدمين البحث في الإنترنت عن المحتوى باستخدام الكلمات الرئيسية.
عندما يقوم المستخدم بإدخال استعلام بحث، يبحث محرك البحث في عناوين صفحات موقع الويب والمحتويات والكلمات الرئيسية التي قام بفهرستها ويستخدم الخوارزميات (عمليات خطوة بخطوة) لإنتاج قائمة بالمواقع - مع مواقع الويب الأكثر صلة في الأعلى من القائمة.
غالبًا ما تغير محركات البحث الخوارزميات (البرامج التي تصنف النتائج) لتحسين تجربة المستخدم. إنهم يهدفون إلى فهم كيفية بحث المستخدمين ومنحهم أفضل إجابة على استفسارهم. وهذا يعني إعطاء الأولوية للصفحات ذات الجودة الأعلى والأكثر صلة.

كيف تعمل محركات البحث؟

لمحركات البحث ثلاث وظائف أساسية:
  • الزحف Crawling
  • الفهرسة Indexing
  • التصنيف Ranking
فيما يلي نظرة سريعة عن هذه الوظائف:

ما هو الزحف Crawling؟

الزحف Crawling، هو عملية الاكتشاف التي ترسل فيها محركات البحث فريقًا من الروبوتات Googlebot (المعروفة باسم الزواحف Crawlers أو العناكب Spiders) للعثور على محتوى جديد ومحدث.
يمكن أن يكون المحتوى عبارة صفحة ويب أو صورة أو مقطع فيديو أو PDF ، إلخ.....
ويتم اكتشاف المحتوى عن طريق الروابط URL.

تبدأ الروبوتات Googlebot بجلب بعض صفحات الويب، ثم تتبع الروابط الموجودة على تلك الصفحات للعثور على عناوين URL جديدة. من خلال التنقل على مسار الروابط هذا ، يكون الزاحف قادرًا على العثور على محتوى جديد وإضافته إلى فهرسه المسمى Caffeine (قاعدة بيانات ضخمة لعناوين URL المكتشفة)، ليتم استرجاعها لاحقًا عندما يبحث الباحث عن معلومات تفيد بأن المحتوى الموجود على عنوان URL له صلة بعملية البحث المطلوبة.

من الممكن منع الروبوتاب (الزواحف أو العناكب) من الزحف واكتشاف جزء من موقعك أو  كل موقعك. حيث يمكنك توجيه محركات البحث لتجنب تخزين صفحات معينة في الفهرس الخاص بهم.
بينما يمكن أن تكون هناك أسباب للقيام بذلك، كالخصوصية والأمن وغيرها.
أما إذا كنت تريد أن يعثر الباحثون على محتواك ، يجب عليك أولاً التأكد من أنه يمكن الوصول إليه من قبل برامج الزحف وأنه قابل للفهرسة.


Web Spiders


ما هي الفهرسة Indexing؟

تقوم محركات البحث بمعالجة وتخزين المعلومات التي يجدونها ضمن الفهرس، وقاعدة بيانات ضخمة لجميع المحتوى الذي اكتشفوه، (و الذي يعتبرونه جيدًا بما يكفي لخدمة الباحثين).

يتضمن الفهرس جميع عناوين URL المكتشفة إلى جانب عدد من الإشارات الرئيسية ذات الصلة بمحتويات تلك العناوين المكتشفة، مثل:
  •  الكلمات المفتاحية التي اكتشفت داخل محتوى الصفحة - ما هي المواضيع التي تغطيها الصفحة؟ 
  • نوع المحتوى الذي يتم الزحف إليه - ما الذي يتم تضمينه في الصفحة؟ 
  • عدد مرات تحديث الصفحة -  كم مرة تم تحديث المحتوى ومتى أخر مرة؟ 
  • مشاركة المستخدم السابقة للصفحة  - كيف يتفاعل الأشخاص مع الصفحة؟

ما هو التصنيف (الترتيب) Ranking؟

عندما يُجري شخص ما عملية بحث ، تجوب محركات البحث فهرسها بحثًا عن محتوى وثيق الصلة بالموضوع ، ثم تطلب هذا المحتوى على أمل حل استعلام الباحث.
يُعرف ترتيب نتائج البحث حسب الصلة بالتصنيف أو الترتيب، وذلك باستخدام خوارزمية البحث (لكل محرك بحث خوارزميته الخاصة والسرية أيضاً في ترتيب النتائج).
بشكل عام ، يمكنك أن تفترض أنه كلما كان ترتيب الموقع أعلى في صفحة نتائج محركات البحث SERPs ، كلما كان محرك البحث يعتقد أنه أكثر ملاءمة بالاستعلام المطروح.

ما هو الهدف من خوارزمية محرك البحث؟

الهدف من خوارزمية محرك البحث هو تقديم مجموعة ذات صلة من نتائج البحث عالية الجودة والتي ستفي باستعلام / سؤال المستخدم في أسرع وقت ممكن.
ليحدد المستخدم خيارًا من قائمة نتائج البحث، وهنا تتعلم محركات البحث أن الخيار الذي اختاره المستخدم هو الأقرب لاسفساراته، والذي يمكن أن يؤثر على تصنيفات محرك البحث في المستقبل.

ماذا يحدث عندما يتم البحث؟

عندما يتم إدخال استعلام بحث في محرك بحث بواسطة المستخدم ، يتم تحديد جميع الصفحات التي تعتبر ذات صلة من الفهرس، ويتم استخدام خوارزمية لترتيب الصفحات ذات الصلة بشكل هرمي في مجموعة من النتائج.
تختلف الخوارزميات المستخدمة لترتيب النتائج الأكثر صلة بكل محرك بحث.
على سبيل المثال ، قد لا تحتل الصفحة التي تحتل مرتبة عالية في طلب البحث في Google، على مرتبة عالية في نفس الاستعلام في Bing .

بالإضافة إلى استعلام البحث ، تستخدم محركات البحث بيانات أخرى  لعرض النتائج وترتيبها ، بما في ذلك:
  • الموقع - تعتمد بعض طلبات البحث على الموقع ، مثل "المقاهي القريبة مني" أو "أوقات الأفلام". 
  • اللغة - ستعرض محركات البحث النتائج بلغة المستخدم ، إذا كان من الممكن اكتشافها.
  • محفوظات البحث السابقة - ستعرض محركات البحث نتائج مختلفة لاستعلام يعتمد على ما بحث عنه المستخدم سابقًا. 
  • الجهاز ونظام التشغيل - قد يتم إرجاع مجموعة مختلفة من النتائج بناءً على الجهاز الذي تم إجراء الاستعلام منه ونظام التشغيل (Windows - Mac OS - Linux - Android -....).

في علم تحسين محركات المحركات SEO، ليست كل محركات البحث متساوية.
يتساءل الكثير من المبتدئين عن الأهمية النسبية لمحركات بحث معينة.
يعرف معظم الناس أن Google تمتلك أكبر حصة في السوق ، ولكن ما مدى أهمية تحسين Bing و Yahoo وغيرها؟
 الحقيقة هي أنه على الرغم من وجود أكثر من 30 محرك بحث رئيسي على الويب ، فإن مجتمع تحسين محركات البحث يهتم فقط بـ Google. لماذا؟
الإجابة المختصرة هي أن Google هي المكان الذي يبحث فيه الغالبية العظمى من الأشخاص على الويب.
فإذا قمنا بتضمين صور Google وخرائط Google و YouTube (أحد مواقع Google) ، فسيتم إجراء أكثر من 90٪ من عمليات بحث الويب على Google - أي ما يقرب من 20 مرة من عمليات البحث التي تتم على Bing و Yahoo مجتمعين.

لماذا قد لا تتم فهرسة الصفحة؟

هناك عدد من الظروف التي لا تتم فيها فهرسة عنوان URL بواسطة محرك بحث. أهمها:
  • استثناءات ملف Robots.txt - ملف يخبر محركات البحث بما يجب ولا يجب زيارته على موقعك. 
  • توجيهات على صفحة الويب تطلب من محركات البحث عدم فهرسة هذه الصفحة (noindex tag) أو فهرسة صفحة أخرى مماثلة (canonical tag) .
  • حكم خوارزميات محركات البحث على أن هذه الصفحة ذات جودة منخفض ، كأن يكون المحتوى قليل جداً أو مكرر . 
  • عنوان URL الذي يعرض صفحة خطأ (على سبيل المثال ، رمز استجابة HTTP 404 غير موجود ).

هل المتصفح هو نفسه محركات البحث؟

المتصفحات ومحركات البحث ليست هي نفسها. محرك البحث هو موقع مثل أي موقع آخر. ينشأ الالتباس لأن المتصفحات تتيح لك إدخال عنوان URL أو استعلام بحث في شريط العناوين. عندما تضع شيئًا ما في شريط العناوين، يكتشف المتصفح ما إذا كان عنوان URL أو طلب بحث. إذا كان عنوان URL، ينتقل المستعرض إلى صفحة الويب هذه مباشرةً، وإذا كان استعلام بحث، فسيقوم المستعرض بإرسالك إلى موقع محرك بحث. تتيح لك المستعرضات اختيار محرك البحث الذي تريد استخدامه للاستعلامات من شريط العنوان.

المثال الأكثر وضوحًا هو Google، الذي يحتوي على Chrome (المتصفح) وبحث Google (محرك البحث، غالبًا ما يشار إليه باسم "Google" فقط). لدى Microsoft Edge (مستعرض) و Bing (محرك بحث).
يمكنك استخدام أي محرك بحث في أي متصفح. لا يمكنك فقط الانتقال إلى أي محرك بحث عن طريق كتابة عنوان URL الخاص به في متصفحك (مثل google.com) ، ولكن يمكنك تغيير إعدادات متصفحك لاستخدام محرك البحث المفضل لديك لطلبات البحث من شريط العناوين.

كيف تجني محركات البحث المال؟

تجني محركات البحث المال بعدة طرق، منها ما يلي:
1. إعلانات الدفع بالنقرة: يضع المعلنون أو شبكات الإعلانات التابعة لجهات خارجية إعلانات على SERPs وعلى المحتوى نفسه. كلما زاد عدد المشاهدات أو النقرات التي تحصل عليها كلمة رئيسية ذات صلة بالبحث، زاد عدد المعلنين الذين يدفعون مقابل ربط إعلاناتهم بها.
2. التبرعات: تم تصميم بعض محركات البحث لمساعدة المنظمات غير الربحية في طلب التبرعات.
3. روابط العمولة: تتضمن بعض المحركات روابط عمولة، حيث يكون لمحرك البحث شراكة يدفع فيها الشريك لمحرك البحث عندما ينقر المستخدم على رابط الشريك.

كيف تقوم محركات البحث بتخصيص النتائج؟

تقوم محركات البحث بتخصيص النتائج بناءً على ملفات تعريف الباحث الرقمية التي تم إنشاؤها من بيانات المستخدم. يتم جمع بيانات المستخدم من التطبيق أو الجهاز الذي يستخدمه المستخدم للوصول إلى محرك البحث. تتضمن بيانات المستخدم التي تم جمعها ما يلي:
  • سجل البحث
  • تاريخ ووقت البحث
  • معلومات الموقع
  • البيانات الصوتية
  • معرف المستخدم
  • تحديد الجهاز
  • عنوان IP
  • بيانات تشخيص الجهاز
  • قوائم الاتصال
  • تاريخ الشراء
تُستخدم ملفات تعريف الارتباط Cookies لتتبع سجل التصفح والبيانات الأخرى. هي عبارة عن ملفات نصية صغيرة يتم إرسالها من مواقع الويب التي يزورها المستخدم إلى متصفح الويب الخاص به. تستخدم محركات البحث ملفات تعريف الارتباط لتتبع تفضيلات المستخدم وتخصيص النتائج والإعلانات. يمكنهم تذكر الإعدادات، مثل كلمات المرور وتفضيلات اللغة وعوامل تصفية المحتوى وعدد النتائج لكل صفحة ومعلومات الجلسة.

يحمي استخدام إعدادات التصفح الخاصة أو التصفح المتخفي المستخدمين من التتبع ولكن على مستوى الجهاز فقط. لا يتم حفظ محفوظات البحث والمعلومات الأخرى المتراكمة أثناء البحث ويتم حذفها بعد جلسة البحث. ومع ذلك، فإن مزودي خدمة الإنترنت وأصحاب العمل ومالكي المواقع التي تمت زيارتها قادرون على تتبع المعلومات الرقمية التي تُركت أثناء البحث.

$ads={1}


في الختام

تلعب محركات البحث دورًا مهمًا في حياتنا الرقمية. إنها تمكننا من الوصول إلى كميات هائلة من المعلومات من الويب، وتساعدنا في العثور على إجابات واكتشاف محتوى جديد والتواصل مع العالم. سواء كان محرك بحث عام للاستعلامات العامة، أو محرك بحث عمودي لمحتوى متخصص، أو محرك بحث محلي للعثور على الأعمال التجارية القريبة منا، فإن كل نوع يخدم غرضًا محددًا ويلبي احتياجات البحث المختلفة.

الأسئلة الشائعة

ما هو محرك البحث الأكثر شيوعًا؟

يعد Google حاليًا أكثر محركات البحث شيوعًا، حيث يتمتع بأغلبية كبيرة من حصة السوق لمحركات البحث في جميع أنحاء العالم.

كيف يحدد محرك البحث ترتيب نتائج البحث؟

تستخدم محركات البحث خوارزميات معقدة لتحديد ترتيب نتائج البحث. يتم أخذ عوامل مثل الصلة وجودة المحتوى ومشاركة المستخدم وسلطة موقع الويب في الاعتبار.

كم مرة تقوم محركات البحث بتحديث فهارسها؟

يختلف تكرار تحديثات محرك البحث، ولكن محركات البحث الرئيسية مثل Google عادةً ما تقوم بتحديث فهارسها باستمرار، مع الزحف إلى بعض صفحات الويب وفهرستها بشكل متكرر أكثر من غيرها.

هل تعرض محركات البحث نفس النتائج لكل مستخدم؟

لا، تقوم محركات البحث بتخصيص نتائج البحث بناءً على عوامل مثل موقع المستخدم ومحفوظات البحث والتفضيلات. وهذا يعني أن المستخدمين المختلفين قد يرون نتائج بحث مختلفة قليلاً لنفس طلب البحث.

هل تصنيفات محرك البحث دائمة؟

تصنيفات محرك البحث ليست دائمة ويمكن أن تتغير بمرور الوقت. يمكن أن تؤثر عوامل مثل التغييرات في خوارزميات البحث ونشاط المنافسين وتحديثات موقع الويب على التصنيف.

هل يمكن لمحركات البحث فهرسة المحتوى داخل ملفات PDF؟

نعم، يمكن لمحركات البحث فهرسة المحتوى داخل ملفات PDF. ومع ذلك، من المهم تحسين ملفات PDF لمحركات البحث من خلال التأكد من أنها تستند إلى النص ومنسقة بشكل صحيح وتتضمن البيانات الوصفية ذات الصلة.

هل ترغب بتعلم المزيد عن محركات البحث؟

إقرأ:

المصادر



Kotayba Bouzian

استشاري تسويق بالمحتوى، وتحسين محركات البحث SEO، والتسويق عبر محركات البحث SEM. لدي خبرة بأفضل الوسائل والأساليب لبناء تواجدك الرقمي وتحسين ظهورك في صفحات محركات البحث، وبناء خطة لمحتواك الرقمي لجذب عملائك، وبناء الثقة بعلامتك التجارية.

إرسال تعليق (0)
أحدث أقدم