بفضل محركات البحث، يمكن لمستخدمي الإنترنت البحث عن المعلومات، تحديد موقع مطعم، أو العثور على حذاء عصري بنقرة واحدة فقط. توفر هذه التطبيقات إمكانية الوصول إلى كم هائل من المعلومات من خلال عمليات بحث متنوعة. ولكن، هل تعلم كيف تعمل محركات البحث؟ يسلط هذا المقال الضوء على طريقة عمل محركات مثل Google، Qwant ، Bing، DuckDuckGo، ويناقش أيضًا وضع سوق محركات البحث.
ما هي محركات البحث؟
تعريف محركات البحث
هي تطبيقات ويب مصممة للقيام بعمليات بحث على الإنترنت. تظهر النتائج بناءً على العبارات التي يطلبها المستخدمون. اليوم، يُعتبر Google الأكثر شهرة بين جميع المحركات. ومع ذلك، هناك العديد من محركات البحث الفعّالة مثل DuckDuckGo، Bing، Qwant، Yahoo… بالإضافة إلى محركات بحث متخصصة مثل:
- Google Scholar للتعليم
- Yahoo Kids للأطفال
- Ecosia للبيئة
ما الذي يمكن العثور عليه باستخدام محركات البحث؟
يمكن استخدامها للعثور على معلومات في مجالات محددة. على سبيل المثال، يساعد Google في العثور على بيانات ويب، صور، مواقع التجارة الإلكترونية، مستندات، أو مقاطع فيديو.
تؤدي خاصية MAP دور الخريطة العالمية باستخدام صور الأقمار الصناعية لتحديد المواقع بدقة. أما البدائل الأخرى مثل Bing، DuckDuckGo، Yahoo، أو Qwant فهي أيضًا محركات بحث قوية. كل أداة تتميز بخصائص محددة؛ على سبيل المثال، Qwant يحترم خصوصية المستخدم ولا يحاول معرفة هويته أو موقعه لتقديم النتائج.
كيفية الوصول إلى محركات البحث؟
يمكن الوصول إليها من خلال المتصفح. في معظم الأحيان، تستخدم المتصفحات ميزة Omnibox، وهي الاسم الجديد لشريط العنوان القديم في المتصفحات، للسماح للمستخدم بإجراء البحث.
كيف تنجح مع محركات البحث؟
هذا هو السؤال الذي يشغل وكالات ال SEO. الحصول على موقع في النتائج الأولى (SERP) له أهمية مالية كبيرة. تحسين ال SEO هو مجال استراتيجي وتقني. ومع ذلك، هناك بعض التحسينات البسيطة التي يمكن تطبيقها لتكون محبوبة من قبل محركات البحث.
يمكنك على سبيل المثال:
- تجنب “الإخفاء” (Cloaking): يعني تقديم صفحتين مختلفتين لروبوتات Google والزوار البشريين لتحسين الترتيب.
- إنشاء موقع به هيكل واضح وتقديم خريطة للموقع (SiteMap).
- إنشاء روابط داخلية فعالة.
- تصميم موقع غني بالمعلومات ومفيد. يجب أن يكون المحتوى منظمًا باستخدام عناوين مثل H1، H2، H3، مع تضمين الكلمات المفتاحية.
- عدم إهمال السمات الوصفية (ALT) والوصف الميتا (Meta Description).
- إنشاء روابط خلفية (Backlinks) ذات جودة.
توصيات Bing:
- إدراج الكلمات المفتاحية في عنوان URL. يفضل Bing عناوين URL القصيرة التي تحتوي على الكلمات المفتاحية.
- إنشاء روابط داخلية فعالة.
- تطبيق استراتيجية روابط خلفية قوية.
- إنشاء محتوى مخصص. وفقًا لـ Bing، يجب أن تكون كل صفحة مخصصة لموضوع واحد.
- إنشاء بنية واضحة بدون تعقيد. يوصي Bing بأن لا تتجاوز الصفحات 3 مستويات من الصفحة الرئيسية.
- ضمان عدم دفن المحتوى داخل أنظمة الوسائط الغنية مثل Adobe Flash Player أو JavaScript.
- تجنب تضمين الكلمات المفتاحية داخل الصور فقط. إذا كنت تريد أن يتم فهرسة اسم شركتك، تأكد من أنه يظهر نصيًا وليس فقط داخل الشعار.
كيفية عمل محركات البحث
الزحف (Crawling) والفهرسة (Indexing)
تعمل محركات البحث على تحقيق هدف واحد: تقديم إجابات دقيقة لأسئلة المستخدمين. ولتحقيق نتائج بحث ذات صلة، تمر محركات البحث بمرحلتين رئيسيتين:
- الزحف (Crawling): البحث عن الصفحات على الإنترنت.
- الفهرسة (Indexing): ترتيب النتائج بناءً على مدى صلتها بالبحث.
الزحف (Crawling)
الزحف هو الوظيفة الأولى لمحركات البحث، وهو عبارة عن عملية تفتيش منهجية للمواقع الإلكترونية على الإنترنت. يتم تنفيذ هذه الخطوة قبل طلب المستخدم، حيث تهدف إلى جمع أكبر قدر ممكن من المعلومات من المنصات الإلكترونية. يقوم بهذه العملية روبوتات تُعرف باسم “spiders” أو “crawlers”. بعد الانتهاء من هذه المرحلة، يتم إرسال المعلومات التي تم جمعها إلى قاعدة البيانات أو “الفهرس” لإجراء عملية الفهرسة.
الفهرسة (Indexing)
عندما يتلقى الفهرس (الذي يُعتبر بمثابة العقل لمحركات البحث) المعلومات من الروبوتات، يقوم بتقييمها. وبالتالي، عند إجراء المستخدم لأي بحث، يتمكن المحرك من تقديم نتائج دقيقة وذات صلة.
كيف تحدد محركات البحث مدى صلة النتيجة بالبحث؟
لا يقتصر تقييم مدى الصلة على قياس تطابق الكلمات المفتاحية بين طلب البحث والمنصة الإلكترونية. هناك عوامل أخرى تؤخذ بعين الاعتبار. تفترض محركات البحث أن المواقع الأكثر شهرة تحتوي على معلومات أكثر دقة وموثوقية. هذا الافتراض يساعد محركات البحث في ضمان رضا المستخدمين عن نتائج البحث.
الأساطير والحقائق حول محركات البحث
الأساطير
- التقديم اليدوي لمحركات البحث: في التسعينيات، كانت المحركات تعتمد على نماذج تقديم يملؤها مشرفو المواقع لإبلاغ المحركات بمواقعهم وكلماتهم المفتاحية. كان الهدف هو تنبيه المحركات لزيارة الموقع وفهرسته. هذا النظام تم التخلي عنه بسرعة. اليوم، تقوم الروبوتات بزيارة المواقع وفهرستها تلقائيًا.
- التصنيف بناءً على العلامات الوصفية (Meta Tags): كانت العلامات الوصفية، وخاصة “meta keywords”، تلعب دورًا مهمًا في تحسين ال SEO ولكن هذا المعيار تم إلغاؤه من قبل جميع محركات البحث الرئيسية. اليوم، لم تعد العلامات الوصفية تؤثر بشكل مباشر على ترتيب المواقع.
- الإعلانات المدفوعة (SEA) تضمن الصدارة في نتائج البحث: يعتقد البعض أن المواقع التي تدفع مقابل الإعلانات على محركات البحث (SEA) تحصل على ترتيب أعلى بشكل طبيعي. هذه النظرية لا أساس لها من الصحة. كل من Google، Qwant (محرك بحث فرنسي)، وYahoo قد وضعوا تدابير صارمة لمنع هذا النوع من التحيز. في Google، حتى المعلنين الذين ينفقون ملايين الدولارات شهريًا على الإعلانات لا يحصلون على معاملة خاصة في نتائج البحث.
إذا كانت هذه هي الأساطير حول محركات البحث، فما هي الحقائق؟
ميزانية الزحف (Crawl Budget)
يحتوي الإنترنت على تريليونات من البيانات، ولتسهيل عمل الروبوتات، قامت محركات البحث بتحديد نظام لتقييد عمليات الزحف. ميزانية الزحف هي الوقت المخصص من قبل الروبوتات لموقعك الإلكتروني. يتعين على محركات البحث العثور على صفحات موقعك بأسرع وقت ممكن. ومن هنا تكمن الأهمية الكبيرة لتسهيل عمل الروبوتات بحيث تتمكن من زحف وفهرسة كل صفحات موقعك. إذا لم تتمكن الروبوتات من القيام بذلك، فقد تصبح أجزاء من موقعك غير مرئية لمحركات البحث والمستخدمين.
لتسهيل عمل الروبوتات، يمكنك اتباع بعض الممارسات الجيدة:
- تجنب الروابط المعطلة: الروابط المكسورة غير مفضلة لدى الروبوتات وقد تتسبب في توقف عملية الزحف.
- تجنب المحتوى منخفض الجودة: مثل صفحات الأخطاء، المحتوى المكرر، أو التنقلات المعقدة.
- الحد من عمليات إعادة التوجيه 301/302.
- تحسين سرعة تحميل الصفحات: زمن التحميل الطويل يؤثر سلبًا على ترتيب موقعك وعلى تجربة المستخدم، حيث قد يغادر المستخدم الموقع إذا استغرق التحميل وقتًا طويلاً، مما يؤدي إلى فقدان العملاء المحتملين.
- تحديث خريطة الموقع (SiteMap): لتوجيه الروبوتات بسهولة أكبر لفهرسة صفحاتك.
- إجراء زحف منتظم لموقعك.
زحف منتظم للموقع
عند إنشاء موقعك الإلكتروني وملاحظة فهرسته على محركات البحث، قد تعتقد أن العمل قد انتهى. لكن الروبوتات تعود بانتظام إلى موقعك. الموقع الذي يتم تحديثه بشكل متكرر ستزوره الروبوتات أكثر من الموقع الثابت. تقوم محركات البحث يوميًا بتحليل الكلمات المفتاحية للصفحات لإعادة فهرستها.
اكتشاف تقنية الإخفاء (Cloaking)
الإخفاء هو تقديم محتوى مختلف لمحركات البحث مقارنة بالمحتوى الذي يراه الزوار. يقوم الخادم بالتعرف على ما إذا كان الطلب من إنسان أو روبوت، ويعرض محتويات مختلفة بناءً على ذلك. على سبيل المثال، قد يتم تقديم صفحة محسنة للروبوت لكنها غير ملائمة للقراءة من قبل المستخدم. هذه التقنية تُعاقب من قبل Google.
تصفية المحتوى منخفض القيمة
تستخدم محركات البحث الروبوتات لتحديد القيمة المضافة للمحتوى بالنسبة للقراء. من بين المحتويات التي يتم تصفيتها غالبًا:
- محتوى الشراكات (Affiliation).
- المحتوى المكرر.
- الصفحات التي تحتوي على نصوص قليلة جدًا.
تُقيّم محركات البحث قيمة الموقع بناءً على أصالة المحتوى وتجربة المستخدم التي يقدمها. لذلك، المواقع التي تنشر محتوى منخفض الجودة ستجد صعوبة في الحصول على ترتيب عالٍ، حتى لو كانت مُحسّنة بشكل جيد. على سبيل المثال، إذا كان معدل الارتداد مرتفعًا من صفحة النتائج (SERP)، فسيتم تخفيض ترتيب الموقع لأنه يعني أن المستخدمين لم يجدوا إجابة لطلبهم وأن المحتوى غير ذي صلة.
خوارزمية Google Panda
إطلاق Google Panda في عام 2011 يعكس رغبة محرك البحث في تعزيز المحتويات ذات الجودة العالية. تم تصميم هذا الخوارزمية بعد موجة كبيرة من الرسائل المزعجة والمواقع منخفضة الجودة. كيف يتم تطبيق العقوبة؟ يقوم Panda بمعاقبة المحتويات منخفضة الجودة وأحيانًا الموقع بالكامل. يتم إلغاء فهرسة الصفحات المتأثرة.
تحسين محركات البحث بناءً على الثقة
تعتمد محركات البحث على عدة عناصر لتقييم موقعك وتحديد ترتيبه في صفحات النتائج (SERP). أحد العوامل المهمة هو الروابط الخلفية (Backlinks). لقياس مصداقية موقعك، تأخذ Google بعين الاعتبار عدد الروابط التي تشير إليه.
لكن محركات البحث لا تقتصر على قياس كمية الروابط الخلفية فقط؛ بل تُعطي الأولوية لجودة هذه الروابط. كلما كانت الروابط تشير إلى موقعك من مواقع ذات سلطة وموثوقية، زادت قيمة موقعك لدى محركات البحث. بالمقابل، إذا كانت الروابط ذات جودة منخفضة أو تُعتبر روابط مزعجة (Spam)، ستعتبرها محركات البحث محاولة احتيال وستفرض عقوبة.
خوارزمية Google Penguin
تم إنشاء خوارزمية Penguin لتنظيف فهرس Google من المواقع منخفضة الجودة التي تستخدم تقنيات ربط احتيالية لتحسين ترتيبها.
مكافحة الرسائل غير المرغوب فيها على محركات البحث
تُعد الرسائل غير المرغوب فيها (Spam) ممارسة شائعة على الإنترنت. منذ منتصف التسعينيات، شهدت هذه الظاهرة ارتفاعًا كبيرًا، حيث يقوم المروجون باستغلال مواقع ذات ترتيب جيد على محركات البحث للترويج لمواقع منخفضة الجودة. من المهم أن نعلم أن يومًا واحدًا في قمة الترتيب على Google يمكن أن يحقق ما يصل إلى 20,000 يورو من الأرباح الصافية. مع مثل هذه المكاسب، ليس من المفاجئ أن تكون هذه الممارسة شائعة للغاية. ومع ذلك، بفضل الابتكارات التقنية التي طورتها Google، أصبحت هذه الممارسات أكثر صعوبة في التنفيذ.
آخر المستجدات حول محركات البحث
من يملك الحصة الأكبر في السوق العالمية لمحركات البحث؟
في تصنيف عالمي لعام 2017، احتلت Google المرتبة الأولى بحصة سوقية صافية بلغت 74.54%. تلتها محركات البحث الأخرى مثل Yahoo، Baidu، Bing، وQwant (أداة البحث الفرنسية)، حيث تراوحت حصصها السوقية بين 7% و10%. ومن اللافت للنظر أنه على الرغم من سيطرة Google على الحصة الأكبر، إلا أن هذه الحصة بدأت بالتراجع تدريجيًا اعتبارًا من الربع الثاني لعام 2017، بينما وصلت حصة Baidu إلى 14.69%.
كم عدد عمليات البحث التي تُجرى يوميًا على محركات البحث؟
في عام 2017، كان 46.8% من سكان العالم يمتلكون وصولًا إلى الإنترنت. ومن المتوقع أن يرتفع هذا الرقم إلى 53.7% بحلول عام 2021. وفقًا للإحصاءات، يتلقى Google حوالي 3.5 مليار طلب بحث يوميًا، أي ما يعادل 1.2 تريليون طلب سنويًا.
تطورت Google بسرعة مذهلة؛ ففي عام 1999، استغرقت Google شهرًا كاملًا للزحف وفهرسة 50 مليون صفحة، بينما في عام 2012، تمكنت من تنفيذ نفس المهمة في أقل من دقيقة!
محركات البحث: أكثر من مجرد أداة معلوماتية
تُعد محركات البحث تطبيقات قوية ومعقدة. يوميًا، يتم تقديم ملايين الطلبات من قِبل المستخدمين. ولا تقتصر أهميتها على الجانب المعلوماتي فقط، بل تحمل أيضًا أهمية تسويقية ومالية كبيرة.
لمواجهة المنافسة وتحقيق الإيرادات عبر الإنترنت، يُعد الترتيب الجيد في صفحات نتائج البحث (SERP) أمرًا أساسيًا. لكن فهم سلوكيات الجمهور المستهدف لا يقل أهمية. على سبيل المثال، في عام 2009، كان 0.7% فقط من حركة المرور على الإنترنت في جميع أنحاء العالم يتم عبر الهواتف المحمولة. أما في عام 2017، فقد ارتفعت النسبة إلى 50.3% من حركة المرور العالمية.
في 10 دول، بما في ذلك الولايات المتحدة واليابان، تجاوزت عمليات البحث على الهواتف المحمولة بشكل كبير تلك التي تُجرى على أجهزة الكمبيوتر.
الخاتمة
محركات البحث أصبحت جزءًا أساسيًا من حياتنا اليومية، حيث توفر للمستخدمين إمكانية الوصول إلى معلومات هائلة ومتنوعة بنقرة واحدة فقط. من خلال التقنيات المتطورة مثل الزحف والفهرسة، تضمن هذه المحركات تقديم نتائج دقيقة وملائمة للمستخدمين. ومع تقدم التكنولوجيا، أصبحت أكثر ذكاءً في تصنيف المحتوى بناءً على معايير معقدة مثل الجودة والموثوقية.
لكن، كما هو الحال في أي مجال آخر، فإن هاته المحركات ليست خالية من التحديات. هناك العديد من الأساليب الملتوية مثل الرسائل غير المرغوب فيها و”التخفي” التي قد تؤثر على مصداقية النتائج. لذلك، تواصل تحديث خوارزمياتها لضمان تقديم نتائج أكثر دقة وموثوقية.
في النهاية، لا يمكن إنكار أن محركات البحث أصبحت أداة لا غنى عنها في عالمنا الرقمي اليوم. سواء كان الأمر يتعلق بالبحث عن معلومات أو التسوق أو حتى تحسين ال SEO، فإن هذه الأدوات تظل تلعب دورًا محوريًا في تحقيق الأهداف الشخصية والتجارية على حد سواء.