محرك البحث

الموسوعة الحرة

تقترح بعض محركات البحث الاستعلامات عندما يكتب المستخدم في مربع البحث .

محرك البحث هو نظام برمجي يوفر روابط تشعبية لصفحات الويب وغيرها من المعلومات ذات الصلة على الويب استجابةً لاستعلام المستخدم. يُدخل المستخدم استعلامًا داخل متصفح ويب أو تطبيق جوال ، وغالبًا ما تكون نتائج البحث عبارة عن قائمة من الروابط التشعبية، مصحوبة بملخصات نصية وصور. كما يتمتع المستخدمون بخيار تقييد البحث على نوع معين من النتائج، مثل الصور أو مقاطع الفيديو أو الأخبار.

بالنسبة لمزود البحث، فإن محركه هو جزء من نظام حوسبة موزع يمكن أن يشمل العديد من مراكز البيانات في جميع أنحاء العالم. تعتمد سرعة ودقة استجابة المحرك للاستعلام على نظام معقد من الفهرسة يتم تحديثه باستمرار بواسطة برامج الزحف الآلية على الويب . يمكن أن يتضمن هذا استخراج البيانات من الملفات وقواعد البيانات المخزنة على خوادم الويب ، ولكن بعض المحتوى غير متاح لبرامج الزحف.

كان هناك العديد من محركات البحث منذ فجر الويب في تسعينيات القرن العشرين، لكن محرك بحث جوجل أصبح المحرك المهيمن في العقد الأول من القرن الحادي والعشرين وظل كذلك. يمتلك حاليًا حصة سوقية عالمية تبلغ 91%. [1] [2] وبالتالي، ركزت أعمال تحسين ظهور مواقع الويب في نتائج البحث ، والمعروفة بالتسويق والتحسين ، إلى حد كبير على جوجل.

تاريخ

الجدول الزمني ( القائمة الكاملة )
سنة محرك الحالة الحالية
1993 كتالوج W3 غير نشط
علي ويب غير نشط
محطة القفز غير نشط
دودة الويب العالمية غير نشط
1994 ويبكراولر نشيط
اذهب.كوم غير نشط، يتم إعادة التوجيه إلى ديزني
لايكوس نشيط
انفوسيك غير نشط، يتم إعادة التوجيه إلى ديزني
1995 بحث ياهو! نشطة، في البداية وظيفة بحث لدليل Yahoo!
داوم نشيط
بحث.ch نشيط
ماجلان غير نشط
إثارة نشيط
ميتاكراولر نشيط
ألتافيستا غير نشط، استحوذت عليه شركة Yahoo! في عام 2003، ومنذ عام 2013 يقوم بإعادة التوجيه إلى Yahoo!
1996 رانكديكس غير نشط، تم دمجه في Baidu في عام 2000
كومة الكلاب نشيط
هوتبوت غير نشط (تم استخدام تقنية البحث Inktomi )
اسأل جيفز نشط (تم تغيير علامته التجارية إلى ask.com)
1997 AOL NetFind نشط (تمت إعادة تسمية AOL Search منذ عام 1999)
جو.ن.جيه بي نشيط
ضوء الشمال غير نشط
ياندكس نشيط
1998 جوجل نشيط
إكس كويك نشط كـ Startpage.com
بحث MSN نشط مثل Bing
إمباس غير نشط (تم دمجه مع NATE)
1999 كل الويب غير نشط (تم إعادة توجيه عنوان URL إلى Yahoo!)
جينيوز غير نشط، تم تغيير علامته التجارية إلى Yellowee (تم إعادة التوجيه إلى justlocalbusiness.com)
نافير نشيط
تيوما غير نشط (إعادة التوجيه إلى Ask.com)
2000 بايدو نشيط
إكساليد غير نشط
جيجابلاست غير نشط
2001 كارتو غير نشط
2003 معلومات.كوم نشيط
2004 A9.com غير نشط
متكتلة غير نشط (إعادة التوجيه إلى DuckDuckGo)
موجيك نشيط
سوغو نشيط
2005 ابحث عني غير نشط
كيدزسيرتش نشط، بحث جوجل
2006 سوسو غير نشط، تم دمجه مع Sogou
كوارو غير نشط
بحث.كوم نشيط
تشاتشا غير نشط
اسأل.كوم نشيط
البحث المباشر نشط مثل Bing، وتمت إعادة تسمية MSN Search
2007 ويكي سيك غير نشط
سبروس غير نشط
بحث ويكيا غير نشط
بلاكلي.كوم نشط، بحث جوجل
2008 مجموعة القوة غير نشط (إعادة التوجيه إلى Bing)
بيكولتر غير نشط
فيوزي غير نشط
بوغامي غير نشط
قفزة السمك غير نشط
فورستل غير نشط (إعادة التوجيه إلى Ecosia)
دك دك جو نشيط
تينآي نشيط
2009 بنج البحث المباشر النشط، الذي تمت إعادة تسميته
ييبول غير نشط
كشاف (جوبي) نشيط
نيت نشيط
إيكوسيا نشيط
صفحة البداية.كوم محرك نشط، شقيق لمحرك Ixquick
2010 بليكو غير نشط، تم بيعه إلى IBM
كويل غير نشط
ياندكس (الإنجليزية) نشيط
بارسيجو نشيط
2011 ياسي نشط، نظير إلى نظير
2012 فولونيا غير نشط
2013 كوانت نشيط
2014 ايجرين نشط، كردي / سوراني
سويس كاوز نشيط
سيركس نشيط
2015 يوز غير نشط
كليكز غير نشط
2016 كيدل نشط، بحث جوجل
2017 البحث المسبق نشيط
2018 كاجي نشيط
2020 بتلة نشيط
2021 البحث الشجاع نشيط
كويي نشيط
أنت.كوم نشيط

ما قبل تسعينيات القرن العشرين

في عام 1945، وصف فانيفار بوش نظام استرجاع معلومات يسمح للمستخدم بالوصول إلى قدر هائل من المعلومات، وكل ذلك على مكتب واحد. [3] أطلق عليه اسم ميمكس . ووصف النظام في مقال بعنوان " كما قد نفكر " نُشر في مجلة أتلانتيك الشهرية . [4] كان الهدف من ميمكس منح المستخدم القدرة على التغلب على الصعوبة المتزايدة باستمرار في تحديد موقع المعلومات في مؤشرات مركزية متزايدة باستمرار للعمل العلمي. تصور فانيفار بوش مكتبات بحثية ذات تعليقات توضيحية متصلة، تشبه الروابط التشعبية الحديثة . [5]

أصبح تحليل الروابط في نهاية المطاف مكونًا أساسيًا لمحركات البحث من خلال خوارزميات مثل Hyper Search و PageRank . [6] [7]

تسعينيات القرن العشرين: ولادة محركات البحث

تسبق محركات البحث الأولى على الإنترنت ظهور الويب في ديسمبر 1990: يعود تاريخ بحث مستخدمي WHOIS إلى عام 1982، [8] وتم تنفيذ بحث المستخدمين متعدد الشبكات من خلال خدمة معلومات Knowbot لأول مرة في عام 1989. [9] كان أول محرك بحث موثق جيدًا يبحث في ملفات المحتوى، أي ملفات FTP ، هو Archie ، والذي ظهر لأول مرة في 10 سبتمبر 1990. [10]

قبل سبتمبر 1993، كانت شبكة الويب العالمية تُفهرس يدويًا بالكامل. كانت هناك قائمة بخوادم الويب التي حررها تيم بيرنرز لي وتم استضافتها على خادم الويب التابع لمنظمة الأبحاث النووية الأوروبية . لا تزال هناك لقطة واحدة من القائمة في عام 1992، [11] ولكن مع زيادة عدد خوادم الويب المتصلة بالإنترنت، لم تعد القائمة المركزية قادرة على مواكبة ذلك. على موقع NCSA ، تم الإعلان عن خوادم جديدة تحت عنوان "ما الجديد!". [12]

كانت أول أداة تستخدم للبحث عن المحتوى (على عكس المستخدمين) على الإنترنت هي Archie . [13] يرمز الاسم إلى "أرشيف" بدون "v". [14] تم إنشاؤه بواسطة آلان إمتاج ، [14] [15] [16] [17] طالب علوم الكمبيوتر في جامعة ماكجيل في مونتريال، كيبيك ، كندا. قام البرنامج بتنزيل قوائم الدليل لجميع الملفات الموجودة على مواقع FTP ( بروتوكول نقل الملفات ) العامة المجهولة، مما أدى إلى إنشاء قاعدة بيانات قابلة للبحث لأسماء الملفات؛ ومع ذلك، لم يقم محرك بحث Archie بفهرسة محتويات هذه المواقع نظرًا لأن كمية البيانات كانت محدودة للغاية بحيث يمكن البحث عنها يدويًا بسهولة.

أدى ظهور Gopher (الذي أنشأه مارك ماكاهيل في جامعة مينيسوتا عام 1991 ) إلى ظهور برنامجين جديدين للبحث، وهما Veronica و Jughead . ومثل Archie، بحثا عن أسماء الملفات والعناوين المخزنة في أنظمة فهرس Gopher. وفرت Veronica (فهرس شبكي واسع النطاق موجه للقوارض سهل الاستخدام للأرشيفات المحوسبة) بحثًا بالكلمات الرئيسية عن معظم عناوين قوائم Gopher في قوائم Gopher بالكامل. وكان Jughead (حفر وعرض التسلسل الهرمي العالمي لـ Jonzy) أداة للحصول على معلومات القائمة من خوادم Gopher المحددة. وفي حين أن اسم محرك البحث " Archie Search Engine " لم يكن إشارة إلى سلسلة كتب Archie المصورة ، فإن " Veronica " و" Jughead " شخصيتان في السلسلة، وبالتالي يشيران إلى سلفهما.

في صيف عام 1993، لم يكن هناك محرك بحث للويب، على الرغم من صيانة العديد من الفهارس المتخصصة يدويًا. كتب أوسكار نيرستراز في جامعة جنيف سلسلة من نصوص بيرل التي عكست هذه الصفحات بشكل دوري وأعادت كتابتها بتنسيق قياسي. شكل هذا الأساس لـ W3Catalog ، أول محرك بحث بدائي للويب، والذي تم إصداره في 2 سبتمبر 1993. [18]

في يونيو 1993، أنتج ماثيو جراي، الذي كان يعمل آنذاك في معهد ماساتشوستس للتكنولوجيا ، ما كان على الأرجح أول روبوت ويب ، وهو World Wide Web Wanderer المستند إلى لغة البرمجة بيرل ، واستخدمه لإنشاء فهرس يسمى "Wandex". كان الغرض من Wanderer هو قياس حجم شبكة الويب العالمية، وهو ما كان يفعله حتى أواخر عام 1995. ظهر محرك البحث الثاني للويب Aliweb في نوفمبر 1993. لم يستخدم Aliweb روبوت ويب ، بل اعتمد بدلاً من ذلك على إخطار من مسؤولي الموقع بوجود ملف فهرس بتنسيق معين في كل موقع.

استخدم JumpStation (الذي أنشأه جوناثان فليتشر في ديسمبر 1993 [19] ) روبوت ويب للعثور على صفحات الويب وبناء فهرسها، واستخدم نموذج ويب كواجهة لبرنامج الاستعلام الخاص به. وبالتالي كان أول أداة لاكتشاف موارد شبكة الويب العالمية تجمع بين الميزات الأساسية الثلاث لمحرك بحث الويب (الزحف والفهرسة والبحث) كما هو موضح أدناه. ونظرًا للموارد المحدودة المتاحة على المنصة التي يعمل عليها، فقد اقتصرت فهرسته وبالتالي البحث على العناوين والرؤوس الموجودة في صفحات الويب التي واجهها الزاحف.

كان WebCrawler ، الذي ظهر في عام 1994، أحد أول محركات البحث القائمة على "النصوص الكاملة". وعلى عكس سابقاتها، سمح للمستخدمين بالبحث عن أي كلمة في أي صفحة ويب ، وهو ما أصبح المعيار لجميع محركات البحث الرئيسية منذ ذلك الحين. وكان أيضًا محرك البحث الذي كان معروفًا على نطاق واسع من قبل الجمهور. وفي عام 1994 أيضًا، تم إطلاق Lycos (الذي بدأ في جامعة كارنيجي ميلون ) وأصبح مشروعًا تجاريًا رئيسيًا.

كان محرك البحث الشهير الأول على الويب هو Yahoo! Search . [20] وكان أول منتج من Yahoo !، الذي أسسه جيري يانج وديفيد فيلو في يناير 1994، هو دليل ويب يسمى Yahoo! Directory . في عام 1995، تمت إضافة وظيفة بحث، مما يسمح للمستخدمين بالبحث في Yahoo! Directory. [21] [22] أصبح أحد أكثر الطرق شيوعًا للأشخاص للعثور على صفحات الويب التي تهمهم، لكن وظيفة البحث الخاصة به تعمل على دليل الويب الخاص به، بدلاً من نسخ النص الكامل لصفحات الويب.

وبعد فترة وجيزة، ظهر عدد من محركات البحث وتنافست على الشعبية. ومن بين هذه المحركات Magellan و Excite و Infoseek و Inktomi و Northern Light و AltaVista . كما يمكن للباحثين عن المعلومات تصفح الدليل بدلاً من إجراء بحث قائم على الكلمات الرئيسية.

في عام 1996، طور روبن لي خوارزمية RankDex لتسجيل نتائج محركات البحث [23] [24] [25] وحصل على براءة اختراع أمريكية لهذه التقنية. [26] كان أول محرك بحث يستخدم الروابط التشعبية لقياس جودة المواقع التي يقوم بفهرستها، [27] ويسبق براءة اختراع الخوارزمية المشابهة جدًا التي قدمتها جوجل بعد عامين في عام 1998. [28] أشار لاري بيج إلى عمل لي في بعض براءات الاختراع الأمريكية الخاصة به لـ PageRank. [29] استخدم لي لاحقًا تقنية Rankdex الخاصة به لمحرك البحث Baidu ، الذي أسسه في الصين وأطلقه في عام 2000.

في عام 1996، كانت شركة Netscape تتطلع إلى منح محرك بحث واحد صفقة حصرية كمحرك بحث مميز على متصفح الويب الخاص بشركة Netscape. وكان هناك اهتمام كبير لدرجة أن شركة Netscape بدلاً من ذلك أبرمت صفقات مع خمسة من محركات البحث الرئيسية: مقابل 5 ملايين دولار سنويًا، سيكون كل محرك بحث موجودًا بالتناوب على صفحة محرك بحث Netscape. وكانت المحركات الخمسة هي Yahoo! وMagellan وLycos وInfoseek وExcite. [30] [31]

تبنت شركة جوجل فكرة بيع مصطلحات البحث في عام 1998 من شركة صغيرة لمحركات البحث تُدعى goto.com . وكان لهذه الخطوة تأثير كبير على أعمال محركات البحث، التي تحولت من كونها شركة متعثرة إلى واحدة من أكثر الشركات ربحية على الإنترنت. [ بحاجة لمصدر ]

عُرفت محركات البحث أيضًا بأنها من ألمع النجوم في جنون الاستثمار على الإنترنت الذي حدث في أواخر التسعينيات. [32] دخلت العديد من الشركات السوق بشكل مذهل، وحصلت على مكاسب قياسية خلال عروضها العامة الأولية . وقد أزال البعض محرك البحث العام الخاص بهم ويقومون بتسويق إصدارات مخصصة للمؤسسات فقط، مثل Northern Light. وقد وقعت العديد من شركات محركات البحث في فقاعة الدوت كوم ، وهي طفرة سوقية مدفوعة بالمضاربة بلغت ذروتها في مارس 2000.

2000-الحاضر: ما بعد فقاعة الدوت كوم

حوالي عام 2000، برز محرك بحث جوجل . [33] حققت الشركة نتائج أفضل للعديد من عمليات البحث باستخدام خوارزمية تسمى PageRank ، كما تم شرحه في ورقة تشريح محرك البحث التي كتبها سيرجي برين ولاري بيج ، مؤسسي جوجل اللاحقين. [7] تصنف هذه الخوارزمية التكرارية صفحات الويب بناءً على عدد وPageRank لمواقع الويب الأخرى والصفحات المرتبطة بها، على افتراض أن الصفحات الجيدة أو المرغوبة مرتبطة بأكثر من غيرها. تستشهد براءة اختراع لاري بيج لـ PageRank ببراءة اختراع RankDex السابقة لروبن لي كمؤثر. [29] [25] حافظت جوجل أيضًا على واجهة بسيطة لمحرك البحث الخاص بها. في المقابل، قام العديد من منافسيها بتضمين محرك بحث في بوابة ويب . في الواقع، أصبح محرك بحث جوجل شائعًا جدًا لدرجة ظهور محركات الاحتيال مثل Mystery Seeker .

بحلول عام 2000، كانت شركة ياهو! تقدم خدمات بحث تعتمد على محرك بحث Inktomi. وفي عام 2002، استحوذت شركة ياهو! على Inktomi، وفي عام 2003، استحوذت شركة Overture (التي كانت تمتلك AlltheWeb وAltaVista). وتحولت شركة ياهو! إلى محرك بحث Google حتى عام 2004، عندما أطلقت محرك بحث خاص بها يعتمد على التقنيات المجمعة لعمليات الاستحواذ التي قامت بها.

أطلقت شركة مايكروسوفت خدمة البحث MSN لأول مرة في خريف عام 1998 باستخدام نتائج البحث من Inktomi. وفي أوائل عام 1999، بدأ الموقع في عرض قوائم من Looksmart ، ممزوجة بنتائج من Inktomi. ولفترة قصيرة في عام 1999، استخدمت خدمة البحث MSN نتائج من AltaVista بدلاً من ذلك. وفي عام 2004، بدأت شركة مايكروسوفت في الانتقال إلى تقنية البحث الخاصة بها، والتي تعمل بواسطة برنامج الزحف على الويب الخاص بها (المسمى msnbot ).

تم إطلاق محرك البحث Bing الذي أطلقته شركة Microsoft في الأول من يونيو عام 2009. وفي 29 يوليو عام 2009، توصلت شركة Yahoo! وشركة Microsoft إلى اتفاق يتم بموجبه تشغيل محرك البحث Yahoo! بواسطة تقنية Microsoft Bing.

اعتبارًا من عام 2019، تتضمن برامج الزحف لمحركات البحث النشطة تلك الخاصة بـ Google و Sogou وBaidu وBing و Gigablast و Mojeek و DuckDuckGo و Yandex .

يقترب

يحافظ محرك البحث على العمليات التالية في الوقت الفعلي تقريبًا: [34]

  1. الزحف على الويب
  2. الفهرسة
  3. البحث [35]

تحصل محركات البحث على الويب على معلوماتها من خلال الزحف على الويب من موقع إلى آخر. يتحقق "العنكبوت" من اسم الملف القياسي robots.txt الموجه إليه. يحتوي ملف robots.txt على توجيهات لعناكب البحث، تخبرها بالصفحات التي يجب الزحف إليها والصفحات التي لا يجب الزحف إليها. بعد التحقق من ملف robots.txt وإما العثور عليه أم لا، يرسل العنكبوت معلومات معينة مرة أخرى ليتم فهرستها اعتمادًا على العديد من العوامل، مثل العناوين أو محتوى الصفحة أو JavaScript أو Cascading Style Sheets (CSS) أو العناوين الرئيسية أو بيانات التعريف الخاصة بها في علامات التعريف HTML . بعد عدد معين من الصفحات التي تم الزحف إليها أو كمية البيانات المفهرسة أو الوقت المستغرق في موقع الويب، يتوقف العنكبوت عن الزحف وينتقل إلى موقع آخر. "[لا] يمكن لأي برنامج زحف على الويب أن يزحف فعليًا إلى الويب الذي يمكن الوصول إليه بالكامل. ونظرًا لوجود عدد لا نهائي من المواقع الإلكترونية، وفخاخ العنكبوت، والرسائل غير المرغوب فيها، وغير ذلك من متطلبات الويب الحقيقي، فإن برامج الزحف تطبق بدلاً من ذلك سياسة زحف لتحديد متى يجب اعتبار زحف موقع ما كافيًا. يتم زحف بعض المواقع الإلكترونية بشكل شامل، بينما يتم زحف البعض الآخر جزئيًا فقط". [36]

الفهرسة تعني ربط الكلمات والرموز الأخرى القابلة للتعريف الموجودة على صفحات الويب بأسماء المجالات والحقول المستندة إلى HTML . يتم إجراء الارتباطات في قاعدة بيانات عامة، متاحة لاستعلامات البحث على الويب. يمكن أن يكون الاستعلام من المستخدم كلمة واحدة أو كلمات متعددة أو جملة. يساعد الفهرس في العثور على المعلومات المتعلقة بالاستعلام في أسرع وقت ممكن. [35] بعض تقنيات الفهرسة والتخزين المؤقت هي أسرار تجارية، في حين أن الزحف على الويب هو عملية مباشرة لزيارة جميع المواقع على أساس منهجي.

بين زيارات العنكبوت ، يتم إرسال النسخة المخبأة من الصفحة (بعض أو كل المحتوى المطلوب لعرضها) المخزنة في ذاكرة محرك البحث العاملة بسرعة إلى السائل. إذا تأخرت الزيارة، يمكن لمحرك البحث أن يعمل كوكيل ويب بدلاً من ذلك. في هذه الحالة، قد تختلف الصفحة عن مصطلحات البحث المفهرسة. [35] تحتفظ الصفحة المخبأة بمظهر الإصدار الذي تمت فهرسة كلماته مسبقًا، لذلك يمكن أن تكون النسخة المخبأة من الصفحة مفيدة لموقع الويب عندما تُفقد الصفحة الفعلية، ولكن هذه المشكلة تعتبر أيضًا شكلًا خفيفًا من تعفن الروابط .

هندسة عالية المستوى لبرنامج الزحف على الويب القياسي

عادةً ما يكون عدد الكلمات الرئيسية التي يدخلها المستخدم في محرك البحث عند إدخاله استعلامًا . [ 37] يحتوي الفهرس بالفعل على أسماء المواقع التي تحتوي على الكلمات الرئيسية، ويتم الحصول عليها على الفور من الفهرس. يقع عبء المعالجة الحقيقي في إنشاء صفحات الويب التي تمثل قائمة نتائج البحث: يجب ترجيح كل صفحة في القائمة بأكملها وفقًا للمعلومات الموجودة في الفهارس. [35] ثم يتطلب عنصر نتيجة البحث الأعلى البحث وإعادة البناء ووضع العلامات على المقاطع التي تُظهر سياق الكلمات الرئيسية المطابقة. هذه ليست سوى جزء من المعالجة التي تتطلبها كل صفحة ويب لنتائج البحث، وتتطلب الصفحات الإضافية (بجوار الجزء العلوي) المزيد من هذه المعالجة اللاحقة.

إلى جانب عمليات البحث البسيطة عن الكلمات الرئيسية، تقدم محركات البحث واجهة المستخدم الرسومية الخاصة بها - أو مشغلات مدفوعة بالأوامر ومعلمات البحث لتحسين نتائج البحث. توفر هذه الضوابط اللازمة للمستخدم المنخرط في حلقة التغذية الراجعة التي ينشئها المستخدمون عن طريق التصفية والترجيح أثناء تحسين نتائج البحث، مع الأخذ في الاعتبار الصفحات الأولية لنتائج البحث الأولى. على سبيل المثال، منذ عام 2007، سمح محرك بحث Google.com للمرء بالتصفية حسب التاريخ من خلال النقر فوق "إظهار أدوات البحث" في العمود الأيسر من صفحة نتائج البحث الأولية، ثم تحديد نطاق التاريخ المطلوب. [38] من الممكن أيضًا الترجيح حسب التاريخ لأن كل صفحة لها وقت تعديل. تدعم معظم محركات البحث استخدام المشغلات المنطقية AND وOR وNOT لمساعدة المستخدمين النهائيين على تحسين استعلام البحث . المشغلات المنطقية مخصصة لعمليات البحث الحرفية التي تسمح للمستخدم بتحسين وتوسيع مصطلحات البحث. يبحث المحرك عن الكلمات أو العبارات تمامًا كما تم إدخالها. توفر بعض محركات البحث ميزة متقدمة تسمى البحث عن القرب ، والتي تسمح للمستخدمين بتحديد المسافة بين الكلمات الرئيسية. [35] هناك أيضًا بحث قائم على المفاهيم حيث يتضمن البحث استخدام التحليل الإحصائي للصفحات التي تحتوي على الكلمات أو العبارات التي تبحث عنها.

تعتمد فائدة محرك البحث على مدى ملاءمة مجموعة النتائج التي يقدمها. فبينما قد توجد ملايين صفحات الويب التي تتضمن كلمة أو عبارة معينة، فقد تكون بعض الصفحات أكثر صلة أو شعبية أو موثوقية من غيرها. وتستخدم معظم محركات البحث أساليب لترتيب النتائج لتقديم "أفضل" النتائج أولاً. وتختلف الطريقة التي يقرر بها محرك البحث الصفحات التي تمثل أفضل التطابقات، والترتيب الذي يجب أن تظهر به النتائج، اختلافًا كبيرًا من محرك إلى آخر. [35] كما تتغير الأساليب بمرور الوقت مع تغير استخدام الإنترنت وتطور التقنيات الجديدة. وهناك نوعان رئيسيان من محركات البحث التي تطورت: الأول هو نظام من الكلمات الرئيسية المحددة مسبقًا والمرتبة هرميًا والتي برمجها البشر على نطاق واسع. والثاني هو نظام يولد " فهرسًا مقلوبًا " من خلال تحليل النصوص التي يحددها. ويعتمد هذا الشكل الأول بشكل أكبر على الكمبيوتر نفسه للقيام بمعظم العمل.

إن أغلب محركات البحث على شبكة الإنترنت عبارة عن مشاريع تجارية مدعومة بإيرادات الإعلانات ، وبالتالي فإن بعضها يسمح للمعلنين بترتيب قوائمهم في مرتبة أعلى في نتائج البحث مقابل رسوم. وتجني محركات البحث التي لا تقبل المال مقابل نتائج البحث المال من خلال تشغيل إعلانات مرتبطة بالبحث إلى جانب نتائج محرك البحث العادية. وتجني محركات البحث المال في كل مرة ينقر فيها شخص ما على أحد هذه الإعلانات. [39]

البحث المحلي هو العملية التي تعمل على تحسين جهود الشركات المحلية. فهي تركز على التغيير للتأكد من أن جميع عمليات البحث متسقة. وهذا مهم لأن العديد من الأشخاص يحددون المكان الذي يخططون للذهاب إليه وما يشترونه بناءً على عمليات البحث الخاصة بهم. [40]

الحصة السوقية

اعتبارًا من يناير 2022، أصبح جوجل محرك البحث الأكثر استخدامًا في العالم، بحصة سوقية تبلغ 90.6٪، وكانت محركات البحث الأخرى الأكثر استخدامًا في العالم هي بينج وياهو! وبايدو وياندكس ودك دك جو . [ 2 ] في عام 2024، حُكم على هيمنة جوجل بأنها احتكار غير قانوني في قضية رفعتها وزارة العدل الأمريكية. [41]

روسيا وشرق آسيا

في روسيا، تبلغ حصة ياندكس في السوق 62.6%، مقارنة بحصة جوجل البالغة 28.3%. وياندكس هو ثاني أكثر محرك بحث استخدامًا على الهواتف الذكية في آسيا وأوروبا. [42] في الصين، بايدو هو محرك البحث الأكثر شعبية. [43] تُستخدم بوابة البحث المحلية في كوريا الجنوبية، نافير ، في 62.8% من عمليات البحث عبر الإنترنت في البلاد. [44] ياهو! اليابان وياهو ! تايوان هما أكثر الطرق شيوعًا لعمليات البحث على الإنترنت في اليابان وتايوان على التوالي. [45] الصين هي واحدة من الدول القليلة التي لا يكون فيها جوجل ضمن أفضل ثلاثة محركات بحث على الويب من حيث حصة السوق. كان جوجل سابقًا محرك بحث رائد في الصين، لكنه انسحب بعد خلاف مع الحكومة بشأن الرقابة وهجوم إلكتروني. لكن بينج ضمن أفضل ثلاثة محركات بحث على الويب بحصة سوقية تبلغ 14.95%. بايدو في المقدمة بحصة سوقية تبلغ 49.1%. [46] [ بحاجة لمصدر ]

أوروبا

تسيطر شركة جوجل على أسواق معظم دول الاتحاد الأوروبي، باستثناء جمهورية التشيك ، حيث تعد شركة سيزنام منافسًا قويًا. [47]

يقع المقر الرئيسي لمحرك البحث Qwant في باريس ، فرنسا ، حيث يجذب معظم مستخدميه المسجلين شهريًا والبالغ عددهم 50 مليونًا.

تحيز محرك البحث

على الرغم من برمجة محركات البحث لتصنيف المواقع الإلكترونية بناءً على مزيج من شعبيتها وأهميتها، تشير الدراسات التجريبية إلى وجود تحيزات سياسية واقتصادية واجتماعية مختلفة في المعلومات التي تقدمها [48] [49] والافتراضات الأساسية حول التكنولوجيا. [50] يمكن أن تكون هذه التحيزات نتيجة مباشرة للعمليات الاقتصادية والتجارية (على سبيل المثال، يمكن للشركات التي تعلن باستخدام محرك بحث أن تصبح أيضًا أكثر شهرة في نتائج البحث العضوية الخاصة بها )، والعمليات السياسية (على سبيل المثال، إزالة نتائج البحث للامتثال للقوانين المحلية). [51] على سبيل المثال، لن تعرض Google بعض مواقع الويب النازية الجديدة في فرنسا وألمانيا، حيث يُعد إنكار الهولوكوست غير قانوني.

يمكن أن تكون التحيزات أيضًا نتيجة لعمليات اجتماعية، حيث يتم تصميم خوارزميات محرك البحث بشكل متكرر لاستبعاد وجهات النظر غير المعيارية لصالح نتائج أكثر "شعبية". [52] تميل خوارزميات الفهرسة لمحركات البحث الرئيسية نحو تغطية المواقع الموجودة في الولايات المتحدة، بدلاً من مواقع الويب من دول غير الولايات المتحدة. [49]

يُعد قصف جوجل أحد الأمثلة على محاولة التلاعب بنتائج البحث لأسباب سياسية أو اجتماعية أو تجارية.

قام العديد من العلماء بدراسة التغيرات الثقافية التي تسببها محركات البحث، [53] وتمثيل بعض المواضيع المثيرة للجدل في نتائجهم، مثل الإرهاب في أيرلندا ، [54] وإنكار تغير المناخ ، [55] ونظريات المؤامرة . [56]

نتائج مخصصة وفقاعات التصفية

أثيرت مخاوف من أن محركات البحث مثل جوجل وبينج تقدم نتائج مخصصة بناءً على تاريخ نشاط المستخدم، مما يؤدي إلى ما أطلق عليه إيلي باريزر في عام 2011 غرف الصدى أو فقاعات التصفية. [57] والحجة هي أن محركات البحث ومنصات الوسائط الاجتماعية تستخدم خوارزميات لتخمين المعلومات التي يرغب المستخدم في رؤيتها بشكل انتقائي، بناءً على معلومات حول المستخدم (مثل الموقع وسلوك النقر السابق وسجل البحث). ونتيجة لذلك، تميل مواقع الويب إلى عرض المعلومات التي تتفق مع وجهة نظر المستخدم السابقة فقط. ووفقًا لإيلي باريزر ، يتعرض المستخدمون لتعرض أقل لوجهات نظر متضاربة ويتم عزلهم فكريًا في فقاعة المعلومات الخاصة بهم. ومنذ تحديد هذه المشكلة، ظهرت محركات بحث متنافسة تسعى إلى تجنب هذه المشكلة من خلال عدم تتبع المستخدمين أو "فقاعاتهم"، مثل DuckDuckGo . ومع ذلك، شكك العديد من العلماء في وجهة نظر باريسر، ووجدوا أن هناك القليل من الأدلة على فقاعة التصفية. [58] [59] [60] على العكس من ذلك، وجدت العديد من الدراسات التي تحاول التحقق من وجود فقاعات التصفية مستويات طفيفة فقط من التخصيص في البحث، [60] وأن معظم الأشخاص يواجهون مجموعة من وجهات النظر عند التصفح عبر الإنترنت، وأن أخبار جوجل تميل إلى الترويج لمنافذ الأخبار السائدة. [61] [59]

محركات البحث الدينية

لقد شجع النمو العالمي للإنترنت والوسائط الإلكترونية في العالم العربي والإسلامي خلال العقد الماضي أتباع الإسلام في الشرق الأوسط وشبه القارة الآسيوية على تجربة محركات البحث الخاصة بهم، وبوابات البحث المفلترة الخاصة بهم والتي من شأنها تمكين المستخدمين من إجراء عمليات بحث آمنة . أكثر من مرشحات البحث الآمن المعتادة ، تصنف بوابات الويب الإسلامية مواقع الويب إلى " حلال " أو " حرام "، بناءً على تفسير الشريعة الإسلامية . ظهر ImHalal على الإنترنت في سبتمبر 2011. ظهر Halalgoogling على الإنترنت في يوليو 2013. تستخدم هذه المرشحات الحرام في المجموعات من Google و Bing (وغيرها). [62]

في حين أن الافتقار إلى الاستثمار والبطء في وتيرة التكنولوجيا في العالم الإسلامي أعاق التقدم وأحبط نجاح محرك بحث إسلامي يستهدف أتباع الإسلام كمستهلكين رئيسيين، تلقت مشاريع مثل Muxlim (موقع نمط حياة إسلامي) ملايين الدولارات من مستثمرين مثل Rite Internet Ventures، كما تعثرت أيضًا. محركات البحث الأخرى الموجهة نحو الدين هي Jewogle، النسخة اليهودية من Google، [63] ومحرك البحث المسيحي SeekFind.org. يقوم SeekFind بتصفية المواقع التي تهاجم أو تسيء إلى إيمانهم. [64]

إرسال إلى محرك البحث

إرسال محرك البحث على الويب هو عملية يقوم فيها مشرف الموقع بإرسال موقع ويب مباشرةً إلى محرك بحث. وفي حين يُقدَّم إرسال محرك البحث أحيانًا كوسيلة للترويج لموقع ويب، فإنه ليس ضروريًا بشكل عام لأن محركات البحث الرئيسية تستخدم برامج زحف الويب التي ستجد في النهاية معظم مواقع الويب على الإنترنت دون مساعدة. ويمكنها إما إرسال صفحة ويب واحدة في كل مرة، أو إرسال الموقع بالكامل باستخدام خريطة الموقع ، ولكن عادةً ما يكون من الضروري فقط إرسال الصفحة الرئيسية لموقع الويب لأن محركات البحث قادرة على زحف موقع ويب مصمم جيدًا. هناك سببان متبقيان لإرسال موقع ويب أو صفحة ويب إلى محرك بحث: إضافة موقع ويب جديد تمامًا دون انتظار محرك بحث لاكتشافه، وتحديث سجل موقع الويب بعد إعادة تصميم كبيرة.

لا تقوم بعض برامج إرسال محركات البحث بإرسال المواقع الإلكترونية إلى محركات بحث متعددة فحسب، بل تضيف أيضًا روابط إلى المواقع الإلكترونية من صفحاتها الخاصة. وقد يبدو هذا مفيدًا في زيادة ترتيب الموقع الإلكتروني ، لأن الروابط الخارجية هي أحد أهم العوامل التي تحدد ترتيب الموقع الإلكتروني. ومع ذلك، ذكر جون مولر من جوجل أن هذا "يمكن أن يؤدي إلى عدد هائل من الروابط غير الطبيعية لموقعك" مع تأثير سلبي على ترتيب الموقع. [65]

مقارنة بالعلامات المرجعية الاجتماعية

بالمقارنة مع محركات البحث، يتمتع نظام الإشارات المرجعية الاجتماعية بالعديد من المزايا مقارنة ببرامج تحديد موقع الموارد وتصنيفها الآلية التقليدية، مثل عناكب محركات البحث . يتم إجراء جميع التصنيفات القائمة على العلامات لموارد الإنترنت (مثل مواقع الويب) بواسطة البشر، الذين يفهمون محتوى المورد، على عكس البرامج، التي تحاول خوارزميًا تحديد معنى وجودة المورد. أيضًا، يمكن للأشخاص العثور على صفحات الويب التي لم يلاحظها أو يفهرسها عناكب الويب ووضع إشارات مرجعية عليها. [66] بالإضافة إلى ذلك، يمكن لنظام الإشارات المرجعية الاجتماعية تصنيف المورد بناءً على عدد المرات التي تم وضع إشارة مرجعية عليه من قبل المستخدمين، وقد يكون هذا مقياسًا أكثر فائدة للمستخدمين النهائيين من الأنظمة التي تصنف الموارد بناءً على عدد الروابط الخارجية التي تشير إليها. ومع ذلك، فإن كلا النوعين من التصنيف معرضان للاحتيال (انظر التلاعب بالنظام )، وكلاهما يحتاج إلى تدابير مضادة تقنية لمحاولة التعامل مع هذا.

تكنولوجيا

ارشي

كان أول محرك بحث على الويب هو Archie ، الذي أنشأه آلان إمتاج ، وهو طالب بجامعة ماكجيل في مونتريال، في عام 1990 [67] . أراد المؤلف في الأصل تسمية البرنامج "أرشيفات"، لكنه اضطر إلى اختصاره ليتوافق مع معيار يونكس العالمي لتعيين أسماء قصيرة وغامضة للبرامج والملفات مثل grep وcat وtroff وsed وawk وperl وما إلى ذلك.

كانت الطريقة الأساسية لتخزين الملفات واسترجاعها هي عبر بروتوكول نقل الملفات (FTP). كان هذا (ولا يزال) نظامًا يحدد طريقة شائعة لأجهزة الكمبيوتر لتبادل الملفات عبر الإنترنت. يعمل على النحو التالي: يقرر أحد المسؤولين أنه يريد توفير الملفات من جهاز الكمبيوتر الخاص به. يقوم بإعداد برنامج على جهاز الكمبيوتر الخاص به، يسمى خادم FTP. عندما يريد شخص ما على الإنترنت استرداد ملف من هذا الكمبيوتر، فإنه يتصل به عبر برنامج آخر يسمى عميل FTP. يمكن لأي برنامج عميل FTP الاتصال بأي برنامج خادم FTP طالما أن برامج العميل والخادم تتبعان تمامًا المواصفات المنصوص عليها في بروتوكول FTP.

في البداية، كان على أي شخص يرغب في مشاركة ملف أن يقوم بإعداد خادم FTP حتى يصبح الملف متاحًا للآخرين. وفي وقت لاحق، أصبحت مواقع FTP "المجهولة" مستودعات للملفات، مما يسمح لجميع المستخدمين بنشرها واسترجاعها.

حتى مع وجود مواقع الأرشيف، كانت العديد من الملفات المهمة متناثرة على خوادم FTP صغيرة. ولم يكن من الممكن تحديد موقع هذه الملفات إلا من خلال ما يعادل الإنترنت من خلال الكلام الشفهي: حيث يقوم شخص ما بنشر رسالة بريد إلكتروني إلى قائمة رسائل أو منتدى نقاش يعلن فيها عن توفر ملف ما.

لقد غير Archie كل ذلك. فقد قام بدمج أداة تجميع بيانات تعتمد على النصوص البرمجية، والتي تقوم بجلب قوائم المواقع التي تحتوي على ملفات FTP مجهولة الهوية، مع أداة مطابقة التعبيرات العادية لاسترداد أسماء الملفات المطابقة لاستعلام المستخدم. (4) بعبارة أخرى، قامت أداة التجميع الخاصة بـ Archie بفحص مواقع FTP عبر الإنترنت وفهرسة جميع الملفات التي وجدتها. كما وفرت أداة مطابقة التعبيرات العادية للمستخدمين إمكانية الوصول إلى قاعدة البيانات الخاصة بها. [68]

فيرونيكا

في عام 1993، طورت مجموعة خدمات الحوسبة بجامعة نيفادا برنامج فيرونيكا . [67] وقد تم إنشاؤه كنوع من أجهزة البحث المشابهة لبرنامج آرتشي ولكن لملفات جوفر. ظهرت خدمة بحث جوفر أخرى تسمى جوجيد بعد ذلك بقليل، ربما لغرض وحيد وهو استكمال الثلاثية المصورة. جوجيد هو اختصار لـ Jonzy's Universal Gopher Hierarchy Excavation and Display، على الرغم من أنه، مثل فيرونيكا، من المحتمل أن يكون من الآمن افتراض أن المبدع قد تراجع عن الاختصار. كانت وظيفة جوجيد متطابقة إلى حد كبير مع وظيفة فيرونيكا، على الرغم من أنها تبدو أكثر خشونة قليلاً حول الحواف. [68]

المتجول الوحيد

كان World Wide Web Wanderer ، الذي طوره ماثيو جراي في عام 1993 [69] ، أول روبوت على الويب وصُمم لتتبع نمو الويب. في البداية، كان Wanderer يحسب خوادم الويب فقط، ولكن بعد فترة وجيزة من طرحه، بدأ في التقاط عناوين URL أثناء عمله. أصبحت قاعدة بيانات عناوين URL الملتقطة Wandex، أول قاعدة بيانات ويب.

لقد أثار برنامج Wanderer الذي ابتكره ماثيو جراي جدلاً واسع النطاق في ذلك الوقت، ويرجع ذلك جزئياً إلى انتشار الإصدارات المبكرة من البرنامج على نطاق واسع عبر شبكة الإنترنت، مما تسبب في تدهور ملحوظ في الأداء على مستوى الشبكة. وقد حدث هذا التدهور لأن برنامج Wanderer كان يقوم بالوصول إلى نفس الصفحة مئات المرات في اليوم. وسرعان ما عدل برنامج Wanderer من أساليبه، ولكن الجدل حول ما إذا كانت الروبوتات مفيدة أم ضارة للإنترنت ظل قائماً.

ردًا على Wanderer، أنشأ Martijn Koster فهرسة الويب الشبيهة بـ Archie، أو ALIWEB، في أكتوبر 1993. وكما يوحي الاسم، كان ALIWEB هو المعادل HTTP لـ Archie، ولهذا السبب، لا يزال فريدًا من نوعه في كثير من النواحي.

لا يحتوي ALIWEB على روبوت للبحث على الويب. بدلاً من ذلك، يقوم مشرفو المواقع المشاركة بنشر معلومات الفهرس الخاصة بهم لكل صفحة يريدون إدراجها. تتمثل ميزة هذه الطريقة في أن المستخدمين يستطيعون وصف مواقعهم بأنفسهم، ولا يعمل الروبوت على استهلاك عرض النطاق الترددي للشبكة. أصبحت عيوب ALIWEB مشكلة أكبر اليوم. العيب الأساسي هو أنه يجب تقديم ملف فهرسة خاص. لا يفهم معظم المستخدمين كيفية إنشاء مثل هذا الملف، وبالتالي لا يقدمون صفحاتهم. يؤدي هذا إلى قاعدة بيانات صغيرة نسبيًا، مما يعني أن المستخدمين أقل ميلاً للبحث في ALIWEB مقارنة بأحد المواقع الكبيرة القائمة على الروبوتات. تم تعويض هذا الموقف المحرج إلى حد ما من خلال دمج قواعد بيانات أخرى في بحث ALIWEB، لكنه لا يزال لا يتمتع بالجاذبية الجماهيرية لمحركات البحث مثل Yahoo! أو Lycos. [68]

إثارة

تم تأسيس Excite ، والذي كان يسمى في البداية Architext، بواسطة ستة طلاب جامعيين من جامعة ستانفورد في فبراير 1993. كانت فكرتهم هي استخدام التحليل الإحصائي للعلاقات اللفظية من أجل توفير عمليات بحث أكثر كفاءة من خلال كمية كبيرة من المعلومات على الإنترنت. تم تمويل مشروعهم بالكامل بحلول منتصف عام 1993. بمجرد تأمين التمويل، أصدروا نسخة من برنامج البحث الخاص بهم لاستخدامه من قبل مشرفي المواقع على مواقع الويب الخاصة بهم. في ذلك الوقت، كان البرنامج يسمى Architext، لكنه يُعرف الآن باسم Excite for Web Servers. [68]

كان Excite أول محرك بحث تجاري جاد تم إطلاقه في عام 1995. [70] تم تطويره في جامعة ستانفورد وتم شراؤه مقابل 6.5 مليار دولار بواسطة @Home. في عام 2001، أفلست Excite و@Home واشترت InfoSpace Excite مقابل 10 ملايين دولار.

تم إجراء بعض التحليلات الأولى للبحث على الويب على سجلات البحث من Excite [71] [72]

ياهو!

في أبريل 1994، أنشأ اثنان من المرشحين لنيل درجة الدكتوراه من جامعة ستانفورد، ديفيد فيلو وجيري يانج ، بعض الصفحات التي أصبحت مشهورة إلى حد ما. أطلقا على مجموعة الصفحات اسم ياهو! وكان تفسيرهما الرسمي لاختيار الاسم هو أنهما اعتبرا نفسيهما زوجًا من الياهو.

ومع تزايد عدد الروابط وبدء صفحاتها في تلقي آلاف الزيارات يوميًا، ابتكر الفريق طرقًا لتنظيم البيانات بشكل أفضل. ومن أجل المساعدة في استرجاع البيانات، أصبح موقع Yahoo! (www.yahoo.com) دليلًا يمكن البحث فيه. وكانت ميزة البحث عبارة عن محرك بحث بسيط لقاعدة البيانات. ولأن إدخالات Yahoo! كانت تُدخل وتُصنف يدويًا، لم يتم تصنيف Yahoo! حقًا كمحرك بحث. بل كان يُنظر إليه عمومًا على أنه دليل يمكن البحث فيه. ومنذ ذلك الحين، قامت Yahoo! بأتمتة بعض جوانب عملية التجميع والتصنيف، مما أدى إلى طمس التمييز بين المحرك والدليل.

لم يلتقط The Wanderer سوى عناوين URL، مما جعل من الصعب العثور على الأشياء التي لم يتم وصفها صراحةً بواسطة عنوان URL الخاص بها. ولأن عناوين URL غامضة إلى حد ما في البداية، فإن هذا لم يساعد المستخدم العادي. كان البحث في Yahoo! أو Galaxy أكثر فعالية لأنها تحتوي على معلومات وصفية إضافية حول المواقع المفهرسة.

لايكوس

في جامعة كارنيجي ميلون خلال شهر يوليو 1994، قام مايكل مولدين، أثناء إجازته من جامعة كارنيجي ميلون، بتطوير محرك البحث Lycos .

أنواع محركات البحث على الويب

محركات البحث على الويب هي مواقع مزودة بإمكانية البحث عن المحتوى المخزن على مواقع أخرى. هناك اختلاف في طريقة عمل محركات البحث المختلفة، لكنها جميعًا تؤدي ثلاث مهام أساسية. [73]

  1. العثور على المحتوى الكامل أو الجزئي وتحديده استنادًا إلى الكلمات الرئيسية المقدمة.
  2. الحفاظ على فهرس المحتوى والإشارة إلى الموقع الذي وجدوه فيه
  3. السماح للمستخدمين بالبحث عن الكلمات أو مجموعات الكلمات الموجودة في هذا الفهرس.

تبدأ العملية عندما يقوم المستخدم بإدخال بيان استعلام في النظام من خلال الواجهة المقدمة.

يكتب مثال وصف
عادي فهرس المكتبة البحث عن طريق الكلمة الرئيسية، العنوان، المؤلف، الخ.
مبني على النص جوجل، بينج، ياهو! البحث باستخدام الكلمات الرئيسية. بحث محدود باستخدام الاستعلامات باللغة الطبيعية.
يعتمد على الصوت جوجل، بينج، ياهو! البحث باستخدام الكلمات الرئيسية. بحث محدود باستخدام الاستعلامات باللغة الطبيعية.
البحث في الوسائط المتعددة QBIC، WebSeek، SaFe البحث حسب المظهر المرئي (الأشكال، الألوان،..)
س/ج تبادل المكدس ، NSIR البحث في اللغة الطبيعية (المقيدة)
أنظمة التجميع فيفيسيمو، كلستي
أنظمة البحث ليمور، نوتش

هناك بشكل أساسي ثلاثة أنواع من محركات البحث: تلك التي تعمل بواسطة الروبوتات (تسمى الزواحف ؛ النمل أو العناكب) وتلك التي تعمل بواسطة الإرساليات البشرية؛ وتلك التي هي مزيج من الاثنين.

محركات البحث القائمة على الزاحف هي تلك التي تستخدم وكلاء برمجيين آليين (يطلق عليهم اسم الزاحفين) يقومون بزيارة موقع ويب وقراءة المعلومات الموجودة على الموقع الفعلي وقراءة العلامات الوصفية للموقع وتتبع أيضًا الروابط التي يتصل بها الموقع لإجراء الفهرسة على جميع مواقع الويب المرتبطة أيضًا. يعيد الزاحف كل هذه المعلومات إلى مستودع مركزي، حيث تتم فهرسة البيانات. سيعود الزاحف بشكل دوري إلى المواقع للتحقق من أي معلومات تغيرت. يتم تحديد تكرار حدوث ذلك من قبل مسؤولي محرك البحث.

تعتمد محركات البحث التي تعمل بالطاقة البشرية على البشر لتقديم المعلومات التي يتم فهرستها وفهرستها لاحقًا. يتم وضع المعلومات المقدمة فقط في الفهرس.

في كلتا الحالتين، عندما تستفسر من محرك بحث للعثور على معلومات، فإنك في الواقع تبحث من خلال الفهرس الذي أنشأه محرك البحث ـ فأنت في الواقع لا تبحث في الويب. فهذه الفهرس عبارة عن قواعد بيانات عملاقة من المعلومات التي يتم جمعها وتخزينها ثم البحث فيها. وهذا يفسر لماذا قد يؤدي البحث في محرك بحث تجاري، مثل ياهو! أو جوجل، في بعض الأحيان إلى نتائج عبارة عن روابط ميتة في الواقع. ولأن نتائج البحث تعتمد على الفهرس، فإذا لم يتم تحديث الفهرس منذ أن أصبحت صفحة الويب غير صالحة، فإن محرك البحث يعامل الصفحة على أنها لا تزال رابطًا نشطًا حتى لو لم تعد كذلك. وسوف تظل على هذا النحو حتى يتم تحديث الفهرس.

ولكن لماذا ينتج عن نفس البحث على محركات بحث مختلفة نتائج مختلفة؟ جزء من الإجابة على هذا السؤال هو أن جميع الفهارس لن تكون متماثلة تمامًا. ويعتمد الأمر على ما تجده العناكب أو ما يقدمه البشر. ولكن الأهم من ذلك، أن محركات البحث لا تستخدم نفس الخوارزمية للبحث عبر الفهارس. والخوارزمية هي ما تستخدمه محركات البحث لتحديد مدى صلة المعلومات الموجودة في الفهرس بما يبحث عنه المستخدم.

أحد العناصر التي تبحث عنها خوارزمية محرك البحث هو تكرار الكلمات الرئيسية وموقعها على صفحة الويب. وعادة ما تعتبر الكلمات ذات التكرار الأعلى أكثر صلة. لكن تكنولوجيا محرك البحث أصبحت متطورة في محاولتها تثبيط ما يُعرف بحشو الكلمات الرئيسية أو spamdexing.

من العناصر المشتركة الأخرى التي تحللها الخوارزميات هي الطريقة التي ترتبط بها الصفحات بصفحات أخرى على الويب. من خلال تحليل كيفية ارتباط الصفحات ببعضها البعض، يمكن للمحرك تحديد موضوع الصفحة (إذا كانت الكلمات الرئيسية للصفحات المرتبطة مماثلة للكلمات الرئيسية في الصفحة الأصلية) وما إذا كانت هذه الصفحة تعتبر "مهمة" وتستحق تعزيزًا في التصنيف. وكما أصبحت التكنولوجيا متطورة بشكل متزايد لتجاهل حشو الكلمات الرئيسية، فقد أصبحت أيضًا أكثر ذكاءً بالنسبة لمشرفي الويب الذين يقومون ببناء روابط اصطناعية في مواقعهم من أجل بناء ترتيب اصطناعي.

محركات البحث الحديثة على شبكة الإنترنت عبارة عن أنظمة برمجية معقدة للغاية تستخدم تكنولوجيا تطورت على مر السنين. هناك عدد من الفئات الفرعية لبرامج محركات البحث التي يمكن تطبيقها بشكل منفصل على احتياجات "التصفح" المحددة. وتشمل هذه محركات البحث على شبكة الإنترنت (مثل Google ) ومحركات البحث القائمة على قواعد البيانات أو البيانات المنظمة (مثل Dieselpoint ) ومحركات البحث المختلطة أو البحث المؤسسي. تستخدم محركات البحث الأكثر انتشارًا، مثل Google و Yahoo !، مئات الآلاف من أجهزة الكمبيوتر لمعالجة تريليونات صفحات الويب من أجل إرجاع نتائج جيدة التوجيه إلى حد ما. ونظرًا لهذا الحجم الكبير من الاستعلامات ومعالجة النصوص، يلزم تشغيل البرنامج في بيئة شديدة التشتت بدرجة عالية من الفائض.

فئة أخرى من محركات البحث هي محركات البحث العلمية. وهي محركات بحث تبحث في الأدبيات العلمية. وأشهر مثال على ذلك هو Google Scholar. ويعمل الباحثون على تحسين تكنولوجيا محرك البحث من خلال تمكينهم من فهم عنصر المحتوى في المقالات، مثل استخراج المفاهيم النظرية أو النتائج البحثية الرئيسية. [74]

انظر أيضا

مراجع

  1. ^ "حصة سوق محركات البحث في جميع أنحاء العالم | إحصائيات StatCounter العالمية". StatCounter . تم الاسترجاع في 19 فبراير 2024 .
  2. ^ "حصة سوق محركات البحث في جميع أنحاء العالم". Similarweb أفضل محركات البحث . تم الاسترجاع في 19 فبراير 2024 .
  3. ^ بوش، فانيفار (1945-07-01). "كما قد نفكر". الأطلسي . مؤرشف من الأصل في 2012-08-22 . استرجاع 2024-02-22 .
  4. ^ "Search Engine History.com". www.searchenginehistory.com . تم الاسترجاع في 2020-07-02 .
  5. ^ "Penn State WebAccess Secure Login". webaccess.psu.edu . مؤرشف من الأصل في 2022-01-22 . تم الاسترجاع في 2020-07-02 .
  6. ^ ماركيوري، ماسيمو (1997). "السعي للحصول على معلومات صحيحة على الويب: محركات البحث الفائقة". وقائع المؤتمر الدولي السادس للويب العالمي (WWW6) . تم استرجاعه في 10 يناير 2021 .
  7. ^ ab Brin, Sergey; Page, Larry (1998). "The Anatomy of a Large-Scale Hypertextual Web Search Engine" (PDF) . وقائع المؤتمر الدولي السابع للويب العالمي (WWW7) . مؤرشف من الأصل (PDF) في 2017-07-13 . تم الاسترجاع في 2021-01-10 .
  8. ^ هارينستين ، ك. وايت، ف. (1982). "RFC 812 - NICNAME/WHOIS". IETF تعقب البيانات . دوى : 10.17487/RFC0812 .
  9. ^ "برمجة Knowbot: دعم النظام للوكلاء المتنقلين". cnri.reston.va.us .
  10. ^ Deutsch, Peter (11 سبتمبر 1990). "[التالي] خادم أرشيف الإنترنت (كان حول Lisp)". groups.google.com . تم الاسترجاع في 2017-12-29 .
  11. ^ "خوادم الويب العالمية". W3C . تم الاسترجاع في 2012-05-14 .
  12. ^ "ما الجديد! فبراير 1994". شركة موزاييك للاتصالات! . تم الاسترجاع في 2012-05-14 .
  13. ^ Search Engine Watch (سبتمبر 2001). "محركات البحث". تاريخ الإنترنت . هولندا: جامعة لايدن. مؤرشف من الأصل في 13 أبريل 2009.
  14. ^ ab "Archie". PCMag . تم الاسترجاع في 2020-09-20 .
  15. ^ ألكسندرا صموئيل (21 فبراير 2017). "تعرف على آلان إمتاج، عالم التكنولوجيا الأسود الذي اخترع آرتشي، أول محرك بحث على الإنترنت". ITHAKA . تم الاسترجاع في 2020-09-20 .
  16. ^ loop news barbados. "Alan Emtage- a Barbadian you should know". loopnewsbarbados.com. مؤرشف من الأصل في 2020-09-23 . تم الاسترجاع 2020-09-21 .
  17. ^ دينو جراندوني، آلان إمتاج (أبريل 2013). "آلان إمتاج: الرجل الذي اخترع أول محرك بحث في العالم (ولكن لم يحصل على براءة اختراع له)". huffingtonpost .co.uk . تم الاسترجاع في 2020-09-21 .
  18. ^ أوسكار نيرشتراس (2 سبتمبر 1993). "كتالوج قابل للبحث لموارد شبكة الويب العالمية (تجريبي)".
  19. ^ "أرشيف صفحة ما الجديد في ديسمبر 1993 من NCSA". 2001-06-20. مؤرشف من الأصل في 2001-06-20 . تم استرجاعه في 2012-05-14 .
  20. ^ "ما هو المحرك الأول؟". SearchCIO . TechTarget . سبتمبر 2005 . تم الاسترجاع في 5 سبتمبر 2019 .
  21. ^ أوبيتز، ماركوس؛ تومسو، بيتر (2017). اختراع قرن السحابة: كيف تستمر السحابة في تغيير حياتنا واقتصادنا وتكنولوجيتنا. سبرينغر. ص 238. رقم ISBN 9783319611617.
  22. ^ "Yahoo! Search". Yahoo! . 28 نوفمبر 1996. مؤرشف من الأصل في 28 نوفمبر 1996. تم الاسترجاع 5 سبتمبر 2019 .
  23. ^ جرينبيرج، آندي، "الرجل الذي يهزم جوجل"، مجلة فوربس ، 5 أكتوبر 2009
  24. ^ يانهونغ لي، "نحو محرك بحث نوعي"، مجلة الحوسبة على الإنترنت التابعة لمعهد مهندسي الكهرباء والإلكترونيات ، المجلد 2، العدد 4، الصفحات 24-29، يوليو/أغسطس 1998، doi :10.1109/4236.707687
  25. ^ "حول: RankDex"، rankdex.com
  26. ^ USPTO, "Hypertext Document Retrieval System and Method", رقم براءة الاختراع الأمريكية: 5920859، المخترع: Yanhong Li، تاريخ التقديم: 5 فبراير 1997، تاريخ الإصدار: 6 يوليو 1999
  27. ^ "Baidu Vs Google: The Twins Of Search Compared". FourWeekMBA . 18 سبتمبر 2018 . تم الاسترجاع في 16 يونيو 2019 .
  28. ^ ألتوشر، جيمس (18 مارس 2011). "10 أشياء غير عادية عن جوجل". فوربس . تم الاسترجاع في 16 يونيو 2019 .
  29. ^ "طريقة ترتيب العقد في قاعدة بيانات مرتبطة". براءات اختراع جوجل. مؤرشف من الأصل في 15 أكتوبر 2015. تم الاسترجاع في 19 أكتوبر 2015 .
  30. ^ "ياهو! ونتسكيب توقعان اتفاقية توزيع دولية" (PDF) . مؤرشف من الأصل (PDF) في 2013-11-16 . تم الاسترجاع في 2009-08-12 .
  31. ^ "صفقات المتصفح تدفع سهم شركة Netscape إلى الارتفاع بنسبة 7.8%". لوس أنجلوس تايمز . 1 أبريل 1996.
  32. ^ جاندال، نيل (2001). "ديناميكيات المنافسة في سوق محركات البحث على الإنترنت". المجلة الدولية للتنظيم الصناعي . 19 (7): 1103-1117. doi :10.1016/S0167-7187(01)00065-0. ISSN  0167-7187.
  33. ^ "تاريخنا في العمق". مؤرشف من الأصل في 1 نوفمبر 2012. اطلع عليه بتاريخ 2012-10-31 .
  34. ^ "تعريف محرك البحث". Techtarget . تم الاسترجاع في 1 يونيو 2023 .
  35. ^ abcdef Jawadekar, Waman S (2011), "8. Knowledge Management: Tools and Technology", Knowledge Management: Text & Cases , New Delhi: Tata McGraw-Hill Education Private Ltd, p. 278, ISBN 978-0-07-07-0086-4تم استرجاعه في 23 نوفمبر 2012
  36. ^ داسجوبتا، أنيربان؛ غوش، أربيتا؛ كومار، رافي؛ أولستون، كريستوفر؛ باندي، سانديب؛ وتومكينز، أندرو. قابلية اكتشاف الويب . http://www.arpitaghosh.com/papers/discoverability.pdf
  37. ^ Jansen, BJ, Spink, A., and Saracevic, T. 2000. الحياة الواقعية والمستخدمون الحقيقيون والاحتياجات الحقيقية: دراسة وتحليل لاستفسارات المستخدمين على الويب. معالجة المعلومات وإدارتها. 36(2)، 207-227.
  38. ^ Chitu, Alex (30 أغسطس 2007). "طريقة سهلة للعثور على صفحات الويب الحديثة". نظام تشغيل Google . تم الاسترجاع في 22 فبراير 2015 .
  39. ^ "كيف يعمل محرك البحث؟". GFO . تم الاسترجاع في 26 يونيو 2018 .
  40. ^ "ما هو تحسين محركات البحث المحلية ولماذا يعد البحث المحلي مهمًا". مجلة محرك البحث . تم الاسترجاع في 2020-04-26 .
  41. ^ NPR https://www.npr.org/2024/05/02/1248152695/google-doj-monopoly-trial-antitrust-closing-arguments. {{cite web}}: مفقود أو فارغ |title=( مساعدة )
  42. ^ "Live Internet - Site Statistics". Live Internet . تم الاسترجاع في 2014-06-04 .
  43. ^ آرثر، تشارلز (2014-06-03). "شركات التكنولوجيا الصينية على وشك الهيمنة على العالم". الجارديان . تم الاسترجاع في 2014-06-04 .
  44. ^ "كيف يؤثر موقع Naver سلبًا على إنتاجية الشركات". وول ستريت جورنال . 2014-05-21 . تم الاسترجاع في 2014-06-04 .
  45. ^ "عصر إمبراطوريات الإنترنت". معهد أكسفورد للإنترنت . تم استرجاعه في 15 أغسطس 2019 .
  46. ^ Waddell, Kaveh (2016-01-19). "لماذا انسحبت جوجل من الصين ولماذا تتجه للعودة". The Atlantic . تم الاسترجاع في 2020-04-26 .
  47. ^ سيزنام يتحدى جوجل في جمهورية التشيك.
  48. ^ سيجيف، إل (2010). جوجل والفجوة الرقمية: تحيزات المعرفة عبر الإنترنت، أكسفورد: دار تشاندوس للنشر.
  49. ^ ab Vaughan, Liwen; Mike Thelwall (2004). "تحيز تغطية محرك البحث: الأدلة والأسباب المحتملة". معالجة المعلومات وإدارتها . 40 (4): 693-707. CiteSeerX 10.1.1.65.5130 . doi :10.1016/S0306-4573(03)00063-3. S2CID  18977861. 
  50. ^ Jansen, BJ and Rieh, S. (2010) The Seventeen Theoretical Constructs of Information Searching and Information Retrieval. مجلة الجمعية الأمريكية لعلوم وتكنولوجيا المعلومات. 61(8)، 1517–1534.
  51. ^ مركز بيركمان للإنترنت والمجتمع (2002)، "استبدال جوجل بأنظمة بحث بديلة في الصين: التوثيق ولقطات الشاشة"، كلية الحقوق بجامعة هارفارد.
  52. ^ إنترونا، لوكاس؛ هيلين نيسنباوم (2000). "تشكيل الويب: لماذا تشكل سياسات محركات البحث أهمية". مجتمع المعلومات . 16 (3): 169-185. CiteSeerX 10.1.1.24.8051 . doi :10.1080/01972240050133634. S2CID  2111039. 
  53. ^ هيلس، كين؛ بيتيت، مايكل؛ جاريت، كايلي (2012-10-12). جوجل وثقافة البحث . روتليدج. رقم ISBN 9781136933066.
  54. ^ رايلي، ب. (2008-01-01).البحث عن الإرهابيين على جوجل: هل يمكن رؤية الإرهابيين من أيرلندا الشمالية على محركات البحث على الإنترنت؟". في سبينك، البروفيسورة الدكتورة أماندا؛ زيمر، مايكل (المحررون). البحث على الويب . علم المعلومات وإدارة المعرفة. المجلد 14. سبرينغر برلين هايدلبرغ. ص 151-175. رمز الكتاب : 2008wsis.book..151R. doi : 10.1007/978-3-540-75829-7_10. ISBN 978-3-540-75828-0. S2CID  84831583.
  55. ^ هيروكو تابوتشي ، "كيف صعد منكرو تغير المناخ إلى القمة في عمليات البحث على جوجل"، نيويورك تايمز، 29 ديسمبر/كانون الأول 2017. تم استرجاعه في 14 نوفمبر/تشرين الثاني 2018.
  56. ^ Ballatore, A (2015). "Google chemtrails: منهجية لتحليل تمثيل المواضيع في محركات البحث". First Monday . 20 (7). doi : 10.5210/fm.v20i7.5597 .
  57. ^ باريسر، إيلي (2011). فقاعة الفلتر: ما يخفيه الإنترنت عنك. نيويورك: دار نشر بنغوين. رقم ISBN 978-1-59420-300-8. OCLC  682892628.
  58. ^ O'Hara, K. (2014-07-01). "In Worship of an Echo". IEEE Internet Computing . 18 (4): 79–83. doi : 10.1109/MIC.2014.71 . ISSN  1089-7801. S2CID  37860225.
  59. ^ ab Bruns, Axel (2019-11-29). "فقاعة التصفية". مراجعة سياسة الإنترنت . 8 (4). doi : 10.14763/2019.4.1426 . hdl : 10419/214088 . ISSN  2197-6775. S2CID  211483210.
  60. ^ أب حاييم ، ماريو. جريف، أندرياس. بروسيوس، هانز بيرند (2018). “انفجار فقاعة التصفية؟”. الصحافة الرقمية . 6 (3): 330-343. دوى : 10.1080/21670811.2017.1338145 . ISSN  2167-0811. S2CID  168906316.
  61. ^ نيشوشتاي، إفرات؛ لويس، سيث سي. (2019). "أي نوع من حراس الأخبار نريد أن تكون عليه الآلات؟ فقاعات التصفية، والتجزئة، والأبعاد المعيارية للتوصيات الخوارزمية". أجهزة الكمبيوتر في السلوك البشري . 90 : 298-307. doi :10.1016/j.chb.2018.07.043. S2CID  53774351.
  62. ^ "محرك بحث إسلامي جديد معتمد للمسلمين". News.msn.com. مؤرشف من الأصل في 12 يوليو 2013. استرجاع 11 يوليو 2013 .
  63. ^ "Jewogle - FAQ". مؤرشف من الأصل في 2019-02-07 . تم الاسترجاع 2019-02-06 .
  64. ^ "البحث الحلال على جوجل: المسلمون يحصلون على محرك بحث "خالٍ من الخطيئة"؛ هل ينبغي للمسيحيين أن يمتلكوا محرك بحث مسيحي؟ - مدونة مسيحية". مدونة مسيحية . 2013-07-25. مؤرشف من الأصل في 2014-09-13 . تم استرجاعه في 2014-09-13 .
  65. ^ شوارتز، باري (2012-10-29). "جوجل: خدمات إرسال محركات البحث يمكن أن تكون ضارة". مائدة مستديرة لمحركات البحث . تم الاسترجاع في 2016-04-04 .
  66. ^ هيمان، بول؛ كوتريكا، جورجيا؛ جارسيا-مولينا، هيكتور (12 فبراير 2008). "هل يمكن للوسائط الاجتماعية تحسين البحث على الويب؟". المؤتمر الدولي الأول لجمعية الحوسبة الآلية حول البحث على الويب واستخراج البيانات . تم الاسترجاع في 12 مارس 2008 .
  67. ^ ab Priti Srinivas Sajja; Rajendra Akerkar (2012). Intelligent technologies for web applications. Boca Raton: CRC Press. p. 87. ISBN 978-1-4398-7162-1تم الاسترجاع بتاريخ 3 يونيو 2014 .
  68. ^ abcd "تاريخ محركات البحث". Wiley . تم الاسترجاع في 1 يونيو 2014 .
  69. ^ بريتي سرينيفاس ساجا؛ راجندرا أكيركار (2012). التقنيات الذكية لتطبيقات الويب. بوكا راتون: مطبعة سي آر سي. ص. 86. رقم ISBN 978-1-4398-7162-1تم الاسترجاع بتاريخ 3 يونيو 2014 .
  70. ^ "محركات البحث الرئيسية". 21 يناير 2014. مؤرشف من الأصل في 5 يونيو 2014. اطلع عليه بتاريخ 1 يونيو 2014 .
  71. ^ Jansen, BJ, Spink, A., Bateman, J., and Saracevic, T. 1998. استرجاع المعلومات من الحياة الواقعية: دراسة لاستفسارات المستخدم على الويب. منتدى SIGIR، 32(1)، 5-17.
  72. ^ Jansen, BJ, Spink, A., and Saracevic, T. 2000. الحياة الواقعية والمستخدمون الحقيقيون والاحتياجات الحقيقية: دراسة وتحليل لاستفسارات المستخدمين على الويب. معالجة المعلومات وإدارتها. 36(2)، 207-227.
  73. ^ بريتي سرينيفاس ساجا؛ راجندرا أكيركار (2012). التقنيات الذكية لتطبيقات الويب. بوكا راتون: مطبعة سي آر سي. ص. 85. رقم ISBN 978-1-4398-7162-1تم الاسترجاع بتاريخ 3 يونيو 2014 .
  74. ^ لي، جينغ جينغ؛ لارسن، كاي؛ عباسي، أحمد (2020-12-01). "TheoryOn: إطار عمل ونظام تصميم لإطلاق العنان للمعرفة السلوكية من خلال التعلم الوجودي". مجلة MIS الفصلية . 44 (4): 1733-1772. doi :10.25300/MISQ/2020/15323. S2CID  219401379.

قراءة إضافية

  • ستيف لورانس؛ سي لي جيلز (1999). "إمكانية الوصول إلى المعلومات على شبكة الإنترنت". مجلة نيتشر . 400 (6740): 107-9. رمز Bibcode :1999Natur.400..107L. doi : 10.1038/21987 . PMID  10428673. S2CID  4347646.
  • بنج ليو (2007)، استخراج بيانات الويب: استكشاف الارتباطات التشعبية والمحتويات وبيانات الاستخدام. سبرينغر، رقم ISBN 3-540-37881-2 
  • بار إيلان، ج. (2004). استخدام محركات البحث على شبكة الإنترنت في أبحاث علوم المعلومات. أريست، 38، 231-288.
  • ليفين، مارك (2005). مقدمة لمحركات البحث والتنقل على الويب . بيرسون.
  • هوك، راندولف (2007). دليل الباحث المتطرف .رقم الكتاب الدولي المعياري  978-0-910965-76-7
  • جاويد مصطفى (فبراير 2005). "البحث عن عمليات بحث أفضل على الويب". مجلة ساينتفك أمريكان . 292 (2): 66-73. Bibcode :2005SciAm.292b..66M. doi :10.1038/scientificamerican0205-66.
  • روس، نانسي؛ ولفرام، ديتمار (2000). "البحث بواسطة المستخدم النهائي على الإنترنت: تحليل لموضوعات أزواج المصطلحات المرسلة إلى محرك البحث إكسايت". مجلة الجمعية الأمريكية لعلوم المعلومات . 51 (10): 949-958. doi :10.1002/1097-4571(2000)51:10<949::AID-ASI70>3.0.CO;2-5.
  • شيه، م. وآخرون (1998). "أبعاد الجودة لمحركات البحث على الإنترنت". مجلة علوم المعلومات . 24 (5): 365-372. doi :10.1177/016555159802400509. S2CID  34686531.
  • استرجاع المعلومات: تنفيذ وتقييم محركات البحث. مطبعة معهد ماساتشوستس للتكنولوجيا. 2010. مؤرشف من الأصل في 2020-10-05 . تم الاسترجاع في 2010-08-07 .
  • Yeo, ShinJoung. (2023) خلف مربع البحث: جوجل وصناعة الإنترنت العالمية (مطبعة جامعة إلينوي، 2023) ISBN 10:0252087127 متاح على الإنترنت
تحتوي ويكيميديا ​​كومنز على وسائط متعددة متعلقة بمحركات البحث على الإنترنت .
تحتوي ويكي الجامعة على مصادر تعليمية حول محركات البحث
تم الاسترجاع من "https://en.wikipedia.org/w/index.php?title=محرك_بحث&oldid=1251983477"
Original text
Rate this translation
Your feedback will be used to help improve Google Translate