موتور جستجو چیست؟

استفاده از موتور جستجو آسان است: یک صفحه وب را باز می کنید، چند کلمه را در نوار جستجو تایپ می کنید و voilà-میلیون ها نتیجه در کسری از ثانیه ظاهر می شوند. برای مثال، جستجوی گوگل برای «موتور جستجو»، 1. 43 میلیارد نتیجه را در 0. 69 ثانیه به دست می دهد. اما دقیقاً چگونه؟در اینجا آمده است که چگونه وب وحشی و وحشی در کمتر از یک دهه به طور کامل نمایه، قابل جستجو و رتبه بندی شد.

موتور جستجو چیست؟

موتور جستجو نرم افزاری است که برای بازیابی اطلاعات خاص طراحی شده است. نوع موتور جستجویی که اکثر ما با آن آشنا هستیم، موتور جستجوی اینترنتی است، که یک سرویس وب است که اطلاعات را در اینترنت (که گاهی اوقات "وب جهانی" نامیده می شود) بر اساس درخواست کاربر، که معمولا مجموعه ای ازکلمات

امروزه، بسیاری از مردم فکر می کنند که موتورهای جستجو مترادف با مرورگرهای اینترنتی هستند - تا حدی به لطف مرورگر Google Chrome که عملکرد موتور جستجو را در نوار آدرس وب ایجاد می کند. اما موتورهای جستجو خدمات وب هستند که به طور خاص برای بازیابی اطلاعات ساخته شده اند. می توان به راحتی از طریق مرورگر به آنها دسترسی داشت، اما آنها فناوری های متفاوتی هستند.

موتورهای جستجو چگونه کار می کنند؟

اگرچه موتورهای جستجو در طول سال ها پیچیده تر شده اند، اما همچنان از یک فرمول کاملاً اساسی پیروی می کنند: تمام داده های موجود در وب را بخزد و فهرست بندی کند تا وقتی چیزی را جستجو می کنید، بتواند مجموعه ای از نتایج را به شما ارائه دهد که بر اساس ارتباط رتبه بندی شده اند. در اینجا نحوه انجام آن است.

1. خزیدن . خزنده های وب، همچنین به عنوان عنکبوت شناخته می شوند، برنامه هایی هستند که به طور مداوم در اینترنت جستجو می کنند، سایت های جدید را پیدا می کنند و لینک های جدید را شناسایی می کنند. خزنده ها همچنین متنی را از هر وب سایتی به فهرستی برای تجزیه و تحلیل ارسال می کنند. خزنده ها حتی ممکن است تمام یا بخشی از یک صفحه وب را ذخیره کنند که کش نامیده می شود. وب مسترها (افرادی که وب سایت ها را اجرا می کنند) می توانند فایلی به نام robots. txt به سایت های خود اضافه کنند که به خزنده می گوید کدام صفحات را ببیند یا نادیده بگیرد.
2. فهرست مطالب . داده هایی که خزنده ها جمع آوری می کنند، تجزیه و تحلیل، سازماندهی و در یک فهرست ذخیره می شوند تا موتور بتواند به سرعت اطلاعات را پیدا کند. مانند نمایه ای که در پشت یک کتاب یافت می شود - اما بسیار دقیق تر - یک فهرست موتور جستجو شامل یک ورودی برای هر کلمه در هر صفحه وب فهرست شده است.
3. جستجو کردن . هنگامی که از موتور جستجو پرس و جو می کنید ، موتور جستجو ابتدا باید کلمات شما را به اصطلاحاتی که مربوط به فهرست آن است ، ترجمه کند. این کار از طریق بسیاری از تکنیک ها از جمله پردازش زبان طبیعی انجام می شود (NLP که از یادگیری ماشین برای درک آنچه به دنبال آن هستید استفاده می کند). خروجی این فرآیند ترجمه اولیه یک پرس و جو بازنویسی شده است که قسمتهای مهم پرس و جو شما را مشخص می کند ، غلط غلط ها را تصحیح می کند و مترادف را اضافه می کند. موتور جستجو سپس برای یافتن صفحات وب که مطابق با پرس و جو بازنویسی شده است ، با فهرست خود مشورت می کند.
4. رتبهموتورهای جستجو از الگوریتم ها استفاده می کنند تا لیستی از نتایج را در اولویت قرار دهند که فکر می کند به بهترین وجه به پرس و جو شما پاسخ خواهد داد. برای جستجوهای مبهم ، مانند "رامن" ، موتور جستجوی شما ممکن است طیف وسیعی از پاسخ ها را برای پوشش پایه های خود ارائه دهد ، مانند اطلاعات کلی در مورد آنچه رامن ، همراه با سایر نتایج محبوب مانند دستور العمل ها ، مغازه های محلی رامن و حتی "افراد نیز"از بخش "بخواهید تا به شما در محدود کردن جستجوی خود کمک کند.

چگونه موتورهای جستجو نتایج را رتبه بندی می کنند؟

یک جستجوی واحد ممکن است میلیاردها صفحه وب مربوطه را رقم بزند ، بنابراین بخشی از کار موتور جستجو ، مرتب سازی این لیست ها با استفاده از الگوریتم های رتبه بندی است. و اگرچه این الگوریتم ها به گونه ای طراحی شده اند که بهترین پاسخ به سؤالات شما را ارائه دهند ، اما نسبت به عوامل خاصی مغرضانه هستند. موتورهای جستجو می خواهند نتایج را به شما نشان دهند که روی آن کلیک خواهید کرد ، و آنها از عوامل مختلفی برای رتبه بندی نتایج مطابق با آنچه فکر می کنند با آنها درگیر خواهید شد ، استفاده می کنند. اینها شامل موارد زیر نیستند:

• استفاده از کلمات کلیدی. نتایج جستجوی شما باید حداقل با برخی از کلمات موجود در پرس و جو شما مطابقت داشته باشد. موتورهای جستجو صفحاتی را که در آن کلمات کلیدی در یک موقعیت برجسته ظاهر می شوند ، مانند عنوان صفحه یا اغلب در طول صفحه ، در اولویت قرار می دهند.
• محتوای صفحهموتورهای جستجو با تجزیه و تحلیل طول ، عمق و وسعت صفحات وب ، محتوای با کیفیت بالا را در اولویت قرار می دهند.
• بک لینکبک لینک ها یا ذکر یک وب سایت در وب سایت دیگر ، می تواند به عنوان رأی به اقتدار آن سایت تلقی شود. پیشگام شده توسط Google PageRank ، صفحات رتبه بندی Backlink را بر اساس تعداد سایت های دیگر به آن سایت باز می گرداند ، و این سایت ها چقدر رتبه بندی می کنند.
• اطلاعات کاربر. موتورهای جستجو مانند Google از اطلاعات شخصی شما مانند تاریخچه جستجو و موقعیت مکانی استفاده می کنند تا نتایج را که منحصر به فرد برای شما مرتبط هستند ، ارائه دهند.

4 نوع موتور جستجو

موتورهای جستجوگر جریان اصلی مانند Google ممکن است وقتی در مورد موتورهای جستجو فکر می کنیم ، مهم باشد ، اما انواع دیگری از موتورهای جستجو وجود دارد که به ما امکان حرکت در اینترنت را می دهند.

1. موتورهای جستجوگر جریان اصلی. موتورهای جستجوگر اصلی مانند گوگل ، بینگ و یاهو! همه برای استفاده و پشتیبانی از تبلیغات آنلاین رایگان هستند. همه آنها از تغییرات یک استراتژی مشابه (خزیدن ، نمایه سازی و رتبه بندی) استفاده می کنند تا به شما امکان جستجوی کلیت اینترنت را بدهند.
2. موتورهای جستجوی خصوصی. موتورهای جستجوی خصوصی اخیراً به دلیل نگرانی از حریم خصوصی مطرح شده توسط شیوه های جمع آوری داده های موتورهای جستجوگر اصلی ، محبوبیت زیادی پیدا کرده اند. این موارد شامل موتورهای جستجوگر ناشناس و پشتیبانی تبلیغاتی مانند Duckduckgo و موتورهای جستجوی خصوصی و بدون تبلیغ مانند Neeva است.
3. موتورهای جستجو عمودی. جستجوی عمودی یا جستجوی تخصصی راهی برای باریک کردن جستجوی شما به یک دسته از موضوعات است ، نه کلیت وب. نمونه هایی از موتورهای جستجوگر عمودی عبارتند از:
   1. نوار جستجو در سایت های خرید مانند eBay و Amazon
   2. Google Scholar ، که ادبیات علمی را در سراسر نشریات نمایه می کند
   3. سایت ها و برنامه های رسانه های اجتماعی قابل جستجو مانند Pinterest

   موتورهای جستجوگر محبوب

   فناوری جستجو از زمان توسعه اولین موتور جستجو در سال 1989 تغییر کرده است. در اینجا بازیکنان اصلی امروز هستند.

   1. گوگل. فقط یک موتور جستجو وجود دارد که بسیار محبوب است و به یک فعل مترادف با "جستجو" تبدیل شد. با داشتن 92. 24 درصد از سهم بازار جهانی موتور جستجوی ، Google تقریباً بزرگترین و محبوب ترین موتور جستجوی جهان است. سیستم رتبه بندی تمیز و بی پشتی Google ، در دهه 90 نفع کاربران را به دست آورد و تسلط خود را با نوآوری های تقریباً ثابت و توافق های انحصاری با تولید کنندگان دستگاه ، شرکت های بی سیم و توسعه دهندگان مرورگر حفظ کرده است که حدود 60 درصد از آنها استفاده می کننداز جستجوهای اینترنتی مستقیم به Google.
   2. بینگموتور جستجوی مایکروسافت ، بینگ ، در حال حاضر 2. 29 درصد از سهم بازار جهانی را تشکیل می دهد و آن را به دومین موتور جستجوی بزرگ جهان تبدیل می کند. از زمان راه اندازی آن در سال 2009 ، بینگ عکاسی را در صفحه اصلی خود نشان داد ، تضاد آشکار از صفحه فرود شدید گوگل.
   3. یاهوپورتال وب ترکیبی Yahoo! ، سایت خبری و موتور جستجو 1. 52 درصد از سهم بازار موتور جستجو را تشکیل می دهد. از آغازهای فروتنانه خود به عنوان "راهنمای جری و دیوید به شبکه جهانی وب" ، یاهو! یک موتور جستجوی بزرگ شد و در سال 2017 با قیمت 4. 48 میلیارد دلار به Verizon فروخته شد.
   4. بایدوبایدو یک موتور جستجوی چینی است که 1. 48 درصد از بازار جهانی موتور جستجوی را تشکیل می دهد. مانند Google ، بایدو به عنوان موتور جستجو شروع به کار کرد و اکنون یکی از بزرگترین شرکت های فناوری چین است.
   5. DuckduckgoDuckduckgo یک موتور جستجوی خصوصی و پشتیبانی شده است که در حال حاضر 0. 58 درصد از سهم بازار جهانی را تشکیل می دهد.

   در سال 2020 ، Neeva اعلام کرد که اولین موتور جستجوی اشتراک گذاری رایگان در جهان را ایجاد می کند.

   تاریخچه مختصری از موتورهای جستجو

   در روزهای ابتدایی اینترنت ، تعداد کمی از سرورهای وب (اساساً رایانه هایی که میزبان وب سایت ها هستند) وجود داشت که تیم برنرز لی ، خالق وب جهانی وب ، همه آنها را در یک لیست نگه داشت. با استفاده از این لیست Beers-Lee ، می توانید به راحتی به هر صفحه وب موجود در موجودیت دسترسی پیدا کنید-بیشتر سایتهای اطلاعاتی که توسط دانشگاه ها یا سازمان های دولتی اداره می شوند.

   امروز ، میلیاردها صفحه وب وجود دارد و هیچ سیستم اصلی برای پیگیری آنها وجود ندارد ، به همین دلیل ما برای یافتن اطلاعات به صورت آنلاین به موتورهای جستجو متکی هستیم.

   • 1989: در حالی که یک دانشجوی درجه در دانشگاه مک گیل ، آلن Emtage اولین موتور جستجوی عمومی ، Archie (بایگانی بدون "V") را در سال 1989 بنا کرد ، وی یک سال بعد آن را به عموم مردم راه اندازی کرد. برنامه EMTAGE به او اجازه می داد تا به راحتی پرونده ها را در سایت های FTP (پروتکل انتقال فایل) پیدا کند ، که وب سایت را پیش می برد.
   • 1994: دیوید فیلو و جری یانگ یاهو را تأسیس کردند. به عنوان یک فهرست وب سایت های مورد علاقه خود. در اواخر دهه 1990 ، یاهو! به عنوان یک پورتال وب - یک صفحه فرود برای دسترسی به ویژگی های مختلف اینترنت و موتور جستجوی وب فعالیت می کند.
   • 1995: Altavista به عنوان اولین موتور جستجوی زبان طبیعی راه اندازی شد ، به این معنی که نمایش داده هایی را که به زبان گفتاری نوشته شده است ، نه فقط کلمات کلیدی. در آن زمان ، وب حداقل 30 میلیون صفحه در خانه بود که حدود 20 میلیون نفر از آنها توسط Altavista نمایه شده بود.
   • 1996: از Jeeves ، که کاربران را ترغیب کرد تا نمایش داده های خود را به عنوان یک سؤال مطرح کنند ، سؤال کنید. از ژیوز استفاده کنید که از ویراستاران انسانی استفاده کرده است تا نتایج را با محبوب ترین سؤالات مطابقت دهد. امروز ، حدود 8 درصد از جستجوها به عنوان سؤال نوشته شده اند ، و از Jeeves (اکنون Ask.com) بپرسید دیگر موتور جستجوی اصلی محسوب نمی شود.
   • 1998: لری پیج و سرگئی برین بر اساس موتور جستجوی 1996 خود ، Backrob ، که از بک لینک ها به عنوان راهی برای رتبه بندی نتایج جستجو استفاده می کردند ، گوگل را تأسیس کردند. در آن زمان ، گوگل یک رابط کاربری بسیار ساده و بدون آگهی از پیوندهای آبی داشت که به دنبال آن توضیحات دو خطی از هر سایت بود.(تبلیغات بعداً ، در سال 2000 انجام می شود.)
   • 2009: Microsoft Bing به عنوان یک Rebrand از MSN/Live Search راه اندازی شد که در ابتدا در سال 1998 راه اندازی شد. اندکی پس از راه اندازی آن ، بینگ شروع به قدرت یاهو کرد! موتور جستجو

   نوآوری های عمده در فناوری موتور جستجو

   از زمان راه اندازی اولین موتورهای جستجوگر در دهه 1990 ، رهبران این زمینه در فناوری جستجو نوآوری کرده اند تا با یک رابط واحد نیازهای بیشتر و بیشتری را تأمین کنند. اکنون ، ما لزوماً مجبور نیستیم صفحه نتایج موتور جستجو را ترک کنیم تا پاسخ هایی را که به دنبال آن هستیم دریافت کنیم. در اینجا برخی از لحظات مهم در تکامل فناوری موتور جستجو وجود دارد.

   • یادگیری ماشین: مایکروسافت در سال 2005 RankNet را توسعه داده و راه اندازی کرد ، که از یادگیری ماشین برای رتبه بندی نتایج جستجوی مربوطه استفاده کرد. بعداً نسخه ای از RankNet توسط Microsoft Bing استفاده می شود. گوگل در سال 2015 مؤلفه یادگیری ماشین خود ، RankBrain را معرفی کرد.
   • جستجوی جهانی: در سال 2007 ، گوگل جستجوی جهانی را راه اندازی کرد ، که برخی از ابزارهای مختلف جستجوی عمودی خود (مانند تصاویر ، اخبار ، فیلم ، نقشه ها و کتاب ها) را در یک صفحه نتایج موتور جستجوی چندرسانه ای (SERP) ادغام کرد. هنگامی که "تصاویر Sunset" را در Google.com جستجو می کنید و به جای لیستی از پیوندها ، مجموعه ای از تصاویر را در بالای صفحه نتایج مشاهده می کنید ، این جستجوی جهانی است. قبل از جستجوی جهانی ، برای یافتن تصاویر مجبور بودید به تصاویر Google بروید.
   • نتایج بومی سازی: در سال 2012 ، گوگل برای جستجوهای عمومی نتایج محلی (بر اساس آدرس IP کاربر) را نشان داد. این بدان معنی است که وقتی شما به جستجوی "تی شرت" می پردازید ، Google ممکن است یک چاپگر تی شرت در این نزدیکی را پیشنهاد کند ، در حالی که قبلاً فقط جستجوی "تی شرت های نزدیک بروکلین" می شود ، باعث ادغام نقشه ها می شود. در سال 2016 ، Google شروع به استفاده از خدمات موقعیت مکانی تلفن های هوشمند و موقعیت یابی WiFi (که از مکان نقاط مهم در نزدیکی برای مشخص کردن موقعیت مکانی شما استفاده می کند) برای به دست آوردن نتایج محلی در مکان دقیق خود.
   • Hummingbird: Google الگوریتم Hummingbird خود را در سال 2013 معرفی کرد ، که فراتر از اصطلاحات جستجوی کاربر بود و با استفاده از زمینه برای تلاش برای تعیین هدف آنها. به عنوان مثال ، جستجوی مانند "آب و هوا چیست" نتایج آب و هوایی محلی را به دست می آورد ، نه توضیحی در مورد مفهوم آب و هوا. جستجوی "آب و هوا" بدون "آنچه است" اخبار مربوط به Weather.com را ذکر می کند.
   • نمودار دانش: Google Metaweb و Freebase را که پایگاه داده آن شامل بیش از 12 میلیون چیز است، در سال 2010 خریداری کرد. این پایه و اساس Graph دانش را که در سال 2012 راه اندازی شد، ایجاد کرد. این فناوری به کاربران اجازه می دهد تا بدون خروج از SERP اطلاعات را از وب سایت های دیگر دریافت کنند. وقتی یک قطعه ویکی پدیا را در سمت راست نتایج جستجو می بینید، آن نمودار دانش است. این ویژگی عواقب گسترده ای داشت: در سال 2020، حدود 65 درصد از جستجوهای گوگل بدون کلیک کاربر بر روی هیچ نتیجه ای به پایان رسید، احتمالاً به این دلیل که آنها آنچه را که به دنبال آن بودند در SERP پیدا کردند.(گوگل استدلال کرد که دلایل زیادی وجود دارد که یک نتیجه جستجو بدون هیچ کلیکی به پایان برسد، مانند فرمول مجدد یک سوال.)

   آیا می خواهید نوع دیگری از موتور جستجو را امتحان کنید، موتوری که فقط برای مردم ساخته شده باشد و تبلیغاتی نداشته باشد؟Neeva اولین موتور جستجوی خصوصی و بدون آگهی در جهان است که متعهد است بهترین نتایج را برای هر جستجو به شما نشان دهد. ما هرگز داده های شما را با هیچ کس، به ویژه تبلیغ کنندگان، نمی فروشیم یا به اشتراک نمی گذاریم. Neeva را خودتان در neeva.com امتحان کنید.