عدم موفقیت کسب‌وکارهای اینترنتی دلایل بسیاری دارد که یکی از آن‌ها عدم شناخت بستری است که در فعالیت می‌کنید. شما می‌توانید با شناخت موتورهای جستجو و کسب آگاهی دررابطه‌با عملکرد آن‌ها تصمیم‌‌های درستی دررابطه‌با بازاریابی و فروش اتخاذ کنید.
زمانی که شما بدانید موتورهای جستجو چگونه کار می‌کنند آنگاه می‌توانید سایت خود را برای کسب رتبه در نتایج جستجو بهینه‌سازی کنید.
کسب رتبه مناسب در کلمات کلیدی مرتبط یعنی بازدید بیشتر و فروش بیشتر و فروش بیشتر یعنی سود بیشتر و موفقیت.
قبل از آنکه عملکرد موتورهای جستجو را مورد بررسی قرار دهیم بهتر است. یک تعریف کلی از موتور جستجو داشته باشیم. به هر برنامه‌ای که برای پیداکردن اطلاعات مشخصی در بسترهای مختلف استفاده می‌شود می‌گویند. به‌عنوان‌مثال نوار جستجوی موجود در بخش مخاطبان گوشی شما یک موتور جستجو در ابعاد کوچک است و یک سایت مانند گوگل یک موتور جستجو در ابعاد بسیار عظیم است.
امروزه وقتی حرف از موتورهای جستجو به میان می‌آید اولین چیزی که در ذهن ما تداعی می‌شود موتورهای جستجوی اینترنتی مانند گوگل و بینگ است.
موتورهای جستجو در واقع ماشین‌های پاسخ‌دهی هستند و وظیفه آن‌ها این است که نزدیک‌ترین نتایج به درخواست شما را نشان دهند. حال موتورهای جستجو اینترنتی علاوه بر متن در بین محتواهای چندرسانه‌ای مانند ویدئو عکس، صوت، تصویر و حتی محصولات نیز جستجو انجام می‌دهد.
برای اولین‌بار در جولای سال 1945 ماهنامه آتلانتیک یک مقاله‌ای با عنوان (همان‌طور که ممکن است فکر کنیم) منتشر کرد که ایده اساسی این مقاله فهرست کردن اطلاعات بود و بر اهمیت اطلاعات در آینده تأکید بسیاری داشت و از دانشمندان می‌خواست که برای یکپارچه‌سازی اطلاعات راه‌حلی ارائه کنند. پس از این مقاله در سال 1989 آقای Tim Bemers Lee شبکه جهانی وب یا اینترنت را اختراع کرد.
یک سال پس از اختراع وب اولین موتور جستجو به وجود آمد این موتور توانایی نمایش محتوای وب را نداشت و فقط می‌توانست عناوین را فهرست کند. برای استفاده از آن کاربر باید نام دقیق فایل مورد نظرش را می‌دانست. دیتابیس این موتور جستجو فایل‌هایی را که از سایت‌های FTP قابل دانلود بود را جمع‌آوری می‌کرد.
پس از آنکه پروژه آرچی (Archie) موفق شد دو موتور جستجوی دیگر با نام‌های ورونیکا و جاگ‌هد نیز به وجود آمدند که صرفاً می‌توانستند متن‌های ساده را ایندکس کنند.
سال 1991، سال ساخته‌شدن اولین وب‌سایت است که در آن Tim Berners Lee در مورد شبکه جهانی وب و نحوه ساخت و برپایی یک سرور وب توضیح داده بود.
سال 1993 اولین ربات اینترنتی با نام World Wide Web Wondrery ساخته شد. این ربات در ابتدا باهدف ارزیابی میزان رشد وب ساخته شد؛ اما طولی نکشید که این ربات برای جمع‌آوری URL های فعال ارتفاع پیدا کرد. این ربات URL های را فعال بود در دیتابیسی با نام Wandex نگهداری می‌کرد. اما این ربات دارای مشکلاتی بود که در برخی مواقع دسترسی به وب‌سایت‌ها را مختل می‌کرد.
پس از ربات Wandex در اواسط سال 1993 اولین موتور جستجو وب با نام w3Catalog کار خود را آغاز کرد. قبل از موتورهای موجود صرفاً عناوین را لیست می‌کردند. W3Catalog نیز مانند ربات wandrere مشکل ایجاد اختلال بر روی سایت‌ها را داشت. در همان سال دومین موتور جستجو با الهام گرفتن از Archie به وجود آمد که امکان معرفی دستی وب‌سایت‌ها را هم فراهم کرده بود، اما این پایان کار نبود و در همان سال موتور جستجوی Jumpstation توانست اولین موتور جستجویی باشد که هر سه عمل کدال کردن جستجو و ایندکس کردن را انجام می‌داد. اما این موتور جستجو به دلیل محدودیت منابع فقط عناوین صفحات را کدال و ایندکس می‌کرد. سرانجام در سال 1994 موتور جستجوی WebCrawler با قابلیت ایندکس کردن کل متن صفحه کار خود را آغاز کرد. پس از آن نیز چندین موتور جستجوی مشابه نیز به وجود آمدند که از جمله آن‌ها می‌توان به Go.com و Yahoo اشاره کرد.
سال 1996 تحولی در موتورهای در موتورهای جستجو ایجاد شد و آن ایجاد الگوریتمی با نام RankDelss بود که به سایت‌ها بر اساس میزان لینک دریافتی رتبه خاصی در نتایج اختصاص می‌داد. در همان سال سرگی برین ولری پیچ کار خود را بر روی موتور جستجو با نام Back Rub شروع کردند. این موتور جستجو از الگوریتمی به نام Page Rank بهره می‌برد که از الگوریتم Rank key الهام گرفته بود. پس از دو سال یعنی در سال 1994 سرگی برین ولری پیچ دامنه google.com را ثبت کرد که در واقع نام جدید Back Rub بود البته جالب است بدانید کلمه google اشتباه تایپی بود و آن‌ها قصد داشتند کلمه googol که اشاره به عدد 1 با صد تا صفر دارد را ثبت کنند. شما می‌توانید تداعی این فکر را در صفحه‌بندی نتایج جستجوی گوگل مشاهده کنید.
حال که با تاریخچه و پیدایش موتورهای جستجو و همچنین پیشرفت آن‌ها آشنا شدید بیایید در مورد نحوة کار موتورهای جستجو نیز کمی صحبت کنیم.
دسته‌بندی و رتبه‌بندی میلیون‌ها وب‌سایت کار بسیار دشواری است. موتورهای جستجو برای آنکه بتوانند میلیون‌ها وب‌سایت را مرور و دسته‌بندی و رتبه‌بندی کنند از سه اقدام اصلی استفاده می‌کنند:
· کرال کردن (Crawling)
· ایندکس کردن (Indexing)
· رتبه‌بندی کردن (Ranking)
این سه اقدام به موتورهای جستجو کمک می‌کند تا محتوای تازه منتشر شده را کشف کند آن‌ها را ذخیره کندو در نهایت برای نمایش به کاربر طبقه‌بندی نماید. حال بیایید این سه اقدام را کمی ریزتر بررسی کنیم.
موتورهای جستجو ربات‌های به نام خزنده یا Crawler در اختیار دارند وظیفه این ربات‌ها ارزیابی محتواهای سایت‌ها و صفحات تازه ایجاد شده یا تغییر کرده است. این ربات‌ها وظیفه دارند صفحات را به‌دقت بررسی کنند دسته و زمینه محتوا را دریابند و موضوع را درک کنند و در نهایت با دنبال‌کردن لینک‌های موجود در صفحات به صفحه‌های دیگر بروند و آن‌ها را هم ارزیابی کنند.
بعد از کدال شدن سایت و صفحات موتورهای جستجو باید تصمیم بگیرند که چگونه اطلاعات را در دیتابیس خود ذخیره کنند. به فرایند ذخیره اطلاعات کدال شده در دیتابیس موتورهای جستجو Indexing می‌گویند.
زمانی که کاربر اقدام به جستجو می‌کند موتورهای جستجو برای نمایش نتایج به سراغ اطلاعات ذخیره شده در دیتابیس می‌روند. تمامی اطلاعات و صفحات که در دیتابیس ذخیره شده بر اساس یک سیستم رتبه دهی برای کاربران فهرست می‌شود. رتبه دهی بر اساس فاکتورهای مختلف و همچنین کیفیت سایت و محتوا و مرتبط بودن با درخواست کاربر انجام می‌شود.
زمانی که خزنده‌های موتورهای جستجو وارد یک سایت می‌شوند فاکتورهای بسیاری برای ارزیابی سایت دارند اولین فاکتور کلمه کلیدی است خزنده‌ها به دنبال آن هستند تا دریابند که این صفحه در مورد چه چیزی است. معمولاً کلمه یا موضوع اصلی به‌صورت یک الگو در عنوان، زیر عنوان و متن وجود دارند همچنین تعداد تکرار کلمه کلیدی در متن و محتوا دیگر فاکتور مهم برای خزنده است.
کلمه کلیدی و محتوای صفحه یکی از فاکتورها است فاکتور دیگر که برای خزنده مهم است. رتبه‌بندی و اهمیت صفحات سایت شما است. خزنده باید بفهمد که صفحه اصلی و هدف شما کدام است تا آن را در رتبه بهتر به کاربران خود نمایش دهد.
فاکتور دیگر که برای خزنده‌ها مهم است و تأثیر بسیاری در رتبه‌بندی سایت شما دارد. کیفیت سایت و محتوای ارائه شده است. هرچه محتوای سایت کاربرپسندتر و مفیدتر باشد موتورهای جستجو آن را در رتبه بهتری نمایش خواهند داد.
حال شما می‌توانید با آگاهی از بستر فعالیت خود قدم صحیحی در بازاریابی و فروش محصولات و خدمات خود بردارید.
