موتور جستجو دو وظیفه‌ی عمده به عهده دارد: گشتن در فضای وب و ایجاد یک نمایه از وبسایت ها، ارائه‌ی فهرستی طبقه بندی شده از مرتبط‌ترین وب سایت‌ها به کاربران.

در ذهن خود شبکه‌ی گسترده‌ی جهانی وب را مانند شبکه‌ای از ایستگاه‌های سیستم متروی یک شهر مجسم کنید. هر ایستگاه یک سند منحصر به فرد است (معمولا یک صفحه‌ی وب، اما گاهی اوقات یک سند با فرمت PDF، یک تصویر با فرمت JPG، یا فایل‌های دیگر می‌تواند باشد). موتورهای جستجو راهی نیاز دارند تا تمام شهر را “بگردند” و تمام ایستگاه‌های سر راه را بیابند، بنابراین از بهترین مسیر موجود –لینک‌ها- استفاده می‌کنند.

ساختار لینکی وب کمک می‌کند تا تمام صفحات به یکدیگر پیوند داشته باشند. لینک‌ها به ربات‌های خودکار موتورهای جستجو، به نام “ربات خزنده” یا “ربات عنکبوتی“، اجازه می‌دهند تا میان میلیاردها سند محتوایی روی وب جستجو کنند.

به محضی که موتورهای جستجو این صفحات را می‌یابند، یک کد از آنها رمزگشایی می‌کنند و تکه‌های منتخبی از آن را در پایگاه‌های داده‌ی عظیم خود ذخیره می‌کند، تا بعدا در صورت نیاز هنگام درخواست جستجو مجددا بازخوانی شوند. برای به انجام رساندن وظیفه‌ی نگه‌داری از میلیاردها صفحه‌ای که ظرف یک ثانیه قابل دسترسی باشند، شرکت‌های موتورهای جستجو در سراسر دنیا مراکز داده‌ بسیار بزرگی بنا کرده‌اند.

این امکانات ذخیره‌سازی عظیم، در خود هزاران سرور دارند که به سرعت حجم بالایی از اطلاعات را تجزیه و تحلیل می‌کنند. هرگاه فردی از طریق یکی از موتورهای جستجوی اصلی مطلبی را جستجو می‌کند، این موتورهای جستجو بدون هیچ تعللی درخواست دریافت نتایج می‌کنند؛ حتی تاخیر یک یا دو ثانیه‌ای هم می‌تواند موجب نارضایتی کاربران شود، بنابراین، موتورها به سختی کار می‌کنند تا با سرعت هر چه تمام‌تر پاسخگوی نیاز کاربران باشند.

موتورهای جستجو به زبان ساده ماشین‌های پاسخ دهنده هستند. وقتی فردی به صورت آنلاین مطلبی را جستجو می‌کند، موتور جستجو مجموعه‌ی میلیاردی اسناد خود را جستجو می‌کند و دو کار انجام می‌دهد: ابتدا، تنها نتایجی را بازمی‌گرداند که مرتبط هستند یا برای پرسش کاربر مفید هستند؛ سپس، این نتایج را بر اساس شهرت وب سایت‌های ارائه دهنده‌ی اطلاعات طبقه بندی می‌کند. فرایند سئو روی مرتبط بودن و شناخته شده بودن تاثیر گذار است.

چگونه موتورهای جستجو مرتبط بودن و شناخته شده بودن را مشخص می‌کنند؟

برای یک موتور جستجو، مرتبط بودن چیزی فراتر از یافتن صفحه‌ای با لغات درست است. در روزهای نخست گسترش وب، موتورهای جستجو فراتر از این گام ساده نرفتند و نتایج جستجو ارزشی محدود داشتند. به مرور زمان، مهندسان باهوش راه‌های بهتری برای تطبیق نتایج با درخواست‌های جستجوی کاربران ابداع کردند. امروزه، صدها عامل روی مرتبط بودن اطلاعات تاثیر می‌گذارند، که در زیر به بیان مهم‌ترین آنها خواهیم پرداخت.

موتورهای جستجو عموما فرض را بر این می‌گذارند که هر چه یک سایت، صفحه، یا یک سند شناخته شده‌تر باشد، اطلاعات درون آن باید ارزشمندتر باشند. ثابت شده است که این فرضیه سازی از نظر رضایت کاربر از نتایج جستجو بسیار موفق عمل کرده است.

مرتبط بودن و شناخته شده بودن به صورت دستی مشخص نمی‌شوند. به جای آن، موتورهای جستجو تساوی‌های (الگوریتم‌های) ریاضی را به کار می‌بندند تا اطلاعات مرتبط را از اطلاعات غیر مرتبط مجزا کنند، سپس اطلاعات را بر حسب کیفیت طبقه بندی می‌کنند (شناخته شده بودن).

این الگوریتم‌ها اغلب متشکل از صدها متغیر هستند. در شاخه‌ی بازاریابی جستجو این متغیرها “عوامل رتبه بندی” نامیده می‌شوند.

چگونه می‌توان در نتایج جستجو موفق بود؟

ممکن است الگوریتم‌های پیچیده‌ی موتورهای جستجو نفوذ ناپذیر به نظر برسند. در واقع، خود موتورها راهکارهای اندکی برای چگونگی دستیابی به نتایج بهتر یا بدست آوردن ترافیک بیشتر ارائه می‌کنند. آنچه آنها برای بهینه سازی و عملکرد بهتر ارائه می‌کنند در زیر به تفصیل شرح داده شده‌ است:

دریافت اطلاعات از راهنمای وب مستر گوگل (گوگل وبمستر)

کمپانی بزرگ گوگل برای کسب رتبه‌ی بهتر در موتور جستجوی خود، پیشنهادات زیر را ارائه می‌دهد:

• اساسا صفحه را برای کاربران طراحی کنید نه برای موتورهای جستجو. کاربران خود را فریب ندهید یا مفاهیمی متفاوت با آنچه در اختیار کاربران قرار می‌دهید به موتورهای جستجو ارائه نکنید، عملی که معمولا تحت عنوان “مخفی کردن” به آن اشاره می‌شود.
• سایتی با رتبه بندی و لینک‌های متن شفاف و واضح بسازید. هر صفحه باید حداقل از یک لینک متنی ثابت قابل دسترسی باشد.
• یک سایت مفید پر از اطلاعات بسازید و صفحاتی بنویسید که به صورت شفاف و درست محتوای مورد نظر شما را توصیف نماید. از مرتبط و دقیق بودن محتوای “عنوان” و ویژگی‌های زیر عنوان‌های آن اطمینان حاصل کنید.
• برای ساخت URLهای مرتبط و کاربر- محور از کلمات کلیدی استفاده نمایید. برای دستیابی به سند با استفاده از تغییر مسیرهای 301 (دائمی) یا کانونی (canonical) یک  URL دوم ارائه دهید.

دریافت اطلاعات سئو از راهنمای وب مستر بینگ (بینگ وبمستر)

مهندسان بینگ در شرکت مایکروسافت، برای دستیابی به رتبه‌ی بهتر در موتورهای جستجوی خود پیشنهادات زیر را ارائه می‌دهند:

• از وجود ساختار URL شفاف و غنی از کلمات کلیدی اطمینان حاصل نمایید.
• مطمئن شوید که محتوا درون انبوهی از رسانه‌ها (Adobe Flash Player, JavaScript, Ajax) دفن نشده باشد و کنترل کنید که این رسانه‌ها لینک‌ها را از ربات‌های جستجوگر پنهان نکنند.
• محتوایی پر از کلمات کلیدی فراهم آورید و کلمات کلیدی را با آنچه کاربران در جستجوی آن هستند منطبق نمایید.
• متنی که قصد دارید به صورت نمایه درون تصویر قرار دهید را در صفحه نیاورید. به عنوان مثال، اگر قصد دارید نام شرکت یا آدرس آن را به صورت نمایه بیاورید، مطمئن شوید که درون لوگوی شرکت نمایش داده نشود.

همکار عزیز، هراس نداشته باش!

علاوه بر توصیه‌هایی که در اختیار شما قرار گرفتند، بیش از 15 سال است که از عمر موتورهای جستجوی وب می‌گذرد، متخصصان جستجو برای استخراج اطلاعات مربوط به چگونگی رتبه‌بندی صفحات توسط موتورهای جستجو به روش‌هایی دست یافته‌اند. سئو کاران و متخصصان از این داده‌ها بهره می‌برند تا به سایت‌ها و مشتریان خود کمک کنند به رتبه‌ی بهتری دست پیدا کنند.

جالب اینکه، موتورهای جستجو بسیاری از این تلاش‌ها را حمایت می‌کنند، هر چند دامنه‌ی دید عموم اغلب محدود است. موسسات مربوط به تخصص جستجو اقدام به جذب مهندسین و نمایندگانی از تمام موتورهای جستجوی مشهور کرده‌اند. نمایندگان موتورهای جستجو نیز با مشارکت آنلاین در بلاگ‌ها، فروم‌ها و گروه‌ها به وب مسترها کمک می‌کنند. اگر به دنبال اطلاعات بیشتر هستید با مقالات آینده ما همراه باشید.