گوگل وبمستر و کیفیت درآن (بخش اول)

در این بخش (در مورد گوگل وبمستر و کیفیت درآن (بخش اول)) شما با ترفند های بسایر مهمی آشنا خواهید شد با ما همراه باشید.

محتوای تولید شده به صورت خود کار

محتوای تولید شده به صورت خود کار یا auto-generated content به محتوایی گفته می شود که به صورت خود کار و توسط برنامه تولید می شوند. اغلبمحتواهای خودکار، شامل متن های تصادفی هستند که هیچ حسی را به خواننده نمی دهند، اما ممکن است شامل کلمات کلیدی جستجو شده باشد.

برخی از نمونه های محتوای تولید شده خود کار عبارتند از:

• متن ترجمه شده با یک ابزار خود کار بدون اینکه انسان در ترجمه آن دخالت یا بررسی کند.
• متن های تولید شده ای که از تکنیک هایی ماند جایگزین کردن کلمات با مترادف های آن ها به صورت خود کار و یا جابجا کردن پاراگراف ها و عبارت به صورت خود کار استفاده می کنند.
• چسباند و یا ادغام متن های مختلف از صفحات گوناگون به صورت خود کار بدون افزودن هیچ متن یا امکان جدید.

ریدایرکت های آب زیرکاهانه

ریدایرکت آب زیرکاهانه یا Sneaky Redirect به عمل ارسال بازدید کننده به یک URL دیگر که با آدرسی که بازدید کننده در ابتدا در خواست داده بوده متفاوت باشد اتلاق می گردد. دلایل صحیح متعددی برای ریدایرکت کردن یک URL به دیگری وجود دارد مانند جابجا کردن سایت از یک دامین به دامین دیگر یا اصلاح ساختار URL صفحات یک وب سایت.

اما برخی از ریدایرکت ها سعی در فریب دادن موتور جستجو دارند، بدین صورت که محتوای نمایش داده شده به کاربر انسان با محتوای نمایش داده شده بهcrawler ها متفاوت است. هدایت کاربر به صفحه ای دیگر با هدف نمایش محتوایی به غیر از آن چه که در اختیار موتور جستجو گذاشته شده، نقض راهنمای گوگل وبمستر است.

هنگامی که این نوع redirect در یک وب سایت (طراحی سایت شرکتی، طراحی سایت فروشگاهی)  پیاده شده باشد، موتور جستجو ممکن است صفحه اصلی را index کند در حالی که کاربر به صفحه دیگریredirect می شود.

نمونه های ریدایرکت آب زیرکاهانه

• موتور جستجو یک نوع محتوا را نمایش می دهد در حالی که کاربران به صفحه ای کاملا متفاوت ریدایرکت می شوند.
• کاربران دسکتاپ یک صفحه نرمال را می بینند در حالی که کاربران موبایل به یک دامین کاملا متفاوت اسپمی، ریدایرکت می شوند.

استفاده از JavaScript برای ریدایرکت کردن کاربران می تواند یک روش صحیح تلقی شود به عنوان مثال شما می توانید توسط جاوا اسکریپت کاربران را بعد از login کردن در وب سایت به یک صفحه داخلی ریدایرکت کنید. در نظر داشته باشید که ریدایرکت 301 بهترین روش برای تغییر آدرس یک وب سایت است. اما اگر به وب سرور دسترسی ندارید می توانید از JavaScript redirect  استفاده بکنید.

Cloaking

Cloaking  به عمل ارائه محتوای مختلف یا URL های مختلف به کاربران انسانی و موتور های جستجو گفته می شود. به این دلیل که Cloaking باعث نمایش نتیجه ای که کاربر انتظارش را ندارد می شود، نقض دستورالعمل های گوگل وبمستر محسوب می شود.

برخی از نمونه های Cloaking عبارتند از :

• نمایش یک صفحه HTML پر از متن به موتور های جستجو در حالی که صفحه ای از تصاویر یا فلش به کاربران نمایش داده می شود.
• وارد کردن متن یا کلمات کلیدی به محتوای صفحه تنها زمانی که درخواست از طرف موتور جستجو می آید نه از کاربر انسان.

          نمایش محتوا یا URL متفاوت به کاربر انسان و ربات موتور جستجو

برخی از هکر ها با این هدف که تشخیص هک شدن را برای صاحب سایت سخت تر کنند از تکنیک Cloaking استفاده می کنند و در حالی که محتوای نرمال و غیر اسپمی را به کاربران نمایش می دهند، محتوای اسپمی را به موتور جستجو نمایش می دهند.

همانند ریدایرکت آب زیرکاهانه، Cloaking نیز تلاش می کند که محتوای متفاوتی به کاربر و Googlebot نمایش دهد.

Link schemes

هر لینکی که روی PageRank یا رنکینگ یک سایت (سئو سایت ، بهینه سازی سایت) در موتور جستجو تاثیر گذاشته و باعث فریب الگوریتم های موتور جستجو در محاسبه رنکینگ شود، ممکن است به عنوان link schemes تلقی شده و ناقض دستور العمل گوگل وبمستر باشد.

موارد زیر نمونه هایی از link schemes هستند که روی رنکینگ سایت ها در نتایج جستجو اثر منفی می گذارد:

• خرید و فروش لینک هایی که منجر به انتقال PageRank شود.
• تبادل بیش از اندازه لینک (“به من لینک دهید و من هم به شما لینک خواهم داد”) یا صفحاتی که مختص تبادل لینک ایجاد شده اند.
• مارکیتنگ از طریق نوشتن مقاله های متعدد یا کمپین های تولید نوشته توسط کاربران مهمان (Guest posting) به همراه کلمات کلیدی لینک دار.

علاوه براین، ایجاد لینک هایی که توسط مالک سایت تایید نشده اند و یا نوییسنده مقاله آن را در متن قرار نداده باشد به عنوان لینک های غیر طبیعی شناخته می شوند که می توانند ناقض قوانین گوگل باشند. در ادامه به چند نمونه رایج از لینک های غیر طبیعی که ممکن است قوانین گوگل را نقض کنند اشاره شده است:

• تبلیغات متنی که PageRank  را انتقال می دهند.
• رپرتاژ آگهی یا تبلیغات بومی که در قبال مقاله هایی شامل لینک هایی که PageRank  انتقال می دهند، مبالغی پرداخت می شود.
• متن بهینه شده به همراه لینک که در مقالات و اخبار گوناگون سایت های مختلف توزیع شده باشد.
• سایت های دایرکتوری (سایت هایی که کار listing انجام می دهند)  با کیفیت پایین و یا سایت هایی که صرفا لیست نام سایت های دیگر را با لینک در اختیار کاربران می گذارند.
• کلمات کلیدی و لینک های بی کیفیت یا مخفی که به صورت گسترده در سایت های مختلف  توزیع شده باشند. مانند نوشته تعداد بازدید کننده در سایت که به سایتی که تعداد بازدید کننده ها را محاسبه می کند لینک شده باشد.

• لینک هایی که در فوتر قالب طراحی سایت های متعددی گسترده شده اند. به عنوان نمونه لینک طراحی وب سایت یا سئو کار به شرط اینکهPageRank را منتقل کند.
• کامنت های تالارهای گفتگو که دارای لینک هایی بهینه شده چه در نوشته ها و چه در امضا باشند.

توجه داشته باشید که انواع مختلف تبلیغات کلیکی (PPC) مانند سرویس تبلیغات گوگل با نام Google AdWords که PageRank را از سایت مبدا به سایت مقصد که هزینه تبلیغ را پرداخت می کند انتقال ندهد،‌ ناقض قوانین گوگل وبمستر نیست.

متن یا لینک های مخفی

پنهان کردن متن یا لینک درون محتوا به منظور دستکاری در رتبه بندی گوگل،‌ برخلاف راهنماهای گوگل وبسمتر است. متن (مانند: کلمات کلیدی متعدد) را می توان توسط راه حل های متعددی پنهان کرد مانند:

• استفاده از متن سفید روی پس زمینه سفید
• قرار دادن متن در پشت یک عکس

• استفاده از CSS جهت نمایش متن خارج از صفحه یا عدم نمایش متن به کاربر
• استفاده از فونت با سایز صفر
• پنهان کردن یک لینک تنها با استفاده از لینک کردن یک کاراکتر کوچک مانند نقطه.

صفحات Doorway

Doorway ها، سایت هایی هستند که با هدف کسب رنک بالا برا تعدادی کلمات کلیدی مشخص ایجاد شده اند.

این صفحات برای کاربران مضر هستند زیرا آن ها می توانند کاربران را به صفحات مشابه متعدد در SERF هدایت کنند و در نهایت همه آن صفحات کاربر را به یک مقصد یکسان خواهد رساند.

نمونه های صفحات Doorway

• داشتن چند نام دامنه یا صفحاتی که برای مناطق خاص یا شهر های مشخصی در نظر گرفته شده اند که در نهایت کاربران را به یک صفحه سوق می دهند.
• صفحات تولید شده که هدفشان هدایت بازدید کننده به یک بخش واقعا کارآمد یا مرتبط ازساخت سایت (های) شما باشند.

گوگل وبمستر و کیفیت درآن (بخش دوم)

در این قسمت (گوگل وبمستر و کیفیت درآن (بخش دوم)) با ادامه بحث گذشته با شما همراه هستیم.

محتوای گرفته شده

بسیاری از افراد تصور می کنند که افزایش تعداد و حجم صفحات برروی سایتشان یک استراتژی بلند مدت خوب است. به همین دلیل برخی از وبمستران بدون توجه به نوع و مرتبط بودن محتوای سایت های معتبر دیگر، از محتوای آن ها جهت افزایش تعداد صفحات خودشان استفاده می کنند.

محتوایی که به طور خالص از طراحی سایت (طراحی سایت شرکتی، طراحی سایت فروشگاهی) های دیگر حتی از منابع با کیفیت بالاگرفته شده باشد،‌ هیچ ارزش افزوده ای را برای بازدید کنندگان سایت شما نسبت به سایت اصلی ندارد مگر اینکه طراحی سایت شما به گونه ای باشد که خدمات کاربردی و یا محتوایی که خودتان تولید کرده اید را به سایتتان اضافه کنید. استفاده از محتوای سایت های دیگر ممکن است باعث نقض قوانین کپی رایت نیز شود و مالک محتوا می تواند درخواست حذف صفحه،‌ صفحات و حتی کل سایت خاطی از ایندکس گوگل را برای گوگل ارسال کند.

ارزشش را دارد که برای ساخت محتوای جدید و غیر تکراری که ساخت سایت شما را با دیگران متمایز کند زمان صرف کنید. این کار باعث بازگشت بازدیدی کنندگان به سایت (بهینه سازی سایت) شما می شود و همچنین نتایج مفید بیشتری برای کاربران در گوگل جستجو می کنند فراهم می کند.

نمونه های محتوای گرفته شده (Scraped Content)

• سایت هایی که محتوای سایت های دیگر را بدون اضافه کردن محتوای جدید و غیر تکراری و یا هرگونه ارزش افزوده دیگر،‌ کپی و منتشر می کنند.
• سایت هایی که محتوا را از سایت های دیگر کپی می کنند و کمی آن را تغییر می دهند (به عنوان مثال با جایگزین کردن مترادف ها یا استفاده از تکنیک های خود کار) و مجدد منتشر می کنند.
• سایت هایی که محتوای feed سایت های دیگران را بدون ارایه هرگونه مزیت دیگری به کاربران، مجدد منتشر می کنند.
• سایت های اختصاصی داده شده برای نگهداری محتوا مانند ویدئو، تصاویر و یا دیگر رسانه های سایت های دیگر بدون ارایه ارزش افزوده یا خدمات قابل توجه به کاربر.

کلمات کلیدی غیر مرتبط

به عمل بارگذاری یک صفحه وب با کلمات کلیدی یا اعداد به قصد دستکاری در رنکینگ نتایج جستجو  Keyword stuffing می شود. اغلب این صفحات لیست هایی از کلمات کلیدی یا مجموعه ای از اعداد یا کلیدواژه ها هستند. استفاده بیش از اندازه از کلمات کلیدی و یا اعداد در صفحات سایت اثر منفی در استفاده کاربر از سایت خواهد داشت و می تواند به رنک سایت شما صدمه بزند.

گوگل وبمستر توصیه می کند که بر روی ساخت محتوای مفید با استفاده از کلمات کلیدی کاربردی مناسب و با تعداد منطقی تمرکز کنید و به جای تمرکز بر تولید محتوای مناسب برای موتور های جستجو بر تولید محتوای مناسب و کاربردی برای کاربران تمرکز کنید.

نمونه استفاده بیش از حد از کلمات کلیدی

• صفحاتی که فقط شماره های تلفن را لیست می کنند و هیچ ارزش افزوده قابل توجه دیگری ندارند.
• متن هایی که نام شهر ها واستان ها را لیست می کنند و دیگاهشان افزایش رنکینگ برای آن مکان ها است.
• تکرار کلمات و یا عبارات در متن که اغلب به صورت غیر طبیعی به نظر می رسند.

به عنوان نمونه در مثال زیر به صورت غیر منطقی از کلمه لوله کش و لوله کشی استفاده شده است:

ما خدمات لوله کشی انجام می دهیم. اگر شما نیار به لوله کش دارید، متخصصین لوله کش ما در کوتاه ترین زمان کار لوله کشی خانه شما را انجام خواهند داد تا دیگر مشکل لوله کشی نداشته باشید.

ایجاد صفحات با رفتار مخرب

وجود هرگونه محتوا یا نرم افزار در سایت که رفتار آن با کاربر به غیر از آنچه که کاربر انتظار آن را دارد باشد، نقض دستورالعمل های گوگل وبمستر است. به طور کلی هرآنچه که با سیاست نرم افزار ناخواسته گوگل (Unwanted Software Policy) منطبق نباشد، به عنوان رفتار مخرب تلقی می گردد چرا که قصد گوگل نه تنها نمایش دادن نتایج جستجوی مناسب به کاربرانش است، بلکه امن نگاه داشتن کاربران در اینترنت هم از اهداف گوگل است.

نمونه هایی از رفتار مخرب

• تغییر یا دستکاری محل محتوا روی صفحه به طوری که وقتی کاربران گمان می کنند که روی بخش خاصی از لینک یا دکمه کلیک می کنند، درواقع آن کلیک توسط قسمتی دیگر از صفحه ثبت و اعمال می شود.
• نمایش آگهی های جدید یا پاپ آپ ها روی صفحات،‌ تعویض تبلیغات موجود در یک صفحه وب با تبلیغات دیگر، ارایه و یا نصب هر نرم افزاری که این کار های را انجام می دهند.
• نصب فایل ناخواسته در حین دانلود فایلی که کاربر متقاضی آن بوده است.
• نصب نرم افزارهای مخرب، تروجان ها، نرم افزار های جاسوسی،‌ تبلیغات و یا ویروس ها بر روی کامپیوتر کاربر.
• تغییر صفحه خانه (homepage) مرورگر کاربر بدون اجازه وی
• تغییر موتور جستجوی پیش فرض مرور گر کاربر بدون رضایت آگاهانه وی

راهنمای گوگل وبمستر در مورد محتوا (بخش سوم)

در ادامه به مبحث راهنمای گوگل وبمستر در مورد محتوا (بخش سوم) می پردازیم.

متا تگ های قابل فهم توسط گوگل

متا تگ ها در HTML در قسمت <head> قرار دارند و به موتورهای جستجو کمک می کنند که درک بهتری از وب سایت داشته باشند. تنوع متا تگ ها بسیار زیاد است ولی همه آنها توسط همه موتورهای جستجو پشتیبانی نمی سود، در ادامه متا تگ هایی که گوگل قادر به فهم آنها است معرفی مده اند. متاتگ هایی که گوگل قادر به فهم آنها نیست توسط گوگل نادیده گرفته می شوند ولی شما توانید از آنها در طراحی سایت (طراحی سایت شرکتی،طراحی سایت فروشگاهی) برای اهداف دیگر مانند اشتراک گذاری لینک صفحات در شبکه های اجتماعی استفاده نمایید.

جهت سئو ی حرفه ای بهتر است با متا تگ های پشتیبانی شده توسط گوگل آشنا باشید. استفاده از همه متا ها اجباری نیست ولی در صورتیکه کاربرد آنها را بدانید، در بسیاری مواقع به شما در بهینه سازی سایت تان کمک خواهند کرد.

متا تگ description

متن نوشته شده در متاتگ description به عنوان اسنیپت در صفحه نتایج جستجوی گوگل نمایش داده خواهد شد. البته گوگل ضمانت نمی کند که متن نوشته شده به عنوان متاتگ description را در SERP نمایش

دهد. از آنجایی که عرض کاراکترهای مختلف با یکدیگر متفاوت هستند. گوگل محدودیت تعداد کاراکتر را برای نوشتن متا دیسکرییشن مشخص نکرده است ولی تلاش کنید که تعداد کاراکتر دیسکریپشن از حدود ۳۲۰ کاراکتر بیشتر نشود چون در صورت طولانی بودن متن، مقداری از آن نمایش داده نخواهد شد و گوگل به جای قسمت حذف شده، سه نقطه (…) نمایش می دهد. روش استفاده از متا دیسکریپشن به صورت زیر است :

</ "دیسکریپشن صفحه"=meta name= "description" content>

محتوایmeta _ description در محاسبه رنکینگ صفحه توسط گوگل هیچ تاثیری ندارد ولی از آنجایی که متن مناسب می تواند انگیزه کاربر به کلیک بر روی لینک صفحه در SERP را افزایش دهد. نوشتن متن اصولی و غیر اسپم و غیر تکراری برای description تک تک صفحات جائز اهم می باشد.

متاتگ robots

با استفاده از این متا تگ می توانید رفتار موتور جستجو در مورد کراول و ایندکس صفحات را کنترل کنید.

</"...,..."=meta name="googlebot" content>

</"...,... "=meta name="robots"="googlebot "content>

در نمونه های بالا، متا تگ robots بر روی همه موتورهای جستجوهایی که از این متا پشتیبانی می کنند تاثیر دارد در حالیکه متا تگ googlebot فقط بر روی موتور جستجوی گوگل تاثیر دارد.این نوع متا تگ می تواند حاوی موارد زیر باشد:
index : به موتور جستجو می گوید که صفحه را ایندکس کند.
noindex : مانع از ایندکس شدن صفحه توسط موتور جستجو می شود.
follow : به موتور جستجو می گوید که لینک های درون محتوای صفحه را دنبال کند.
nofollow : مانع از دنبال کردن لینک های صفحه توسط موتور جستجو می شود.
nosnippet : مانع از نمایش اسنیپت در SERP می شود.
noodp : مانع از نمایش دیسکریپشن جایگزین از طریق
ODP / DMOZ می شود.
noarchive : مانع از نمایش گزینه Cached در کنار لینک صفحه در SERP می شود.

noimageindex : مانع از نمایش صفحه در صفحه نتایج جستجوی عکس گوگل می شود.

 [Unavailable_ after:[date: مشخص می کند که از چه تاریخی به بعد آن صفحه گراول و ایندکس نشود

none : مترادف با noindex , nofollow است.
all : مترادف با index , follow است.
اگر صفحه ای دارای متا تگ robots نباشد و یا دارای متا تگ robots باشد ولی به follow و index هیج اشاره ای نشده باشد، به صورت پیش فرض index وfollow در نظر گرفته می شود.

متا تگ nositelinkssearchbox

برخی مواقع گوگل در SERP یک Search box را به همراه تعدادی لینک از صفحات پربازدید یک سایت نمایش می دهد.

متا تگ زیر مانع از نمایش Search box و Sitelink در صفحه نمایش جستجو می شود.

</"meta name="google" content="nositelinkssearchbox>

متا تگ notranslate

هنگامی که گوگل تشخیص دهد که زبان یک صفحه متفاوت از زبان کاربر است، پیغامی مبنی بر ترجمه صفحه به زبان مناسب برای کاربر به ایشان نمایش می دهد. متا تگ زیر مانع از نمایش آن پیغام ترجمه می گردد.

</"meta name="google" content="notranslate>

متا تگ google – site – verification

روشهای مختلفی جهت احراز مالکیت ساخت سایت برای ثبت سایت در گوگل سرچ کنسول وجود دارد که یکی از آنها استفاده از متا تگ در صفحه اصلی سایت است که روش استفاده از آن در زیر نمایش داده شده است.

</"..."=meta name="google-site-verification" content>

متا تگ charset

این متا تگ بیانگر نوع محتوا و character set است.

</"...=meta http-equiv="Content-Type" content="...; charset>

<"..."=meta charset>

متا تگ refresh

متا تگ refresh بعد از زمان مشخصی منجر به رفرش صفحه و هدایت کاربر به URL دیگری می شود و فرمول کلی آن به صورت زیر است :

</"...=meta http-equiv="refresh" content="...; url>

به عنوان نمونه اگر متا زیر در head یک صفحه وجود داشته باشد، آن صفحه بعد از ۵ ثانیه رفرش شده و سایت Weby00Z . Com را باز خواهد کرد.

</"meta http-equiv="refresh" content="5;url=https://www.webyooz.com>

نکته : به جز متا تگ google – site – verification ، بقیه متا تگ هابه حروف کوچک و بزرگ حساس نیستند.

Google Index در گوگل سرچ کنسول

در بخش Google Index اطلاعاتی در مورد محتوای ایندکس شده در گوگل وجود دارد که در سه در مجموعه در اختیار وبمستران قرار گرفته است.

Index Status

در گزارش گوگل Index Status اطلاعاتی در مورد صفحات ایندکس شده طراحی سایت (طراحی سایت شرکتی،طراحی سایت فروشگاهی، قیمت طراحی سایت) در یک سال اخیر نمایش داده می شود. مواردی مانند کاهش و یا افزایش ناگهانی تعداد صفحات ایندکس شده در گوگل حتما نیاز به بررسی دارند.

برخی موارد ایراد کدنویسی در سیستم مدیریت محتوا منجر به ایجاد صفحات بسیار زیاد و بدون محتوا که باید هرچه سریعتر این گوگنه ایراد ها شناسایی و برطرف شوند.

در سرچ کنسول جدید، همانند تصویر زیر، اطلاعات آمار ایندکس گوگل به تفکیک برای چهار گو Error و Valid with warning و Valid و Excluded نمایش داده می شود.

Blocked Resources

برای اینکه گوگل بات بتواند صفحات را به درستی رندر کند، باید بتواند به همه منابع صفحه مانند جاوا اسکریپت CSS و عکسها دسترسی داشته باشد. در صورتیکه صفحه یا صفحات و یا منابع آنها برروی گوگل بات بلاک شده باشند، لیست آنها به همراه صفحاتی که تحت تاثیر آن قرار گرفته اند در گزارشBlocked Resources نمایش داده می شود.

به عنوان نمونه در تصویر بعدی سایت example.com را مشاهده می کنید که تعداد ۱۰۸۳ صفحه آن دارای منبع یا منابعی هستند که گوگل بات به آنها دسترسی ندارد. طبق این گزارش، منابع بلاک شده بر روی گوگل بات بر سه هاست example.com و aparat.com وapi.pinterest.com قرار دارند و با کلیک بر روی هر کدام از آنها می توان لیست کامل صفحاتی که دارای منبع بلاک شده از آن هاست هستند را مشاهده کرد.

یکی از دلایل رایج بلاک بودن منابع برای موتورهای جستجو، استفاده غیر صحیح از robots.txt است، به عنوان نمونه ممکن است مسیری توسط robots.txtبلاک شده باشد ولی فایل CSS و یا js که برای رندر صفحه مورد نیاز است در آن مسیر قرار گرفته باشد. بنابراین کاربران می توانند به درستی صفحه را مشاهده کنند ولی موتور جستجو به دلیل تبعیت از robots.txt نمی تواند به درستی صفحه را رندر کند.

برای تست فایل robots.txt می توانید از ابزار robots.txt Tester سرچ کنسول استفاده کنید.

Remove URLs

ابزار Remove URLS ابزاری برای مخفی نگاه داشتن موقت صفحه، فولدر و یا کل ساخت سایت در SERP یا صفحه نتایج جستجو است. توجه داشته باشید که این ابزار برای حذف آدرس از ایندکس گوگل نیست و فقط این امکان را در اختیار مالک سایت می گذارد که آدرس مورد نظرش را برای ۹۰ روز از SERP حذف نماید. بنابراین در صورتیکه قصد دارید آدرسی را برای همیشه از موتور جستجو نمایید، استفاده از ابزار Remove URLs انتخاب مناسبی نیست.

برای حذف همیشگی یک آدرس بهتر است که با آن صفحه را ۴۰۴ کنیم و یا اینکه با استفاده از meta، آن را noindex کنیم و یا با استفاده از robots.txt مانع دسترسی موتور جستجو به صفحه مورد نظر شوید..

جهت مخفی کردن موقت یک آدرس از ایندکس گوگل ابتدا به صفحه Remove URLs در سرچ کنسول رفته و روی دکمه Temporarily hide کلیک کنید. سپس آدرس مورد نظرتان را به صورت کامل وارد کرده و روی دکمه Continue کلیک کنید.

Crawl گوگل سرچ کنسول (بخش اول)

بخش Crawl گوگل سرچ کنسول (بخش اول) شامل ۶ زیرمجموعه است که هم حاوی گزارشات مربوط به مانیتورینگ فعالیت خزنده گوگل و اشتباهاتی است که با آن مواجه شده است و هم امکان submit کردن محتوا را برای وبمستر فراهم می کند. در ادامه در مورد هر شش زیرمجموعه Crawl توضیح داده شده است.

Crawl Errors

در گزارش Crawl Errors ایرادهایی که گوگل بات در هنگام کراول صفحه با آن مواجه شده نمایش داده می شوند، گزارش Crawl Errors به دو گروه کلی Site Errors و URL Errors تقسیم می شوند.

گزارش Site Errors، ایرادهای احتمالی کلی سایت در ۹۰ روز گذشته که شامل ایرادهای DNS و اتصال به سرور و فایل robots.txt است را نمایش می دهد.

همانطور که در تصویر بعدی مشاهده می کنید، گزارش URL Errors، ایرادهایی که گوگل بات در هنگام کراول صفحه  با آن مواجه شده است را به تفکیک برای user-agent دسکتاپ و تلفن هوشمند و کراول صفحه
نمایش می دهد.

گزارش URL Errors

در گزارش ها می توانید آدرس صفحه ای که با Error مواجه بوده و همچنین Response Code و تاریخی که گوگل بات آن Error را شناسایی کرده مشاهده کنید. ضمنا با کلیک بر روی نام هر ستون می توانید گزارش URL Errors را بر اساس همان ستون مرتب کنید.

انواع Error های رایج که ممکن است در گزارش Crawl Error با آن مواجه شوید عبارتند از:

• Server Error : همان طور که در فصل مفاهیم در مورد HTTP Response Code داده شده Response Code خانواده ۵۰۰ به معنای ارورهای سمت سرور هستند. بنابراین گزارش ارورهای 5XX در این قسمت قابل رویت هستند.
• Errors 404 : هنگامی که درخواست گوگل بات از سرور با پاسخ ۴۰۴ سرور روبرو می شود.
• 404 Soft : وقتی صفحه ای وجود ندارد، وب سرور باید ارور ۴۰۴ را به درخواست کننده بدهد که هم موتور جستجو و هم مرورگرها متوجه شوند که صفحه و یا فایل مورد نظرشان وجود ندارد. ولی وقتی به جای ارور ۴۰۴، درخواست کننده به صفحه دیگری مانند homepage ریدایرکت شود، گوگل بات آن را به عنوان 404 Soft در نظر می گیرد. این گونه ارورها باید زودتر برطرف شوند.
• Access Denied : اگر موتور جستجو به آدرس URL خاصی دسترسی نداشته باشد، آدرس آن را در این قسمت به شما نمایش می دهد. دلایلی مانند نیاز به لاگین شدن در سایت، بلاک کردن آدرس توسط robots.txt از دلایل رایج عدم دسترسی موتور جستجو به URL ها است. اگر در این گزارش متوجه شدید که آدرسی به اشتباه بر روی موتور جستجو محدود شده است، به رفع محدودیت بپردازید و در غیر این صورت نیاز به انجام کاری نیست.

وظایف مهم یک سئو کار

یکی از کارهایی که هر سئو کار برای ساخت سایت (طراحی سایت، طراحی سایت فروشگاهی،طراحی سایت شرکتی) باید انجام دهد، بررسی کردن جدیدترین ارورها و در صورت امکان پذیر بودن برطرف کردن آنان است.

به عنوان نمونه اگر سئو سایت شما دارای بکلینک های خارجی شکسته باشد که با ارور ۴۰۴ مواجه شوند، ممکن است لیست آن آدرس هایی که با ارور ۴۰۴ مواجه شده اند در گزارش Errors 404 نمایش داده شوند که در آن صورت نیازی به انجام کار خاصی در سرچ کنسول نیست ولی اگر امکانپذیر است با سایت یا سایت هایی که به شما لینک شکسته داده اند مذاکره کنید تا آن لینک ها را اصلاح یا حذف کننده

نکته : وجود ارور ۴۰۴در سرچ کنسول الزاما به معنای ایراد در سایت و یا افت رنکینگ سایت است. در نمونه بالا شاهد الا شاهد بودید که ارورها منشا خارجی داشتند و ایرادی در سایت وجود نداشت،‌ بنابراین این

این گونه ارورهای ۴۰۴ تاثیری در محاسبه رنکینگ سایت ندارند.

Crawl Stats

در گزارش Crawl Stats اطلاعاتی در مورد فعالیت گوگل بات در سایت نمایش داده می شود که شامل تعداد صفحات کراول شده در روز، کیلوبایت دانلود شده در روز و مدت زمان دانلود صفحه به میلی ثانیه است.

تعداد صفحه کراول شده در روز

کیلوبایت دانلود شده در روز

زمان صرف شده برای بارگذاری یک صفحه

Fetch as Google

ابزار Fetch as Google بدون شک یکی از پرکاربردترین ابزارهای سرچ کنسول است. با استفاده از این ابزار می توانید یک صفحه را از دید گوگل ببینید و آن را با صفحه ای که کاربر مشاهده می کند مقایسه کنید. بدین منظور ابتدا آدرس مورد نظرتان را در فیلد آدرس وارد کنید و پس از انتخاب Desktop یا Mobile در صورتی که قصد دارید فقط کد صفحه را بررسی نمایید، روی دکمه FETCH و در صورتیکه قصد دارید صفحه رندر شده را نیز مشاهده نمایید روی دکمه FETCH AND RENDER کلیک کنید.

FETCH AND RENDER

در حالت FETCH AND RENDER، هم کد صفحه FETCH می شود و هم تصویر رندر شده صفحه از دید گوگل و از دید کاربر به شما نمایش داده می شود. به این نکته توجه کنید که صفحه ای که کاربر می بیند باید با صفحه ای که گوگل بات می بیند یکسان باشد و در صورتیکه بخشی از صفحه که برای شما حائز اهمیت است و با تمامی صفحه بر روی گوگل بات بلاک شده باشد، باید نسبت به برطرف کردن آن اقدام کنید.

وقتی که شما یک صفحه را FETCH می کنید، در ستون Status یکی از آیتم های Complete ،Redirected ،Partial و با اروری که گوگل بات با آن مواجه شده نمایش داده می شود.

درخواست از گوگل برای ایندکس صفحه: وقتی در سرچ کنسول یک صفحه را FETCH یا FETCH AND RENDER کنید، همانند تصویر بعد در جلوی آدرس صفحه یک دکمه Request indexing برای مدت ۴ ساعت ظاهر می شود و با کلیک کردن بر روی آن درخواستی به موتور جستجو جهت ایندکس کردن صفحه ارسال می شود.

در صورتی که سایت شما از حجم تولید محتوای کمی برخوردار باشد و برای ایندکس شدن محتواهای جدیدتان عجله داشته باشید، می توانید از این روش برای سریعتر ایندکس شدن صفحات جدیدتان استفاده کنید.

ادامه دارد …