گوگل براي اينكار از ربات هاي خزنده خود بهره ميبرد ، در واقع ربات هاي گوگل كه به نام هاي searchbot يا spider نيز شناخته مي شوند ، وظيفه پيدا كردن سايت ها و صفحات را به عهده دارند، سپس گوگل اطلاعات به دست آمده را پردازش مي كند و سپس ايندكس مي كند ، اين روند بسته به وب سايت مورد نظر متفاوت است.
براي اينكه بدانيم گوگل آخرين بار و توسط چه رباتي وب سايت را خزيده بايد به كنسول سرچ وب سايت در گوگل مراجعه كنيم طبق تصوير زير:
همانطور كه مشاهده مي كنيد گوگل انواع ربات ها را براي ايندكس سايت فرستاده و مي توانيد با كليك بر روي هر كدام از ربات ها به اطلاعات آخرين تاريخ بازديد و اطلاعات ديگر پي ببريد.
براي ديده اين صفحه از ليست سمت چپ گزينه Settings و سپس در صفحه باز شده بر روي Crawl stats كليك كنيد. حتي در اين صفحه با كليك بر روي گزينه Host Status از صحت عملكرد هاست خود نيز مي توانيد اطمينان حاصل كنيد.
پيشنهاد مي كنم مقاله اي با عنوان روشهاي افزايش سرعت ايندكس صفحات در گوگل را بخوانيد:
چه عواملي بر افزايش سرعت ايندكس سايت تاثير گذار است؟
همانطور كه در بالا خوانديد كه ربات هاي گوگل چطور كار مي كنند، بايد پذيرايي از آنها را فراموش نكنيد. اما در زير به تعدادي از مهمترين عواملي كه مي تواند باعث بهبود سئو سايت و افزايش سرعت ايندكس سايت شما شود را آورده ايم.
سرعت سايت را افزايش دهيد
1. زمان بندي براي انتشار محتوا
محتواي سايت در هر كاري كه در سايت خود انجام مي دهيد تأثير مي گذارد. براي افزايش سرعت Index سايت و اينكه به خزنده هاي گوگل (Crawler) بفهمانيد در چه زماني به سراغ سايت شما بيايند، بايد زمان‌بندي براي انتشار محتواي سايت داشته باشيد. در يك زمان مشخص در هر روز مطالب خود را منتشر كنيد.
حتي اگر روزي 1 مقاله مي نويسيد باز هم زمان بندي داشته باشيد. مثلا ساعت 12 ظهر هر روز يا 12 ظهر شنبه ي هر هفته. اين كار باعث مي شود خزنده هاي گوگل (Crawler) بدانند كه چه زماني به سراغ سايت بيايند و آن ها به اين زمان بندي عادت خواهند كرد. در نتيجه زودتر از قبل سايت را چك مي كنند.
2. داشتن فايل Robot.txt
داشتن فايل Robot.txt بي تأثير در سرعت Index شدن سايت نيست و فايلي ضروري است. سايت هاي نو پا و يا خيلي از سايت ها ممكن است صفحاتي داشته باشند كه قصد Index شدنش را نداشته باشند.
مانند صفحه ورود براي كاربران به حساب شخصي شان. صفحات اين چنيني با استفاده از لينك ها قابل دسترس مي شوند و نيازي نسيت كه در صفحه هاي موتورهاي جستجو به نمايش در بيايند. شما با كمك فايل Robot.txt با خزنده هاي گوگل (Crawler) ارتباط برقرار مي كنيد و راه ارتباط برقرار كردن و يا صحبت كردن با خزنده ها فايل Robot.txt است.
3. كنسول جستجوي گوگل (webmaster tools)
با ابزار وب مستر تولز مي توانيد با چشم هاي گوگل سايت خود را ببينيد! سرعت سايت، صفحات در دسترس، موقعيت صفحاتتان در گوگل، خطاها و اخطارهاي احتمالي و … همگي در كنسول جستجو گوگل (webmaster tools) قابل درك هستند. با اين ابزار مي توان سايت را بررسي كرد و به افزايش سرعت Index سايت بسيار كمك كرد.
4. داشتن نقشه سايت
نقشه سايت به خزنده هاي گوگل (Crawler) مسير مي دهد. با وجود نقشه سايت مي توان تمامي صفحات سايت را به صورت يك فايل xml در اختيار خزنده هاي گوگل (Crawler) قرار داد تا بدون معطلي و بدون اين كه صفحه اي را جا بگذارند، زودتر صفحات سايت را بررسي كنند. اين كار باعث مي شود كه خزنده هاي گوگل با داشتن نقشه كاملي از صفحات، سايت را Index كنند و عمليات Index با سرعت بيشتري انجام شود.مطالب مرتبط: آشنايي با خطاهاي گوگل وبمستر تولز و راهنماي رفع آنها
5. انجام عمليات Fetch as Google
با استفاده از Fetch as Google مي توان سايت را ثبت كرد و به روز رساني ها را به خزنده هاي گوگل (Crawler) اطلاع داد.
يكي از بهترين و پركاربردترين ابزارهايي كه براي Index سايت ها استفاده مي شود Fetch as Google است.براي Index كردن سايت در Fetch as Google بايد با استفاده از آدرس زير به ترتيب اين مراحل را دنبال كرد :- ابتدا بايد به اكانت وب مستر تولز وارد شد.- در ميان گزينه هاي سمت چپ صفحه وارد بخش Health شويد.-
با انتخاب گزينه Fetch as Google در قسمت مربوط به وارد كردن URL كه در وسط صفحه مي بينيد، مي توان آدرس سايتي كه قصد ثبت كردنش را داريد ، وارد كنيد. – پس از زدن دكمه Fetch به گوگل پيغام مي فرستيد كه به روز رساني انجام شده و يا سايت جديدي را وارد كرده ايد.- با بارگذاري مجدد صفحه و ظاهر شدن پيغام Successful در پايان روي دكمه submit to index كليك كنيد.
6. ثبت آدرس صفحه در موتورهاي جستجو
با ثبت لينك آدرس صفحه در موتورهاي جستجو، مي توان به راحتي باعث افزايش سرعت index سايت شد. ثبت سايت در سرويس هاي محلي نيز بسيار تأثير گذار خواهد بود و اين تنظيمات به صورت دستي انجام مي شوند. علاوه بر افزايش سرعت Index سايت، اين كار براي جلوگيري از اسپم شدن نيز بسيار تأثير گذار است.
ثبت آدرس سايت در موتورهاي جستجو باعث مي شود كه بر اساس موقعيت نزديك بودن به كاربران، سايت نزديك تر به آنها پيشنهاد داده شود، در چنين شرايطي حتي اگر سئوي سايت هاي ديگري از سايت شما بهتر باشد،
باز هم به عنوان سايت نزديك تر پيشنهاد داده مي شويد. به طور مثال شخصي كه در جزيره كيش كلمه ي كليدي (بهترين رستوران) را جستجو مي كند، رستوران هاي شهر كيش را خواهد ديد و شخصي كه در تهران اين كلمه را جستجو مي كند رستوران هاي تهران را خواهد ديد.
7. بهره گيري از شبكه هاي اجتماعي
استفاده و ساختن شبكه هاي اجتماعي به ويژه گوگل پلاس تأثير خوبي در افزايش سرعت Index هر سايتي مي گذارد. حداقل ساخت 2 اكانت در شبكه اجتماعي و به روز رساني آنها را در برنامه هاي خود قرار دهيد. شبكه هاي اجتماعي به طور كلي تأثير مثبتي روي سايت ها مي گذارند.
حتي در سئو كردن سايت نيز ساختن اكانت در شبكه هاي اجتماعي بسيار توصيه مي شود. شبكه هاي اجتماعي به دليل داشتن كاربران فعال و محبوب شدن سايت هايشان از نظر گوگل اهميت زيادي دارند و به همين دليل مي توان از محبوبيت آن ها براي بهتر Index شدن صفحات و بهبود رتبه سايت استفاده كرد.
8. اشتراك گذاري مطالب سايت در شبكه هاي اجتماعي
قرار دادن امكان اشتراك گذاري مطالب در صفحات اجتماعي در زير صفحات مي تواند اين شانس را بياورد كه مطالب توسط كاربران به اشترك گذاشته شوند. اشتراك گذاري مطالب در شبكه هاي اجتماعي، ميزان ورودي خزنده هاي گوگل (Crawler) را به سايت افزايش مي دهد و ورود خزنده ها به سايت به معني زودتر Index شدن صفحات سايت است.
منبع: news.akhbarrasmi.com