سئو و بهينه سازي سايت براي گوگل((نکات اساسی برای وب مسترها))

مطالب زير ترجمه كتاب به بلنداي گوگل برويد است كه به مرور براتون قرار ميدم.و تكميلش مي كنم.
متن اصلي اين كتاب در كتابخانه رايگان همين سايت قرار دارد.

مقدمه
اگر حدود 2 يا 3 سال پيش يك كتاب در مورد بهينه سازي جستجو گرها مي خوانديد ، اغلب فصول آن كتاب در مورد معرفي و درج سايت و اطلاعات آن به موتورهاي جستجوگر بود .
اغلب آنها هنوز هم اين روش بيهوده را پيگيري مي كند. ولي ما نگران اين هستيم كه دنيا تغيير كند . در روش جديد مديريت گوگل ، اين سايت از نقشه هاي سايت و سايت هاي با ساختار مشخص استفاده مي كنند . در اين مقاله به شما كمك مي كنم تا سايت خود را به خوبي شناخته و به شاخص گذاري مناسب براي صفحات خود بپردازيد.
اين كار شما را شگفت زده خواهد كرد ، ولي نامهاي بزرگ شناخته شده و سايت هاي عظيم و پر بيننده مشكلات قابل توجهي دارند.
در حقيقت ، يك سايت نياز به تمركز دارد و مانند يك خزنده پيش خواهد رفت.
همانطور كه مي دانيد سايت هاي خوب ، ميزبانان خوبي دارند ، خوب پياده سازي شده اند و همه آنها به شكل محسوسي سازماندهي (ساختار بندي ) شده اند .
حالا كه شما در حال كاركردن روي يك سايت جديد هستيد يا روي يك پروژه موجود كار مي كنيد ، من به شما نشان مي دهم كه چگونه توسط گوگل يافت شويد و تمام صفحات پروژه خود را به خوبي و مناسب با ساختار قابل شناخت براي گوگل شاخص گذاري كنيد.

تمام موتورهاي جستجوگر بزرگ از برنامه هاي عنكبوتي (Spider) كه به آنها روبوت يا خزنده يا (bot) مي گويند ، براي جستجوي وب ، جمع آوري اسناد ، پيدا كردن مراجع ، پيمايش متن ها استفاده مي كنند ، و آنها را به برنامه اي شاخص بندي شده و فهرست دار تبديل مي كنند.
وقتي روبوت ها به يك ابرلينك (hyperlink) به اسناد ديگر مي رسند ، آن اسناد نيز بارگذاري مي شوند و بررسي مي شوند . به عنكبوت گوگل ، googlebot (گوگل بوت) مي گويند كه شما مي توانيد ردپاي آن را در بررسي فايل هاي Log وب سايت خود مشاهده كنيد.

در نوار آدرس مرورگر خود تايپ كنيد : Verifying Googlebot - Webmasters/Site owners Help
و در صفحه باز شده مي توان ، مطالب جالبي در مورد ساختن سايت هاي Google friendly پيدا كرد . و نحوه معرفي سايت به اين موتور جستجو نيز آمده است.

گوگل بوت ، چگونه در ابتدا سايت شما را پيدا مي كند ؟
چهار روش مهم و ضروري براي يافتن سايت ها ، توسط گوگل استفاده مي شود:
راه اول و مهمترين روش اين است كه شما خودتان سايت خود را براي جستجوي محتويات به سايت گوگل معرفي كنيد . اين كار از طريق Addule در آدرس Add your URL to Google انجام مي شود.
راه دوم اين است كه وقتي گوگل يك اتصال (لينك) به سايت شما از طريق سايت هاي ديگر مي رسد اين اتصال را پيگيري كرده و به دنبال آن مي رود و داخل آن مي خزد و مطالب آنرا دسته بندي گرده و استخراج مي كند .
راه سوم اين است كه وقتي به عنوان يك مدير سايت به قسمت ابزار مديران سايت در گوگل وارد مي شويد ، مي توانيد سايت خود را معرفي كرده ، آنرا بررسي كنيد و يك نقشه سايت مناسب براي آن طراحي كنيد .
راه چهارم ، (پاياني) وقتي است كه شما از يك صفحه شاخص دار مناسب موجود ، به يك صفحه جديد مي رويد.
در گذشته شما بايد سايت خود را حتماً به موتور جستجوگر ، معرفي مي كرديد ، اما گوگل امروزه آنرا بهتر كرده است .

در خواست عاجل براي خزيدن گوگل بوت در سايت شما
هيچ روشي مؤثر ( و هيچ شركت يا سازماني) براي تضمين اينكه به سرعت سايت شما توسط گوگل بوت بررسي شده و در نتايج جستجو خود را به خوبي نشان دهد وجود ندارد. با پيروي از يكي از چهار روش گفته شده در قسمت بالا مي توانيد بطور نرمال ، انتظار يك ماهه اي براي درج سايت شما در نتايج موتور جستجوگر داشته باشيد. طبق تجربه اي كه من داشتم ، معرفي سايت ها به گوگل از طريق صفحه ابزارهاي مدايران سايت (webmastertools) بهترين و مؤثرترين راه براي مديريت خزش سايت شما در نتايج به سمت بالاست و نتايج سريعتري خواهد داشت.

گوگل بوت در سايت شما چه كار مي كند؟
وقتي گوگل بوت در سايت شماست . در تمام صفحات شما مي خزد وقتي يك اتصال (لينك) داخلي مي رسد ، آن نيز پيمايش مي كند . احتمالاً گوگل تمام سايت شما را پيمايش مي كند.
در مرحله بعدي چگونگي شاخص گذاري گوگل روي صفحات را براي بازيابي صفحات در طول يك جستجو توضيح مي دهم.
بعد از آن چگونگي اينكه شاخص هر صفحه واقعاً رتبه بندي مي شود را شرح مي دهم.
بهترين مثالي كه مي توانم براي شما مطرح كنم اين است كه سايت شما مانند يك درخت است كه تنه آن Homepage شما سات ، و دايركتوري شما ، شاخه هاي آن هستند ، و صفحات سايت شما ، انشعابات آن هستند.
گوگل مانند يك ماده غذائي ، سايت شما را از ريشه و تنه به سمت برگ ها مي پيمايد.
اگر درخت شما ، خوب ساختار دهي شده باشد و تقارن و توازن خوبي داشته باشد گوگل بوت دو تكه شده و هر كدام به يك شاخه از سايت مي رود برگ ها از آن بطور متناسب و عادلانه اي سود مي برند.

كنترل كردن گوگل بوت :
گوگل به بعضي از سايت ها ، اغلب سر مي زند و به بعضي ديگر بسيار دير به دير سر مي زند.
بعضي ها شكايت دارند كه گوگل بوت تمام سايت آنها را پيمايش نمي كند ، و بعضي ديگر
مي گويند از اينكه به بعضي از قسمت هاي سايت خود از طريق موتوهاي جستجوگر نمي رسند ، پريشان خاطر هستند.حقيقت اين است كه نمي توان گوگل بوت را جلب كرد.

گوگل اغلب ، زماني كه شما محتواي سايت خود را تغيير مي دهيد و يا اينكه توسط سايت ديگري معرفي مي شويد ، از شما بازديد مي كند .
به هيچ عنوان ، با فرياد كشيدن ، بين المللي نمي شويد ، اگر چه اين امكان وجود دارد كه بتوانيد گوگل بوت را تحريك كنيد.
شما مي توانيد هر دو صفحه اي كه گوگل بوت پيمايش مي كند را كنترل كنيد و عمق پيمايش شدن صفحات را كاهش دهيد.
براي بهينه كردن پيمايش صفحات توسط گوگل، بهترين روش استفاده از يك فايل robot.txt است . كه يك فايل ASCII متني است كه شما در ريشه ميزبان سايت خود قرار مي دهيد.
از اين فايل براي بهينه كردن شاخص گذاري گوگل روي تصاوير شما استفاده مي شود و نيز با استفاده از آن مي توانيد اسكريپت هاي PERL را اجرا كنيد ، يا دسترسي به صفحات و قانون كپي را مشخص كنيد.
هر قسمت از فايل robot.txt ، ابتدا نام Spider ها را مشخص مي كند ، سپس ليست دايركتوري ها و يا فايل هايي را كه اجازه دسترسي به آنها را نمي دهيد اين ها در خطوط مجزا مشخص مي شوند.

فرمت داخل اين فايل به شما اجازه مي دهد از كاركترهاي جايگزين شوند مثل * و ؟ استفاده كنيد.

مثال : فايل robot.txt زير ، تمام بوت ها را براي دسترسي به تصاوير و اسكريپت هاي PERL و دايركتوري هاي آنها ، تنظيم مي كند و فقط گوگل بوت را براي دسترسي به اقلام كپي رايت و صفحات خاص تنظيم مي كند.