چرا خزندگان گوگل اصلی میباشند؟
فهرست جستجوی گوگل (Google Search Index) را خزندهها می سازند. گوگل با به کارگیریاز کرالرها لیستی از همگی صفحه های تارنماهای جان دار در وب مهیا مینماید تا آن گاه آنان را جايگاهبندی نماید. باتهای گوگل مثل یک استفاده کننده برگه را میبینند و در فهرست قرار میدهند. پس خزندگان گوگل و اینکه تارنما برای آن ها با صرفه گردیده باشد اساسی میباشد زیرا درصورتیکه عنکبوتها صفحه های وبسایت را نبینند و در آن نخزند، گوگل هم آنانرا نمیبیند و درنتیجه ورقه و تارنما جایی (جايگاهای) در نتیجه ها جستجوی سئو در مشهد گوگل نخواهند داشت.
سوال های بسیار مهمی درباره ی نحوهی شغل رباتهای جستجوی گوگل پیش می آید: آیا متخصص seo یا این که وبمستر می تواند کرالرها را در دست گرفتن نماید یا این که همگیچیز دراختیار گوگل میباشد؟ میشود صفحاتی را به خزندگان (گوگل) نشانه نداد؟ آیا خزندگان هرروز به یک وبسایت راز می زنند و دنبال صفحه های تازه در آن می گردند؟ رباتها چه بازه در یک وب سایت میمانند؟
آری، متخصص seo می تواند تاحدی خلق و خوی خزندگان گوگل در وبسایت را در دست گرفتن نماید و برخی صفحه ها یا این که عکسها را به وی علامت ندهد. همگیی کارشناسان بهینه سازی با پوشه robots.txt آشنا میباشند. این فولدر درواقع لیستی از صفحه ها تارنما میباشد که شما میخواهید کراولرها (موتورهای کاوش) آنان را ببینند. در همین فولدر ممکن میباشد به خزندگان اذن ندهید و بگویید که به صفحه ها مشخصی از وبسایت نروند.
درادامه، نکات مهمی که کارشناسان بهینه سازی وبسایت درخصوص طریقی کارکردن رباتهای جستجوی گوگل بایستی بدانند، مذکور میباشد.
ربات های خزندهی گوگل چطور عمل مینمایند؟
دارای تخصص بهینه سازی هیچوقت نباید فراموش نماید، بهغیراز صفحه ها یا این که محتواهایی که در پوشه robots.txt از خزندگان مخفی نموده است، عنکبوتهای گوگل هرچند ثانیه یکتوشه به وب سایتها راز می زنند و در آن می چرخند و درپی چیزهای تازه میگردند.
متخصص seo نمیتواند برای گوگل انتخاب نماید که کرالرها چهوقتی، چند بار و برای چه مدتی در تارنما بخزند.
هرچه دامنه تارنما معتبرتر باشد، خزندگان وقت بیشتری را برای خزیدن در آن تارنما تخصیص میدهند و صفحه ها (محتواهای) بیشتری را می بینند و Index مینمایند (یعنی crawl budget آن وبسایت زیادتر میباشد).
خزندگان گوگل شاید در همگیی صفحه ها یک وب سایت نروند. باتهای گوگل نخستین براساس فولدر robots.txt و آنگاه براساس نقشهی وب سایت (Sitemap) بین صفحه های تارنما میچرخند. نقشه وب سایت برای هدایت کرالرها بسیار اثرگذار و اساسی میباشد. نقشه وب سایت منظم و ساختارمند و پرنور شغل رباتها را شلخیس و سریعخیس مینماید و آنهارا زودتر به صفحه ها و محتواهای اصلی تارنما می رساند.
ربات های گوگل یکسری نوع میباشند؟
گذشتهاز اینکه به دیدنیترین و کاربردیترین نصیب این نوشتهیعلمی برسیم، خوب میباشد توضیحی کوتاه در مورد گونه های رباتهای گوگل داده خواهد شد. به عبارتیطور که اشاره شد، موتورهای کاوش برای دیدن صفحه ها و محتواهای آن ها و چرخیدن در وب سایت (ازطریق پیوندسازی داخلی) از اپلیکیشنها و ماشینهایی به کار گیری مینمایند که معمولا به آنان خزنده یا این که رباتهای خزنده گفته می شود. دارای تخصص بهینه سازی هر سایتی میتواند برای خزندگان شرایطی معلوم نماید (پوشه robots.txt).
در آن پوشه متخصص میتواند معین نماید ورود نوع خاصی از کراولرها به وبسایت ممنوع میباشد. وی برای تعریف و تمجیدکردن مقررات برای خزندگان از اسم خاص هر یک به کارگیری مینماید. باتهای خزنده دردرجهینخستین براساس اینکه وابسته به کدام موتور کاوش می باشند و دردرجهیدوم کاری که اجرا میدهند با پسوندی (user-agent) شناخته میشوند. به عنوان مثال خزندگان گوگل که صرفا محتواهای ویدئویی را میبینند و فهرست مینمایند با این اسم شناخته میشوند: Googlebot-Video یا این که Googlebot-News خزندگانی می باشند که صرفا خبر ها را ایندکس مینمایند.
درصورتی که متخصص seo سایتی به هر دلیلی نخواهد ویدئوهای سایتش ایندکس شوند، بهراحتی قادر است آن خزندگان (Googlebot-Video) را از ورود به تارنما جلوگیری کردن نماید. طبیعی میباشد همگیی گونه های خزندگان به یکاندازه اساسی نیستند و متخصص seo زیرا میخواهد تک تک متحواهای سایتش چشم خواهد شد و در نتیجه ها کاوش درجه بگیرد، دلیلی ندارد بخواهد خزندگان گوگل را از ورود به تارنما بازداشتن نماید. (می توانید لیست مهم ترین باتهای گوگل را در developers.google.com مشاهده کنید.)
چطور وبسایت را برای عنکبوت های گوگل باصرفه کنیم؟
در حالتیکه دارای تخصص بهینه سازی میخواهد وب سایت سوای ایراد و دردسر ایندکس گردد، می بایست فعالیت را برای خزندگان گوگل ریلکس نماید. یعنی کرالرها برای ورود به وب سایت و چرخیدن در صفحه ها نباید خلل یا این که مانعی داشته باشند. بههمینادله، گذشتهازاینکه شغل های مربوطبه بهینه سازی وبسایت صورت بپذیرد، تارنما را بایستی برای عنکبوتهای گوگل باصرفه کرد. (زیرا تا قبل از این درخصوص التفات پوشه robots.txt و وبسایت مپ کلام گردیدهاست، در مفاد ذیل به آن ها اشاره نکردم.)
چرا خزندگان گوگل اصلی میباشند؟
فهرست جستجوی گوگل (Google Search Index) را خزندهها می سازند. گوگل با به کارگیریاز کرالرها لیستی از همگی صفحه های تارنماهای جان دار در وب مهیا مینماید تا آن گاه آنان را جايگاهبندی نماید. باتهای گوگل مثل یک استفاده کننده برگه را میبینند و در فهرست قرار میدهند. پس خزندگان گوگل و اینکه تارنما برای آن ها با صرفه گردیده باشد اساسی میباشد زیرا درصورتیکه عنکبوتها صفحه های وبسایت را نبینند و در آن نخزند، گوگل هم آنانرا نمیبیند و درنتیجه ورقه و تارنما جایی (جايگاهای) در نتیجه ها جستجوی سئو در مشهد گوگل نخواهند داشت.
سوال های بسیار مهمی درباره ی نحوهی شغل رباتهای جستجوی گوگل پیش می آید: آیا متخصص seo یا این که وبمستر می تواند کرالرها را در دست گرفتن نماید یا این که همگیچیز دراختیار گوگل میباشد؟ میشود صفحاتی را به خزندگان (گوگل) نشانه نداد؟ آیا خزندگان هرروز به یک وبسایت راز می زنند و دنبال صفحه های تازه در آن می گردند؟ رباتها چه بازه در یک وب سایت میمانند؟
آری، متخصص seo می تواند تاحدی خلق و خوی خزندگان گوگل در وبسایت را در دست گرفتن نماید و برخی صفحه ها یا این که عکسها را به وی علامت ندهد. همگیی کارشناسان بهینه سازی با پوشه robots.txt آشنا میباشند. این فولدر درواقع لیستی از صفحه ها تارنما میباشد که شما میخواهید کراولرها (موتورهای کاوش) آنان را ببینند. در همین فولدر ممکن میباشد به خزندگان اذن ندهید و بگویید که به صفحه ها مشخصی از وبسایت نروند.
درادامه، نکات مهمی که کارشناسان بهینه سازی وبسایت درخصوص طریقی کارکردن رباتهای جستجوی گوگل بایستی بدانند، مذکور میباشد.
ربات های خزندهی گوگل چطور عمل مینمایند؟
دارای تخصص بهینه سازی هیچوقت نباید فراموش نماید، بهغیراز صفحه ها یا این که محتواهایی که در پوشه robots.txt از خزندگان مخفی نموده است، عنکبوتهای گوگل هرچند ثانیه یکتوشه به وب سایتها راز می زنند و در آن می چرخند و درپی چیزهای تازه میگردند.
متخصص seo نمیتواند برای گوگل انتخاب نماید که کرالرها چهوقتی، چند بار و برای چه مدتی در تارنما بخزند.
هرچه دامنه تارنما معتبرتر باشد، خزندگان وقت بیشتری را برای خزیدن در آن تارنما تخصیص میدهند و صفحه ها (محتواهای) بیشتری را می بینند و Index مینمایند (یعنی crawl budget آن وبسایت زیادتر میباشد).
خزندگان گوگل شاید در همگیی صفحه ها یک وب سایت نروند. باتهای گوگل نخستین براساس فولدر robots.txt و آنگاه براساس نقشهی وب سایت (Sitemap) بین صفحه های تارنما میچرخند. نقشه وب سایت برای هدایت کرالرها بسیار اثرگذار و اساسی میباشد. نقشه وب سایت منظم و ساختارمند و پرنور شغل رباتها را شلخیس و سریعخیس مینماید و آنهارا زودتر به صفحه ها و محتواهای اصلی تارنما می رساند.
ربات های گوگل یکسری نوع میباشند؟
گذشتهاز اینکه به دیدنیترین و کاربردیترین نصیب این نوشتهیعلمی برسیم، خوب میباشد توضیحی کوتاه در مورد گونه های رباتهای گوگل داده خواهد شد. به عبارتیطور که اشاره شد، موتورهای کاوش برای دیدن صفحه ها و محتواهای آن ها و چرخیدن در وب سایت (ازطریق پیوندسازی داخلی) از اپلیکیشنها و ماشینهایی به کار گیری مینمایند که معمولا به آنان خزنده یا این که رباتهای خزنده گفته می شود. دارای تخصص بهینه سازی هر سایتی میتواند برای خزندگان شرایطی معلوم نماید (پوشه robots.txt).
در آن پوشه متخصص میتواند معین نماید ورود نوع خاصی از کراولرها به وبسایت ممنوع میباشد. وی برای تعریف و تمجیدکردن مقررات برای خزندگان از اسم خاص هر یک به کارگیری مینماید. باتهای خزنده دردرجهینخستین براساس اینکه وابسته به کدام موتور کاوش می باشند و دردرجهیدوم کاری که اجرا میدهند با پسوندی (user-agent) شناخته میشوند. به عنوان مثال خزندگان گوگل که صرفا محتواهای ویدئویی را میبینند و فهرست مینمایند با این اسم شناخته میشوند: Googlebot-Video یا این که Googlebot-News خزندگانی می باشند که صرفا خبر ها را ایندکس مینمایند.
درصورتی که متخصص seo سایتی به هر دلیلی نخواهد ویدئوهای سایتش ایندکس شوند، بهراحتی قادر است آن خزندگان (Googlebot-Video) را از ورود به تارنما جلوگیری کردن نماید. طبیعی میباشد همگیی گونه های خزندگان به یکاندازه اساسی نیستند و متخصص seo زیرا میخواهد تک تک متحواهای سایتش چشم خواهد شد و در نتیجه ها کاوش درجه بگیرد، دلیلی ندارد بخواهد خزندگان گوگل را از ورود به تارنما بازداشتن نماید. (می توانید لیست مهم ترین باتهای گوگل را در developers.google.com مشاهده کنید.)
چطور وبسایت را برای عنکبوت های گوگل باصرفه کنیم؟
در حالتیکه دارای تخصص بهینه سازی میخواهد وب سایت سوای ایراد و دردسر ایندکس گردد، می بایست فعالیت را برای خزندگان گوگل ریلکس نماید. یعنی کرالرها برای ورود به وب سایت و چرخیدن در صفحه ها نباید خلل یا این که مانعی داشته باشند. بههمینادله، گذشتهازاینکه شغل های مربوطبه بهینه سازی وبسایت صورت بپذیرد، تارنما را بایستی برای عنکبوتهای گوگل باصرفه کرد. (زیرا تا قبل از این درخصوص التفات پوشه robots.txt و وبسایت مپ کلام گردیدهاست، در مفاد ذیل به آن ها اشاره نکردم.)

اقدامات معمول سئوی خارجی