ارورهای رایجی که منجر افت کرال بادجت میشوند
هنگامی به امداد ابزارهای بالا میزان دارایی خزش سایتتان را تحلیل میکنید، ممکن میباشد یکسری ارور را مشاهده کنید. این ارورها در اکثر مواقع نگران کننده نیستند؛ زیرا به آموزش سئو مشهد راحتی قابل شناسایی و برطرف کردن میباشند.
معمول ترین ارورهایی که سبب ساز افت میزان دارایی خزش میشوند عبارت اند از:
“not available”: اگرtxt یک روز غیر فعال بماند، کرال کردن هم متوقف میماند و بایستی صحیح گردد.
“Unauthorized (101/407)”: برای این صفحه های شما می بایست اذن ورود به گوگل بات را بدهید؛ اما درصورتیکه داده ها سری ای ندارید.
“Server error (5XX)”: این ارور هشدار دسترسی میدهد و می بایست مسلماً نقص دسترسی را آموزش سئو در مشهد برطرف کرد.
“Other client error (4XX)”: مرتبط با هر اروری که فعالیت کرالر را با ایراد مواجه می نماید.
“DNS unresponsive”: سرور DNS برای اینURL ها پاسخگو وجود ندارد.
“DNS error”: ارورهای دیگر DNS که شناسایی نشدند.
“Fetch error”: شماره پورت نامناسب، IP بد یا این که جواب های غیر قابل توجیه.
“Page could not be reached”: هر اروری در امر دسترسی به شیت.
“Page timeout”: فارغ فرصت دسترسی (ارتفاع کشیدن بیشتراز حد بارگذاری شدن شیت).
“Redirect error”: ریدایرکت های زیاد، پوچ یا این که گردشی.
چه چیزهایی جلوی خزش را میگیرند؟
گاهی پیش میآید که وبسایت ما کرال بادجت یه خرده دارااست و میخواهیم همین دارایی معدود را به سمت صفحات اساسی خیس هدایت کنیم. توجه نمائید که تمامURL ها و درخواست ها در دارایی خزش اکانت می گردند. آدرس های اینترنتی و درخواست ها مشمول صفحه ها AMP یا این که m-dot، hreflang، CSS و javascript به عنوان مثال درخواست های XHR می گردند. این آدرس های اینترنتی با کرال یا این که parsing pages پیدا می گردند.
کاری که می بایست اعمال دهیم این میباشد که بعضا از صفحه ها را محصور کنیم تا صفحه های اساسی خیس را جلوی دیده کرالر در اختیار بگذاریم. چهطور؟ با یک کدام از طریق های پایین:
صورت دادن منابعی مثل نقشه وب سایت و RSS
ارسال URL کاغذ اساسی خیس برای ایندکس شدن (به یاری ابزارهایی مانند گوگل سرچ کنسول)
به کار گیری از API گوگل بات هایی که دارایی خزش را به اشتراک میگذارند و خواهیم توانست گزارش های آن را درCrawl stats در GSCببینیم.
ورودی هایی که بر کرال بادجت مؤثر اند
ولی شاید بپرسید چه فاکتورهایی میتوانند بر دارایی خزش تأثیر بگذارند؟ یعنی کدام ورودی ها سبب ساز می گردند که میزان دارایی خزش بیشتر یا این که کمتری داشته باشیم؟ بهدنبال میبینیم.
۱- معیار تقاضای کرال از سمت گوگل
تقاضای کراول یعنی این که گوگل تا چه اندازه ای میخواهد در وب سایت ورود نماید. طبق یک قاعده کلی، صفحه های دوستداشتنی خیس و شیت هایی که تغییرات قابل توجهی داشتند، بیشتر آیتم کرال قرار میگیرند. همچنین ورقه هایی که پیوند بیشتری به آنها زده گردیده باشد هم در حق تقدم میباشند.
بهاین نکته اعتنا فرمایید که گوگل مدام در اکنون حق تقدم بندی میباشد و صفحه ها دوستداشتنی و مالامال پیوند مدام در حق تقدم می باشند. یادتان باشد که خواهیم توانست با به کارگیری از گزارش های Site Explorer بفهمیم که کدام صفحه های مطلوبیت بیشتری دارا هستند یااینکه ahrefs واپسین توشه چه وقتی صفحه ها شمارا کرال نموده است.
این ضابطه را کناره ذهن داشته باشید که هر چه ورقه ای کمتر تغییر و تحول نماید، دیر به دیرتر هم آیتم کرال قرار میگیرد. یعنی یک برگه اولیه به مسافت یک روز و آنگاه در شکل عدم تغییر و تحول، به مسافت سه روز، آنگاه ۱۰ روز، یک ماه، ۱۰۰ روز و …. کراول میگردد. در غایت در شکل تغییرات بسیار معدود، روند کرال آن برگه متوقف می گردد.
۲- محدودیت نرخ کرال
محدودیت نرخ کرال مرتبط با تارنما شما می گردد؛ این که سایتتان تا چه اندازه توانا به حفاظت میباشد؟ تارنما ها معمولاً دراین باره محدودیت داراهستند و بعداز واحد سنجش معینی، در گیر مشکلاتی مثل کُندی سرور یا این که ارورها میشوند.
اکثر کرالرها برای دوری از جراحت زدن به وبسایت، هنگامی با اینگونه مشکلاتی رو به رو میگردند، عمل خودشان را متوقف می نمایند. درواقع گوگل آنقدر هوشمند می باشد که پیکربندی خودش را مبنی بر گنجایش وب سایت اعمال میدهد. پس در شرایطیکه سایتی گنجایش کرال بیشتری داشته باشد، این مقدار هم ارتقا پیدا می نماید و در شکل بروز ایراد از طرف سرور، فعالیت کرال کردن از سمت گوگل کُند میشود.
ارورهای رایجی که منجر افت کرال بادجت میشوند
هنگامی به امداد ابزارهای بالا میزان دارایی خزش سایتتان را تحلیل میکنید، ممکن میباشد یکسری ارور را مشاهده کنید. این ارورها در اکثر مواقع نگران کننده نیستند؛ زیرا به آموزش سئو مشهد راحتی قابل شناسایی و برطرف کردن میباشند.
معمول ترین ارورهایی که سبب ساز افت میزان دارایی خزش میشوند عبارت اند از:
“not available”: اگرtxt یک روز غیر فعال بماند، کرال کردن هم متوقف میماند و بایستی صحیح گردد.
“Unauthorized (101/407)”: برای این صفحه های شما می بایست اذن ورود به گوگل بات را بدهید؛ اما درصورتیکه داده ها سری ای ندارید.
“Server error (5XX)”: این ارور هشدار دسترسی میدهد و می بایست مسلماً نقص دسترسی را آموزش سئو در مشهد برطرف کرد.
“Other client error (4XX)”: مرتبط با هر اروری که فعالیت کرالر را با ایراد مواجه می نماید.
“DNS unresponsive”: سرور DNS برای اینURL ها پاسخگو وجود ندارد.
“DNS error”: ارورهای دیگر DNS که شناسایی نشدند.
“Fetch error”: شماره پورت نامناسب، IP بد یا این که جواب های غیر قابل توجیه.
“Page could not be reached”: هر اروری در امر دسترسی به شیت.
“Page timeout”: فارغ فرصت دسترسی (ارتفاع کشیدن بیشتراز حد بارگذاری شدن شیت).
“Redirect error”: ریدایرکت های زیاد، پوچ یا این که گردشی.
چه چیزهایی جلوی خزش را میگیرند؟
گاهی پیش میآید که وبسایت ما کرال بادجت یه خرده دارااست و میخواهیم همین دارایی معدود را به سمت صفحات اساسی خیس هدایت کنیم. توجه نمائید که تمامURL ها و درخواست ها در دارایی خزش اکانت می گردند. آدرس های اینترنتی و درخواست ها مشمول صفحه ها AMP یا این که m-dot، hreflang، CSS و javascript به عنوان مثال درخواست های XHR می گردند. این آدرس های اینترنتی با کرال یا این که parsing pages پیدا می گردند.
کاری که می بایست اعمال دهیم این میباشد که بعضا از صفحه ها را محصور کنیم تا صفحه های اساسی خیس را جلوی دیده کرالر در اختیار بگذاریم. چهطور؟ با یک کدام از طریق های پایین:
صورت دادن منابعی مثل نقشه وب سایت و RSS
ارسال URL کاغذ اساسی خیس برای ایندکس شدن (به یاری ابزارهایی مانند گوگل سرچ کنسول)
به کار گیری از API گوگل بات هایی که دارایی خزش را به اشتراک میگذارند و خواهیم توانست گزارش های آن را درCrawl stats در GSCببینیم.
ورودی هایی که بر کرال بادجت مؤثر اند
ولی شاید بپرسید چه فاکتورهایی میتوانند بر دارایی خزش تأثیر بگذارند؟ یعنی کدام ورودی ها سبب ساز می گردند که میزان دارایی خزش بیشتر یا این که کمتری داشته باشیم؟ بهدنبال میبینیم.
۱- معیار تقاضای کرال از سمت گوگل
تقاضای کراول یعنی این که گوگل تا چه اندازه ای میخواهد در وب سایت ورود نماید. طبق یک قاعده کلی، صفحه های دوستداشتنی خیس و شیت هایی که تغییرات قابل توجهی داشتند، بیشتر آیتم کرال قرار میگیرند. همچنین ورقه هایی که پیوند بیشتری به آنها زده گردیده باشد هم در حق تقدم میباشند.
بهاین نکته اعتنا فرمایید که گوگل مدام در اکنون حق تقدم بندی میباشد و صفحه ها دوستداشتنی و مالامال پیوند مدام در حق تقدم می باشند. یادتان باشد که خواهیم توانست با به کارگیری از گزارش های Site Explorer بفهمیم که کدام صفحه های مطلوبیت بیشتری دارا هستند یااینکه ahrefs واپسین توشه چه وقتی صفحه ها شمارا کرال نموده است.
این ضابطه را کناره ذهن داشته باشید که هر چه ورقه ای کمتر تغییر و تحول نماید، دیر به دیرتر هم آیتم کرال قرار میگیرد. یعنی یک برگه اولیه به مسافت یک روز و آنگاه در شکل عدم تغییر و تحول، به مسافت سه روز، آنگاه ۱۰ روز، یک ماه، ۱۰۰ روز و …. کراول میگردد. در غایت در شکل تغییرات بسیار معدود، روند کرال آن برگه متوقف می گردد.
۲- محدودیت نرخ کرال
محدودیت نرخ کرال مرتبط با تارنما شما می گردد؛ این که سایتتان تا چه اندازه توانا به حفاظت میباشد؟ تارنما ها معمولاً دراین باره محدودیت داراهستند و بعداز واحد سنجش معینی، در گیر مشکلاتی مثل کُندی سرور یا این که ارورها میشوند.
اکثر کرالرها برای دوری از جراحت زدن به وبسایت، هنگامی با اینگونه مشکلاتی رو به رو میگردند، عمل خودشان را متوقف می نمایند. درواقع گوگل آنقدر هوشمند می باشد که پیکربندی خودش را مبنی بر گنجایش وب سایت اعمال میدهد. پس در شرایطیکه سایتی گنجایش کرال بیشتری داشته باشد، این مقدار هم ارتقا پیدا می نماید و در شکل بروز ایراد از طرف سرور، فعالیت کرال کردن از سمت گوگل کُند میشود.

۵ وظیفه اساسی مدیر تجارت چیست؟