Джерело – searchenginejournal.com
Веб-майстер поцікавився у співробітника Google Джона Мюллера, як повідомлення про помилку 500 в Search Console у відповідь на сканування Googlebot могли вплинути на видимість сайту в Пошуку.
Мюллер відповів: якщо Googlebot стикається з кодом відповіді серверу 500, то намагається потрапити на сторінки знову й знову. Якщо помилка все ще повторюється, то Google уповільнює сканування. Якщо ж через деякий час помилка 500 не зникає, пошуковик видаляє URL-адреси з помилками з індексу.
Крім того, стало відомо – Googlebot сам викликає перевантаження серверу. Через це зокрема він і уповільнює сканування. Проте у пошуковика немає жорстких значень, за яких Google вирішує, що зроблено багато запитів, отримано багато помилок, отже, пора сповільнювати сканування.
