URL недоступний Google

[yura_co]

Довго думав де розмістити цей пост, так як він не стосується збірки, але питання, я вважаю, потрібне.
З 17го жовтня багато хто помітив проблему в серч консолі такого виду:
URL недоступен Google
Доступность страницы
Эту страницу нельзя проиндексировать: Страница недоступна из-за проблемы со всем сайтом

Але це відбулося не тільки в консолі а й в API індексації, а саме на сайт просто перестали заходити роботи
Ну чим це загрожує я думаю не потрібно пояснювати....
А от головне питання: Як вирішити цю проблему? Що ж насправді сталося?
На просторах інету вже купа здогадок чому так відбулося, хтось каже що це санкції через генерації за допомогою штучного інтелекту, хтось висловлює думку що це санкції через плагіат, де плагіатом вважається переклад опису з іншої мови, але це лише здогадки, поки не знайшов жодної офіційної інформації від Г

Можливо хтось із спільноти вже знайшов рішення?

 

[Baco]

на проектах, я опрацьовую цільові помилки індивідуально, десь змінилась мікророзмітка, десь додатково у назву апострофи полізли і потрібно екранувати, десь своя специфіка, та в цілому, без бачення конкретного ресурсу і того, як інтерпритує помилкою його Г, складно надати відповідь.

 

[SlaSoft]

Cloud???

Логи доступа

 

[yura_co]

Ця проблема не пов'язана з синтаксичними помилками чи мікророзміткою

Це скріни з серч консолі Г, по запиту на індексацію сторінки https://wst.in.ua/ua/

А ось скрін та саме посилання однієї із тем Help Center

Посилання проблема з Помилка: перевищено навантаження на хост
І таких тем вже досить багато

 

[yura_co]

Ну і в довершення скрін модуля Google Indexing Api, де видно що не відбувається реєстрація заходу роботів, хоча в логах видно що відправка на індексацію успішна

 

[Baco]

наскільки я ознайомився з проблемою, то проблема до хостинг-провайдера швидше, оскільки відповідь по ресурсу йде 200

 

[yura_co]

Відповідь провайдера:

 

[Baco]

тоді аналіз того, на що кривиться Г, єдине щось конструктивне зміг тут знайти, але то все не до CMS, або ж якось другорядно.

 

[SlaSoft]

Ну і в довершення скрін модуля Google Indexing Api, де видно що не відбувається реєстрація заходу роботів, хоча в логах видно що відправка на індексацію успішна
Переглянути вкладення 290
Переглянути вкладення 291

Це відповідь Г, але не прямий запит від Г
треба дивитися http логb (access,error)
Може стоїть якась заборона на сервері

 

[yura_co]

Вчора обмежив швидкість заходу бота до 5 секунд і сьогодні відбулося чудо, бот почав заходити приблизно раз на хвилину
UPD
Схоже запрацювало у всіх, зміна частоти то просто співпадіння