Ох уж эти ошибки роста…
В моей практике был случай. Писал статьи, старался изо всех сил, написано на тот момент было статей шестьдесят и вдруг!
Нахожу такую деталь, постоянные ссылки мои настроены на блоге не совсем корректно, вы можете посмотреть как нужно в этой статье.
Ну а сами понимаете, блог в индексе и посетители приходят по запросам из выдачи поисковиками. Некоторые статьи в ТОПе на вторых –пятых позициях держатся и приводят кучу народа на блог.
И вот, засада, значит надо переделывать все ссылки? Обратился к опытным СЕОшникам, говорят этот вопрос все время в дискуссиях, а структура, как не крути, нарушена. Как бы вроде и так работает…
Но знакомый блогер сказал, что у него за 170 статей было, и стало колбасить, и он переделывал.
А всего лишь в конце URLа каждой статьи не слэш [ / ] должен быть, а [ .html ] !!!
Подумал-подумал и взялся. И переделал. Конечно, посещаемость упала, потом постепенно начала расти, но вот проблема.
Страницы со слэшем в индексе остаются и посетители из поисковиков естественно идут ко мне и натыкаются на 404 страницу. Нет мол тут такой статьи, бля… Какого хера…
Вот мы и пришли к сути статьи, надо убрать из индекса эти УРЛы.
Удаление страниц из индекса поисковых систем
Изучив этот вопрос, принялся за дело. Оказывается, что несуществующие страницы могут оказаться по многим причинам.
Почему же закрытые и удаленные страницы остаются в поиске
Причин несколько. Поясню, под закрытыми страницами подразумеваются служебные и другие страницы, запрещенные к индексации правилами robot.txt или метатэгами.
Несуществующие страницы существуют в поиске по причинам:
— Удаленные, а значит не существующие
— по причине ручного редактирования адреса вэб-страницы. Этого делать нельзя категорически, он сразу становится недоступным.
— не правильно настроена работа сервера, в связи с этим несуществующая страница будет выдавать 404 ошибку.
Лишние страницы образуются в индексе при условии:
— Страницы закрыты, но на самом деле они находятся в поиске и открыты для поисковых роботов (не правильно настроен robots.txt)
— были проиндексированы ранее, чем они были закрыты
— на эти страницы ссылаются другие сайты или на них ссылаются внутренние страницы.
Ну коли причины нам известны, диагнос поставлен, можно и приступить к лечению.
Не лишним стоит упомянуть, что сделав работу по устранению всех косяков, они еще какое-то время будут существовать в поиске. Все зависит от частоты прохода роботов по вашему сайту.
Как удалить страницу из поиска в Яндексе
Входим по ссылке в Вэбмастер Яндекса и в текстовое поле вставить адрес удаляемой страницы
Отправили и при следующем заходе робота запрос на удаление будет выполнен.
Как удалить из индекса в поисковой системе Google
В Гугле открываем инструменты вэбмастера в списке Оптимизация Удалить URL адреса.
Или наберите в поиске Гугла «Инструмент для вебмастеров» и в верхней кликните по верхней строчке.
Откроется окно Search Console, где кликните на URL вашего сайта, если он там есть. Если нет, добавьте свой ресурс (слева кнопка).
Затем слева будет меню, на нем путь Индекс Google —> Удалить URL-адреса.
Жмите на кнопку Временно скрыть, и внесите адрес для удаления в окно. Кнопка Продолжить.
Затем выберите причину и Отправьте запрос. Запрос о статусе отобразится.
И через какое-то время страница уйдет из индекса.
Ну вот и вся история)))