Как удалить страницу из поиска
Со временем, когда блог или сайт начинает разрастаться и количество страниц увеличивается, у многих вебмастеров возникают проблемы в связи с появлением в индексе поисковых систем дубликатов страниц. Сразу же встает вопрос о том, как удалить из поиска Яндекса и Google страницу блога. В данной статье я хочу рассмотреть как удалить страницу из поиска Яндекса и Google.
В чем опасность нахождения дубликатов
1. Если в индекс поисковой системы попали дубликаты, того или иного поста, то это может служить причиной вылета всего поста из индекса или занижения его в поисковой выдаче, а также ухудшение внутренней и внешней оптимизации.
2. Потеря внешних ссылок.
Причины удаления страниц из поиска
- Неправильное определение зеркала сайта 301 редирект.
- Не были закрыты файлом Robots.txt
- Потеряли актуальность или стали не достоверными.
- Содержат секретную информацию и так делее.
Как удалить страницу из поиска Яндекса и Google
Рассмотрим 4 способа, как удалить страницы из поиска.
1. Файл Robots.txt.
Им можно закрыть от индексации не только одну простой текст, но и целый раздел. Для удаления определенной страницы, достаточно прописать следующий код в самом файле.
О том, как закрыть или открыть посты, разделы и категории для индексации можете прочитать в статье «Файл Robots.txt для блога». Закрытие поста Robots.txt не гарантия того, что из индекса он не пропадет, так как на нее могут указывать внешние ссылки.
2. Meta-тег robots
Достаточно разместить следующий код на страницах, которые не должны быть про индексированы.
3. Error 404
Для осуществления этого метода, достаточно просто удалить пост, статью, раздел или категорию с WordPress блога. Ошибка 404 показывает, что материал на который ведет ссылка не существует.
Остается только лишь подождать того момента, пока робот поисковой системы зайдет на блог и исключит ее. Правда, если пост уже был в поиске и находилась в индексе, его удаление вызовет лишь 404 ошибку, но дубля контента уже не возникнет.
Ручное удаление страниц из поиска
Один из самых надежных и практичных способов удаления страниц из поиска – это ручное удаление из панели вебмастера.
- Из Google – https://www.google.com/webmasters/tools/
- Из Яндекс — http://webmaster.yandex.ru/delurl.xml
Для этого закрываем необходимое в файле Robots.txt выше перечисленным способом. Удаляем страницу из поиска и ждем очередного апдейта или захода поискового робота на ресурс.
А на этом я заканчиваю и надеюсь, что внешняя и внутренняя оптимизация блога не пострадает и вы будете следить за лишними страничками. Советую подписаться на обновление блога по E-mail.
С уважением, Дороднов Иван!
(4 голос, средний: 5,00 из 5)
Loading ...
Навигация
Предыдущая статья: ← Бесплатный анализ сайта
Следующая статья: Как защитить контент сайта от воровства →
В этой же рубрике:
Понравилась статья? Получайте свежие уроки прямо на email или подпишитесь на RSS ленту блога!
Именно так и поступаем.
Как удалить страницу сайта?
Воспользоваться рекомендациями. которые приведены в этой статье.
Именно так и надо искать и удалять дубли страниц. чтобы другим неповадно было.
Все равно для удаления страницы из поиска без robots.txt не обойтись.
Пока нигде не видел, чтоб это использовали)))
Ну вот...еще одна не полная статья. Что за общие рекомендации? Обьясните, как присвоить странице код ошибки 404???
я пробовал делать редирект на /404. Отправляет ответ 302.
Вы бы сделали все как написано, а потом писали отзыв. Все достаточно просто, закрываете страницу от индексации в Robots.txt и потом удаляете через Яндекс. Вебмастер, далее ждете пере индексации страницы поисковой системой.
Или просто редактируете ее адрес, так чтобы по старому она не открывалась.
я попробовал между прочим кейс по выходу из ситуации.
у меня страница с русскими буквами в URL, как присвоить ей код ответа сервера 404?
Прописывал редирект на /404 в .htaccess , код ответа 302 ((
Пробовал добавить в robots.txt ссылку. При проверке файла robots говорит: Возможно, был использован недопустимый символ. Это изза русских буков в URL.
Как присвоить странице 404? Пока можно только 301 редирект замутить либо указать rel="canonical"
В любом случае нужно дождаться пере индексации (пока еще у поисковика есть копия страницы), но можно в ручную изменить ее URL, например исправить расширение на недопустимое и прочее и опять запретить в robots
fire-work (точка) com (точка) ua/katalog/salute/super-salute/71-Салют-vip-roYal-su80-веер — ну вот есть страница. В реале ее нету. Сайт ее не распознает как битую ссылку. А вот так, уже 404 покажет:
fire-work (точка) com (точка) ua/апвапвап
Не могу я ничего на этой странице исправить, ни URL ни содержимое. Только 301 редирект. Но он сработает лишь в том случае, если Гоша хоть раз еще на этот URL зайдет. А он не зайдет, т.к. на эту страницу не ведет ни одна ссылка. Значит останется она висеть в индексе ( А чтобы удалить ее вручную нужно ей присвоить 404.
Дело в том, что указанная вами страница является дублем fire-work (точка) com (точка) ua/katalog/salute/super-salute
Закрывайте дубли, смотрите результат.
Если брать во внимание контент, то да она дубль, если смотреть по URL то ей соответствует карточка товара с артикулом. И я как бы итак знаю что это дубль страницы и вообще хочу удалить этот URL из индекса, зачем сюда и пришел на сайт, чтобы помогли присвоить странице код 404.
Страницы же нету физически, но сервер 404 почему-то не присваивает ей.
Можете сами проверить набрав что-либо после категории. Увидите, что опять попадете в категорию, и ошибку не выдаст!!
Хоть бы потрудились набрать пару букв на клавиатуре либо проверить что к чему.
Пробовал. Автоматически создается дубль страницы. Не пробовали чистить через плагин этот дубль? или что вообще происходит при проверке?
этот плагин на автомате ссылки создает, там каждую отдельно в VMsef переделать нельзя.
Через другой плагин можно дописать noindex or nofollow or rel=canonical , тоесть с мета-тегами работает.
Просто не ясно, почему эти страницы не распознаются как битая ссылка (
В любом случае поставил 301 редиректы, пока буду смотреть за индексацией и количесвом ссылок проиндексированных в Webmasters. Посмотрю ситуацию через месяц.
С Гуглом всё просто, а вот Яндекс при попытке удалить какой-нибудь адрес — говорит мол, нету оснований для удаления ))
Здравствуйте!
В поиске Яндекс я вбил одну начальную строку статьи, с Вашего сайта. Он указал две страницы. Это дубли?
Привет, Ruslan. Это копия анонса, которая автоматически добавляется в категорию или рубрику.
Автору спасибо за статью, все по теме ничего лишнего, страницу из поиска удалил быстро.