Индексируются несуществующие страницы на вордпресс

  • Автор темы krepkiy
  • 3481
  • Обновлено
  • 29, May 2014
  • #1
Яндекс проиндексировал несуществующие страницы которые выводят на 404 ошибку.

Проблема в том , что сам яндекс вебмастер не закинул их в "исключенные страницы" и разумеется они теперь все в поисковой выдаче и сами они не удалятся из-за этого. Мой сайт стоит на движке вордпресса.

Я заметил,что в разделе медиафайлы, нажав на кнопку перейти, попадаешь на ошибку 404. Именно эти страницы и проиндексировал в последнем апдейте.
http://sa.uploads.ru/7q1M4.jpg

Удалять каждую страницу через яндекс вебмастер не вариант, т.к. их довольно много, а позже и того в несколько раз больше будет, раз всплыло такое.

Перекрыть через robot тоже не могу, т.к. ссылки на несуществующие страницы имеют следующий вид

"сайт/рецепт/рецепт13" (там где "плюшки_с_малиной3" это фото).

"сайт/плюшки_с_малиной/плюшки_с_малиной3"

"сайт/хлеб_печеный/хлеб_печеный6"

"сайт/печенье_с_сахаром/печенье_с_сахаром4"

После каждого нового рецепта мне придется добавлять строку в роботс

На моем другом сайте та же проблема.

Как это исправить и как это избежать в дальнейшем?

Данные если нужны

http://plushe4ka.ru

3.8.3

krepkiy


Рег
29 May, 2014

Тем
1

Постов
4

Баллов
14
  • 01, Jun 2014
  • #2
Почистите кэш WP. Проверьте, возвращается ли статус 404 при обращении к несуществующим страницам.
 

mike4


Рег
12 Nov, 2013

Тем
2

Постов
147

Баллов
167
  • 02, Jun 2014
  • #3
Не очень понятно что вы закрываете в роботсе... Например строка Disallow : /domashnie_plushki-2/domashnie_plushki_4 Меня перекидывает на стр http://plushe4ka.ru/domashnie_plushki-2/

Disallow : /domashnie_plushki-2/domashnie_plushki_5 Аналогично:
http://plushe4ka.ru/domashnie_plushki-2/

Да. И в роботсе, у вас не закрыты рубрики, что создает дубли контента. Я бы лично пересмотрел роботс в целом.
 

Wmboard


Рег
01 Jan, 2011

Тем
522

Постов
7188

Баллов
12408
  • 05, Jun 2014
  • #4
вас перекидывает потому, что я так прописал в ВП. Причина в том, что когда заходили люди то видели ошибку 404, тогда как сам яндекс воспринимает нормально страницу и выдает код 200 в место 404. Рубрики перекрыл спс.
 

krepkiy


Рег
29 May, 2014

Тем
1

Постов
4

Баллов
14
Тем
49554
Комментарии
57426
Опыт
552966

Интересно