Откуда этот каталог?

[Onni]

При индексации страниц сайта, яндекс пишет 400 с лишним страниц, у меня столько нет. Причем это число плавает каждый день, то больше, то меньше. Полезла в яндекс.вебмастер - там показаны какие страницы в поисковике. Однако! у меня нет такого каталога в корневой папке сайта, а именно dir-catalogue/poisk/....
Как мне удалить лишние страницы и проиндексировать только к сайту относящиеся?
По ФТП не нашла эту папку dir-catalogue.

[Лубышев]

Запретите их индексировать поместив в корневую папку сайта файл robots.txt с содержимом примерно такого типа

User-agent: *
Disallow: /dir-catalogue/poisk/

а что касается того, откуда каталог яндекс видит может быть множество причин:
1. Используете ЧПУ при помощи .htaccess
2. 301 Редирект при помощи .htaccess
3. Злоумышленники скрипт закинули
4. возможен и такой вариант что PHP или другой скрипт создает файлы/папки, а потом их удаляет

[acesta]

А что в этом плохого? пусть показывает хоть 100500 страниц

[Onni]

Сообщение от acesta

А что в этом плохого? пусть показывает хоть 100500 страниц

Большинство из них с ошибкой 404.

Лубышев, спасибо! Попробую. А если принудительно заменить роботс.тхт, он сразу проиндексирует?

[Лубышев]

нет, не сразу. а как только у поискового индексатора дойдет очередь до вашего сайта. а зачем заменять роботс? как я понял у вас уже существует файлик такой. а вдруг там что то важное.... можно просто дописать в этот существующий файл

Disallow: /dir-catalogue/poisk/

А что в этом плохого? пусть показывает хоть 100500 страниц

множество несуществующих страниц снижает уровень доверия индексаторов, в топе вам не быть, если этой проблемы не устранить.
1. все страницы должны возвращать 200 код ну или 301, но в таком случае конечная страница 200 код должна выдать
2. не рекомендуется злоупотреблять внешними ссылками.
3. контент должен быть уникальным, все зеркала надо склеить, так чтобы не было дубликатов.
4. структура сайта должна быть понятной, а не запутанной. в идеале красивое дерево, где все странички взаимосвязаны в иерархической последовательности. глубину иерархии я бы не рекомендовал более 5-7 лвл.

[Лубышев]

он сразу проиндексирует?

Поторопись. SEOшники прогнозируют сегодня-завтра апдейт

[Onni]

Сообщение от Лубышев

Поторопись. SEOшники прогнозируют сегодня-завтра апдейт

Это катастрофа! он все равно проиндексировал вместе с этим каталагом. Число страниц не поменялось. Каким ресурсом можно выявить сторонние скрипты?

[Лубышев]

ни каким. если это вирус - то антивирусом можно, если нет - то ни чем. какая у вас CMS? копайте в сторону ЧПУ, посмотрите что у вас в .htaccess, проверьте корректно ли вбиты все ссылочки

[Onni]

Сообщение от Лубышев

ни каким. если это вирус - то антивирусом можно, если нет - то ни чем. какая у вас CMS? копайте в сторону ЧПУ, посмотрите что у вас в .htaccess, проверьте корректно ли вбиты все ссылочки

cms - joomla, старая 1.5( разбираю проблемы на 2.5 с ЧПУ)


я залезла по вашей рекомендации в .htaccess, там :

RewriteEngine on
RewriteRule ^(.*)dir-catalogue/(.*)$ /findout.php [L]

Я так понимаю вторую строчку можно удалить и все станет нормально?

Еще хотела спросить такой вопрос: имеется скрипт, хочу вставить его на главную страницу, но не хочу чтобы его видели поисковые системы?
Есть ли возможность закрыть глаза поисковым системам на этот маленький кусочек кода?)))

И не знаете ли вы сервисы по предполагаемым апдейтам яндекса и гугла?