Я хочу, чтобы ссылки в моем HTML-файле сайта сканировались, но я не хочу, чтобы карта сайта в поисковой выдаче

У меня есть веб-сайт с несколькими страницами, а затем папка с большинством страниц. Все страницы, которые существуют в этой папке, могут быть доступны только с помощью поисковой системы моего веб-сайта, затем я создал карты сайтов HTML и XML, чтобы поисковые системы могли находить страницы, находящиеся в этой папке. Это работало хорошо, так как поисковые системы были очень довольны и проиндексировали практически весь сайт. НО HTML-карта сайта появляется в поисковой выдаче, и, кроме того, что поисковые системы должны сканировать ее и переходить по ссылкам, я не хочу, чтобы она была в поисковой выдаче.

Что я могу сделать, чтобы по ссылкам на странице моего сайта следили, но они перестали появляться в поисковой выдаче?

Я видел некоторые ссылки без метатегов индекса и роботы без метатегов индекса, которые, казалось бы, «предназначены» для этого, но некоторые сайты говорят, что они делают одно, а другие сайты говорят, что они делают другое. Я не хочу облажаться, и мои страницы не будут снова проиндексированы, потому что это будет довольно серьезным ударом.

Кроме того, когда я создавал карты сайта, я делал XML и HTML и загружал их на сервер в тот же день, это работало как прелесть, но если xml sitemap достаточно, и я могу удалить html sitemap без негатива Что касается моего количества проиндексированных страниц, это было бы правильным решением и для меня, потому что тогда мне не пришлось бы беспокоиться о том, чтобы оно появлялось на SERP, поэтому, если бы кто-то сделал этот опыт и имел что-то, чтобы поделиться им, было бы также полезно.

1 голос | спросил wxiiir 22 ndEurope/Moscowp30Europe/Moscow09bEurope/MoscowThu, 22 Sep 2011 04:23:07 +0400 2011, 04:23:07

1 ответ


2

Если вы используете тег X-Robots-Tag, либо как метатег, либо как HTTP-заголовок со значением noindex тогда эта страница не будет отображаться в результатах поиска. По ссылкам следует переходить, если в ссылках не используется nofollow, X-Robots-Tag метатег или X-Robots-Tag HTTP-заголовок на странице HTML-карты сайта.

ответил John Conde 22 ndEurope/Moscowp30Europe/Moscow09bEurope/MoscowThu, 22 Sep 2011 04:33:29 +0400 2011, 04:33:29

Похожие вопросы

Популярные теги

security × 330linux × 316macos × 2827 × 268performance × 244command-line × 241sql-server × 235joomla-3.x × 222java × 189c++ × 186windows × 180cisco × 168bash × 158c# × 142gmail × 139arduino-uno × 139javascript × 134ssh × 133seo × 132mysql × 132