Можно ли перечислить карты сайта для разных доменов в одном файле robots.txt?

У нас есть несколько веб-сайтов, обслуживаемых одним и тем же экземпляром Sitecore и одним и тем же рабочим веб-сервером. Каждый веб-сайт имеет свой собственный основной файл и карту сайта с новостями Google, и до сих пор мы включали спецификацию карты сайта для каждого в отдельный файл robots.txt сайта .NET.

Наш эксперт по SEO поднял вопрос о наличии разных доменов в одном и том же файле robots.txt как возможную проблему, и я не могу найти какую-либо документацию, в которой точно так или иначе указано Спасибо.

4 голоса | спросил Iucounu 16 Jam1000000amThu, 16 Jan 2014 01:18:47 +040014 2014, 01:18:47

2 ответа


0

Это должно быть нормально для Google, по крайней мере. Однако он может не работать для других поисковых систем, таких как Bing.

Согласно https://developers.google.com/webmasters/контроль-ползать-индекс /документы /robots_txt :

  

карта сайта: [absoluteURL]

     

[absoluteURL] указывает на файл Sitemap, файл индекса Sitemap или эквивалентный URL. URL-адрес не обязательно должен быть на том же хосте, что и файл robots.txt. Может существовать несколько записей Sitemap. Как записи, не входящие в группу, они не привязаны к каким-либо конкретным пользовательским агентам и могут отслеживаться всеми искателями, если это не запрещено.

ответил plasticinsect 16 Jam1000000amThu, 16 Jan 2014 03:16:50 +040014 2014, 03:16:50
0

Лучший способ добиться этого - обработать файл Robots.txt из дерева контента Sitecore.

У нас также есть похожая структура, в которой мы предоставляем несколько веб-сайтов из одного экземпляра sitecore.

Я написал блог для таких, пожалуйста, найдите его ниже. Это именно то, что вы хотите.

http: //darjimaulik.wordpress .com /2013/03/06 /как к создать обработчик-в-Sitecore /

ответил Maulik Darji 17 Jpm1000000pmFri, 17 Jan 2014 12:18:27 +040014 2014, 12:18:27

Похожие вопросы

Популярные теги

security × 330linux × 316macos × 2827 × 268performance × 244command-line × 241sql-server × 235joomla-3.x × 222java × 189c++ × 186windows × 180cisco × 168bash × 158c# × 142gmail × 139arduino-uno × 139javascript × 134ssh × 133seo × 132mysql × 132