Даже не знаю как реагировать на уверенный жирный шрифт и + ещё "мне нравится"!!!!
Привожу живые примеры:
1. antiquers.ru в его корне лежит sitemap.xml, в robots.txt прописана строчка "Sitemap:
Для просмотра ссылки Войди или Зарегистрируйся",
теперь в браузере набираем:
Для просмотра ссылки Войди или Зарегистрируйся и мы видим скрипт карты сайта.
2. antiquers.ru в его корне в папке /doska-obyavleniya-besplatno лежит доска объявлений которая в своем корне т.е.
Для просмотра ссылки Войди или Зарегистрируйся содержит виртуальный файл sitemapindex.xml и в robots.txt прописана строчка "Sitemap:
Для просмотра ссылки Войди или Зарегистрируйся так вот, в этом виртуальном файле нет никакой информации о страницах доски, но в него генератор карты генерирует 4 карты сайта:
Для просмотра ссылки Войди или Зарегистрируйся ---- карта главной страницы
Для просмотра ссылки Войди или Зарегистрируйся ---- карта доски объявлений
Для просмотра ссылки Войди или Зарегистрируйся ---- карта каталога объектов
Для просмотра ссылки Войди или Зарегистрируйся ---- карта каталога статей
теперь о главном все эти карты физически на сервере отсутствуют, но в серверном файле .htaccess прописан редирект, что при обращении роботов к
стандартной (для этой CMS доски "sitemapindex.xml") карте сайта, начинает работать генератор (файл - sitemapindex.php+sitemap_modul.php), как раз которые и варят всю эту кашу.
Таким образом в файле robots.txt можно представить карты 2 вариантами:
1. Sitemap:
Для просмотра ссылки Войди или Зарегистрируйся
или
2. Sitemap:
Для просмотра ссылки Войди или Зарегистрируйся
Sitemap:
Для просмотра ссылки Войди или Зарегистрируйся
Sitemap:
Для просмотра ссылки Войди или Зарегистрируйся
Sitemap:
Для просмотра ссылки Войди или Зарегистрируйся
Для проверки можете проверить все варианты введя 5 выше перечисленных варианта карт
И теперь посмотрим карту которую Вы мне посоветовали написать в robots.txt:
Стандартный: Для просмотра ссылки Войди или Зарегистрируйся
Форум по адресу:
Для просмотра ссылки Войди или Зарегистрируйся вроде как есть, а вот карты нет