doroga26
Member | Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору с помощью плагина X-map создал карту сайта вот она Ссылка в d robots.txt запртил индексации некоторых директорий, с целью избавиться от индексирования дублирующих страниц вот код робота Код: # If the Joomla site is installed within a folder such as at # e.g. www.example.com/joomla/ the robots.txt file MUST be # moved to the site root at e.g. www.example.com/robots.txt # AND the joomla folder name MUST be prefixed to the disallowed # path, e.g. the Disallow rule for the /administrator/ folder # MUST be changed to read Disallow: /joomla/administrator/ # # For more information about the robots.txt standard, see: # http://www.robotstxt.org/orig.html # # For syntax checking, see: # http://www.sxw.org.uk/computing/robots/check.html User-agent: * Allow: /index.php?option=com_xmap&view=xml&tmpl=component&id=2 Disallow: /administrator/ Disallow: /cache/ Disallow: /cli/ Disallow: /components/ Disallow: /images/ Disallow: /includes/ Disallow: /installation/ Disallow: /language/ Disallow: /libraries/ Disallow: /logs/ Disallow: /media/ Disallow: /modules/ Disallow: /plugins/ Disallow: /templates/ Disallow: /tmp/ Disallow: /*? Disallow: /*index.php Disallow: /*view Host: dutyfreeshop.com.ua Sitemap: http://dutyfreeshop.com.ua/index.php?option=com_xmap&view=xml&tmpl=component&id=2 | Запрет индексации: Код: Disallow: /*? Disallow: /*index.php Disallow: /*view | Разрешение на индексацию Код: Allow: /index.php?option=com_xmap&view=xml&tmpl=component&id=2 | при проверке сайтмап в инструменте веб мастеров гугл выдается ошибка При попытке доступа к вашему файлу Sitemap произошла ошибка. Убедитесь, что этот файл Sitemap соответствует нашим правилам и находится в указанном местоположении, а затем отправьте его повторно. и URL, запрещенный файлом robots.txt а в янедкс-вебмастере ошибок нет В чем причина? Сайт мап пересоздавал Добавлено: Проблема решена!))) Нашел в инете Кто мог подумать, я не мог, что вроде при проверке онлайн, Google пользуется старым, давно загруженным вариантом robots! Короче, пока не скормил (Инструмент проверки файла robots.txt, кнопка "отправить") новый robots дело не сдвинулось. И о чудо, ошибка пропала. Вернул на место удалённое, чтоб не лезли в индекс дубли: Disallow: /*? Disallow: /*% Disallow: /*& и конечно же оставил Allow: /index.php?option=com_xmap&sitemap=1&view=xml (должен идти ДО(перед)! Disallow) У меня заработало. Всем удачи! | Всего записей: 230 | Зарегистр. 03-01-2008 | Отправлено: 19:28 14-10-2015 | Исправлено: doroga26, 19:32 14-10-2015 |
|