Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 13.02.2015, 12:48   #1
 
Аватар для Dharam
 
Сообщений: 181
FR (активность): 2,335

Доп. информация
По умолчанию Автор темы robots.txt

Добрый день всем!
Вопрос:
Столкнулся с проблемой, WP порождает на каждый пост дубль-страницу, т.е. получается 2 страницы с одинаковым контентом, вот пример:
http://interflow.ru/appleeee/
http://interflow.ru/appleeee/#more-1511
первая должна быть разрешена, а вторая запрещена к индексации (является дублем первой)
Пишу в роботсе директиву:
Disallow: */#more-*
В результате сервис яндекса (на вэбмастере) показывает, что запрещён к индексации весь сайт

Что я делаю не так?


наилучшие пожелания всем,
Дхарам
Dharam вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 13.02.2015, 12:54   #2
 
Аватар для Phoenix
 
Сообщений: 1,005
FR (активность): 35,050

Доп. информация
По умолчанию

@Dharam, #more-1511 не является дубликатом, это якорь на определенную область страницы


В сео денег нет, совсем нет
Phoenix вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
 Аскольд (13.02.2015)
Старый 13.02.2015, 13:45   #3
 
Аватар для Dharam
 
Сообщений: 181
FR (активность): 2,335

Доп. информация
По умолчанию Автор темы

Феникс, спс,
т.е. не заморачиваться этим урлом? Это же отдельный урл, мне так кажется, или знак решётки однозначно воспринимается всеми как якорь, даже если стоит после слэша?
Вот пример страницы с якорями – http://bhajan.narod.ru/numerology.htm#digitshome
В обычном шмле решётка стоит сразу за урлом, без слэша


наилучшие пожелания всем,
Дхарам
Dharam вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 13.02.2015, 13:47   #4
 
Аватар для Phoenix
 
Сообщений: 1,005
FR (активность): 35,050

Доп. информация
По умолчанию

@Dharam, ну я вроде как конкретно написал. Если интересна тематика всегда же можно загуглить как боты пс интерпретируют якоря


В сео денег нет, совсем нет
Phoenix вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 13.02.2015, 16:08   #5
 
Аватар для Themepals
 
Сообщений: 12
FR (активность): 82

Доп. информация
По умолчанию

Поставьте All in One Seo плагин, там есть функция добавления rel="canonical", вроде бы, Яндекс нормально обрабатывает:
https://help.yandex.ru/webmaster/con...robot/html.xml
Themepals вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 13.02.2015, 22:31   #6
 
Аватар для Dharam
 
Сообщений: 181
FR (активность): 2,335

Доп. информация
По умолчанию Автор темы

Проверил список проиндексированных страниц, урл с решёткой в списке отсутствует, видимо Яша действительно обрабатывает такие урлы, как урлы с якорями… спасибо всем


наилучшие пожелания всем,
Дхарам
Dharam вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Метки
индексация, роботс.тхт

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
robots.txt - учимся использовать. Часто задаваемые вопросы по robots.txt Alex LM Общие вопросы 18 10.05.2016 11:09
robots.txt для DLE YaltaHome.com DLE 9 10.12.2012 10:45
Про robots.txt heretic Joomla 6 17.03.2011 10:40
Robots.txt Anaksagor Индексация сайта 5 17.09.2009 14:17

Текущее время: 22:05. Часовой пояс GMT +3.