Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 10.08.2011, 20:22   #1
 
Аватар для erfey
 
Сообщений: 3
FR (активность): 228

Доп. информация
Восклицание Автор темы Как закрыть от индексации отдельные страницы сайта?

Здравствуйте форумчане! Есть срочный вопрос. Мне надо закрыть некоторые страницы в категории от индексации. Адреса страниц такого вида:
имя сайта/категория/2011/сама страница 1.html
имя сайта/категория/2011/сама страница 2.html
имя сайта/категория/2011/сама страница 3.html

Значит будет так:
Disallow: /2011
Это вроде должно закрыть от индексации все страницы начинающиеся с 2011.
erfey вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 13.08.2011, 02:58   #2
 
Аватар для sarat62301
 
Сообщений: 21
FR (активность): 320

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

По идее да, у тебя что много их? Я бы для убедительности прописал каждую.
sarat62301 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 13.08.2011, 15:04   #3
 
Аватар для Umka
 
Сообщений: 4,143
FR (активность): 80,659

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

Цитата:
Сообщение от erfey Посмотреть сообщение
Значит будет так:
Disallow: /2011
вот так:
Disallow: /2011/
Umka вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 13.08.2011, 15:09   #4
 
Аватар для emlonlife
 
Сообщений: 773
FR (активность): 26,981

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

а наоборот, одну страницу с конкретным урлом можно открыть для индексации?
а то у меня гуглвебмастере ругается на карту сайта, говорит, что закрыта роботсом...


Лицензионный SEO-софт бесплатно
Но только помни - правда всегда победит, даже если погибнет в бою...

emlonlife вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 13.08.2011, 15:36   #5
 
Аватар для Umka
 
Сообщений: 4,143
FR (активность): 80,659

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

Цитата:
Сообщение от emlonlife Посмотреть сообщение
ругается на карту сайта, говорит, что закрыта роботсом
сама карта закрыта от индексации?
Umka вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 13.08.2011, 15:41   #6
 
Аватар для emlonlife
 
Сообщений: 773
FR (активность): 26,981

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

гугл говорит, что да..
Оффтоп:



Добавлено через 3 минуты
Кажется, разобрался... прошу прощения, что отвлек...
убрал
Disallow: /index.php?*
JoomSEF вроде настроен так, чтобы index.php убирать из урлов, а сайтмап почему-то остался с ним..Надеюсь не будет проблем..


Лицензионный SEO-софт бесплатно
Но только помни - правда всегда победит, даже если погибнет в бою...

emlonlife вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.08.2011, 10:09   #7
 
Аватар для erfey
 
Сообщений: 3
FR (активность): 228

Доп. информация
По умолчанию Автор темы Re: Как закрыть от индексации отдельные страницы сайта?

emonlife пиши в асю, чем смогу помогу с оптимизацией. 56067один069
erfey вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.08.2011, 17:56   #8
 
Аватар для WaterSpout
 
Сообщений: 1
FR (активность): 5

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

Здравствуйте!

Извините если вопрос не туда, не такой, не так и т.д. =)

Подскажите, пожалуйста, идет ли распределение статического веса с индексированных документов на документ, закрытый от индексации роботом??
(например: Морда, с весом 4, ссылается на два документа - один проиндексирован а другой нет(закрыт роботом)... так вот, он проиндексированному даст 3.4 веса или 1.7?)

Спасибо!
WaterSpout вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.08.2011, 21:42   #9
 
Аватар для Umka
 
Сообщений: 4,143
FR (активность): 80,659

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

WaterSpout, от того, что вы запретили роботу посещать определенную страницу - ссылка ведь не исчезнет.
То есть по логике вес будет передаваться. Я вам такой пример могу привести: у меня есть сайт, который был запрещен к индексации почти год. Прямо весь: Disallow: /
Тем не менее у сайта за это время появился ПР1.
Потом открыл для индексации - гугл почти сразу в инструментах для вебмастеров показал 2500 ссылок (на этот сайт стоял сквозняк из футера другого сайта).
И ничего как-то вот запрет от индексации не помешал. То есть если запрет в роботс не препятствует притеканию веса, то и утеканию наверное мешать не должен.

Поставьте лучше ссылку свою в ноиндекс-нофоллоу.
Umka вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 02.09.2011, 11:42   #10
 
Аватар для Victorio
 
Сообщений: 11
FR (активность): 0

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

Скажите пожалуйста а тэги, архивы и категории нужно закрывать? Чтоб не было дублирования контента. И как это сделать. Например, pcarbonat.ru/tag/snegovaya-nagruzka
Victorio вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 02.09.2011, 11:50   #11
 
Аватар для Umka
 
Сообщений: 4,143
FR (активность): 80,659

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

Цитата:
Сообщение от Victorio Посмотреть сообщение
Например, pcarbonat.ru/tag/snegovaya-nagruzka
Disallow: /tag/
Umka вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 02.09.2011, 23:00   #12
 
Аватар для Victorio
 
Сообщений: 11
FR (активность): 0

Доп. информация
По умолчанию Re: Как закрыть от индексации отдельные страницы сайта?

Цитата:
Сообщение от umka from ufa Посмотреть сообщение
Disallow: /tag/
Спасибо большое. Может подскажите, что еще закрывать в WordPress-е, чтоб избежать дублирования контента. Робот написан так:
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /tag/

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /tag/

Host: pcarbonat.ru
Sitemap: h..p://pcarbonat.ru/sitemap.xml
Victorio вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции
Внимание!
Этой теме более 2297 дней. Вы можете оставить сообщение здесь. Но, обращаем внимание. Возможно, рациональней создать новую тему (найти свежее обсуждение)?


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Закрыть от индексации внешние ссылки на DLE webmas DLE 13 21.07.2011 09:16
Joomla. Как закрыть модули новостей от индексации? timflair Joomla 4 12.07.2011 13:46
Как закрыть часть текста от индексации? Puppeteer Google 9 12.03.2011 19:45
Яндекс не изменил название страницы после индексации Fogel Индексация сайта 4 18.04.2010 10:22
Выпали страницы из индексации Яндекс! koreash Яndex 16 02.04.2009 09:01

Текущее время: 19:57. Часовой пояс GMT +3.