Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 01.03.2011, 21:40   #1
 
Аватар для sandazh
 
Сообщений: 86
FR (активность): 2,916

Доп. информация
По умолчанию Автор темы Как запретить индексацию поддомена

Помогите составить robots.txt и запретить от индексации поддомен.
Есть site.com и поддомен с флеш-сайтом flash.site.com - нужно запретить от индексации поддомен, но разрешить обеим ПС индексировать основной сайт. Что там за директивы нужно прописать?
Где должен находится файл robots.txt? У меня один файл в папке site.com и еще один в папке flash.site.com? Должен быть только один и в родительской директории?


организация праздников
sandazh вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 01.03.2011, 22:22   #2
 
Аватар для Byblik
 
Сообщений: 449
FR (активность): 8,658

Доп. информация
По умолчанию Re: Как запретить индексацию поддомена

Наверное в папку с flash.site.com положить robots.txt с содержимым
Цитата:
User-agent: *
Disallow: /
Byblik вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
sandazh (01.03.2011), specialist-seo (30.03.2011)
Старый 01.03.2011, 22:53   #3
 
Аватар для sandazh
 
Сообщений: 86
FR (активность): 2,916

Доп. информация
По умолчанию Автор темы Re: Как запретить индексацию поддомена

Цитата:
Сообщение от Byblik Посмотреть сообщение
Наверное в папку с flash.site.com положить robots.txt
а в папку site.com что-то нужно помещать?


организация праздников
sandazh вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 01.03.2011, 23:25   #4
 
Аватар для Byblik
 
Сообщений: 449
FR (активность): 8,658

Доп. информация
По умолчанию Re: Как запретить индексацию поддомена

Я лично не сталкивался, но предполагаю, что в каталог основного домена надо класть robots с дириктивами только для него, упоминаний о поддомене там юыть не должно.
Стоит ориентироваться на http://www.livejournal.com/robots.txt
Byblik вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 02.03.2011, 11:04   #5
 
Аватар для sandazh
 
Сообщений: 86
FR (активность): 2,916

Доп. информация
По умолчанию Автор темы Re: Как запретить индексацию поддомена

т.е. это нормально, если есть 2 файла robots.txt и никаких санкций со стороны ПС не последует?


организация праздников
sandazh вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 02.03.2011, 11:32   #6
 
Аватар для Baxter
 
Сообщений: 278
FR (активность): 6,058

Доп. информация
По умолчанию Re: Как запретить индексацию поддомена

Скорее всего так и надо, ведь, по большому счету это два сайта с разными настройками. А в robots.txt прописывается относительный путь, поэтому иначе и не сделаешь никак по-идее.
Относительно санкций - ваше право что закрывать от поисковика, а что нет. Я не думаю, что современные ПС-ы настолько суровы, что будут к этому придираться.
Baxter вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 02.03.2011, 11:49   #7
 
Аватар для komyak
 
Сообщений: 1,178
FR (активность): 31,654

Доп. информация
По умолчанию Re: Как запретить индексацию поддомена

В роботс основного сайта:
User-agent: *
Disallow: /poddomen/

в роботс поддомена:
User-agent: *
Disallow: /


Сео
komyak вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
sandazh (02.03.2011), specialist-seo (30.03.2011)
Старый 02.03.2011, 19:58   #8
 
Аватар для sandazh
 
Сообщений: 86
FR (активность): 2,916

Доп. информация
По умолчанию Автор темы Re: Как запретить индексацию поддомена

Цитата:
Сообщение от komyak Посмотреть сообщение
В роботс основного сайта:
User-agent: *
Disallow: /poddomen/

в роботс поддомена:
User-agent: *
Disallow: /
вместо поддомена нужно написать flash.site.com правильно?

Оффтоп:
User-agent: *
Disallow: /flash.site.com/

и

User-agent: *
Disallow: /


организация праздников
sandazh вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 02.03.2011, 20:03   #9
 
Аватар для komyak
 
Сообщений: 1,178
FR (активность): 31,654

Доп. информация
По умолчанию Re: Как запретить индексацию поддомена

Цитата:
вместо поддомена нужно написать flash.site.com правильно?
Нет.
Оффтоп:
(с телефона писал, поэтому не смог всё описать)

Исходный сайт:flash.site.com
В robots основного сайта писать:
Цитата:
User-agent: *
Disallow: /flash/
#Это своеобразная защита от не слишком умного хостера, который забыл настроить сервер.
в роботс поддомена писать:
Цитата:
User-agent: *
Disallow: /


Сео
komyak вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
sandazh (03.03.2011)
Старый 30.03.2011, 15:49   #10
 
Аватар для Dj_Parenb_OK
 
Сообщений: 3
FR (активность): 0

Доп. информация
По умолчанию Re: Как запретить индексацию поддомена

если меняешь домен, то куда его прописть,чтоб старый домен не отображался?
Dj_Parenb_OK вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 30.03.2011, 17:32   #11
 
Аватар для specialist-seo
 
Сообщений: 2,199
FR (активность): 49,104

Доп. информация
По умолчанию Re: Как запретить индексацию поддомена

Цитата:
Сообщение от komyak Посмотреть сообщение
User-agent: *
Disallow: /flash/
имеет смысл вписывать только если на сервере директория поддомена находиться в директории основного домена, в большинстве случаев так оно и есть, но не всегда.
specialist-seo вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 31.03.2011, 08:44   #12
 
Аватар для komyak
 
Сообщений: 1,178
FR (активность): 31,654

Доп. информация
По умолчанию Re: Как запретить индексацию поддомена

Ага и в большинстве случаев это доставляет массу проблем, плане оптимизации.
Я пользую для всех сайтов один и тот же хостинг, не из дешевых, но зато с безопасностью на 5. У меня на одном аке 5 сайтов и если на одном есть поддомен forum, то на других я не могу сделать с таким же именем.


Сео
komyak вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 31.03.2011, 11:15   #13
 
Аватар для specialist-seo
 
Сообщений: 2,199
FR (активность): 49,104

Доп. информация
По умолчанию Re: Как запретить индексацию поддомена

komyak, знаю эти проблемы, поэтому использую виртуальные сервера с isp менеджером.
1) Режим работы php как cgi (как apache уязвим один сайт - теряется весь сервер)
2) Один сайт - один пользователь со своей директорией (соответсвенно никаких проблем с поддоменами вне папки при большом количестве сайтов; нет проблем при взломе сайта, теряешь только один, так как доступ закрыт. На обычном хостинге взламываются все сайты, так как у текущего пользователя есть доступ к другим)
3) Сложные пароли на всех значимых сайтах, причем для каждого разный
specialist-seo вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
Alex LM (31.03.2011)
Ответ

Метки
robots, поддомен, роботс

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции
Внимание!
Этой теме более 2449 дней. Вы можете оставить сообщение здесь. Но, обращаем внимание. Возможно, рациональней создать новую тему (найти свежее обсуждение)?


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Запретить индексацию названия ссылок, но разрешить переход по ссылкам chuga Индексация сайта 13 14.02.2011 16:25
Запретить IE выделять текст ligne_pure Программирование 8 15.10.2010 22:46
Ускорить индексацию. toff Раскрутка в общих чертах 8 14.06.2010 21:50
Как запретить индексацию блока текста для google? koreash Google 4 17.04.2009 20:15
Как запретить доступ Porno Пиарщикам? Dino_ak47 Раскрутка в общих чертах 9 26.02.2009 23:22

Текущее время: 15:14. Часовой пояс GMT +3.