Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 13.05.2011, 19:53   #1
 
Аватар для zilon
 
Сообщений: 599
FR (активность): 19,687

Доп. информация
Смех Автор темы Почему не открывается robots.txt

У нормальных сайтов все открывается:

http://rutracker.org/robots.txt

http://wikipedia.org/robots.txt

http://www.interfax.ru/robots.txt

А у сайтов и блогов президента РФ что то не получается открыть

Вряд ли ли у них robots.txt нету... наверно защита стоит?
zilon вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 14.05.2011, 22:49   #2
 
Аватар для LeO-Ak47
 
Сообщений: 4
FR (активность): 20

Доп. информация
По умолчанию Re: Почему не открывается robots.txt

Цитата:
Сообщение от zilon Посмотреть сообщение
А у сайтов и блогов президента РФ что то не получается открыть
Скорее всего у них нет robots.tx))
Или же защита какая то,а тебе зачем это нужно?
LeO-Ak47 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.05.2011, 10:00   #3
 
Аватар для zilon
 
Сообщений: 599
FR (активность): 19,687

Доп. информация
По умолчанию Автор темы Re: Почему не открывается robots.txt

Цитата:
Сообщение от LeO-Ak47 Посмотреть сообщение
Скорее всего у них нет robots.tx))
Или же защита какая то,а тебе зачем это нужно?
Сайт то государственный, то есть его делали профессионалы прям экстра класса(я так думаю) вот мне интересно посмотреть как правильно писать robots.txt и возможно какой движок выбрал мистер президент...
zilon вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.05.2011, 12:21   #4
 
Аватар для Toni4
 
Сообщений: 465
FR (активность): 11,082

Доп. информация
По умолчанию Re: Почему не открывается robots.txt

Цитата:
Сообщение от zilon Посмотреть сообщение
Сайт то государственный, то есть его делали профессионалы прям экстра класса(я так думаю) вот мне интересно посмотреть как правильно писать robots.txt и возможно какой движок выбрал мистер президент...
вот тут - http://robotstxt.org.ru/ вы узнаете как правильно составлять robots.txt.
если не открывается, значит его нет.
Toni4 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.05.2011, 13:38   #5
 
Аватар для Jaga
 
Сообщений: 2,479
FR (активность): 74,145

Доп. информация
По умолчанию Re: Почему не открывается robots.txt

Цитата:
Сообщение от zilon Посмотреть сообщение
А у сайтов и блогов президента РФ что то не получается открыть
Я не думаю,что у сайта Президента что там оптимизируют.Конечно можно предположить,что президентские сеошники пишут в саппорт с просьбой продвинуть сайт повыше,но скорее всего наоборот,Щукин лично интересуется,чем помочь может,посодействовать так сказать замолвить словечко...
а Вы говорите робот.тхт .


Кто в Яндекс продвигал, тот в цирке не смеется. народная мудрость

Со временем найдутся все
Jaga вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции
Внимание!
Этой теме более 2405 дней. Вы можете оставить сообщение здесь. Но, обращаем внимание. Возможно, рациональней создать новую тему (найти свежее обсуждение)?


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
robots.txt - учимся использовать. Часто задаваемые вопросы по robots.txt Alex LM Общие вопросы 18 10.05.2016 11:09
robots.txt для DLE YaltaHome.com DLE 9 10.12.2012 10:45
Про robots.txt heretic Joomla 6 17.03.2011 10:40
Анализ robots.txt Надежда Индексация сайта 3 09.02.2010 14:43
Robots.txt Anaksagor Индексация сайта 5 17.09.2009 14:17

Текущее время: 03:36. Часовой пояс GMT +3.