Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 06.02.2011, 02:11   #1
 
Аватар для alphaorg
 
Сообщений: 12
FR (активность): 434

Доп. информация
По умолчанию Автор темы robots.txt защита

Только что обнаружил что мой роботс файл можно легко просмотреть зайдя просто по ссылке. Это так и должно быть или его надо защитить както? А как тогда?

Заранее спасибо за ответы


Здоровый Скептик
alphaorg вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 06.02.2011, 02:12   #2
 
Аватар для Byblik
 
Сообщений: 449
FR (активность): 8,658

Доп. информация
По умолчанию Re: robots.txt защита

Так и должно быть. Зачем его защищать и от кого?
Byblik вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 06.02.2011, 04:16   #3
 
Аватар для alphaorg
 
Сообщений: 12
FR (активность): 434

Доп. информация
По умолчанию Автор темы Re: robots.txt защита

Цитата:
Сообщение от Byblik Посмотреть сообщение
Так и должно быть. Зачем его защищать и от кого?
Не знаю, но мне казалось что это личная информация. например о хосте и может другие о которых я незнаю


Здоровый Скептик
alphaorg вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 06.02.2011, 06:26   #4
 
Аватар для madmaniq
 
Сообщений: 35
FR (активность): 1,327

Доп. информация
По умолчанию Re: robots.txt защита

Так и должно быть. Этот файл только для поисковых систем. личной информации он содержать не должен, всю личную информацию можно найти другими способами
мануал:
Скрытый (как скрывать?) текст. Только для группы: "Зарегистрированные":
Ваша группа не позволяет просмотреть скрытую информацию.


интенсификация вялотекущих интернет-проектов...
madmaniq вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 06.02.2011, 09:27   #5
 
Аватар для Umka
 
Сообщений: 4,143
FR (активность): 80,659

Доп. информация
По умолчанию Re: robots.txt защита

Цитата:
Сообщение от alphaorg Посмотреть сообщение
или его надо защитить както?
Права доступа: 644
Umka вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
kribs (06.02.2011), terranodar (06.02.2011)
Старый 06.02.2011, 11:22   #6
 
Аватар для terranodar
 
Сообщений: 410
FR (активность): 14,157

Доп. информация
По умолчанию Re: robots.txt защита

Чисто теоретически, можно настроить сервер таким образом, чтобы он показывал robots.txt только поисковикам (по UserAgent). Однако как гласит народная мудрость - на каждую хитрую жабу найдётся сами-знаете-кто с винтом. Файл всё равно можно будет посмотреть, а если поисковики иногда заглядывают на сайт без установленных "обычных" UserAgent (для проверки на клоакинг, к примеру), то будет только хуже.
terranodar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 06.02.2011, 22:12   #7
 
Аватар для oleg200411
 
Сообщений: 6
FR (активность): 143

Доп. информация
По умолчанию Re: robots.txt защита

разместил например ссылочку партнера в статейке а потом запретил к индексации
а если обнаружит подвох?
так он и так обнаружит вед статейка не попадет в индекс
гм. смысл его прятать?
oleg200411 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Метки
robots.txt, безопасность

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции
Внимание!
Этой теме более 2502 дней. Вы можете оставить сообщение здесь. Но, обращаем внимание. Возможно, рациональней создать новую тему (найти свежее обсуждение)?


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Выделенные сервера и защита от DDoS атак GDCSupport Хостинг компании 1 10.02.2011 22:30
Простейшая защита от спама в комментариях terranodar Разработка сайтов 4 09.02.2011 12:14
Защита админки в Joomla heretic Joomla 3 12.08.2010 16:03
Защита сайтов, лечение от вирусов, поиск уязвимостей. Skamer13 Фриланс - ищу работу 3 02.07.2010 13:55
защита серверов и сайтов от ddos-атак protectlab Объявления 0 12.06.2010 17:01

Текущее время: 08:36. Часовой пояс GMT +3.