Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 16.05.2013, 15:31   #1
 
Аватар для Valorous
 
Сообщений: 69
FR (активность): 2,012

Доп. информация
По умолчанию Автор темы Правильно ли составлен robots.txt

Подскажите, правильно ли составлен http://www.makisalon.ru/robots.txt
Задача: запретить поисковикам от индексации все, кроме страниц находящихся в sitemap.xml


С уважением, Valorous
Valorous вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.05.2013, 16:02   #2
 
Аватар для seousoft
 
Сообщений: 189
FR (активность): 1,730

Доп. информация
По умолчанию

ну еще host прописать надо бы, основное зеркало.
и закрыть от индексации все что не в ситемапе
seousoft вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.05.2013, 16:32   #3
 
Аватар для Valorous
 
Сообщений: 69
FR (активность): 2,012

Доп. информация
По умолчанию Автор темы

А как правильно закрыть от индексации все что не в ситемапе?


С уважением, Valorous
Valorous вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 17.05.2013, 00:04   #4
 
Аватар для Lala Bagirova
 
Сообщений: 304
FR (активность): 11,396

Доп. информация
По умолчанию

disallow: /страница


Развивающие занятия для детей
Lala Bagirova вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 17.05.2013, 00:23   #5
 
Аватар для lipatoff
 
Сообщений: 443
FR (активность): 11,763

Доп. информация
По умолчанию

Оффтоп:
Valorous, хватит плодить темы, одно и тоже еженедельно: занимаетесь коммерческим\клиентским seo, а заплатить денег жалко?

http://www.seocafe.info/prodvizhenie...byudzhete.html

http://www.seocafe.info/indeksaciya-...iya-saita.html

http://www.seocafe.info/indeksaciya-...obots-txt.html

http://www.seocafe.info/indeksaciya-...obots-txt.html
lipatoff вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 19.05.2013, 10:31   #6
 
Аватар для levka9
 
Сообщений: 5
FR (активность): 0

Доп. информация
По умолчанию

тут полное описание robotstxt:

http://www.robotstxt.org/robotstxt.html
levka9 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 29.05.2013, 10:44   #7
 
Аватар для Динар
 
Сообщений: 7
FR (активность): 157

Доп. информация
По умолчанию

User-agent: Yandex
Allow: /cgi-bin

Что значит последняя строка, подскажите пожалуйста?
Динар вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 29.05.2013, 13:27   #8
 
Аватар для sinadjo
 
Сообщений: 151
FR (активность): 3,749

Доп. информация
По умолчанию

Цитата:
Сообщение от Динар Посмотреть сообщение
User-agent: Yandex
Allow: /cgi-bin

Что значит последняя строка, подскажите пожалуйста?
Разрешается индексация Яндексом всего, что есть в данной папке (а там, хранятся скрипты, предназначенные для выполнения). Только это некорректный оператор - Allow.
sinadjo вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.06.2013, 18:38   #9
 
Аватар для palurik
 
Сообщений: 1
FR (активность): 5

Доп. информация
По умолчанию

Подскажите, как правильно запретить индексацию в robots?

christianbooks.odessa.ua/books/11261/
christianbooks.odessa.ua/books/11261/Poobeshai+mne

Нужно чтоб индексировалась только первая страница, а уже адрес страницы с названием книги нет!?

Сообщение добавлено 13.06.2013 в 11:20

Помогите решить проблему!
palurik вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.08.2013, 09:24   #10
 
Аватар для vintery
 
Сообщений: 10
FR (активность): 256

Доп. информация
По умолчанию

Подскажите правильно сделан файл www.estetparket.ru/robots.txt хотел открыть только картинки и страницы для поиска
vintery вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Метки
robots.txt

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
robots.txt - учимся использовать. Часто задаваемые вопросы по robots.txt Alex LM Общие вопросы 18 10.05.2016 11:09
Как правильно составить robots.txt для vbulletin? basken vBulletin 3 30.08.2012 15:08
Как правильно прописать host: в robots.txt Miko210191 Индексация сайта 13 04.04.2012 05:34
Robots.txt Anaksagor Индексация сайта 5 17.09.2009 14:17
Как правильно составить Robots.txt? Dino_ak47 Google 16 03.03.2009 02:51

Текущее время: 17:13. Часовой пояс GMT +3.