Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 16.05.2013, 15:31   #1
 
Аватар для Valorous
 
Сообщений: 69
FR (активность): 2,012

Доп. информация
По умолчанию Автор темы Правильно ли составлен robots.txt

Подскажите, правильно ли составлен http://www.makisalon.ru/robots.txt
Задача: запретить поисковикам от индексации все, кроме страниц находящихся в sitemap.xml


С уважением, Valorous
Valorous вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.05.2013, 16:02   #2
 
Аватар для seousoft
 
Сообщений: 189
FR (активность): 1,730

Доп. информация
По умолчанию

ну еще host прописать надо бы, основное зеркало.
и закрыть от индексации все что не в ситемапе
seousoft вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.05.2013, 16:32   #3
 
Аватар для Valorous
 
Сообщений: 69
FR (активность): 2,012

Доп. информация
По умолчанию Автор темы

А как правильно закрыть от индексации все что не в ситемапе?


С уважением, Valorous
Valorous вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 17.05.2013, 00:04   #4
 
Аватар для Lala Bagirova
 
Сообщений: 304
FR (активность): 11,396

Доп. информация
По умолчанию

disallow: /страница


Развивающие занятия для детей
Lala Bagirova вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 17.05.2013, 00:23   #5
 
Аватар для lipatoff
 
Сообщений: 443
FR (активность): 11,763

Доп. информация
По умолчанию

Оффтоп:
Valorous, хватит плодить темы, одно и тоже еженедельно: занимаетесь коммерческим\клиентским seo, а заплатить денег жалко?

http://www.seocafe.info/prodvizhenie...byudzhete.html

http://www.seocafe.info/indeksaciya-...iya-saita.html

http://www.seocafe.info/indeksaciya-...obots-txt.html

http://www.seocafe.info/indeksaciya-...obots-txt.html
lipatoff вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 19.05.2013, 10:31   #6
 
Аватар для levka9
 
Сообщений: 5
FR (активность): 0

Доп. информация
По умолчанию

тут полное описание robotstxt:

http://www.robotstxt.org/robotstxt.html
levka9 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 29.05.2013, 10:44   #7
 
Аватар для Динар
 
Сообщений: 7
FR (активность): 157

Доп. информация
По умолчанию

User-agent: Yandex
Allow: /cgi-bin

Что значит последняя строка, подскажите пожалуйста?
Динар вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 29.05.2013, 13:27   #8
 
Аватар для sinadjo
 
Сообщений: 151
FR (активность): 3,796

Доп. информация
По умолчанию

Цитата:
Сообщение от Динар Посмотреть сообщение
User-agent: Yandex
Allow: /cgi-bin

Что значит последняя строка, подскажите пожалуйста?
Разрешается индексация Яндексом всего, что есть в данной папке (а там, хранятся скрипты, предназначенные для выполнения). Только это некорректный оператор - Allow.
sinadjo вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 10.06.2013, 18:38   #9
 
Аватар для palurik
 
Сообщений: 1
FR (активность): 5

Доп. информация
По умолчанию

Подскажите, как правильно запретить индексацию в robots?

christianbooks.odessa.ua/books/11261/
christianbooks.odessa.ua/books/11261/Poobeshai+mne

Нужно чтоб индексировалась только первая страница, а уже адрес страницы с названием книги нет!?

Сообщение добавлено 13.06.2013 в 11:20

Помогите решить проблему!
palurik вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.08.2013, 09:24   #10
 
Аватар для vintery
 
Сообщений: 10
FR (активность): 256

Доп. информация
По умолчанию

Подскажите правильно сделан файл www.estetparket.ru/robots.txt хотел открыть только картинки и страницы для поиска
vintery вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Метки
robots.txt

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции
Внимание!
Этой теме более 1890 дней. Вы можете оставить сообщение здесь. Но, обращаем внимание. Возможно, рациональней создать новую тему (найти свежее обсуждение)?


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
robots.txt - учимся использовать. Часто задаваемые вопросы по robots.txt Alex LM Общие вопросы 18 10.05.2016 11:09
Как правильно составить robots.txt для vbulletin? basken vBulletin 3 30.08.2012 15:08
Как правильно прописать host: в robots.txt Miko210191 Индексация сайта 13 04.04.2012 05:34
Robots.txt Anaksagor Индексация сайта 5 17.09.2009 14:17
Как правильно составить Robots.txt? Dino_ak47 Google 16 03.03.2009 02:51

Текущее время: 19:59. Часовой пояс GMT +3.