Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 16.09.2011, 19:30   #1
 
Аватар для vga72
 
Сообщений: 212
FR (активность): 7,154

Доп. информация
По умолчанию Автор темы изменение в robots.txt

Зарегистрировался в сервисе моремото, после анализа сайта пришло письмо с таким содержанием:
Оффтоп:
В настоящее время продвижение сайта www.сайт.ru невозможно
по следующим причинам:

Файл robots.txt для сайта www.сайт.ru содержит директиву
Host: сайт.ru

На сайте настроен редирект с главной страницы на
www.сайт.ru

Это препятствует попаданию сайта www.сайт.ru
в индекс поисковых машин.

Рекомендуем указать в директиве Host файла robots.txt имя основного
зеркала сайта www.сайт.ru, например
www.сайт.ru или сайт.ru

туплю...читаю и не пойму, какие изменения нужно внести...
vga72 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.09.2011, 19:33   #2
 
Аватар для emlonlife
 
Сообщений: 773
FR (активность): 26,981

Доп. информация
По умолчанию Re: изменение в robots.txt

Цитата:
Сообщение от vga72 Посмотреть сообщение
туплю...читаю и не пойму, какие изменения нужно внести...
в роботсе нужно изменить строку
Host: ваш_сайт.ru
на
Host: w ww.ваш_сайт.ru
Другой вопрос нужно ли это?
Может в моремото добавить ваш_сайт.ru а не ww w.ваш_сайт.ru ?


Лицензионный SEO-софт бесплатно
Но только помни - правда всегда победит, даже если погибнет в бою...

emlonlife вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.09.2011, 19:36   #3
 
Аватар для vga72
 
Сообщений: 212
FR (активность): 7,154

Доп. информация
По умолчанию Автор темы Re: изменение в robots.txt

Я вот тоже не пойму зачем это делать...В моремото добавлял с www и без и всё равно одно и тоже...
vga72 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.09.2011, 19:38   #4
 
Аватар для emlonlife
 
Сообщений: 773
FR (активность): 26,981

Доп. информация
По умолчанию Re: изменение в robots.txt

упс, у Вас в роботсе прописан хост - сайт.ру
и на нем же настроен редирект на w ww.сайт.ру
Зачем? уберите редирект и все будет в норме


Лицензионный SEO-софт бесплатно
Но только помни - правда всегда победит, даже если погибнет в бою...

emlonlife вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.09.2011, 19:44   #5
 
Аватар для vga72
 
Сообщений: 212
FR (активность): 7,154

Доп. информация
По умолчанию Автор темы Re: изменение в robots.txt

Цитата:
Сообщение от emlonlife Посмотреть сообщение
уберите редирект и все будет в норме
как убрать редирект? Никогда не делал это...
Оффтоп:
User-agent: *
Host: сайт.ru
Disallow: /address_book_process.php
Disallow: /ajax_shopping_cart.php
Disallow: /account.php
Disallow: /account_edit.php
Disallow: /account_edit_process.php
Disallow: /account_history.php
Disallow: /account_history_info.php
Disallow: /address_book.php
Disallow: /advanced_search_result.php?
Disallow: /affiliate_affiliate.php
Disallow: /ask_a_question.php
Disallow: /checkout_alternative.php
Disallow: /checkout_process.php
Disallow: /advanced_search.php
Disallow: /advanced_search_result.php
Disallow: /cache/
Disallow: /admin/
Disallow: /checkout_address.php
Disallow: /checkout_confirmation.php
Disallow: /checkout_payment.php
Disallow: /checkout_success.php
Disallow: /checkout_shipping.php
Disallow: /contact_us.php
Disallow: /create_account.php
Disallow: /create_account_guest.php
Disallow: /create_account_process.php
Disallow: /create_account_success.php
Disallow: /featured.php
Disallow: /index.php/manufacturers_id/
Disallow: /info_shopping_cart.php
Disallow: /shopping_cart.php
Disallow: /login.php
Disallow: /logoff.php
Disallow: /newsletter.php
Disallow: /products_new.php
Disallow: /password_double_opt.php
Disallow: /popup_image.php
Disallow: /popup_search_help.php
Disallow: /product_notifications.php
Disallow: /product_reviews.php
Disallow: /product_reviews_info.php
Disallow: /shipping.php
Disallow: /media/export/
Disallow: /media/download/
Disallow: /includes/
Disallow: /media/pub/
Disallow: /media/
Disallow: /index.php/action/
Disallow: /articles.php
Disallow: /articles_new.php
Disallow: /article_info.php/action/
Disallow: /product_info.php/action/
Disallow: /manu/
Disallow: /index.php/manu
Disallow: /index.html?products_id
Disallow: /cookie_usage.php
Disallow: /index.php/products_id
Disallow: /index.php?action=buy_now
Disallow: /specials.php/action/buy_now
vga72 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.09.2011, 19:46   #6
 
Аватар для emlonlife
 
Сообщений: 773
FR (активность): 26,981

Доп. информация
По умолчанию Re: изменение в robots.txt

Цитата:
Сообщение от vga72 Посмотреть сообщение
как убрать редирект?
роботс тут не при чем. движок какой? если джумла, то в настройках урла главной страницы в SEF компоненте уберите редирект

Добавлено через 51 секунду
и к тому же, на сколько я знаю, в роботсе хост прописывается в конце. Хотя это не принципиально, думаю


Лицензионный SEO-софт бесплатно
Но только помни - правда всегда победит, даже если погибнет в бою...

emlonlife вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.09.2011, 19:47   #7
 
Аватар для vga72
 
Сообщений: 212
FR (активность): 7,154

Доп. информация
По умолчанию Автор темы Re: изменение в robots.txt

Цитата:
Сообщение от emlonlife Посмотреть сообщение
роботс тут не при чем. движок какой?
shopos

Добавлено через 2 минуты
Цитата:
Сообщение от emlonlife Посмотреть сообщение

Добавлено через 51 секунду
и к тому же, на сколько я знаю, в роботсе хост прописывается в конце. Хотя это не принципиально, думаю
где-то читал, что можно и сверху и снизу, разницы нет никакой...
vga72 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.09.2011, 19:51   #8
 
Аватар для emlonlife
 
Сообщений: 773
FR (активность): 26,981

Доп. информация
По умолчанию Re: изменение в robots.txt

Цитата:
Сообщение от vga72 Посмотреть сообщение
shopos
я не работал с этим движком, посмотрите в файле class.furl.php
но лучше дождаться тех, кто в курсе


Лицензионный SEO-софт бесплатно
Но только помни - правда всегда победит, даже если погибнет в бою...

emlonlife вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
vga72 (16.09.2011)
Старый 16.09.2011, 20:21   #9
 
Аватар для vga72
 
Сообщений: 212
FR (активность): 7,154

Доп. информация
По умолчанию Автор темы Re: изменение в robots.txt

Прочитал, что можно сделать редирект в .htaccess...как правильно сделать...может кто знает?
vga72 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 16.09.2011, 20:28   #10
 
Аватар для emlonlife
 
Сообщений: 773
FR (активность): 26,981

Доп. информация
По умолчанию Re: изменение в robots.txt

Цитата:
Сообщение от vga72 Посмотреть сообщение
Прочитал, что можно сделать редирект в .htaccess
посмотрите здесь


Лицензионный SEO-софт бесплатно
Но только помни - правда всегда победит, даже если погибнет в бою...

emlonlife вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 08.10.2011, 17:23   #11
 
Аватар для cyprby
 
Сообщений: 14
FR (активность): 66

Доп. информация
По умолчанию Re: изменение в robots.txt

Цитата:
Сообщение от vga72 Посмотреть сообщение
shopos

Добавлено через 2 минуты

где-то читал, что можно и сверху и снизу, разницы нет никакой...
Разница есть. Это написано в хелпе яндекса. Если неправильно создать robot.txt то поисковой бот яндекса его не поймёт, а это неизвестно как может отразиться на индексе сайта.
cyprby вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции
Внимание!
Этой теме более 2263 дней. Вы можете оставить сообщение здесь. Но, обращаем внимание. Возможно, рациональней создать новую тему (найти свежее обсуждение)?


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
robots.txt - учимся использовать. Часто задаваемые вопросы по robots.txt Alex LM Общие вопросы 18 10.05.2016 11:09
Изменение логина (ника) Alex LM О работе SEO Cafe 19 03.02.2016 13:36
Изменение выдачи 14.12.10г Romus Апдейты Яндекса 3 14.12.2010 20:46
Изменение позиций shtrihs Яndex 1 18.02.2010 15:21
Изменение PR Den_IS Google 10 05.11.2009 01:21

Текущее время: 06:27. Часовой пояс GMT +3.