Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Рейтинг: Рейтинг темы: голосов - 2, средняя оценка - 1.00. Опции просмотра
Старый 14.04.2012, 10:22   #1
 
Аватар для Rapace
 
Сообщений: 112
FR (активность): 2,954

Доп. информация
По умолчанию Автор темы google ругается на robots.txt

В инструменте для вебмастера в гугл увидал сегодня следующее сообщение: Обнаружены серьёзные ошибки. robots.txt блокирует важные страницы сайта!
Вот сам фаил:
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /component/content/article/ <----чтобы избежать дублей
Disallow: /index2.php?option=com_content <----чтобы избежать дублей
Disallow: /index.php?option=com_content <----чтобы избежать дублей
Host: atmos-pro.ru
Sitemap: http://atmos-pro.ru/sitemap.xml
Вопрос: надо ли менять что-то или же всё верно составлено??
Яша по этому поводу молчит.
Rapace вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 14.04.2012, 17:21   #2
 
Аватар для Stelz
 
Сообщений: 449
FR (активность): 12,571

Доп. информация
По умолчанию

Цитата:
Сообщение от Rapace Посмотреть сообщение
В инструменте для вебмастера в гугл увидал сегодня следующее сообщение: Обнаружены серьёзные ошибки. robots.txt блокирует важные страницы сайта!
Вот сам фаил:
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /component/content/article/ <----чтобы избежать дублей
Disallow: /index2.php?option=com_content <----чтобы избежать дублей
Disallow: /index.php?option=com_content <----чтобы избежать дублей
Host: atmos-pro.ru
Sitemap: http://atmos-pro.ru/sitemap.xml
Вопрос: надо ли менять что-то или же всё верно составлено??
Яша по этому поводу молчит.
У меня тоже такое било но за день - два стало все нормально.


Stelz вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
Rapace (24.04.2012)
Старый 14.04.2012, 18:20   #3
 
Аватар для F.Dexter
 
Сообщений: 54
FR (активность): 913

Доп. информация
По умолчанию

Тоже с таким сталкивался. Еще бывает, когда отправляешь запрос на удаление страницы. Он по кол-ву кликов, которые получала страница судит "важная" ли это страница или так, барахло:

Цитата:
Right now we’re looking at the number of clicks pages get (which you can see in Your site on the web > Search queries) to determine importance, and we may incorporate other factors in the future as our site health checks evolve.
Оффтоп:
http://googlewebmastercentral.blogspot.com/2011/09/work-smarter-not-harder-with-site.html
F.Dexter вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 14.04.2012, 20:47   #4
 
Аватар для Rapace
 
Сообщений: 112
FR (активность): 2,954

Доп. информация
По умолчанию Автор темы

Да, спасибо, у меня тоже уже всё нормально стало!
Rapace вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 14.04.2012, 21:44   #5
 
Аватар для IgorZaz
 
Сообщений: 597
FR (активность): 14,158

Доп. информация
По умолчанию

У гугла в вебмастере есть раздел где описываются правила. В нем можно описать страницы с маской и как и что... Тобишь указать что это дубли при постраничной навигации, к примеру. А правило в роботсе оставить только как для Яндекса.


Google - для слабаков! Настоящие мужики спрашивают у ясеня!
IgorZaz вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 23.04.2012, 20:00   #6
 
Аватар для isstard
 
Сообщений: 2
FR (активность): 10

Доп. информация
По умолчанию

Тоже такое было! Надо написать гуглу коллективную жалобу...
isstard вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 23.04.2012, 20:02   #7
 
Аватар для DeTeron
 
Сообщений: 496
FR (активность): 10,040

Доп. информация
По умолчанию

Оффтоп:
Цитата:
Сообщение от isstard Посмотреть сообщение
Тоже такое было! Надо написать гуглу коллективную жалобу...
Дак поправили уже наверно, а раз поправили то они уже были вкурсе проблемы, да и на что жаловаться собрались?
DeTeron вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 23.04.2012, 20:03   #8
 
Аватар для Stelz
 
Сообщений: 449
FR (активность): 12,571

Доп. информация
По умолчанию

Цитата:
Сообщение от DeTeron Посмотреть сообщение
Оффтоп:

Дак поправили уже наверно, а раз поправили то они уже были вкурсе проблемы, да и на что жаловаться собрались?
Он спамер вот


Stelz вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 23.04.2012, 20:08   #9
 
Аватар для Rapace
 
Сообщений: 112
FR (активность): 2,954

Доп. информация
По умолчанию Автор темы

Еще такой вопросик, стоит ли открывать папку images для индексации? Или как сделать так, чтобы поисковики индексировали картинки с сайта с alt тегом? Сайт индексируется, но картинки не хотят...
Rapace вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 23.04.2012, 20:24   #10
 
Аватар для Grush
 
Сообщений: 414
FR (активность): 6,880

Доп. информация
По умолчанию

Цитата:
Сообщение от Rapace Посмотреть сообщение
Вопрос: надо ли менять что-то или же всё верно составлено??
ну дык ваш сайт - вам виднее что вам важно там =)


Цитата:
Сообщение от Rapace Посмотреть сообщение
Сайт индексируется, но картинки не хотят...
ну так они у вас закрыты в роботсе =)
Цитата:
Сообщение от Rapace Посмотреть сообщение
Disallow: /images/
Grush вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 23.04.2012, 20:35   #11
 
Аватар для DeTeron
 
Сообщений: 496
FR (активность): 10,040

Доп. информация
По умолчанию

Stelz,
Оффтоп:
ну теперь такие пишут всего 1 пост, а потом ссылку, а не как раньше - 10 постов (или сколько там надо было)
DeTeron вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 23.04.2012, 20:38   #12
 
Аватар для Stelz
 
Сообщений: 449
FR (активность): 12,571

Доп. информация
По умолчанию

DeTeron

Меня убило єто " Надо написать гуглу коллективную жалобу... "

Думаю 1-2 спамера вдень не страшно.


Stelz вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 23.04.2012, 20:41   #13
 
Аватар для Rapace
 
Сообщений: 112
FR (активность): 2,954

Доп. информация
По умолчанию Автор темы

Это понятно =) Как происходит индексация? Изображения с тегом alt индексируются из папки images или из кода страницы? Вы извините если тупые вопросы, просто хочется разобраться. и важно ли для оптимизации индексация google images и яндекс картинки?
Rapace вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 23.04.2012, 21:10   #14
 
Аватар для 19-9
 
Сообщений: 754
FR (активность): 20,238

Доп. информация
По умолчанию

Rapace, если хотите получить потенциальный трафик с картинок, то открывайте папку, где они лежат для индексации. Для оптимизации картинки идут в плюс (так же, как и видео, таблички и прочее), если они тематические, желательно транслитом прописывать ключевое слово в названии картинки, заполнять поля тайтл и альт. Да, чуть не забыл: крайне желательно, чтобы картинка была уникальна т.е. вашего изготовления, ну или можно взять откуда - либо и подправить в фотошопе. Чем больше изменений внесёте в неё, тем больше вероятность, что поисковик посчитает её за уникальную.
19-9 вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
"Спасибо" от:
Rapace (24.04.2012)
Старый 24.04.2012, 17:07   #15
 
Аватар для Rapace
 
Сообщений: 112
FR (активность): 2,954

Доп. информация
По умолчанию Автор темы

19-9, спасибо за ответ. А если я в роботсе закрою вот так:
Disallow: /images/menu
будет ли доступна для индексации папка images?
Rapace вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Метки
google, robot.txt

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции
Внимание!
Этой теме более 2049 дней. Вы можете оставить сообщение здесь. Но, обращаем внимание. Возможно, рациональней создать новую тему (найти свежее обсуждение)?


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
robots.txt - учимся использовать. Часто задаваемые вопросы по robots.txt Alex LM Общие вопросы 18 10.05.2016 11:09
robots.txt для DLE YaltaHome.com DLE 9 10.12.2012 10:45
G - google, google dance, google pagerank Jokeron SEO словарь 2 23.06.2011 14:26
google и robots.txt wnt Индексация сайта 3 24.01.2011 11:39
Robots.txt Anaksagor Индексация сайта 5 17.09.2009 14:17

Текущее время: 22:01. Часовой пояс GMT +3.