Вернуться   SEO форум - оптимизация и продвижение сайтов > Поисковая оптимизация > Индексация сайта

Важная информация
Индексация сайта - Robots.txt, sitemap (карта сайта), редирект, .htaccess, и т.д. Бан, поисковые фильтры, ранжирование (позиции).

Ответ
 
Опции темы Оценить тему Опции просмотра
Старый 14.09.2011, 09:51   #1
 
Аватар для one_dollar
 
Сообщений: 101
FR (активность): 3,879

Доп. информация
По умолчанию Автор темы Проблема индексации внутренних страниц. Не полная индексация главной.

Здравствуйте, товарищи!
Недавно начал индексироваться мой новый сайт, но поведение ботов на мой взгляд немного странное. Суть в следующем:
боты не проходят дальше главной страницы. В логах вот что:
178.154.161.29 - - [14/Sep/2011:09:25:09 +0400] "GET / HTTP/1.1" 200 16234 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; ...

178.154.161.29 - - [14/Sep/2011:07:14:37 +0400] "GET /robots.txt HTTP/1.1" 200 182 "-" "Mozilla/5.0 (compatible; YandexBot/3.0 ...

66.249.71.166 - - [14/Sep/2011:02:13:57 +0400] "GET /index.html HTTP/1.1" 404 11267 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; ...

(у меня нет index.html в корне проекта)

Т.е. они или упираются в главную страницу, или стучат в robots.txt.

robots.txt такой:

User-agent: *
Disallow: /company
Disallow: /board
Disallow: /job
Disallow: /news

User-agent: Yandex
Disallow: /company
Disallow: /board
Disallow: /job
Disallow: /news
Host: akiri.ru

Sitemap: "ссылка на сайтмап"

На данный момент сайт есть в выдаче только яндекса и рамблера. При том по запросу akiri.ru или site:akiri.ru выдает мой сайт но без описания. т.е. только ссылку на страницу.

Роботы гугла, мэйла и рамблера так же поступают. В чем может быть проблема? Заранее благодарен за ответ.
one_dollar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.09.2011, 08:53   #2
 
Аватар для one_dollar
 
Сообщений: 101
FR (активность): 3,879

Доп. информация
По умолчанию Автор темы Re: Проблема индексации внутренних страниц. Не полная индексация главной.

хоть скажите что не знаете
one_dollar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.09.2011, 09:41   #3
 
Аватар для Umka
 
Сообщений: 4,143
FR (активность): 80,659

Доп. информация
По умолчанию Re: Проблема индексации внутренних страниц. Не полная индексация главной.

one_dollar, роботс не запрещает доступ робота в кнутренним страницам - можете сами поглядеть...
http://webmaster.yandex.ru/robots.xml
Раз так - значит проблема не в нем. На сайте практически нет контента - несколько пустых разделов и только. По карте - 16 страниц. Ну вобщем то там и индексировать нечего.
Umka вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.09.2011, 09:53   #4
 
Аватар для one_dollar
 
Сообщений: 101
FR (активность): 3,879

Доп. информация
По умолчанию Автор темы Re: Проблема индексации внутренних страниц. Не полная индексация главной.

Спасибо за ответ. Тогда непонятно, почему сайт в выдаче появляется без описания?
one_dollar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.09.2011, 10:00   #5
 
Аватар для Umka
 
Сообщений: 4,143
FR (активность): 80,659

Доп. информация
По умолчанию Re: Проблема индексации внутренних страниц. Не полная индексация главной.

http://www.reg.ru/whois/index?dname=akiri.ru&x=0&y=0
По данным WHOIS.RIPN.NET:
Дата регистрации: 2010.11.14
Последнее обновление данных: 2011.09.15

..."с рук" домен брали?
Когда вообще сайт то создали - а то может еще просто мало времени прошло и сайт не проиндексирован по естественным причинам (не успели)?
Umka вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.09.2011, 10:03   #6
 
Аватар для one_dollar
 
Сообщений: 101
FR (активность): 3,879

Доп. информация
По умолчанию Автор темы Re: Проблема индексации внутренних страниц. Не полная индексация главной.

Нет. Через ру центр. Можете пояснить что по Вашему мнению не так с доменом? Я в этом деле не так давно. Могу чего-нибудь не знать.
one_dollar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.09.2011, 10:11   #7
 
Аватар для detanatar
 
Сообщений: 746
FR (активность): 45,897

Доп. информация
По умолчанию Re: Проблема индексации внутренних страниц. Не полная индексация главной.

С доменом все нормально.
Индексировать действительно пока нечего. Сайт голый.
А в индекс попал из-за счетчиков.
detanatar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.09.2011, 10:13   #8
 
Аватар для one_dollar
 
Сообщений: 101
FR (активность): 3,879

Доп. информация
По умолчанию Автор темы Re: Проблема индексации внутренних страниц. Не полная индексация главной.

Спасибо всем за участие! Буду набивать контентом.
one_dollar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.09.2011, 10:17   #9
 
Аватар для Umka
 
Сообщений: 4,143
FR (активность): 80,659

Доп. информация
По умолчанию Re: Проблема индексации внутренних страниц. Не полная индексация главной.

one_dollar, да я не сказал что с ним "что-то не так", просто обратил внимание, что домен годовалый, а сайт новый. С доменами из секонд-хэнда бывают неувяки всякие. Может на нем раньше бяка какая была, а он в бане вообще.. Типа того..

П.С. "спасибо" - кнопкой.
Umka вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Старый 15.09.2011, 10:19   #10
 
Аватар для one_dollar
 
Сообщений: 101
FR (активность): 3,879

Доп. информация
По умолчанию Автор темы Re: Проблема индексации внутренних страниц. Не полная индексация главной.

Цитата:
Сообщение от umka from ufa Посмотреть сообщение
one_dollar, да я не сказал что с ним "что-то не так", просто обратил внимание, что домен годовалый, а сайт новый. С доменами из секонд-хэнда бывают неувяки всякие. Может на нем раньше бяка какая была, а он в бане вообще.. Типа того..

П.С. "спасибо" - кнопкой.
Понял. Спасибо!

Добавлено через 4 минуты
Парни, у меня нет кнопки "спасибо". Возможно мой рейтинг слишком низкий. Как появится, обязательно поблагодарю!
one_dollar вне форума  
Ответить с цитированием Сказать Плохо за это бесполезное сообщение Быстрый ответ на это сообщение
Ответ

Быстрый ответ
Ваше имя пользователя: Регистрация. Для входа нажмите здесь
Случайный вопрос

Сообщение:
Опции
Внимание!
Этой теме более 2280 дней. Вы можете оставить сообщение здесь. Но, обращаем внимание. Возможно, рациональней создать новую тему (найти свежее обсуждение)?


Опции темы
Опции просмотра Оценка этой теме
Оценка этой теме:

Ваши права в разделе
Вы не можете создавать новые темы
Вы можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
Проблема в индексации страниц. fn2 Яndex 4 19.09.2011 07:46
О внутренних ссылках для страниц с измененным адресом Psychea Продвижение сайта 11 23.01.2011 23:34
Новый адрес для внутренних страниц падаван Индексация сайта 2 28.10.2010 20:24
Раскрутка внутренних страниц Юрий Раскрутка в общих чертах 7 20.05.2010 08:58
Предлагаю ссылки на главной и внутренних страницах Webmark Продажа ссылок 1 04.04.2009 13:49

Текущее время: 16:14. Часовой пояс GMT +3.