Как избавиться от ошибок в robots.txt

5 февраля 2012 г. YaGr Просмотров: 18488 RSS 4
Web design » Новости
Вот уже больше месяца сайт не индексируется в Яндексе. Сайт находится на бесплатном хостинге 000WebHost Проведя анализ, выяснилось, что Яндекс получает довесок при считывании роботом (пауком) поисковика с сайта файла robots.txt в виде кода:

<span style=""> <! - Www.000webhost.com Analytics код -></span><span style=""> <script type="text/javascript" src="http://analytics.hosting24.com/count.php"> </ SCRIPT></span><span> <noscript> <a href="http://www.hosting24.com/"> <img src="http://analytics.hosting24.com/count.php" alt="web hosting" /> </ > </ NoScript></span><span style=""> <! - Конец кода Analytics -></span>

В оригинале в данном файле ничего подобного нет. Яндекс эти строки воспринимает как ошибочный код в robots.txt. А файл robots.txt имеет влияние на продвижении сайта в глазах поисковика.

Для того, чтобы избавиться от довеска в robots.txt, необходимо:

  1. Перейти по ссылке http://members.000webhost.com/analytics.php, задать имя домена без www и без http://, пароль, выбрать "Disable Code" и нажать кнопку "Submit".
  2. В файле .htaccess добавить строку: php_value auto_append_file none

После таких манипуляций "довесок" исчез при считывании пауком Яндекса. Но теперь вы не сможете воспользоваться статистикой  хостинга. Выбирайте что вам важнее - индексация в Яндексе или статистика хостинга. Она (статистика) вам так необходима? Важнее индексация в поисковике.

twitter.com facebook.com vkontakte.ru odnoklassniki.ru mail.ru ya.ru rutvit.ru myspace.com technorati.com digg.com friendfeed.com pikabu.ru blogger.com liveinternet.ru livejournal.ru memori.ru google.com bobrdobr.ru mister-wong.ru yahoo.com yandex.ru del.icio.us
Комментариев: 4
  1. smami

  2. Друг!

    Спасибо тебе большое!!!

    Помогло grin

  3. Андрей | 2014-01-10 в 10:45:45

    Подскажите как выровнять файл? яндекс не индексирует, при изменении файла все возвращается обратно... http://campofrest.com/ сайт мой

    User-agent: *

  4. Это проблемы, скорее всего - бесплатный хостинг. Яша не любит их.

Оставьте комментарий!

grin LOL cheese smile wink smirk rolleyes confused surprised big surprise tongue laugh tongue rolleye tongue wink raspberry blank stare long face ohh grrr gulp oh oh downer red face sick shut eye hmmm mad angry zipper kiss shock cool smile cool smirk cool grin cool hmm cool mad cool cheese vampire snake excaim question

Используйте нормальные имена. Ваш комментарий будет опубликован после проверки.

Имя и сайт используются только при регистрации

Если вы уже зарегистрированы как комментатор или хотите зарегистрироваться, укажите пароль и свой действующий email. При регистрации на указанный адрес придет письмо с кодом активации и ссылкой на ваш персональный аккаунт, где вы сможете изменить свои данные, включая адрес сайта, ник, описание, контакты и т.д., а также подписку на новые комментарии.

Авторизация Loginza

(обязательно)