SEO Поисковая Оптимизация От А до Я

SEO:Поисковая Оптимизация от А до Я => Основы поисковой оптимизации

Лучше будет вынести директиву 'Host' в отдельную секцию, предназначенную только для робота Яндекса (User-agent:Yandex), т.к. возможно, что другие поисковики (Google, например) могут некорректно отработать непонятную им директиву. Так же по стандартам файла robots.txt в каждой секции 'User-agent' должна присутствовать хотя бы одна директива 'Disallow', поэтому мы и поставили в коде пустую, ничего не запрещающую директиву Disallow:. Мой файл Robots.txt, после добавления приведенного выше кода, стал выглядеть так:

1 User-agent:*

2 Disallow:

3

4 User-agent:Yandex

5 Disallow:

6 Host:ktonanovenkogo.ru

7

8 Sitemap:http://ktonanovenkogo.ru/sitemap.xml.gz

9 Sitemap:http://ktonanovenkogo.ru/sitemap.xml

Более подробно о создании файла robots.txt вы можете прочитать в этой статье:Улучшаем индексацию сайта поисковиками - Robots.txt для Joomla, SMF, WordPress

301 редирект с одного домена на другое доменное имя

У меня, кстати, возникла еще одна необходимость воспользоваться 301 редиректом. Дело в том, что некоторые мои сайты базируются на бесплатном хостинге, который при регистрации предоставляет бесплатное доменное имя третьего уровня. Но я практически сразу покупал для сайтов доменные имена второго уровня, которые затем успешно прикручивал к своим сайтам. Проблема была в том, что сайты оставались доступны и по старым бесплатным доменам третьего уровня (например, gurhan.oxnull.net). Вот для разрешения такой ситуации, я так же прописал в файле .htaccess следующий код:

1 RewriteEngine On

2 RewriteCond %{HTTP_HOST} gurhan.oxnull.net

3RewriteRule (.*) http://caokun.ru/$1 [R=301,L]

Теперь если в браузере набрать http://gurhan.oxnull.net, то произойдет автоматический переброс на сайт http://caokun.ru.

Как перенести сайт:10 этапов переезда сайта

Автор:Александр Люстик (MyOST)

http://www.seobuilding.ru/seo-forum/index.php стр. 63 из 78 7 21.02.2011 http://www.seobuilding.ru/