На сайте Яндекса доступен список его роботов. В логах сервера хранятся записи о заходах на сайт как обычных посетителей сайта, так и различных роботов, которые создают дополнительную, часто бесполезную нагрузку на сервер. Каким роботам лучше запретить заходить на сайт, а каким разрешить?
Читать
Category Archives: Поисковые системы
Можно сообщать Яндексу о "скором выходе оригинального текста"
Warning: Trying to access array offset on value of type bool in /var/www/user721217/data/www/wordpress.howtoo.ru/wp-content/themes/twentytwelve-child/functions.php on line 79
В сервисе Яндекс.Вебмастер есть возможность загрузить текст в базу Яндекса перед тем как публиковать этот текст на сайте, чтобы сообщить о своем авторстве.
Инструмент доступен для сайтов с ТИЦ не менее 10
О файле robots.txt
>>>>>>> О файле robots.txt подробно написано на сайте Яндекса Читать
Canonical и другие мета теги
Теперь Яндекс как и Google, Yahoo и MSN поддерживает атрибут rel=”canonical”, факт, несомненно, положительный. Но как вообще поисковики относятся к содержанию мета тегов, к указаниям для поисковых роботов? Читать
Оказывается, поиск Яндекса шутит
'Запись в блоге Яндекса 1 апреля:"А давайте снабдим поиск Яндекса чувством юмора, решили мы. Научим в честь первого апреля показывать по каким-нибудь запросам другие, дурацкие и смешные ответы..."
Читать дальше про юмор поисковой системы Яндекса
Индексация: использование noindex, nofollow, robots и др.
На индексацию веб-страниц можно влиять по-разному. Кроме задания специальных директив в файле robots.txt используются noindex, nofollow, robots и др. элементы в коде веб-страницы.
Читать