Нужна программа, скрипт или сайт? Анализ сайта или оптимизация? Копирайт или рерайт текстов? Заявка на выполнение работ.

Роботы Яндекса

Яндекс использует несколько видов роботов с разными функциями. Идентифицировать их можно по строке User-agent:

Yandex/1.03.003 (compatible; Win16; D) - робот, обращающийся к странице при добавлении ее через форму "Добавить URL"
Yandex/1.02.000 (compatible; Win16; F) - индексация иконки сайта (favicon)
Yandex/1.01.001 (compatible; Win16; H) - определение зеркалов сайтов
Yandex/1.01.001 (compatible; Win16; I) - основной индексирующий робот
Yandex/1.03.000 (compatible; Win16; M) - робот, обращающийся при открытии страницы по ссылке "Найденные слова"
Yandex/1.01.001 (compatible; Win16; P) - индексатор картинок
YaDirectBot/1.0 (compatible; Win 16; I) - индексация страниц сайта, участвующего в рекламной сети Яндекса
YandexBlog/0.99.101 (compatible; DOS3.30,B) - робот, индексирующий xml-файлы для поиска по блогам.
YandexSomething/1.0 - робот, индексирующий новостные потоки партнеров Яндекс-Новостей

Также, в Яндексе есть "простукивалки", которые проверяют доступность документов:

Yandex/2.01.000 (compatible; Win16; Dyatel; C) - Яндекс.Каталог. Если сайт недоступен в течение нескольких дней, он снимается с публикации. Как только сайт начинает отвечать, он автоматически появляется в Каталоге.
Yandex/2.01.000 (compatible; Win16; Dyatel; D) - Яндекс.Директ. Она проверяет корректность ссылок из объявлений перед модерацией.
Yandex/2.01.000 (compatible; Win16; Dyatel; Z) - Яндекс.Закладки.

PHP — это язык программирования, основанный на использовании скриптов. Данный язык широко применяется для создания различных front-end и back-end веб-приложений. Поддерживается по-умолчанию большинством хостеров, являясь одним из лидеров среди языков программирования, предназначенных для создания динамических интерактивных сайтов.

Интересные материалы на сайте:

Борьба со спамом. Защита почты. Как защитить почтовый сервер от спама?
Небольшие рекомендации для системных администраторов, управляющих корпоративным почтовым сервером.
Блокиратор мата. Невозможность создания защиты от мата. Или можно защититься от мата?
Анализ способов противодействия ненормативной лексике в онлайн-сервисах, таких как чаты, форумы, гостевые книги.
Опасность использования Windows 98 в локальной сети
Для владельцев устаревшей морально и физически операционной системы Windows 98 посвящается статья о вреде использования этой операционной системы в локальной сети.
Как вручную удалить вирусы из почтового клиента The Bat?
Если на компьютере в почтовой программе "летучая мышка" завелись вирусы, то можно легко и безболезненно их оттуда убрать.

Автор, разработчик: Шаров Евгений (gcmsite@yandex.ru)
(c) 2000-2017 GCM-Site - системное и веб-программирование
Цитирование материалов сайта возможно только при наличии гиперссылки