Появилась необходимость проверить лог-файлы на предмет посещения страниц роботами Яндекса и тут я понял что совсем не знаю как отличить один робот от другого. В общем нашел довольно полезную информацию.
Итак у яндекса есть основные роботы
- Yandex/1.01.001 (compatible; Win16; I) — основной индексирующий робот
- Yandex/1.01.001 (compatible; Win16; P) — индексатор картинок
- Yandex/1.01.001 (compatible; Win16; H) — робот, определяющий зеркала сайтов
- Yandex/1.02.000 (compatible; Win16; F) — робот, индексирующий пиктограммы сайтов (favicons)
- Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL»
- Yandex/1.03.000 (compatible; Win16; M) — робот, обращающийся при открытии страницы по ссылке «Найденные слова»
- YaDirectBot/1.0 (compatible; Win16; I) — робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса
- YandexBlog/0.99.101 (compatible; DOS3.30,B) – робот, индексирующий xml-файлы для поиска по блогам.
- YandexSomething/1.0 – робот, индексирующий новостные потоки партнеров Яндекс-Новостей.
- Bond, James Bond (version 0.07) — робот, заходящий на сайты из подсети Яндекса. Официально никогда не упоминался. Ходит выборочно по страницам. Referer не передает. Картинки не загружает. Судя по повадкам, робот занимается проверкой сайтов на нарушения – клоакинг и пр.
И так называемые «агенты-простукивальщики» которые проверяют сайт на доступность
- Yandex/2.01.000 (compatible; Win16; Dyatel; C) — «простукивалка» Яндекс.Каталога. Если сайт недоступен в течение нескольких дней, он снимается с публикации. Как только сайт начинает отвечать, он автоматически появляется в Каталоге.
- Yandex/2.01.000 (compatible; Win16; Dyatel; Z) — «простукивалка» Яндекс.Закладок. Ссылки на недоступные сайты помечаются серым цветом.
- Yandex/2.01.000 (compatible; Win16; Dyatel; D) — «простукивалка» Яндекс.Директа. Она проверяет корректность ссылок из объявлений перед модерацией. Никаких автоматических действий не предпринимается.
- Yandex/2.01.000 (compatible; Win16; Dyatel; N) — «простукивалка» Яндекс.Новостей. Она формирует отчет для контент-менеджера, который оценивает масштаб проблем и, при необходимости, связывается с партнером.
Вот в общем и все. За информацию спасибо проекту http://robotstxt.org.ru/
Яндекс
robots, роботы, яндекс
Постоянно задаюсь вопросом – как же мне оторвать от 0 показатель тИЦа на десятках моих досок, сплогов и прочего Г. Мои последние прогоны по каталогам ссылок и каталогам статей тИЦ с места сдвинуть не смогли. Покупка ссылок через сапу всегда дает непредсказуемый результат и чаще всего он нулевой! Решил поискать причины!
Первое, что решил проверить – тот самый таинственный НЕПОТ-фильтр! До недавно я о нем очень мало знал, помнил только что есть НЕПОТ-сервис который меня вот прямо сейчас спасет. Полез искать и тут облом. Такие сервисы уже не работают и автоматизировать определение НЕПОТ не удастся.
Полез искать хоть какую-то информацию о фильтре и нарвался на доклад Каширина о НЕПОТЕ. На серче доклад сильно раскритиковали, но я решил закрыть на это глаза и попробовать проверить основные наблюдения Каширина.
В докладе сказано, что
- под фильтр попадает не весь сайт и даже не страница, а только конкретная ссылка
- под фильтр попадают в основном/только не тематические ссылки!
То есть если анкор ссылки будет соответствовать тематике донора (даже если этот анкор совсем не соответствует тематике продвигаемого сайта), то ссылка не должна попасть под фильтр! Напоминаю, что меня интересует только тИЦ, ссылочное опускаем.
Осталось придумать как это проверить. Наверное я найду 4-5 морд с тИЦ>300 и куплю с каждой по ссылке на 2 доски. В первом случае анкор будет соответствовать тематике донора, во втором – акцептора.
Через месяц глянем на результаты.
PS^ Знаешь как наращивать тИЦ? пиши в комменты, думаю мы сможем договориться!
Идеи, Эксперименты, Яндекс, тИЦ
НЕПОТ, платные ссылки, тИЦ, яндекс
Недавно на SAPE было опубликовано сообщение о том, что они прекращают вывод денег на WMZ кошельки!
Лично для меня это создает кучу неудобств т.к. обналичиваю деньги я до сих пор в долларах (хранить удобнее). Дело в том, что SAPE совершал перевод рублей в доллары по курсу ЦБ, а теперь прийдется пользоваться обменниками, у которых всегда довольно неприятный курс.
Раньше для совершения мелких операций по обмену WM<->WM я использовал wm.exchanger.ru потому что это удобно (обмен совершался в пару кликов) и я не обращал внимания на курс. А курс у них очень неудобный (вот сейчас при курсе ЦБ в 31,1326 у них 34,3103 ) что при обмене больших сумм (>10к) уже неприемлимо.
В итоге полез искать обменник с которым будет безопасно и легко работать. Пока остановился на Changemoney потому, что у них при довольно хорошем курсе (но не лучшем, 32.701) еще и нашлось достаточное количество WMZ в резерве!
Обмен прошел полностью автоматически и моментально. У WMID обменника аттестат регистатора, BL: 1069; TL: 3221 и полное отсутствие жалоб!
Также для зарегистрированых пользователей есть довольно приятная накопительная система скидок что позволит со временем еще улучшить курс!
Деньги, Сервисы
SAPE, wm, обмен, Сервисы
