Кнопочки и рейтинги

Рейтинг блогов Рейтинг блогов DarkHelgi

Аудитория блога продвижение сайтов Блогун - монетизируем блоги

Ого вырос…

Рейтинг: 1843 Kalachov.com – Kalachov Oleg Изменения: ↑313 Авторитет: 3093 Читателей: 270

Подымаемся потихоньку…

Рейтинг: 6591 Kalachov.com – Kalachov Oleg Изменение: ↑368 Авторитетность: 1618 Читателей: 199

::( Читая логи доступа к сайту…

возникает ощущение что меня читают только боты всяких поисковиков, и не большое количество живых людей которые как то сюда все таки попадают, на фоне ботов их и заметить сложно… даже грустно стало как то. Только вчера обрадовался что Яндексный бот не грузит сервер, так сегодня он появился с нового ip и за прежнее взялся. Вот что не понимаю так это что каждая ПС (поисковая система) использует свои шаблоны для robots.txt, а яндексовский паук то вообще по моему согласен видеть только:

User-agent: Yandex
Crawl-delay: 2 # задает таймаут в 2 секунды

А вот все остальное видеть напрочь не желает… ищу что делать дальше.

Yandex

Ура, наконец таки мне вернулась нормальная статистика с рейтинга, ↑807849 не маленький прыжок вверх. А еще за последнюю неделю я столько узнал про индексационых ботов, научился правильно настраивать robots.txt, если убрать лишние папки из списка что бот будет смотреть сразу становится легче дышать, а еще очень полезно загрузить sitemap.xml поисковикам это ускорит и облегчит и вам и им работу, а еще пришел к выводу что плагины для автоматического перевода сайта зло, не стоит их ставить, тем более что кто желает всегда может и сам перевести страничку одним кликов в панеле броузера. Сейчас даже в Яндек баре появился переводчик, про Гуглавский вообще не говорю, тот еще приставала. Вот проблема у меня была именно после установки плагина который переводил запрашиваемые страницы. Он создал несколько копий моего блога на других языках, в итоге количество страниц выросло раз в 20ть. А когда за них взялись боты то сервер взвыл от перенапруги. Хех мой рекорд был 2500% :) нагрузки на сервер, меня тут же предупредили чтоб срочно принял меры иначе примут меры ко мне. Пришлось закрыться от Яндексовского бота заблокировать полностью ему доступ. А я взялся за изучение как решить эту проблему без болезненно.  Плагин с переведеными страницами поудалял, после того как проверил какую чушь оно на переводило. А вот убедить боты что страниц тех больше нет было сложно они упорно их искали получали ошибку 301 и продолжали искать остальные страницы, а их там оказалось порядка 20к жуть…  бедные боты и бедный сервер :)