Yandex

Ура, наконец таки мне вернулась нормальная статистика с рейтинга, ↑807849 не маленький прыжок вверх. А еще за последнюю неделю я столько узнал про индексационых ботов, научился правильно настраивать robots.txt, если убрать лишние папки из списка что бот будет смотреть сразу становится легче дышать, а еще очень полезно загрузить sitemap.xml поисковикам это ускорит и облегчит и вам и им работу, а еще пришел к выводу что плагины для автоматического перевода сайта зло, не стоит их ставить, тем более что кто желает всегда может и сам перевести страничку одним кликов в панеле броузера. Сейчас даже в Яндек баре появился переводчик, про Гуглавский вообще не говорю, тот еще приставала. Вот проблема у меня была именно после установки плагина который переводил запрашиваемые страницы. Он создал несколько копий моего блога на других языках, в итоге количество страниц выросло раз в 20ть. А когда за них взялись боты то сервер взвыл от перенапруги. Хех мой рекорд был 2500% :) нагрузки на сервер, меня тут же предупредили чтоб срочно принял меры иначе примут меры ко мне. Пришлось закрыться от Яндексовского бота заблокировать полностью ему доступ. А я взялся за изучение как решить эту проблему без болезненно.  Плагин с переведеными страницами поудалял, после того как проверил какую чушь оно на переводило. А вот убедить боты что страниц тех больше нет было сложно они упорно их искали получали ошибку 301 и продолжали искать остальные страницы, а их там оказалось порядка 20к жуть…  бедные боты и бедный сервер :)

Related posts

• Google подарил новые кнопочки для Buzz
• А вы хотите пообщаться с животными?
• Google Locator
• Maps.google.RU
• Google Buzz
• Picasa 3.6 теперь и на русском.
• Google Maps in Lab
• Android на Samsung Galaxy I7500
• Picnik вошел в семью Google
• ::( Читая логи доступа к сайту...