Опять про свой сервер и поисковики

На днях упал сервер, точнее не упал, но http ответ выдает в течении нескольких часов. Ошибка "b-tree invalid". Lotus он такой загадочный, рецептов куча, ни один не работает. За три дня шаманства и плясок с бубном проблема локализована и пофиксена. Еще день строились заново индексы. Вчера взлетело.

К чему это я, после запуска http, в первые-же секунды на сайт пришёл, кто бы удивился - Google bot. Тут же скачал robot.txt. И начал резво индексировать сайт.
Следующим зашла Yandex.Metrika. Прислала смс-ку. Бот Yandex'а появился только через несколько часов, но как-то вяло индексирует, "в час по чайной ложке"...
Потом robot.txt скачал Bing. Но он всегда только его скачивает, а сайт не индексирует. Поэтому я всегда удивляюсь как из поисковика bing приходят посетители? Видимо, как говорят слухи, пользуется чужими результатами поиска.
Еще в течении суток были замечены Baiduspider и Yahoo!Slurp, но тоже только скачали robot.txt.
Такие вот наблюдения.

Поисковые боты

Случилось у меня временное безделье, и решил я достать с полки и запустить старый сайт, который не работал несколько лет. Запустился, полёт нормальный, и стало мне интересно кто-же на него ходит. Почитывая логи обнаружил некую странность работы поисковых ботов.
Первым robot.txt прочитал MSNbot, вторым Google, третьим Rambler, потом еще всякие-разные боты. Через 3 дня прочитал Yandex.
Смотрю статистику и динамику сканирования сайта ботами. Надо сказать что сайт это справочник с кучей информации и перекрестных ссылок, т.е. страниц с документами и навигационных страниц очень много, можно оценить в порядка 350 тыс страниц.
Прошел почти месяц.
Google, буквально с момента запуска сайта честно, каждый день, аккуратно, равномерно стягивал по 50 страниц в час.
Yandex тянул только robot.txt 2-3 раза в неделю, но через 3 недели в один день он проснулся и со скорость 600 страниц в час начал их тянуть, это продолжалось ровно 24 часа, потом как обрезало. Не премину заметить, что 4/5 ссылок запрошенных Яндексом были неверными(в конце ссылки стояло подчеркивание), откуда он их взял непонятно.
Сегодня проснулся Rambler, скачал 6 страниц.
Вот такие дела.

какая-то извращенная логика у нашей власти....

http://minkomsvjaz.ru/news/xPages/entry.10415.html
Обалдеть, я даже не знаю как это назвать, какая-то извращенная логика у нашей власти.... Министр из своей зарплаты... А слабо ему учредить программу грантов от министерства, он министр или хрен с горы? Я понимаю когда бизнесмены учреждают гранты своего имени, но министр-то, представитель власти однако. Хотя тоже самолюбие надо потешить, как же без этого... Только что произойдет с этими грантами если он уйдет со своего поста?

Позор

Originally posted by daisyboy at Позор
Перепост:

Тут между делом выяснилось, что у Ю.Норштейна не хватает денег на то, чтобы закончить свою новую работу "Шинель". На государство в таких случаях, понятно, полагаться бесполезно, и люди подумали скинуться деньгами. Но ЖЖ–юзер gleza оказалась не ленива, и списалась с самим Норштейном. А он ответил вот так:

"…Юля, я не могу принять Ваше предложение о сборе средств на фильм "Шинель", в этом случае я чувствовал бы себя крайне неуютно. Но,если Вы хотите поучаствовать в фильме "Шинель", то у меня есть просьба: разместите, пожалуйста, в Вашем блоге информацию о продаже наших книг. Рекламы у нас, в общем, никакой, и поэтому дополнительная информация на Вашем блоге может способствовать привлечению покупателей"

Как выяснилось по субботам художник сам стоит за прилавком, что дает возможность получить книгу с автографом или даже рисунком автора.
размер 400x270, 24.09 kb

"Книги можно купить на нашей студии на Войковской, по адресу — 1–ый Войковский проезд, дом 16, корпус 1, подъезд 1–А, по субботам с 12 до 15 часов, Как правило, я сам в это время стою "за прилавком" и желающим подписываю книги. Для некоторых более обеспеченных покупателей я могу делать рисунки на форзацах книг"

(Карта проезда к нам на студию есть на нашем сайте http://norshteyn.ru/ в разделе "Снег на траве")


Они проникли в интернет...

прочитал новость http://lenta.ru/news/2009/04/24/site/
первая мысль - типа, не барское это дело ходить по сайтам служб своего государства, а вот прорекламировать ЖЖ из самого высокого кабинета - это легко...
вторая мысль - интересно, в чем будет выражаться долг администрации ЖЖ за такой product-placement?

internet explorer

Какая гадость этот ваш интернет эксплорер.
Последние года я сижу только под Firefox, с каждым годом он становится всё удобнее и приятнее, и тут решил я попробовать - а как оно там, под MS IE, и долго плевался - во-первых он начал мне писать всякие напоминалки и подсказывалки - заколебал, во вторых встроенные флэш-обьекты в нём почему жрут ресурсов больше, в третьих - неповоротливый (как мне кажется при рендеринге картинок), и в четвертых он как-то странно залипает в свернутом состоянии в родном эксплорере винды.
Я вообшем-то не фанат, но сколько себя помню, где могу и требуются минимальные усилия - там избавляюсь от виндовс. Конечно есть такие запретные области как 1С и всякие кады, но наступит и на нашей улице празник. 1С и Lotus уже есть оригинально под линукс, терминалка а-ля rdesktop под названием Nomachine NX уже вполне юзабельна, так что осталось микрософту обкакаться с Windows 7, и тогда хана - всё схлопнется как карточный домик, всё уже готово, достаточно только по крупному оступится - и вектор энд-юзеров на волне нынешнего кризиса повернется в другую сторону.

(no subject)

Оооо, Трутнев заверил Путина что популяция леопардов в России будет восстановлена, деньги на это есть. Каких нахрен леопардов? Сибирь просто задыхается без популяции кроликов, почему в Австралии есть, а у нас нет? Прошу выделить деньги!
Правительственная клоунада однако продолжается...

Ну вот и дождались...

Косово признают, однозначно. И войны с Сербией, как пугают - небудет. Еуропа не позволитю И резать там ни кого не начнут - им сейчас надо быть белыми и пушистыми. Только если потихоньку....
Но это всё херня. Наши подзуживают Абхазию запросить признание её легитимной, и если она всё-таки решится - её наше правительство признает. Бля! А это война России с Грузией, которым помогут американцы. И всё станет еще хуже. Во всех сымыслах - горячий конфликт, где будут гмбнуть наши люди, железный занавес и т.д.:( Как мне нехочется этого, как мне надоели эти клоуны из телевизора....

JMJ

прочитал http://www.livejournal.com/users/2lazy/ ,а через еще какого юзера, вспомнил Pink Floyd, полез на полку - достал audioCD Jean Michel Jarre "Les Chants Magnetiques", сдул пыль - теперь сижу наслаждаюсь :) жаль нельзя усилок на полную врубить - для полных ощущений децибелов не хватае..
  • Current Music
    JMJ - "Les Chants Magnetiques"