Мониторим свой сервер по полной

Начинаю этим постом небольшую серию об оптимизации серверов, скриптом и всего, что с этим связано. Это на самом деле даже важнее чем вы думаете, ведь скорость отклика вашего сервера еще как влияет на заработки в адсенсе. Читай – быстрее сервак, больше денег за клик.

В этот раз начнем с того, что неплохо бы мониторить свой сервер (или vds). То есть четко знать где чего происходит, или в какой момент возникает перегрузка.

Шаг номер раз: устанавливаем loadavg. Это вполне милый скриптик, пример работы которого можно посмотреть тут – gickr.com loadavg. Это очень удобный и наглядный просмотр статистики по : зазгрузке сервера, использованию оперативки, использования канала. В принципе на сайте разработчика все подробно расписано про установку. Закачать файло, создать папку для логов, повесить скрипт на cron. Единственное замечание – в первые сутки может некорректно отображать статистику, так что наберитесь терпения и дальше все будет как по маслу. Мне действительно очень помогает видеть нагрузку на сервер.

Шаг номер два: ставим vpsinfo. Пример смотрим тут – gickr.com stat. Тут все немного сложнее, но тоже хорошо описано на сайте разработчика. Фокус в том, что для полного отображения статистики придется установить кое-какое дополнительное ПО. А именно vnstat и mysqlreport. Первое – это хренька для мониторинга трафика, второе – статистика по MySQL. Хоть я сам ни разу ни админ линукс-серверов, но у меня все отлично собралось из исходников без единой проблемы на Fedora Core 6. Настройка самого скрипта тоже предельно интуитивная и делается прямо в начале его кода :) Как результат получаем вывод кучи полезной и не очень информации в одно место. Меня спасало много раз от кучи неприятных ситуаций на сервере.

Шаг номер три: для завершения картины ставим графическую оболочку для vnstat. Она покажет сколько трафика утекло и в какой момент. Там вообще нет никаких премудростей, так что вперед. Результат глянуть тут – gickr traffic.

Итак я спалил вам всю статистику гикра ;) Изучайте если интересно. В следующем посте я постараюсь рассказать о моей общей методике оптимизации скорости проекта. Все вопросы по текущему набору скриптов пожалуйста в комменты, постараюсь ответить в меру своей некомпетентности :D

P.S. Для любопытствующих по поводу сервера, на котором вертится гикр:

  • Opteron 246
  • 4Gb registred ECC RAM
  • 250Gb + 250Gb + 750Gb (обычные SATA харды)
  • 100Mbit канал
  • http://blog.pervyshag.ru Андрей

    Спасибо большое! Очень актуально сейчас!

  • http://blog.gtalex.ru/ GTAlex

    Супер! Отличная статья, как только разгребусь с делишками обязательно нужно будет установить полный комплект.
    (жди вопросов в камменты)

  • http://blog.ugnich.com/ Anton

    Это всё очень хорошо, но совершенно несерьезно. Не раскрыты темы: mrtg, rrdtool, cacti, …

  • http://epavel.ru/blog/ SM

    это какието детские поделки для статистики :)
    Anton вон в верную сторону намекает :)

  • http://www.aeriman.ru/ AEriman

    2ANTON: в случае quick&dirty statistics как раз хватит. Если rrd – то лучше сразу брать в комплекте systemgraph. Cacti же является видимым доказательством того, что Наблюдающий изменяет Наблюдаемое. Более тупой и тормозной системы не встречал.

    2WINNIE: Посмотрел статистику твою – вопрос возник. На FastCGI переключится не пытался?

  • phantompain

    Миха, спасибо, как раз в тему

  • http://padlik.ru padlik

    Вообще информация конечно полезная… Еще было бы неплохо про безопасность поговрить.

  • http://padlik.ru padlik

    Под freebsd 6.2 чё-то как-то не особо работает.
    Совершенно нулевые статы

  • http://homelessfromtallinn.blogspot.com Maxim

    Anton, а понту их раскрывать если и с этими все получается? :)
    А вообще, спасибо огромное за пост, stwinnie. Все предельно просто и ясно.

  • http://blog.stwinnie.com stwinnie

    Anton, SM mrtg хорошо для мониторинга кластера, для всего остального на мой взгляд хватает вышеописанных скриптиков :), rrdtool чем-то лично мне не понравился, не помню чем, а про Какти все уже выше сказали.

    AEriman, так на нем все и вертится

  • http://blog.ugnich.com/ Anton

    mrtg – он просто рисует графики на основе предоставленных значений, есть куча скриптом для мониторинга чего угодно. Очень просто настроить, совершенно разные параметры мониторятся по одному простому принципу.
    rrdtools – немного сложнее, но и гораздо функциональнее. Наверное, не понравился тем, что настраивать сложнее, чем тот же mrtg. :)
    cacti – я его ставил на отдельный сервер, а мониторились другие. В принципе согласен, для использования на одном сервере это слишком расточительно. Ну да есть другие подобные пакеты, с требованиями по-скромнее.

  • http://blog.ugnich.com Anton

    2Maxim, отвечу отдельно:
    А толку писать про какие-то наборы скриптов, если в любой ОС есть mrtg и с ним одним всё получается?! :)
    Если серьезно, то, ИМХО, следует начинать именно с mrtg/rrdtool, а потом уже для недостающего функционала искать разные левые скрипты.

  • http://put-on-life.blogspot.com/ den che

    СПАСИБО. Наверно это полезная инфо для меня, раз я ничего не понял :-) Буду стараться понять.

  • Diablo

    а если не секрет , зачем столько хардов на серваке? неужели столько места жрут , всё это количество гифок , что делают юзеры гикра?

  • http://blog.stwinnie.com stwinnie

    Diablo, а то ! 460 гигов уже забито

  • http://BrokenBrake.biz/ BrokenBrake

    Нихрена себе, трафика по 50 Гб в день 8-0
    Офигеть.

    А примочки эти классные, наверно, но юзабельность какая-то плохая… Наверно, надо привыкать. А пока открыл и испугался :)

    P.S. Теперь появилась галка подписки.

  • http://blog.stwinnie.com stwinnie

    Тормоз, на самом деле трафика по 70Гб ))) а юзабельности в примочках никакой и нет, просто открыл и увидел всю нужную тебе инфу.

  • http://smartfon.net.ua Андрей Березовский

    http://gickr.com/hahohi/.load/index.php?logfile=1188446400.log

    мне кажется небезопасным давать такие страницы всем
    может кто-то помучавшись и преобразив адрес в

    http://gickr.com/hahohi/.load/index.php?logfile=../../путь/к/плохому/файлу

    поломает тебе что-либо???

  • http://blog.stwinnie.com stwinnie

    Андрей Березовский, не поломает, я же не такой уж дурак совсем ) а у тебя самого с сайта троянчик лезет, неприятно как-то

  • http://bizlife.us Александр

    Спасибо большое, сейчас бум юзать.

  • http://blog.pervyshag.ru Андрей

    Вообще, ждём продолжения :)