Может, ты хочешь возразить, сказать, что есть ATOP/HTOP и прочие товарищи. Но посмотреть все интересующие параметры удобнее онлайн, не используя SSH, правда?

Для наблюдений за состоянием железа обычно мониторится процессор, оперативка, жесткий диск, количество различного типа трафика (реже температура отдельных узлов, а также температура "внутренностей") и средние значения по этим же показателям. Итак, погнали шерстить инструменты!

Scout realtime

Scout realtime – опенсорсный программный продукт. Позиционируется как удобная альтернатива консоли с выводом обновляемых графиков в реальном времени. Сделать какие-то выводы, анализируя график, проще, чем мерцающие цифры, которые постоянно меняются в терминале.

Эта штуковина получает данные для отрисовки из procfs, поэтому пользователи FreeBSD и MacOS не смогут оценить всю прелесть данного софта.

Установить и запустить продукт можно так (все забиндится на 5555 порту):

        gem install scout_realtime

scout_realtime start
    

Чтобы начать просмотр, создай SSH-туннель:

        ssh -NL 5555:localhost:5555 пользователь@ip-шник сервера
    

После этих действий открывай браузер: http://localhost:5555/.

Если firewall блокирует все подряд, то попроси его тебя пропустить (но тогда твою стату смогут видеть все):

        sudo iptables -A INPUT -p tcp --dport 5555 -j ACCEPT
    

Nagios

Самая распространенная система для наблюдения за железом. Очень мощный инструмент, позволяющий мониторить практически любой узел в сети: DVR-ку, камеру, ноут, коммутатор, телефон и даже дорогущий пограничный роутер за 750 000 р. Софтина построена на наборе конфигов для каждой группы событий или объектов. Рулит этим всем движок, а движком – ты, через веб-морду.

Для установки сделай следующее:

        sudo apt update
sudo apt install build-essential apache2 php7.0 openssl perl make php7.0-gd libgd2-xpm-dev libapache2-mod-php7.0 libperl-dev libssl-dev daemon wget apache2-utils unzip
    

Создай юзера и группу для запуска нагоиса:

        sudo useradd nagios sudo groupadd nagcmd
    

Теперь создай юзера для запуска Apache:

        sudo usermod -a -G nagcmd nagios sudo usermod -a -G nagcmd www-data
    

Далее скачай свеженькую версию по ссылке выше, разархивируй и начинай компилить:

        ./configure --with-nagios-group=nagios --with-command-group=nagcmd --with-httpd_conf=/etc/apache2/sites-enabled/ make all sudo make install sudo make install-init sudo make install-config sudo make install-commandmode sudo make install-webconf
    

В /usr/local/nagios/etc/ найди contact.cfg (контакты для оповещений) и заполни его:

        define contact { 
contact_name nagiosadmin ;  
use generic-contact ; 
alias Nagios Admin ; 
email admin@losst.ru ;  
твоя почта 
}
    

После этого создай пароль nagiosadmin, чтобы он смог попасть на веб-морду:

        sudo htpasswd -c /usr/local/nagios/etc/htpasswd.users nagiosadmin
    

Включи на веб-сервере поддержку cgi и перезагрузи сервак:

        sudo a2enmod cgi

sudo service apache2 restart
    

А теперь запусти Nagios:

        sudo systemctl stat nagios
    

Проследуй по адресу http://localhost/nagios.

Munin

Здесь используется RRDTool и Perl. Допиливать что-то свое (плагины, модули и прочее) можно на любом языке. Munin имеет архитектуру master/node – мастер коннектится ко всем нодам и опрашивает их через постоянные промежутки времени. Все полученные данные он сохраняет в RRD-файлах и (при необходимости) обновляет графики. Одним из преимуществ софта является простота создания графиков.

Для установки мастера сделай следующее:

        sudo apt-get update
sudo apt-get install munin
    

В файлике nano /etc/munin/munin.conf найди строку [localhost.localdomain] и отредактируй по своему усмотрению (это отображаемое имя хоста на графиках). Например, так: srv-01.proglib.io

Это сделай на всех нодах:

        sudo apt-get update
sudo apt-get install munin-node
    

В файлике nano /etc/munin/munin-node.conf найди строку #host_name localhost.localdomain. Раскомментируй ее и впиши туда имя сервака и имя ноды (host_name srv-01.proglib.io).

Настрой nginx:

        location /munin {
    alias /var/www/munin;
    autoindex on;
    auth_basic "Munin Statistics";
    auth_basic_user_file /etc/munin/.passwd;
}
    

Перезагрузи его:

        service nginx restart
    

И создай юзера:

        htpasswd -c /etc/munin/.passwd adminus
    

New Relic

New Relic – не сильно популярная система в наших русских кругах, но весьма хороший инструмент, правда, платный. С помощью него можно отслеживать все – от потребления ресурсов каким-либо приложением и состояния железа до уровня удовлетворенности посетителей.

Установить продукт можно на любую систему, даже на Android/iOS и в облако. Есть поддержка горы ЯП, среди них: Java, Python, C, Go и т. д.

Для установки создай конфиг и добавь в него следующее:

        echo "license_key: твой_ключ" | sudo tee -a /etc/newrelic-infra.yml
    

Потом активируй GPG-ключ:

        curl https://download.newrelic.com/infrastructure_agent/gpg/newrelic-infra.gpg | sudo apt-key add
    

Создай репозиторий агента, используя команду:

        printf "deb [arch=amd64] https://download.newrelic.com/infrastructure_agent/linux/apt trusty main" | sudo tee -a /etc/apt/sources.list.d/newrelic-infra.list
    

Обнови apt-кеш:

        sudo apt-get update
    

И запусти установку:

        sudo apt-get install newrelic-infra -y
    

Готово!

Zabbix

Одна из популярнейших систем мониторинга. Она работает в связке MySQL + PHP (хотя с легкостью можно юзать и PostgreSQL, SQLite или Oracle). Эта штука не просто попискивает в динамики, чтобы тебя, уснувшего, поднять с клавиатуры, так еще и смс-ки может отправлять, стучаться на почту и во всякие мессенджеры, а также выполнить определенное задание при срабатывании триггера. Графики, карта сети и комплексные отчеты – это вообще не обсуждается.

Для установки сделай следующее:

        sudo apt update && sudo apt upgrade

sudo apt install mysql-server mysql-client apache2
    

С официального сайта стянем пакетик:

        sudo wget http://repo.zabbix.com/zabbix/3.2/ubuntu/pool/main/z/zabbix-release/zabbix-release_3.2-1+xenial_all.deb
    

И добавим репу:

        sudo dpkg -i zabbix-release_3.2-1+xenial_all.deb
    

Далее установи пакет для Zabbix с поддержкой MySQL:

        sudo apt install zabbix-server-mysql zabbix-frontend-php
    

Создай базу и специального юзера:

        create database zabbix character set utf8 collate utf8_bin;
grant all privileges on zabbix.* to zabbix@localhost identified by 'zabbix_test';
    

В папке со скачанным пакетом найди и запусти скрипт, который создаст тебе структуру БД:

        sudo zcat create.sql.gz | mysql -uroot zabbix –p
    

Перезагрузи все:

        sudo systemctl start apache2.service

sudo systemctl status apache2.service

sudo systemctl restart apache2.service
    

Теперь можно перейти на IP-адрес сервера/zabbix и увидеть веб-морду.

Collectd

Collectd – это простенькая система сбора инфы с машины, на которой она стоит. Обычно собранную инфу отправляют в Graphite. У данного продукта есть невероятное количество модулей и плагинов, которые расширяют функционал – это большой плюс. Установим же!

        sudo apt-get install collectd collectd-utils
    

Для дальнейшей настройки останови демон:

        sudo service collectd stop
    

Далее редактируем файлик /etc/collectd/collectd.conf:

        Hostname "graph_host"

FQDNLookup true
    

В этот же конфиг внеси настройки мускли:

        LoadPlugin mysql

<Plugin mysql>

 <Database DataBaseName>

   Host "хост или IP"

   Port "3306"

   User "UserName"

   Password "PassWord"

   Database "databasename"

   MasterStats true

 </Database>

</Plugin>
    

На очереди Nginx. Поставь последнюю версию (или обновись) и отредактируй /etc/nginx/conf.d/your.domain.conf:

        server {

  listen 80;

  server_name your.domain.com;

location / {

  # Тут настройка на твое усмотрение, есть очень много мануалов.

}

location /nginx_status {

  stub_status on;

  access_log off;

  allow IP-адрес; # IP Nginx

  deny all; 
}

}
    

После этого в конфиг выше добавь такое:

        LoadPlugin nginx

<Plugin nginx>

  URL "http://your.domain.com/nginx_status"

  VerifyPeer false

  VerifyHost false

</Plugin>
    

Готово!

Monitorix

Еще одно простое решение для мониторинга. Поможет тебе следить как за аппаратными ресурсами, так и за софтом. Ты сможешь получать данные от: сетевушек, термодатчиков, памяти, процессора и практически любого ПО на сервере.

Для установки сделай следующее:

        sudo apt update && sudo apt upgrade
apt-get install monitorix
    

После установки все запустится само. Для добавления/редактирования хостов используй конфиг: /etc/monitorix/monitorix.conf.

В конце перегрузи софтину:

        service monitorix restart
    

И проследуй по адресу: http://localhost:8080/monitorix

Чем-то из этого уже пользовался? Как тебе?