Изменения документа Мониторинг системных ресурсов

Сводка

• Свойства страницы (4 изменено, 0 добавлено, 0 удалено)
• Вложения (1 изменено, 8 добавлено, 1 удалено)
  • maintenance_sys_disks.png
  • maintenance_sys_wnd.png
  • fa-uplink.png
  • maintenance_connections.png
  • maintenance_diagnostic.png
  • maintenance_dumps.png
  • maintenance_media.png
  • maintenance_mediaconnections.png
  • maintenance_uplinks.png
  • maintenance_wnd.png
• Объекты (1 изменено, 0 добавлено, 0 удалено)
  • XWiki.ShortUrlClass[0]

Подробности

Свойства страницы

Название

...	...	@@ -1,1 +1,1 @@
1		-Мониторинг системных ресурсов
	1	+НЕЙРОСС Техобслуживание

Родительский документ

...	...	@@ -1,1 +1,1 @@
1		-ui.НЕЙРОСС Техобслуживание.WebHome
	1	+ui.WebHome

Автор документа

...	...	@@ -1,1 +1,1 @@
1		-XWiki.admin
	1	+XWiki.superadmin

Содержимое

...	...	@@ -1,229 +1,148 @@
1		-Раздел **Системные ресурсы** приложения [[НЕЙРОСС Техобслуживание>>doc:ui.НЕЙРОСС Техобслуживание.WebHome]] позволяет отслеживать нагрузку на ресурсы сервера: загрузку процессора, использование оперативной памяти и объём сетевого трафика. Вы можете просматривать изменения на графиках в режиме реального времени или переключится в раздел **Исторические**, который позволяет провести ретроспективный анализ по интересующему интервалу времени.
	1	+Приложение **НЕЙРОСС Техобслуживание**(%%) доступно позволяет провести диагностику Платформы НЕЙРОСС и выявить возможные проблемы. Раздел доступен только для узлов [[Платформа НЕЙРОСС>>neyross.WebHome]].
2	2
3	3	{{info}}
4	4	**Переход к функционалу**: [[doc:ui.Рабочий стол НЕЙРОСС.WebHome]] > [[doc:ui.Параметры узла.WebHome]] > [[doc:ui.Параметры узла.Основные параметры.WebHome]] > кнопка Техническое обслуживание ~[[[doc:ui.Рабочий стол НЕЙРОСС.Изменения интерфейса НЕЙРОСС.WebHome]]].
5	5	{{/info}}
6	6
7		-== Общие сведения ==
	7	+== {{id name="НЕЙРОССТехобслуживание-Общиесведения"/}}Общие сведения ==
8	8
9		-Раздел **Системные ресурсы** обеспечивает сбор данных как в режиме реального времени (вкладка **Текущие**), так и постфактум (вкладка **Исторические**).
	9	+Платформа НЕЙРОСС предоставляет широкий функционал диагностики использования системных ресурсов, программных метрик, показаний счетчиков и текущих подключений.
10	10
11		-[[image:attach:maintenance_sys_wnd.png||width="900"]]
12	12
	12	+Раздел [[#Системные ресурсы>>doc:||anchor="НЕЙРОССТехобслуживание-Системныересурсы"]]
	13	+Позволяет отслеживать нагрузку на ресурсы сервера.
13	13
14		-== Нагрузка на процессор (CPU) ==
	15	+Раздел [[#Программные метрики>>doc:||anchor="НЕЙРОССТехобслуживание-Программныеметрики"]]\\
15	15
16		-|=Метрика|=Описание
17		-|(((
18		-Total
19		-)))|(((
20		-Суммарная нагрузка на процессор, %
21		-)))
22		-|(((
23		-User
24		-)))|(((
25		-Время в пользовательском режиме, %
26		-)))
27		-|(((
28		-Sys
29		-)))|(((
30		-Время в режиме ядра, %
31		-)))
32		-|(((
33		-Wait
34		-)))|(((
35		-Ожидание I/O (I/O wait), %
36		-)))
37		-|(((
38		-Irq, Softirq и др.
39		-)))|(((
40		-Прерывания и прочие категории нагрузки
41		-)))
	17	+Позволяет просмотреть в табличном виде различные метрики, которые Платформа НЕЙРОСС регистрирует и сохраняет в долговременное хранилище различные метрики в унифицированном формате. Также в рамках текущей сессии интересующие метрики могут быть (%%)«вынесены» на дашборд. Состав метрик не фиксирован и будет дополняться. Также можно регистрировать свои метрики для нужд отладки или эксплуатации через скрипты автоматизации и плагины и выполнять их отслеживание. Исторические данные записываются раз в 5 минут и ротируются каждые 5 дней.
42	42
43		-{{info}}
44		-В предыдущих версиях доступна только суммарная нагрузка без разбивки.
45		-{{/info}}
	19	+Суммарное количество метрик на текущий момент более сотни. Несколько наиболее важных вынесены в специальные разделы с графиками:
46	46
47		-== Использование оперативной памяти (RAM) ==
	21	+* Полученные, отфильтрованные и отправленные события;
	22	+* Количество, время обработки HTTP-запросов с разделением по статусам ответов;
	23	+* Параметры виртуальной машины Java (потребление памяти, состояние потоков для основных Java-процессов;
	24	+* Показания (текущее значение показателя, например, потребление памяти);
	25	+* Счётчики (меняющееся со временем число, например, количество обработанных событий);
	26	+* Измерения (счётчики с дополнительной статистикой динамики изменения, например, событий в минуту, 5 минут, 15 минут);
	27	+* Таймеры (измерения с дополнительной статистикой времени обработки);
	28	+* Данные диагностики и профилирования.
48	48
49		-|=Метрика|=Описание
50		-|(((
51		-Используется
52		-)))|(((
53		-Занятая оперативная память (объём и % от общего)
54		-)))
55		-|(((
56		-Всего
57		-)))|(((
58		-Общий объём RAM
59		-)))
60		-|(((
61		-Swap
62		-)))|(((
63		-Использование swap-памяти
64		-)))
65		-|(((
66		-Свободно
67		-)))|(((
68		-Рассчитывается через getActualFree — с учётом кэша и буферов, доступных для использования
69		-)))
	30	+Раздел [[#Диагностика>>doc:||anchor="НЕЙРОССТехобслуживание-Диагностика"]]
70	70
	32	+Диагностика и профилирование работы ПО.
71	71
	34	+Раздел [[#Подключения клиентов>>doc:||anchor="НЕЙРОССТехобслуживание-Подключенияклиентов"]]
72	72
73		-== Сетевой трафик ==
	36	+Отслеживание общего количества подключений к приложениям НЕЙРОСС и потокам медиаисточников и действий каждого клиента.
74	74
75		-=== Суммарный трафик ===
	38	+Раздел [[#Дампы процессов>>doc:||anchor="НЕЙРОССТехобслуживание-Дампыпроцессов"]]
76	76
77		-|=Метрика|=Описание
78		-|(((
79		-Трафик (суммарно)
80		-)))|(((
81		-Общая пропускная способность, Мб/с или Кб/с
82		-)))
83		-|(((
84		-RX
85		-)))|(((
86		-Входящий трафик (принято)
87		-)))
88		-|(((
89		-TX
90		-)))|(((
91		-Исходящий трафик (отправлено)
92		-)))
	40	+При возникновении критичных проблем формируются дампы процессов, которые могут быть отправлены специалистам компании ИТРИУМ для диагностики.
93	93
	42	+== {{id name="НЕЙРОССТехобслуживание-Системныересурсы"/}}Системные ресурсы(%%) ==
94	94
	44	+Раздел **Системные ресурсы** позволяет отслеживать нагрузку на ресурсы сервера: загрузку процессора, использование оперативной памяти и объём сетевого трафика. Вы можете просматривать изменения на графиках в режиме реального времени или переключится в раздел **Исторические**, который позволяет провести ретроспективный анализ по интересующему интервалу времени.
95	95
96		-=== Трафик по интерфейсам ===
	46	+[[image:attach:maintenance_sys_wnd.png||width="900"]]
97	97
98		-Для каждого активного интерфейса (кроме lo, docker*, br-*):
	48	+== {{id name="НЕЙРОССТехобслуживание-Программныеметрики"/}}Программные метрики ==
99	99
100		-|=Метрика|=Описание
101		-|(((
102		-↓ (RX)
103		-)))|(((
104		-Входящий трафик интерфейса
105		-)))
106		-|(((
107		-↑ (TX)
108		-)))|(((
109		-Исходящий трафик интерфейса
110		-)))
	50	+Раздел **Программные метрики** позволяет отслеживать параметры работы приложений в графическом виде.
111	111
112		-=== Потери и ошибки по интерфейсам ===
	52	+[[image:attach:maintenance_wnd.png||width="900"]]
113	113
114		-|=Метрика|=Описание
115		-|(((
116		-Ошибки приёма / передачи
117		-)))|(((
118		-Количество ошибок (накопленное и скорость, /с)
119		-)))
120		-|(((
121		-Отброшенные пакеты
122		-)))|(((
123		-Dropped packets
124		-)))
125		-|(((
126		-Принятые / отправленные пакеты
127		-)))|(((
128		-Количество пакетов
129		-)))
130		-|(((
131		-Скорость адаптера
132		-)))|(((
133		-Пропускная способность сетевого интерфейса
134		-)))
	54	+Также предусмотрено большое количество метрик, по которым вы можете отслеживать, в частности, загрузку медиасервера. На примере ниже приведены показатели с фильтром {{code language="none"}}media{{/code}}.
135	135
136		->Метрики собираются только для интерфейсов, активных на момент старта ПО. В старых семплах трафик отображался как сумма RX + TX без разделения.
	56	+[[image:attach:maintenance_media.png||width="900"]]
137	137
138		-(% class="wikigeneratedid" %)
139		-Обеспечивается сбор следующих данных:
	58	+== {{id name="НЕЙРОССТехобслуживание-Диагностика"/}}Диагностика ==
140	140
141		-* Процессор (CPU)
142		-* Использование оперативной памяти (RAM)
143		-* Сетевой трафик (суммарный и по каждому из интерфейсов)
144		-* Потери и ошибки по каждому из интерфейсов
145		-* Состояние TCP-соединений, ошибки и повторные подключения
146		-* Использование дисков (по каждому диску в отдельности)
	60	+Раздел **Диагностика** предоставляет функционал диагностики и профилирования работы ПО и доступен с версии 20.29 Платформы НЕЙРОСС.
147	147
148		-== Пользовательские инструменты ==
	62	+[[image:attach:maintenance_diagnostic.png||width="900"]]
149	149
150		-С версии 20.52 Платформы НЕЙРОСС/ДеВизор
	64	+{{info}}
	65	+Набор профилировщиков будет дополняться.(%%) Каждый из профилировщиков может быть недоступен в зависимости от окружения.
	66	+{{/info}}
151	151
152		-== Использование дисков ==
	68	+**Диагностика сетевых пакетов**
153	153
154		-С версии 20.51 Платформы НЕЙРОСС/ДеВизор добавлен сбор и отображение в виде графика статистики использования дисков. Доступны данные по системному диску и по всем другим дискам (кроме смонтированных в boot).
	70	+{{info}}
	71	+Требуется утилита tcpdump.
	72	+{{/info}}
155	155
156		-{{warning title="ОГРАНИЧЕНИЕ"}}
157		-В контейнерной среде счётчики текущего чтения и записи недоступны. Линии активности на графиках для метрик «записано» и «прочитано» будут плоскими.
	74	+Профилировщик позволяет задать фильтр профилирования (см. (%%)[[https:~~/~~/docs.netgate.com/pfsense/en/latest/diagnostics/packetcapture/tcpdump.html#tcpdump-filters>>url:https://docs.netgate.com/pfsense/en/latest/diagnostics/packetcapture/tcpdump.html#tcpdump-filters||rel="nofollow" style="" shape="rect" class="external-link"]]) и время, в течение которого трафик всех сетевых интерфейсов будет захватываться в файл в соответствии с фильтром. По результатам работы будет скачан файл формата **PCAP**, пригодный для открытия в Wireshark.
158	158
159		-Метрика «используется/всего» в контейнерах работает штатно и позволяет оценить заполненность диска.
160		-{{/warning}}
	76	+\\
161	161
162		-[[image:maintenance_sys_disks.png||height="347" width="900"]]
	78	+**Диагностика JVM**
163	163
164		-|=Метрика|=Описание
165		-|(((
166		-Используется / всего
167		-)))|(((
168		-Занятое и общее пространство, % заполнения
169		-)))
170		-|(((
171		-Чтение
172		-)))|(((
173		-Скорость чтения (на графике — разница между семплами абсолютного значения с момента старта ОС)
174		-)))
175		-|(((
176		-Запись
177		-)))|(((
178		-Скорость записи (аналогично)
179		-)))
180		-|(((
181		-Задержка (service time)
182		-)))|(((
183		-Время обслуживания дисковых операций
184		-)))
185		-|(((
186		-Inode
187		-)))|(((
188		-Статистика по inode (при наличии)
189		-)))
	80	+{{info}}
	81	+Требуется утилита jcmd (поставляется вместе с JDK) и возможность её работы с профилировщиком Java Flight Record.
	82	+{{/info}}
190	190
	84	+В составе Платформы НЕЙРОСС работает виртуальная машина Java. Эта виртуальная машина собирает большое количество внутренней информации о своей работе, в том числе о составе и жизненном цикле потоков, характере выделения и освобождения памяти и т. п. Эта информация может играть ключевую роль в диагностике сложных проблем, связанных с утечками памяти \ блокировками потоков \ чрезмерной нагрузке на CPU.
191	191
	86	+По результатам работы будет скачан файл формата JFR. Существует много просмотрщиков данных файлов; наиболее продвинутым является JDK Mission Control ([[https:~~/~~/www.oracle.com/java/technologies/javase/products-jmc8-downloads.html>>url:https://www.oracle.com/java/technologies/javase/products-jmc8-downloads.html||rel="nofollow" style="" shape="rect" class="external-link"]]).
192	192
193		-Используется тип метрики Gauge, записывается абсолютное значение в конкретный момент времени (тип метрики Gauge):
	88	+\\
194	194
195		-* Используется / всего — текущая заполненность диска (15.47 ГБ / 95.90 ГБ).
196		-* Записано / прочитано — накопленный объём I/O с момента старта ОС (например, «записано 500 ГБ за всё время работы»).
	90	+**Информация об аппаратной конфигурации**
197	197
198		-Это не «скорость прямо сейчас», а «сколько всего накопилось к этому моменту».
	92	+{{info}}
	93	+Требуется наличие команд lshw, lsblk, df.
	94	+{{/info}}
199	199
	96	+Также может быть полезна информация и дисках, CPU, памяти и пр. Профилировщик аппаратной информации собирает вывод команд lshw, lsblk и df в простой текстовый файл.
200	200
201		-**На графиках — не абсолют, а разница**
	98	+== {{id name="НЕЙРОССТехобслуживание-Подключенияклиентов"/}}Подключения клиентов ==
202	202
203		-Если отображать абсолютное «записано с момента старта», график будет почти всегда расти вверх — это малоинформативно для мониторинга активности.
	100	+=== {{id name="НЕЙРОССТехобслуживание-Подключениякприложениям"/}}Подключения к приложениям ===
204	204
205		-Поэтому на графиках показывается разница между двумя последовательными семплами:
	102	+Вкладка **Подключения к приложениям** позволяет отследить общее количество подключений по каждому из приложений НЕЙРОСС и отследить каждое текущее подключение. Раздел доступен с версии 20.43 Платформы НЕЙРОСС.
206	206
207		-скорость за интервал = значение сейчас − значение N секунд назад
	104	+[[image:attach:maintenance_connections.png||width="900"]]
208	208
209		-|=Режим|=Интервал|=Что видно на графике
210		-|(((
211		-Живые данные
212		-)))|(((
213		-5 сек (по умолчанию)
214		-)))|(((
215		-Скорость чтения/записи за последние 5 секунд
216		-)))
217		-|(((
218		-Исторические данные
219		-)))|(((
220		-10 мин
221		-)))|(((
222		-Скорость за 10-минутный интервал
223		-)))
	106	+Щелчком левой клавиши мыши по кнопке [[image:attach:ui.Параметры узла.WebHome@fa-uplink.png||thumbnail="true" height="16"]] вы можете просмотреть записи Системного журнала по указанному адресу клиента или по имени пользователя ~[[[doc:ui.Системный журнал.WebHome]]].
224	224
	108	+[[image:attach:maintenance_uplinks.png||thumbnail="true" height="100"]]
225	225
	110	+=== {{id name="НЕЙРОССТехобслуживание-Подключениякмедиаисточникам"/}}Подключения к медиаисточникам ===
226	226
227		-Пример: в 15:00 «записано» = 1000 ГБ, в 15:00:05 = 1000.01 ГБ → на графике будет ~~10 МБ за 5 секунд, а не «1000 ГБ».
	112	+Вкладка** Подключения к медиаисточникам** позволяет отследить нагрузку на каждый из медиаисточников: каждое подключение к «живому» видео камеры. При очень высоком количестве клиентов камера может не успевать обрабатывать запросы и «зависать». По ссылке из графы **Медиаисточник** вы можете просмотреть последние события Системного журнала по данному медиаисточнику. По ссылке из графы **Клиент** вы можете отследить все действия данного клиента. Ссылка на Системный журнал с соответствующими параметрами фильтра открывается в новом окне браузера.
228	228
229		-
	114	+[[image:attach:maintenance_mediaconnections.png||width="900"]]
	115	+
	116	+{{info}}
	117	+**ЗАМЕЧАНИЕ**
	118	+
	119	+Если задана настройка «прямого» подключения к видеорегистратору, минуя сервер-диспетчер, отслеживание подключений необходимо проводить непосредственно на видеорегистраторе. На сервере-диспетчере они не детектируются. Также вы можете отследить подключение к конкретному медиаисточнику непосредственно в окне настройки параметров медиаисточника (вкладка **Подключения**) ~[[[doc:ui.Параметры узла.Медиаисточники.ONVIF-медиаисточники.WebHome]], [[doc:ui.Параметры узла.Медиаисточники.RTSP-медиаисточники.WebHome]] ].
	120	+{{/info}}
	121	+
	122	+\\
	123	+
	124	+== {{id name="НЕЙРОССТехобслуживание-Дампыпроцессов"/}}Дампы процессов ==
	125	+
	126	+Платформа НЕЙРОСС собирает core dump файлы, формирующиеся по факту возникновения критичной проблемы в работе сервера. Файлы содержат отладочную информацию, собранную в момент ошибки. Приложение** Дампы процессов** позволяет:
	127	+
	128	+* Отследить появление таких дампов, уточнить тип дампа, время создания и размер файла;
	129	+* Скачать файл для последующей отправки специалистам компании ИТРИУМ с целью проведения расширенной диагностики: нажмите на кнопку [[image:attach:ui.Параметры узла.WebHome@btn_down.png||thumbnail="true" height="16"]] **Скачать** для сохранения файла в папку загрузок браузера.
	130	+* Удалить файлы после изучения: нажмите на кнопку **[[image:attach:ui.Параметры узла.WebHome@fa-del.png||thumbnail="true" height="16"]]Удалить** для удаления конкретного файла дампа, либо [[image:attach:ui.Параметры узла.WebHome@fa-del.png||thumbnail="true" height="16"]]**Удалить все** для удаления всех файлов..
	131	+
	132	+[[image:attach:maintenance_dumps.png||width="900"]]
	133	+
	134	+{{info}}
	135	+В целях защиты от переполнения системного диска обеспечивается ротация файлов: старые файлы удаляются по мере исчерпания выделенного места (500 Мб).
	136	+{{/info}}
	137	+
	138	+\\
	139	+
	140	+== {{id name="НЕЙРОССТехобслуживание-Примерработыприложения(предыдущаяверсия)"/}}Пример работы приложения (предыдущая версия)(%%) ==
	141	+
	142	+[[~[~[image:attach:ui.Параметры узла.WebHome@btn_lesson.png~|~|thumbnail="true" height="91"~]~]>>url:https://rutube.ru/video/5bc9dde210594cbe336c71664435d5a2/?r=wd||shape="rect"]]
	143	+
	144	+\\
	145	+
	146	+{{code title="Адрес веб-приложения"}}
	147	+/neyross/metrics/
	148	+{{/code}}

maintenance_sys_disks.png

Автор

...	...	@@ -1,1 +1,0 @@
1		-XWiki.admin

Размер

...	...	@@ -1,1 +1,0 @@
1		-28.7 KB

Содержимое

maintenance_sys_wnd.png

Автор

...	...	@@ -1,1 +1,1 @@
1		-XWiki.admin
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,1 +1,1 @@
1		-82.0 KB
	1	+28.5 KB

Содержимое

fa-uplink.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+235 bytes

Содержимое

maintenance_connections.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+44.7 KB

Содержимое

maintenance_diagnostic.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+-1 bytes

Содержимое

maintenance_dumps.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+-1 bytes

Содержимое

maintenance_media.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+-1 bytes

Содержимое

maintenance_mediaconnections.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+-1 bytes

Содержимое

maintenance_uplinks.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+-1 bytes

Содержимое

maintenance_wnd.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+-1 bytes

Содержимое

XWiki.ShortUrlClass[0]

Last known target (debug)

...	...	@@ -1,1 +1,1 @@
1		-ui.НЕЙРОСС Техобслуживание.Системные ресурсы.WebHome
	1	+ui.Параметры узла.Основные параметры.НЕЙРОСС Техобслуживание.WebHome