Изменения документа Мониторинг системных ресурсов

Сводка

• Свойства страницы (3 изменено, 0 добавлено, 0 удалено)
• Вложения (1 изменено, 8 добавлено, 3 удалено)
  • maintenance_sys_disks.png
  • maintenance_sys_network.png
  • maintenance_sys_tcp.png
  • maintenance_sys_wnd.png
  • fa-uplink.png
  • maintenance_connections.png
  • maintenance_diagnostic.png
  • maintenance_dumps.png
  • maintenance_media.png
  • maintenance_mediaconnections.png
  • maintenance_uplinks.png
  • maintenance_wnd.png
• Объекты (0 изменено, 0 добавлено, 1 удалено)
  • XWiki.ShortUrlClass[0]

Подробности

Свойства страницы

Название

...	...	@@ -1,1 +1,1 @@
1		-Мониторинг системных ресурсов
	1	+НЕЙРОСС Техобслуживание

Родительский документ

...	...	@@ -1,1 +1,0 @@
1		-ui.НЕЙРОСС Техобслуживание.WebHome

Содержимое

...	...	@@ -1,275 +1,170 @@
1		-Раздел **Системные ресурсы** приложения [[НЕЙРОСС Техобслуживание>>doc:ui.НЕЙРОСС Техобслуживание.WebHome]] позволяет отслеживать нагрузку на ресурсы сервера: загрузку процессора, использование оперативной памяти и объём сетевого трафика. Вы можете просматривать изменения на графиках в режиме реального времени или переключится в раздел **Исторические**, который позволяет провести ретроспективный анализ по интересующему интервалу времени.
	1	+Приложение **НЕЙРОСС Техобслуживание**(%%) доступно позволяет провести диагностику Платформы НЕЙРОСС и выявить возможные проблемы. Раздел доступен только для узлов [[Платформа НЕЙРОСС>>neyross.WebHome]].
2	2
3	3	{{info}}
4	4	**Переход к функционалу**: [[doc:ui.Рабочий стол НЕЙРОСС.WebHome]] > [[doc:ui.Параметры узла.WebHome]] > [[doc:ui.Параметры узла.Основные параметры.WebHome]] > кнопка Техническое обслуживание ~[[[doc:ui.Рабочий стол НЕЙРОСС.Изменения интерфейса НЕЙРОСС.WebHome]]].
5	5	{{/info}}
6	6
7		-== Общие сведения ==
	7	+[[image:attach:ui.Параметры узла.WebHome@content.png||thumbnail="true" height="10"]] Содержание:
8	8
9		-Раздел **Системные ресурсы** обеспечивает сбор данных как в режиме реального времени (вкладка **Текущие**), так и постфактум (вкладка **Исторические**).
	9	+{{toc/}}
10	10
11		-[[image:attach:maintenance_sys_wnd.png||width="900"]]
	11	+== {{id name="НЕЙРОССТехобслуживание-Общиесведения"/}}Общие сведения ==
12	12
	13	+Платформа НЕЙРОСС предоставляет широкий функционал диагностики использования системных ресурсов, программных метрик, показаний счетчиков и текущих подключений.
13	13
14		-== Нагрузка на процессор (CPU) ==
	15	+\\
15	15
16		-|=Метрика|=Описание
17		-|(((
18		-Total
19		-)))|(((
20		-Суммарная нагрузка на процессор, %
21		-)))
22		-|(((
23		-User
24		-)))|(((
25		-Время в пользовательском режиме, %
26		-)))
27		-|(((
28		-Sys
29		-)))|(((
30		-Время в режиме ядра, %
31		-)))
32		-|(((
33		-Wait
34		-)))|(((
35		-Ожидание I/O (I/O wait), %
36		-)))
37		-|(((
38		-Irq, Softirq и др.
39		-)))|(((
40		-Прерывания и прочие категории нагрузки
41		-)))
	17	+Раздел [[#Системные ресурсы>>doc:||anchor="НЕЙРОССТехобслуживание-Системныересурсы"]]
	18	+Позволяет отслеживать нагрузку на ресурсы сервера
	19	+\\
42	42
43		-{{info}}
44		-В предыдущих версиях доступна только суммарная нагрузка без разбивки.
45		-{{/info}}
	21	+Раздел [[#Программные метрики>>doc:||anchor="НЕЙРОССТехобслуживание-Программныеметрики"]]\\
46	46
47		-== Использование оперативной памяти (RAM) ==
	23	+Позволяет просмотреть в табличном виде различные метрики, которые Платформа НЕЙРОСС регистрирует и сохраняет в долговременное хранилище различные метрики в унифицированном формате. Также в рамках текущей сессии интересующие метрики могут быть (%%)«вынесены» на дашборд. Состав метрик не фиксирован и будет дополняться. Также можно регистрировать свои метрики для нужд отладки или эксплуатации через скрипты автоматизации и плагины и выполнять их отслеживание. Исторические данные записываются раз в 5 минут и ротируются каждые 5 дней.
48	48
49		-|=Метрика|=Описание
50		-|(((
51		-Используется
52		-)))|(((
53		-Занятая оперативная память (объём и % от общего)
54		-)))
55		-|(((
56		-Всего
57		-)))|(((
58		-Общий объём RAM
59		-)))
60		-|(((
61		-Swap
62		-)))|(((
63		-Использование swap-памяти
64		-)))
65		-|(((
66		-Свободно
67		-)))|(((
68		-Рассчитывается через getActualFree — с учётом кэша и буферов, доступных для использования
69		-)))
	25	+Суммарное количество метрик на текущий момент более сотни. Несколько наиболее важных вынесены в специальные разделы с графиками:
70	70
	27	+* Полученные, отфильтрованные и отправленные события;
	28	+* Количество, время обработки HTTP-запросов с разделением по статусам ответов;
	29	+* Параметры виртуальной машины Java (потребление памяти, состояние потоков для основных Java-процессов;
	30	+* Показания (текущее значение показателя, например, потребление памяти);
	31	+* Счётчики (меняющееся со временем число, например, количество обработанных событий);
	32	+* Измерения (счётчики с дополнительной статистикой динамики изменения, например, событий в минуту, 5 минут, 15 минут);
	33	+* Таймеры (измерения с дополнительной статистикой времени обработки);
	34	+* Данные диагностики и профилирования.
71	71
	36	+\\
72	72
73		-== Сетевой трафик ==
	38	+Раздел [[#Диагностика>>doc:||anchor="НЕЙРОССТехобслуживание-Диагностика"]]
74	74
75		-[[image:maintenance_sys_network.png||height="567" width="700"]]
	40	+Диагностика и профилирование работы ПО.
76	76
77		-(% class="wikigeneratedid" id="H42144343C43C43044043D44B43944244043044443843A" %)
78		-**Суммарный трафик**
	42	+\\
79	79
80		-|=Метрика|=Описание
81		-|(((
82		-Трафик (суммарно)
83		-)))|(((
84		-Общая пропускная способность, Мб/с или Кб/с
85		-)))
86		-|(((
87		-RX
88		-)))|(((
89		-Входящий трафик (принято)
90		-)))
91		-|(((
92		-TX
93		-)))|(((
94		-Исходящий трафик (отправлено)
95		-)))
	44	+Раздел [[#Подключения клиентов>>doc:||anchor="НЕЙРОССТехобслуживание-Подключенияклиентов"]]
96	96
	46	+Отслеживание общего количества подключений к приложениям НЕЙРОСС и потокам медиаисточников и действий каждого клиента.
97	97
	48	+\\
98	98
99		-**Трафик по интерфейсам**
	50	+Раздел [[#Дампы процессов>>doc:||anchor="НЕЙРОССТехобслуживание-Дампыпроцессов"]]
100	100
101		-Для каждого активного интерфейса (кроме lo, docker*, br-*):
	52	+При возникновении критичных проблем формируются дампы процессов, которые могут быть отправлены специалистам компании ИТРИУМ для диагностики.
102	102
103		-|=Метрика|=Описание
104		-|(((
105		-↓ (RX)
106		-)))|(((
107		-Входящий трафик интерфейса
108		-)))
109		-|(((
110		-↑ (TX)
111		-)))|(((
112		-Исходящий трафик интерфейса
113		-)))
	54	+== {{id name="НЕЙРОССТехобслуживание-Системныересурсы"/}}Системные ресурсы(%%) ==
114	114
	56	+Раздел **Системные ресурсы** позволяет отслеживать нагрузку на ресурсы сервера: загрузку процессора, использование оперативной памяти и объём сетевого трафика. Вы можете просматривать изменения на графиках в режиме реального времени или переключится в раздел **Исторические**, который позволяет провести ретроспективный анализ по интересующему интервалу времени.
115	115
	58	+[[image:attach:maintenance_sys_wnd.png||width="900"]]
116	116
117		-(% class="wikigeneratedid" id="H41F43E44243544043843843E44843843143A43843F43E43843D44243544044443543944143043C" %)
118		-**Потери и ошибки по интерфейсам**
	60	+\\
119	119
120		-|=Метрика|=Описание
121		-|(((
122		-Ошибки приёма / передачи
123		-)))|(((
124		-Количество ошибок (накопленное и скорость, /с)
125		-)))
126		-|(((
127		-Отброшенные пакеты
128		-)))|(((
129		-Dropped packets
130		-)))
131		-|(((
132		-Принятые / отправленные пакеты
133		-)))|(((
134		-Количество пакетов
135		-)))
136		-|(((
137		-Скорость адаптера
138		-)))|(((
139		-Пропускная способность сетевого интерфейса
140		-)))
	62	+== {{id name="НЕЙРОССТехобслуживание-Программныеметрики"/}}Программные метрики ==
141	141
	64	+Раздел **Программные метрики** позволяет отслеживать параметры работы приложений в графическом виде.
142	142
	66	+[[image:attach:maintenance_wnd.png||width="900"]]
143	143
	68	+\\
	69	+
	70	+Также предусмотрено большое количество метрик, по которым вы можете отслеживать, в частности, загрузку медиасервера. На примере ниже приведены показатели с фильтром {{code language="none"}}media{{/code}}.
	71	+
	72	+[[image:attach:maintenance_media.png||width="900"]]
	73	+
	74	+\\
	75	+
	76	+== {{id name="НЕЙРОССТехобслуживание-Диагностика"/}}Диагностика ==
	77	+
	78	+Раздел **Диагностика** предоставляет функционал диагностики и профилирования работы ПО и доступен с версии 20.29 Платформы НЕЙРОСС.
	79	+
	80	+[[image:attach:maintenance_diagnostic.png||width="900"]]
	81	+
144	144	{{info}}
145		-Метрики собираются только для интерфейсов, активных на момент старта ПО. В предыдущих версиях трафик отображался как сумма RX + TX без разделения.
	83	+Набор профилировщиков будет дополняться.(%%) Каждый из профилировщиков может быть недоступен в зависимости от окружения.
146	146	{{/info}}
147	147
148		-== ТСР-соединения ==
	86	+\\
149	149
150		-[[image:maintenance_sys_tcp.png||height="223" width="700"]]
	88	+{{excerpt atlassian-macro-output-type="INLINE"}}
	89	+**Диагностика сетевых пакетов**
151	151
	91	+{{info}}
	92	+Требуется утилита tcpdump.
	93	+{{/info}}
152	152
153		-**Состояние соединений**
	95	+Профилировщик позволяет задать фильтр профилирования (см. (%%)[[https:~~/~~/docs.netgate.com/pfsense/en/latest/diagnostics/packetcapture/tcpdump.html#tcpdump-filters>>url:https://docs.netgate.com/pfsense/en/latest/diagnostics/packetcapture/tcpdump.html#tcpdump-filters||rel="nofollow" style="" shape="rect" class="external-link"]]) и время, в течение которого трафик всех сетевых интерфейсов будет захватываться в файл в соответствии с фильтром. По результатам работы будет скачан файл формата **PCAP**, пригодный для открытия в Wireshark.
154	154
155		-|=Метрика|=Описание
156		-|(((
157		-Established
158		-)))|(((
159		-Активные установленные соединения
160		-)))
161		-|(((
162		-Listen
163		-)))|(((
164		-Сокеты в состоянии ожидания подключений
165		-)))
166		-|(((
167		-Time wait
168		-)))|(((
169		-Соединения в состоянии TIME_WAIT
170		-)))
	97	+\\
171	171
	99	+**Диагностика JVM**
172	172
	101	+{{info}}
	102	+Требуется утилита jcmd (поставляется вместе с JDK) и возможность её работы с профилировщиком Java Flight Record.
	103	+{{/info}}
173	173
174		-**Ошибки и повторы**
	105	+В составе Платформы НЕЙРОСС работает виртуальная машина Java. Эта виртуальная машина собирает большое количество внутренней информации о своей работе, в том числе о составе и жизненном цикле потоков, характере выделения и освобождения памяти и т. п. Эта информация может играть ключевую роль в диагностике сложных проблем, связанных с утечками памяти \ блокировками потоков \ чрезмерной нагрузке на CPU.
175	175
176		-|=Метрика|=Описание
177		-|(((
178		-Retrans
179		-)))|(((
180		-Повторные отправки TCP-сегментов (накопленное и /с)
181		-)))
182		-|(((
183		-Attempt fails
184		-)))|(((
185		-Неудачные попытки установки соединения
186		-)))
187		-|(((
188		-Estab resets
189		-)))|(((
190		-Сбросы установленных соединений
191		-)))
192		-|(((
193		-In errors
194		-)))|(((
195		-Ошибки входящих TCP-сегментов
196		-)))
	107	+По результатам работы будет скачан файл формата JFR. Существует много просмотрщиков данных файлов; наиболее продвинутым является JDK Mission Control ([[https:~~/~~/www.oracle.com/java/technologies/javase/products-jmc8-downloads.html>>url:https://www.oracle.com/java/technologies/javase/products-jmc8-downloads.html||rel="nofollow" style="" shape="rect" class="external-link"]]).
197	197
198		-== Использование дисков ==
	109	+\\
199	199
200		-Cбор и отображение в виде графика статистики использования дисков добавлен с версии 20.51 Платформы НЕЙРОСС/ДеВизор. Доступны данные по системному диску и по всем другим дискам (кроме смонтированных в boot).
	111	+**Информация об аппаратной конфигурации**
201	201
202		-{{warning title="ОГРАНИЧЕНИЕ"}}
203		-В контейнерной среде счётчики текущего чтения и записи недоступны. Линии активности на графиках для метрик «записано» и «прочитано» будут плоскими.
	113	+{{info}}
	114	+Требуется наличие команд lshw, lsblk, df.
	115	+{{/info}}
204	204
205		-Метрика «используется/всего» в контейнерах работает штатно и позволяет оценить заполненность диска.
206		-{{/warning}}
	117	+Также может быть полезна информация и дисках, CPU, памяти и пр. Профилировщик аппаратной информации собирает вывод команд lshw, lsblk и df в простой текстовый файл.
	118	+{{/excerpt}}
207	207
208		-[[image:maintenance_sys_disks.png||height="347" width="900"]]
	120	+== {{id name="НЕЙРОССТехобслуживание-Подключенияклиентов"/}}Подключения клиентов ==
209	209
210		-|=Метрика|=Описание
211		-|(((
212		-Используется / всего
213		-)))|(((
214		-Занятое и общее пространство, % заполнения
215		-)))
216		-|(((
217		-Чтение
218		-)))|(((
219		-Скорость чтения (на графике — разница между семплами абсолютного значения с момента старта ОС)
220		-)))
221		-|(((
222		-Запись
223		-)))|(((
224		-Скорость записи (аналогично)
225		-)))
226		-|(((
227		-Задержка (service time)
228		-)))|(((
229		-Время обслуживания дисковых операций
230		-)))
231		-|(((
232		-Inode
233		-)))|(((
234		-Статистика по inode (при наличии)
235		-)))
	122	+=== {{id name="НЕЙРОССТехобслуживание-Подключениякприложениям"/}}Подключения к приложениям ===
236	236
	124	+Вкладка **Подключения к приложениям** позволяет отследить общее количество подключений по каждому из приложений НЕЙРОСС и отследить каждое текущее подключение. Раздел доступен с версии 20.43 Платформы НЕЙРОСС.
237	237
	126	+[[image:attach:maintenance_connections.png||width="900"]]
238	238
239		-Используется тип метрики Gauge, записывается абсолютное значение в конкретный момент времени (тип метрики Gauge):
	128	+Щелчком левой клавиши мыши по кнопке [[image:attach:ui.Параметры узла.WebHome@fa-uplink.png||thumbnail="true" height="16"]] вы можете просмотреть записи Системного журнала по указанному адресу клиента или по имени пользователя ~[[[doc:ui.Системный журнал.WebHome]]].
240	240
241		-* Используется / всего — текущая заполненность диска (15.47 ГБ / 95.90 ГБ).
242		-* Записано / прочитано — накопленный объём I/O с момента старта ОС (например, «записано 500 ГБ за всё время работы»).
	130	+[[image:attach:maintenance_uplinks.png||thumbnail="true" height="100"]]
243	243
244		-Это не «скорость прямо сейчас», а «сколько всего накопилось к этому моменту».
	132	+=== {{id name="НЕЙРОССТехобслуживание-Подключениякмедиаисточникам"/}}Подключения к медиаисточникам ===
245	245
	134	+Вкладка** Подключения к медиаисточникам** позволяет отследить нагрузку на каждый из медиаисточников: каждое подключение к «живому» видео камеры. При очень высоком количестве клиентов камера может не успевать обрабатывать запросы и «зависать». По ссылке из графы **Медиаисточник** вы можете просмотреть последние события Системного журнала по данному медиаисточнику. По ссылке из графы **Клиент** вы можете отследить все действия данного клиента. Ссылка на Системный журнал с соответствующими параметрами фильтра открывается в новом окне браузера.
246	246
247		-**На графиках — не абсолют, а разница**
	136	+[[image:attach:maintenance_mediaconnections.png||width="900"]]
248	248
249		-Если отображать абсолютное «записано с момента старта», график будет почти всегда расти вверх — это малоинформативно для мониторинга активности.
	138	+{{info}}
	139	+**ЗАМЕЧАНИЕ**
250	250
251		-Поэтому на графиках показывается разница между двумя последовательными семплами:
	141	+Если задана настройка «прямого» подключения к видеорегистратору, минуя сервер-диспетчер, отслеживание подключений необходимо проводить непосредственно на видеорегистраторе. На сервере-диспетчере они не детектируются. Также вы можете отследить подключение к конкретному медиаисточнику непосредственно в окне настройки параметров медиаисточника (вкладка **Подключения**) ~[[[doc:ui.Параметры узла.Медиаисточники.ONVIF-медиаисточники.WebHome]], [[doc:ui.Параметры узла.Медиаисточники.RTSP-медиаисточники.WebHome]] ].
	142	+{{/info}}
252	252
253		-скорость за интервал = значение сейчас − значение N секунд назад
	144	+\\
254	254
255		-|=Режим|=Интервал|=Что видно на графике
256		-|(((
257		-Живые данные
258		-)))|(((
259		-5 сек (по умолчанию)
260		-)))|(((
261		-Скорость чтения/записи за последние 5 секунд
262		-)))
263		-|(((
264		-Исторические данные
265		-)))|(((
266		-10 мин
267		-)))|(((
268		-Скорость за 10-минутный интервал
269		-)))
	146	+== {{id name="НЕЙРОССТехобслуживание-Дампыпроцессов"/}}Дампы процессов ==
270	270
	148	+Платформа НЕЙРОСС собирает core dump файлы, формирующиеся по факту возникновения критичной проблемы в работе сервера. Файлы содержат отладочную информацию, собранную в момент ошибки. Приложение** Дампы процессов** позволяет:
271	271
	150	+* Отследить появление таких дампов, уточнить тип дампа, время создания и размер файла;
	151	+* Скачать файл для последующей отправки специалистам компании ИТРИУМ с целью проведения расширенной диагностики: нажмите на кнопку [[image:attach:ui.Параметры узла.WebHome@btn_down.png||thumbnail="true" height="16"]] **Скачать** для сохранения файла в папку загрузок браузера.
	152	+* Удалить файлы после изучения: нажмите на кнопку **[[image:attach:ui.Параметры узла.WebHome@fa-del.png||thumbnail="true" height="16"]]Удалить** для удаления конкретного файла дампа, либо [[image:attach:ui.Параметры узла.WebHome@fa-del.png||thumbnail="true" height="16"]]**Удалить все** для удаления всех файлов..
272	272
273		-Пример: в 15:00 «записано» = 1000 ГБ, в 15:00:05 = 1000.01 ГБ → на графике будет ~~10 МБ за 5 секунд, а не «1000 ГБ».
	154	+[[image:attach:maintenance_dumps.png||width="900"]]
274	274
275		-
	156	+{{info}}
	157	+В целях защиты от переполнения системного диска обеспечивается ротация файлов: старые файлы удаляются по мере исчерпания выделенного места (500 Мб).
	158	+{{/info}}
	159	+
	160	+\\
	161	+
	162	+== {{id name="НЕЙРОССТехобслуживание-Примерработыприложения(предыдущаяверсия)"/}}Пример работы приложения (предыдущая версия)(%%) ==
	163	+
	164	+[[~[~[image:attach:ui.Параметры узла.WebHome@btn_lesson.png~|~|thumbnail="true" height="91"~]~]>>url:https://rutube.ru/video/5bc9dde210594cbe336c71664435d5a2/?r=wd||shape="rect"]]
	165	+
	166	+\\
	167	+
	168	+{{code title="Адрес веб-приложения"}}
	169	+/neyross/metrics/
	170	+{{/code}}

maintenance_sys_disks.png

Автор

...	...	@@ -1,1 +1,0 @@
1		-XWiki.admin

Размер

...	...	@@ -1,1 +1,0 @@
1		-28.7 KB

Содержимое

maintenance_sys_network.png

Автор

...	...	@@ -1,1 +1,0 @@
1		-XWiki.admin

Размер

...	...	@@ -1,1 +1,0 @@
1		-28.5 KB

Содержимое

maintenance_sys_tcp.png

Автор

...	...	@@ -1,1 +1,0 @@
1		-XWiki.admin

Размер

...	...	@@ -1,1 +1,0 @@
1		-19.4 KB

Содержимое

maintenance_sys_wnd.png

Автор

...	...	@@ -1,1 +1,1 @@
1		-XWiki.admin
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,1 +1,1 @@
1		-34.8 KB
	1	+28.5 KB

Содержимое

fa-uplink.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+235 bytes

Содержимое

maintenance_connections.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+44.7 KB

Содержимое

maintenance_diagnostic.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+13.2 KB

Содержимое

maintenance_dumps.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+69.3 KB

Содержимое

maintenance_media.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+18.1 KB

Содержимое

maintenance_mediaconnections.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+41.4 KB

Содержимое

maintenance_uplinks.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+7.7 KB

Содержимое

maintenance_wnd.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+80.4 KB

Содержимое

XWiki.ShortUrlClass[0]

Short URL code

...	...	@@ -1,1 +1,0 @@
1		-ba45a

Last known target (debug)

...	...	@@ -1,1 +1,0 @@
1		-ui.НЕЙРОСС Техобслуживание.Системные ресурсы.WebHome