Изменения документа Мониторинг системных ресурсов

Сводка

• Свойства страницы (3 изменено, 0 добавлено, 0 удалено)
• Вложения (1 изменено, 8 добавлено, 1 удалено)
  • maintenance_sys_disks.png
  • maintenance_sys_wnd.png
  • fa-uplink.png
  • maintenance_connections.png
  • maintenance_diagnostic.png
  • maintenance_dumps.png
  • maintenance_media.png
  • maintenance_mediaconnections.png
  • maintenance_uplinks.png
  • maintenance_wnd.png
• Объекты (1 изменено, 0 добавлено, 0 удалено)
  • XWiki.ShortUrlClass[0]

Подробности

Свойства страницы

Название

...	...	@@ -1,1 +1,1 @@
1		-Мониторинг системных ресурсов
	1	+НЕЙРОСС Техобслуживание

Родительский документ

...	...	@@ -1,1 +1,0 @@
1		-ui.НЕЙРОСС Техобслуживание.WebHome

Содержимое

...	...	@@ -1,203 +1,152 @@
1		-Раздел **Системные ресурсы** приложения [[НЕЙРОСС Техобслуживание>>doc:ui.НЕЙРОСС Техобслуживание.WebHome]] позволяет отслеживать нагрузку на ресурсы сервера: загрузку процессора, использование оперативной памяти и объём сетевого трафика. Вы можете просматривать изменения на графиках в режиме реального времени или переключится в раздел **Исторические**, который позволяет провести ретроспективный анализ по интересующему интервалу времени.
	1	+Приложение **НЕЙРОСС Техобслуживание**(%%) доступно позволяет провести диагностику Платформы НЕЙРОСС и выявить возможные проблемы. Раздел доступен только для узлов [[Платформа НЕЙРОСС>>neyross.WebHome]].
2	2
3	3	{{info}}
4	4	**Переход к функционалу**: [[doc:ui.Рабочий стол НЕЙРОСС.WebHome]] > [[doc:ui.Параметры узла.WebHome]] > [[doc:ui.Параметры узла.Основные параметры.WebHome]] > кнопка Техническое обслуживание ~[[[doc:ui.Рабочий стол НЕЙРОСС.Изменения интерфейса НЕЙРОСС.WebHome]]].
5	5	{{/info}}
6	6
7		-== Общие сведения ==
	7	+[[image:attach:ui.Параметры узла.WebHome@content.png||thumbnail="true" height="10"]] Содержание:
8	8
9		-Раздел **Системные ресурсы** обеспечивает сбор данных как в режиме реального времени (вкладка **Текущие**), так и постфактум (вкладка **Исторические**).
	9	+{{toc/}}
10	10
11		-[[image:attach:maintenance_sys_wnd.png||width="900"]]
	11	+== {{id name="НЕЙРОССТехобслуживание-Общиесведения"/}}Общие сведения ==
12	12
	13	+Платформа НЕЙРОСС предоставляет широкий функционал диагностики использования системных ресурсов, программных метрик, показаний счетчиков и текущих подключений.
13	13
14		-== Нагрузка на процессор (CPU) ==
15	15
16		-|=Метрика|=Описание
17		-|(((
18		-Total
19		-)))|(((
20		-Суммарная нагрузка на процессор, %
21		-)))
22		-|(((
23		-User
24		-)))|(((
25		-Время в пользовательском режиме, %
26		-)))
27		-|(((
28		-Sys
29		-)))|(((
30		-Время в режиме ядра, %
31		-)))
32		-|(((
33		-Wait
34		-)))|(((
35		-Ожидание I/O (I/O wait), %
36		-)))
37		-|(((
38		-Irq, Softirq и др.
39		-)))|(((
40		-Прерывания и прочие категории нагрузки
41		-)))
	16	+Раздел [[#Системные ресурсы>>doc:||anchor="НЕЙРОССТехобслуживание-Системныересурсы"]]
	17	+Позволяет отслеживать нагрузку на ресурсы сервера.
42	42
	19	+Раздел [[#Программные метрики>>doc:||anchor="НЕЙРОССТехобслуживание-Программныеметрики"]]\\
43	43
	21	+Позволяет просмотреть в табличном виде различные метрики, которые Платформа НЕЙРОСС регистрирует и сохраняет в долговременное хранилище различные метрики в унифицированном формате. Также в рамках текущей сессии интересующие метрики могут быть (%%)«вынесены» на дашборд. Состав метрик не фиксирован и будет дополняться. Также можно регистрировать свои метрики для нужд отладки или эксплуатации через скрипты автоматизации и плагины и выполнять их отслеживание. Исторические данные записываются раз в 5 минут и ротируются каждые 5 дней.
44	44
45		-== Использование оперативной памяти (RAM) ==
	23	+Суммарное количество метрик на текущий момент более сотни. Несколько наиболее важных вынесены в специальные разделы с графиками:
46	46
47		-|=Метрика|=Описание
48		-|(((
49		-Используется
50		-)))|(((
51		-Занятая оперативная память (объём и % от общего)
52		-)))
53		-|(((
54		-Всего
55		-)))|(((
56		-Общий объём RAM
57		-)))
58		-|(((
59		-Swap
60		-)))|(((
61		-Использование swap-памяти
62		-)))
63		-|(((
64		-Свободно
65		-)))|(((
66		-Рассчитывается через getActualFree — с учётом кэша и буферов, доступных для использования
67		-)))
	25	+* Полученные, отфильтрованные и отправленные события;
	26	+* Количество, время обработки HTTP-запросов с разделением по статусам ответов;
	27	+* Параметры виртуальной машины Java (потребление памяти, состояние потоков для основных Java-процессов;
	28	+* Показания (текущее значение показателя, например, потребление памяти);
	29	+* Счётчики (меняющееся со временем число, например, количество обработанных событий);
	30	+* Измерения (счётчики с дополнительной статистикой динамики изменения, например, событий в минуту, 5 минут, 15 минут);
	31	+* Таймеры (измерения с дополнительной статистикой времени обработки);
	32	+* Данные диагностики и профилирования.
68	68
	34	+Раздел [[#Диагностика>>doc:||anchor="НЕЙРОССТехобслуживание-Диагностика"]]
69	69
	36	+Диагностика и профилирование работы ПО.
70	70
71		-== Сетевой трафик ==
	38	+Раздел [[#Подключения клиентов>>doc:||anchor="НЕЙРОССТехобслуживание-Подключенияклиентов"]]
72	72
73		-=== Суммарный трафик ===
	40	+Отслеживание общего количества подключений к приложениям НЕЙРОСС и потокам медиаисточников и действий каждого клиента.
74	74
75		-|=Метрика|=Описание
76		-|(((
77		-Трафик (суммарно)
78		-)))|(((
79		-Общая пропускная способность, Мб/с или Кб/с
80		-)))
81		-|(((
82		-RX
83		-)))|(((
84		-Входящий трафик (принято)
85		-)))
86		-|(((
87		-TX
88		-)))|(((
89		-Исходящий трафик (отправлено)
90		-)))
	42	+Раздел [[#Дампы процессов>>doc:||anchor="НЕЙРОССТехобслуживание-Дампыпроцессов"]]
91	91
	44	+При возникновении критичных проблем формируются дампы процессов, которые могут быть отправлены специалистам компании ИТРИУМ для диагностики.
92	92
	46	+== {{id name="НЕЙРОССТехобслуживание-Системныересурсы"/}}Системные ресурсы(%%) ==
93	93
	48	+Раздел **Системные ресурсы** позволяет отслеживать нагрузку на ресурсы сервера: загрузку процессора, использование оперативной памяти и объём сетевого трафика. Вы можете просматривать изменения на графиках в режиме реального времени или переключится в раздел **Исторические**, который позволяет провести ретроспективный анализ по интересующему интервалу времени.
	49	+
	50	+[[image:attach:maintenance_sys_wnd.png||width="900"]]
	51	+
	52	+== {{id name="НЕЙРОССТехобслуживание-Программныеметрики"/}}Программные метрики ==
	53	+
	54	+Раздел **Программные метрики** позволяет отслеживать параметры работы приложений в графическом виде.
	55	+
	56	+[[image:attach:maintenance_wnd.png||width="900"]]
	57	+
	58	+Также предусмотрено большое количество метрик, по которым вы можете отслеживать, в частности, загрузку медиасервера. На примере ниже приведены показатели с фильтром {{code language="none"}}media{{/code}}.
	59	+
	60	+[[image:attach:maintenance_media.png||width="900"]]
	61	+
	62	+== {{id name="НЕЙРОССТехобслуживание-Диагностика"/}}Диагностика ==
	63	+
	64	+Раздел **Диагностика** предоставляет функционал диагностики и профилирования работы ПО и доступен с версии 20.29 Платформы НЕЙРОСС.
	65	+
	66	+[[image:attach:maintenance_diagnostic.png||width="900"]]
	67	+
94	94	{{info}}
95		-В предыдущих версиях доступна только суммарная нагрузка без разбивки.
	69	+Набор профилировщиков будет дополняться.(%%) Каждый из профилировщиков может быть недоступен в зависимости от окружения.
96	96	{{/info}}
97	97
98		-=== Трафик по интерфейсам ===
	72	+**Диагностика сетевых пакетов**
99	99
100		-Для каждого активного интерфейса (кроме lo, docker*, br-*):
	74	+{{info}}
	75	+Требуется утилита tcpdump.
	76	+{{/info}}
101	101
102		-|=Метрика|=Описание
103		-|(((
104		-↓ (RX)
105		-)))|(((
106		-Входящий трафик интерфейса
107		-)))
108		-|(((
109		-↑ (TX)
110		-)))|(((
111		-Исходящий трафик интерфейса
112		-)))
	78	+Профилировщик позволяет задать фильтр профилирования (см. (%%)[[https:~~/~~/docs.netgate.com/pfsense/en/latest/diagnostics/packetcapture/tcpdump.html#tcpdump-filters>>url:https://docs.netgate.com/pfsense/en/latest/diagnostics/packetcapture/tcpdump.html#tcpdump-filters||rel="nofollow" style="" shape="rect" class="external-link"]]) и время, в течение которого трафик всех сетевых интерфейсов будет захватываться в файл в соответствии с фильтром. По результатам работы будет скачан файл формата **PCAP**, пригодный для открытия в Wireshark.
113	113
114		-=== Потери и ошибки по интерфейсам ===
	80	+\\
115	115
116		-|=Метрика|=Описание
117		-|(((
118		-Ошибки приёма / передачи
119		-)))|(((
120		-Количество ошибок (накопленное и скорость, /с)
121		-)))
122		-|(((
123		-Отброшенные пакеты
124		-)))|(((
125		-Dropped packets
126		-)))
127		-|(((
128		-Принятые / отправленные пакеты
129		-)))|(((
130		-Количество пакетов
131		-)))
132		-|(((
133		-Скорость адаптера
134		-)))|(((
135		-Пропускная способность сетевого интерфейса
136		-)))
	82	+**Диагностика JVM**
137	137
138		->Метрики собираются только для интерфейсов, активных на момент старта ПО. В старых семплах трафик отображался как сумма RX + TX без разделения.
	84	+{{info}}
	85	+Требуется утилита jcmd (поставляется вместе с JDK) и возможность её работы с профилировщиком Java Flight Record.
	86	+{{/info}}
139	139
140		-(% class="wikigeneratedid" %)
141		-Обеспечивается сбор следующих данных:
	88	+В составе Платформы НЕЙРОСС работает виртуальная машина Java. Эта виртуальная машина собирает большое количество внутренней информации о своей работе, в том числе о составе и жизненном цикле потоков, характере выделения и освобождения памяти и т. п. Эта информация может играть ключевую роль в диагностике сложных проблем, связанных с утечками памяти \ блокировками потоков \ чрезмерной нагрузке на CPU.
142	142
143		-* Процессор (CPU)
144		-* Использование оперативной памяти (RAM)
145		-* Сетевой трафик (суммарный и по каждому из интерфейсов)
146		-* Потери и ошибки по каждому из интерфейсов
147		-* Состояние TCP-соединений, ошибки и повторные подключения
148		-* Использование дисков (по каждому диску в отдельности)
	90	+По результатам работы будет скачан файл формата JFR. Существует много просмотрщиков данных файлов; наиболее продвинутым является JDK Mission Control ([[https:~~/~~/www.oracle.com/java/technologies/javase/products-jmc8-downloads.html>>url:https://www.oracle.com/java/technologies/javase/products-jmc8-downloads.html||rel="nofollow" style="" shape="rect" class="external-link"]]).
149	149
150		-== Пользовательские инструменты ==
	92	+\\
151	151
152		-С версии 20.52 Платформы НЕЙРОСС/ДеВизор
	94	+**Информация об аппаратной конфигурации**
153	153
154		-== Использование дисков ==
	96	+{{info}}
	97	+Требуется наличие команд lshw, lsblk, df.
	98	+{{/info}}
155	155
156		-С версии 20.51 Платформы НЕЙРОСС/ДеВизор добавлен сбор и отображение в виде графика статистики использования дисков. Доступны данные по системному диску и по всем другим дискам (кроме смонтированных в boot).
	100	+Также может быть полезна информация и дисках, CPU, памяти и пр. Профилировщик аппаратной информации собирает вывод команд lshw, lsblk и df в простой текстовый файл.
157	157
158		-{{warning title="ОГРАНИЧЕНИЕ"}}
159		-В контейнерной среде счётчики текущего чтения и записи недоступны. Линии активности на графиках для метрик «записано» и «прочитано» будут плоскими.
	102	+== {{id name="НЕЙРОССТехобслуживание-Подключенияклиентов"/}}Подключения клиентов ==
160	160
161		-Метрика «используется/всего» в контейнерах работает штатно и позволяет оценить заполненность диска.
162		-{{/warning}}
	104	+=== {{id name="НЕЙРОССТехобслуживание-Подключениякприложениям"/}}Подключения к приложениям ===
163	163
164		-[[image:maintenance_sys_disks.png||height="347" width="900"]]
	106	+Вкладка **Подключения к приложениям** позволяет отследить общее количество подключений по каждому из приложений НЕЙРОСС и отследить каждое текущее подключение. Раздел доступен с версии 20.43 Платформы НЕЙРОСС.
165	165
	108	+[[image:attach:maintenance_connections.png||width="900"]]
166	166
167		-Используется тип метрики Gauge, записывается абсолютное значение в конкретный момент времени (тип метрики Gauge):
	110	+Щелчком левой клавиши мыши по кнопке [[image:attach:ui.Параметры узла.WebHome@fa-uplink.png||thumbnail="true" height="16"]] вы можете просмотреть записи Системного журнала по указанному адресу клиента или по имени пользователя ~[[[doc:ui.Системный журнал.WebHome]]].
168	168
169		-* Используется / всего — текущая заполненность диска (15.47 ГБ / 95.90 ГБ).
170		-* Записано / прочитано — накопленный объём I/O с момента старта ОС (например, «записано 500 ГБ за всё время работы»).
	112	+[[image:attach:maintenance_uplinks.png||thumbnail="true" height="100"]]
171	171
172		-Это не «скорость прямо сейчас», а «сколько всего накопилось к этому моменту».
	114	+=== {{id name="НЕЙРОССТехобслуживание-Подключениякмедиаисточникам"/}}Подключения к медиаисточникам ===
173	173
	116	+Вкладка** Подключения к медиаисточникам** позволяет отследить нагрузку на каждый из медиаисточников: каждое подключение к «живому» видео камеры. При очень высоком количестве клиентов камера может не успевать обрабатывать запросы и «зависать». По ссылке из графы **Медиаисточник** вы можете просмотреть последние события Системного журнала по данному медиаисточнику. По ссылке из графы **Клиент** вы можете отследить все действия данного клиента. Ссылка на Системный журнал с соответствующими параметрами фильтра открывается в новом окне браузера.
174	174
175		-**На графиках — не абсолют, а разница**
	118	+[[image:attach:maintenance_mediaconnections.png||width="900"]]
176	176
177		-Если отображать абсолютное «записано с момента старта», график будет почти всегда расти вверх — это малоинформативно для мониторинга активности.
	120	+{{info}}
	121	+**ЗАМЕЧАНИЕ**
178	178
179		-Поэтому на графиках показывается разница между двумя последовательными семплами:
	123	+Если задана настройка «прямого» подключения к видеорегистратору, минуя сервер-диспетчер, отслеживание подключений необходимо проводить непосредственно на видеорегистраторе. На сервере-диспетчере они не детектируются. Также вы можете отследить подключение к конкретному медиаисточнику непосредственно в окне настройки параметров медиаисточника (вкладка **Подключения**) ~[[[doc:ui.Параметры узла.Медиаисточники.ONVIF-медиаисточники.WebHome]], [[doc:ui.Параметры узла.Медиаисточники.RTSP-медиаисточники.WebHome]] ].
	124	+{{/info}}
180	180
181		-скорость за интервал = значение сейчас − значение N секунд назад
	126	+\\
182	182
183		-|=Режим|=Интервал|=Что видно на графике
184		-|(((
185		-Живые данные
186		-)))|(((
187		-5 сек (по умолчанию)
188		-)))|(((
189		-Скорость чтения/записи за последние 5 секунд
190		-)))
191		-|(((
192		-Исторические данные
193		-)))|(((
194		-10 мин
195		-)))|(((
196		-Скорость за 10-минутный интервал
197		-)))
	128	+== {{id name="НЕЙРОССТехобслуживание-Дампыпроцессов"/}}Дампы процессов ==
198	198
	130	+Платформа НЕЙРОСС собирает core dump файлы, формирующиеся по факту возникновения критичной проблемы в работе сервера. Файлы содержат отладочную информацию, собранную в момент ошибки. Приложение** Дампы процессов** позволяет:
199	199
	132	+* Отследить появление таких дампов, уточнить тип дампа, время создания и размер файла;
	133	+* Скачать файл для последующей отправки специалистам компании ИТРИУМ с целью проведения расширенной диагностики: нажмите на кнопку [[image:attach:ui.Параметры узла.WebHome@btn_down.png||thumbnail="true" height="16"]] **Скачать** для сохранения файла в папку загрузок браузера.
	134	+* Удалить файлы после изучения: нажмите на кнопку **[[image:attach:ui.Параметры узла.WebHome@fa-del.png||thumbnail="true" height="16"]]Удалить** для удаления конкретного файла дампа, либо [[image:attach:ui.Параметры узла.WebHome@fa-del.png||thumbnail="true" height="16"]]**Удалить все** для удаления всех файлов..
200	200
201		-Пример: в 15:00 «записано» = 1000 ГБ, в 15:00:05 = 1000.01 ГБ → на графике будет ~~10 МБ за 5 секунд, а не «1000 ГБ».
	136	+[[image:attach:maintenance_dumps.png||width="900"]]
202	202
203		-
	138	+{{info}}
	139	+В целях защиты от переполнения системного диска обеспечивается ротация файлов: старые файлы удаляются по мере исчерпания выделенного места (500 Мб).
	140	+{{/info}}
	141	+
	142	+\\
	143	+
	144	+== {{id name="НЕЙРОССТехобслуживание-Примерработыприложения(предыдущаяверсия)"/}}Пример работы приложения (предыдущая версия)(%%) ==
	145	+
	146	+[[~[~[image:attach:ui.Параметры узла.WebHome@btn_lesson.png~|~|thumbnail="true" height="91"~]~]>>url:https://rutube.ru/video/5bc9dde210594cbe336c71664435d5a2/?r=wd||shape="rect"]]
	147	+
	148	+\\
	149	+
	150	+{{code title="Адрес веб-приложения"}}
	151	+/neyross/metrics/
	152	+{{/code}}

maintenance_sys_disks.png

Автор

...	...	@@ -1,1 +1,0 @@
1		-XWiki.admin

Размер

...	...	@@ -1,1 +1,0 @@
1		-28.7 KB

Содержимое

maintenance_sys_wnd.png

Автор

...	...	@@ -1,1 +1,1 @@
1		-XWiki.admin
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,1 +1,1 @@
1		-82.0 KB
	1	+28.5 KB

Содержимое

fa-uplink.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+235 bytes

Содержимое

maintenance_connections.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+44.7 KB

Содержимое

maintenance_diagnostic.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+13.2 KB

Содержимое

maintenance_dumps.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+69.3 KB

Содержимое

maintenance_media.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+18.1 KB

Содержимое

maintenance_mediaconnections.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+41.4 KB

Содержимое

maintenance_uplinks.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+7.7 KB

Содержимое

maintenance_wnd.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+80.4 KB

Содержимое

XWiki.ShortUrlClass[0]

Last known target (debug)

...	...	@@ -1,1 +1,1 @@
1		-ui.НЕЙРОСС Техобслуживание.Системные ресурсы.WebHome
	1	+ui.Параметры узла.Основные параметры.НЕЙРОСС Техобслуживание.WebHome