Изменения документа Мониторинг системных ресурсов

Сводка

• Свойства страницы (3 изменено, 0 добавлено, 0 удалено)
• Вложения (1 изменено, 8 добавлено, 1 удалено)
  • maintenance_sys_disks.png
  • maintenance_sys_wnd.png
  • fa-uplink.png
  • maintenance_connections.png
  • maintenance_diagnostic.png
  • maintenance_dumps.png
  • maintenance_media.png
  • maintenance_mediaconnections.png
  • maintenance_uplinks.png
  • maintenance_wnd.png
• Объекты (1 изменено, 0 добавлено, 0 удалено)
  • XWiki.ShortUrlClass[0]

Подробности

Свойства страницы

Название

...	...	@@ -1,1 +1,1 @@
1		-Мониторинг системных ресурсов
	1	+НЕЙРОСС Техобслуживание

Родительский документ

...	...	@@ -1,1 +1,0 @@
1		-ui.НЕЙРОСС Техобслуживание.WebHome

Содержимое

...	...	@@ -1,232 +1,152 @@
1		-Раздел **Системные ресурсы** приложения [[НЕЙРОСС Техобслуживание>>doc:ui.НЕЙРОСС Техобслуживание.WebHome]] позволяет отслеживать нагрузку на ресурсы сервера: загрузку процессора, использование оперативной памяти и объём сетевого трафика. Вы можете просматривать изменения на графиках в режиме реального времени или переключится в раздел **Исторические**, который позволяет провести ретроспективный анализ по интересующему интервалу времени.
	1	+Приложение **НЕЙРОСС Техобслуживание**(%%) доступно позволяет провести диагностику Платформы НЕЙРОСС и выявить возможные проблемы. Раздел доступен только для узлов [[Платформа НЕЙРОСС>>neyross.WebHome]].
2	2
3	3	{{info}}
4	4	**Переход к функционалу**: [[doc:ui.Рабочий стол НЕЙРОСС.WebHome]] > [[doc:ui.Параметры узла.WebHome]] > [[doc:ui.Параметры узла.Основные параметры.WebHome]] > кнопка Техническое обслуживание ~[[[doc:ui.Рабочий стол НЕЙРОСС.Изменения интерфейса НЕЙРОСС.WebHome]]].
5	5	{{/info}}
6	6
7		-== Общие сведения ==
	7	+[[image:attach:ui.Параметры узла.WebHome@content.png||thumbnail="true" height="10"]] Содержание:
8	8
9		-Раздел **Системные ресурсы** обеспечивает сбор данных как в режиме реального времени (вкладка **Текущие**), так и постфактум (вкладка **Исторические**).
	9	+{{toc/}}
10	10
11		-[[image:attach:maintenance_sys_wnd.png||width="900"]]
	11	+== {{id name="НЕЙРОССТехобслуживание-Общиесведения"/}}Общие сведения ==
12	12
	13	+Платформа НЕЙРОСС предоставляет широкий функционал диагностики использования системных ресурсов, программных метрик, показаний счетчиков и текущих подключений.
13	13
14		-== Нагрузка на процессор (CPU) ==
15	15
16		-|=Метрика|=Описание
17		-|(((
18		-Total
19		-)))|(((
20		-Суммарная нагрузка на процессор, %
21		-)))
22		-|(((
23		-User
24		-)))|(((
25		-Время в пользовательском режиме, %
26		-)))
27		-|(((
28		-Sys
29		-)))|(((
30		-Время в режиме ядра, %
31		-)))
32		-|(((
33		-Wait
34		-)))|(((
35		-Ожидание I/O (I/O wait), %
36		-)))
37		-|(((
38		-Irq, Softirq и др.
39		-)))|(((
40		-Прерывания и прочие категории нагрузки
41		-)))
	16	+Раздел [[#Системные ресурсы>>doc:||anchor="НЕЙРОССТехобслуживание-Системныересурсы"]]
	17	+Позволяет отслеживать нагрузку на ресурсы сервера.
42	42
43		-{{info}}
44		-В предыдущих версиях доступна только суммарная нагрузка без разбивки.
45		-{{/info}}
	19	+Раздел [[#Программные метрики>>doc:||anchor="НЕЙРОССТехобслуживание-Программныеметрики"]]\\
46	46
47		-== Использование оперативной памяти (RAM) ==
	21	+Позволяет просмотреть в табличном виде различные метрики, которые Платформа НЕЙРОСС регистрирует и сохраняет в долговременное хранилище различные метрики в унифицированном формате. Также в рамках текущей сессии интересующие метрики могут быть (%%)«вынесены» на дашборд. Состав метрик не фиксирован и будет дополняться. Также можно регистрировать свои метрики для нужд отладки или эксплуатации через скрипты автоматизации и плагины и выполнять их отслеживание. Исторические данные записываются раз в 5 минут и ротируются каждые 5 дней.
48	48
49		-|=Метрика|=Описание
50		-|(((
51		-Используется
52		-)))|(((
53		-Занятая оперативная память (объём и % от общего)
54		-)))
55		-|(((
56		-Всего
57		-)))|(((
58		-Общий объём RAM
59		-)))
60		-|(((
61		-Swap
62		-)))|(((
63		-Использование swap-памяти
64		-)))
65		-|(((
66		-Свободно
67		-)))|(((
68		-Рассчитывается через getActualFree — с учётом кэша и буферов, доступных для использования
69		-)))
	23	+Суммарное количество метрик на текущий момент более сотни. Несколько наиболее важных вынесены в специальные разделы с графиками:
70	70
	25	+* Полученные, отфильтрованные и отправленные события;
	26	+* Количество, время обработки HTTP-запросов с разделением по статусам ответов;
	27	+* Параметры виртуальной машины Java (потребление памяти, состояние потоков для основных Java-процессов;
	28	+* Показания (текущее значение показателя, например, потребление памяти);
	29	+* Счётчики (меняющееся со временем число, например, количество обработанных событий);
	30	+* Измерения (счётчики с дополнительной статистикой динамики изменения, например, событий в минуту, 5 минут, 15 минут);
	31	+* Таймеры (измерения с дополнительной статистикой времени обработки);
	32	+* Данные диагностики и профилирования.
71	71
	34	+Раздел [[#Диагностика>>doc:||anchor="НЕЙРОССТехобслуживание-Диагностика"]]
72	72
73		-== Сетевой трафик ==
	36	+Диагностика и профилирование работы ПО.
74	74
75		-=== Суммарный трафик ===
	38	+Раздел [[#Подключения клиентов>>doc:||anchor="НЕЙРОССТехобслуживание-Подключенияклиентов"]]
76	76
77		-|=Метрика|=Описание
78		-|(((
79		-Трафик (суммарно)
80		-)))|(((
81		-Общая пропускная способность, Мб/с или Кб/с
82		-)))
83		-|(((
84		-RX
85		-)))|(((
86		-Входящий трафик (принято)
87		-)))
88		-|(((
89		-TX
90		-)))|(((
91		-Исходящий трафик (отправлено)
92		-)))
	40	+Отслеживание общего количества подключений к приложениям НЕЙРОСС и потокам медиаисточников и действий каждого клиента.
93	93
94		-Трафик по интерфейсам
	42	+Раздел [[#Дампы процессов>>doc:||anchor="НЕЙРОССТехобслуживание-Дампыпроцессов"]]
95	95
96		-Для каждого активного интерфейса (кроме lo, docker*, br-*):
	44	+При возникновении критичных проблем формируются дампы процессов, которые могут быть отправлены специалистам компании ИТРИУМ для диагностики.
97	97
98		-|=Метрика|=Описание
99		-|(((
100		-↓ (RX)
101		-)))|(((
102		-Входящий трафик интерфейса
103		-)))
104		-|(((
105		-↑ (TX)
106		-)))|(((
107		-Исходящий трафик интерфейса
108		-)))
	46	+== {{id name="НЕЙРОССТехобслуживание-Системныересурсы"/}}Системные ресурсы(%%) ==
109	109
110		-=== Потери и ошибки по интерфейсам ===
	48	+Раздел **Системные ресурсы** позволяет отслеживать нагрузку на ресурсы сервера: загрузку процессора, использование оперативной памяти и объём сетевого трафика. Вы можете просматривать изменения на графиках в режиме реального времени или переключится в раздел **Исторические**, который позволяет провести ретроспективный анализ по интересующему интервалу времени.
111	111
112		-|=Метрика|=Описание
113		-|(((
114		-Ошибки приёма / передачи
115		-)))|(((
116		-Количество ошибок (накопленное и скорость, /с)
117		-)))
118		-|(((
119		-Отброшенные пакеты
120		-)))|(((
121		-Dropped packets
122		-)))
123		-|(((
124		-Принятые / отправленные пакеты
125		-)))|(((
126		-Количество пакетов
127		-)))
128		-|(((
129		-Скорость адаптера
130		-)))|(((
131		-Пропускная способность сетевого интерфейса
132		-)))
	50	+[[image:attach:maintenance_sys_wnd.png||width="900"]]
133	133
	52	+== {{id name="НЕЙРОССТехобслуживание-Программныеметрики"/}}Программные метрики ==
134	134
	54	+Раздел **Программные метрики** позволяет отслеживать параметры работы приложений в графическом виде.
135	135
	56	+[[image:attach:maintenance_wnd.png||width="900"]]
	57	+
	58	+Также предусмотрено большое количество метрик, по которым вы можете отслеживать, в частности, загрузку медиасервера. На примере ниже приведены показатели с фильтром {{code language="none"}}media{{/code}}.
	59	+
	60	+[[image:attach:maintenance_media.png||width="900"]]
	61	+
	62	+== {{id name="НЕЙРОССТехобслуживание-Диагностика"/}}Диагностика ==
	63	+
	64	+Раздел **Диагностика** предоставляет функционал диагностики и профилирования работы ПО и доступен с версии 20.29 Платформы НЕЙРОСС.
	65	+
	66	+[[image:attach:maintenance_diagnostic.png||width="900"]]
	67	+
136	136	{{info}}
137		-Метрики собираются только для интерфейсов, активных на момент старта ПО. В предыдущих версиях трафик отображался как сумма RX + TX без разделения.
	69	+Набор профилировщиков будет дополняться.(%%) Каждый из профилировщиков может быть недоступен в зависимости от окружения.
138	138	{{/info}}
139	139
	72	+**Диагностика сетевых пакетов**
140	140
141		-(% class="wikigeneratedid" %)
142		-Обеспечивается сбор следующих данных:
	74	+{{info}}
	75	+Требуется утилита tcpdump.
	76	+{{/info}}
143	143
144		-* Процессор (CPU)
145		-* Использование оперативной памяти (RAM)
146		-* Сетевой трафик (суммарный и по каждому из интерфейсов)
147		-* Потери и ошибки по каждому из интерфейсов
148		-* Состояние TCP-соединений, ошибки и повторные подключения
149		-* Использование дисков (по каждому диску в отдельности)
	78	+Профилировщик позволяет задать фильтр профилирования (см. (%%)[[https:~~/~~/docs.netgate.com/pfsense/en/latest/diagnostics/packetcapture/tcpdump.html#tcpdump-filters>>url:https://docs.netgate.com/pfsense/en/latest/diagnostics/packetcapture/tcpdump.html#tcpdump-filters||rel="nofollow" style="" shape="rect" class="external-link"]]) и время, в течение которого трафик всех сетевых интерфейсов будет захватываться в файл в соответствии с фильтром. По результатам работы будет скачан файл формата **PCAP**, пригодный для открытия в Wireshark.
150	150
151		-== Пользовательские инструменты ==
	80	+\\
152	152
153		-С версии 20.52 Платформы НЕЙРОСС/ДеВизор
	82	+**Диагностика JVM**
154	154
155		-== Использование дисков ==
	84	+{{info}}
	85	+Требуется утилита jcmd (поставляется вместе с JDK) и возможность её работы с профилировщиком Java Flight Record.
	86	+{{/info}}
156	156
157		-С версии 20.51 Платформы НЕЙРОСС/ДеВизор добавлен сбор и отображение в виде графика статистики использования дисков. Доступны данные по системному диску и по всем другим дискам (кроме смонтированных в boot).
	88	+В составе Платформы НЕЙРОСС работает виртуальная машина Java. Эта виртуальная машина собирает большое количество внутренней информации о своей работе, в том числе о составе и жизненном цикле потоков, характере выделения и освобождения памяти и т. п. Эта информация может играть ключевую роль в диагностике сложных проблем, связанных с утечками памяти \ блокировками потоков \ чрезмерной нагрузке на CPU.
158	158
159		-{{warning title="ОГРАНИЧЕНИЕ"}}
160		-В контейнерной среде счётчики текущего чтения и записи недоступны. Линии активности на графиках для метрик «записано» и «прочитано» будут плоскими.
	90	+По результатам работы будет скачан файл формата JFR. Существует много просмотрщиков данных файлов; наиболее продвинутым является JDK Mission Control ([[https:~~/~~/www.oracle.com/java/technologies/javase/products-jmc8-downloads.html>>url:https://www.oracle.com/java/technologies/javase/products-jmc8-downloads.html||rel="nofollow" style="" shape="rect" class="external-link"]]).
161	161
162		-Метрика «используется/всего» в контейнерах работает штатно и позволяет оценить заполненность диска.
163		-{{/warning}}
	92	+\\
164	164
165		-[[image:maintenance_sys_disks.png||height="347" width="900"]]
	94	+**Информация об аппаратной конфигурации**
166	166
167		-|=Метрика|=Описание
168		-|(((
169		-Используется / всего
170		-)))|(((
171		-Занятое и общее пространство, % заполнения
172		-)))
173		-|(((
174		-Чтение
175		-)))|(((
176		-Скорость чтения (на графике — разница между семплами абсолютного значения с момента старта ОС)
177		-)))
178		-|(((
179		-Запись
180		-)))|(((
181		-Скорость записи (аналогично)
182		-)))
183		-|(((
184		-Задержка (service time)
185		-)))|(((
186		-Время обслуживания дисковых операций
187		-)))
188		-|(((
189		-Inode
190		-)))|(((
191		-Статистика по inode (при наличии)
192		-)))
	96	+{{info}}
	97	+Требуется наличие команд lshw, lsblk, df.
	98	+{{/info}}
193	193
	100	+Также может быть полезна информация и дисках, CPU, памяти и пр. Профилировщик аппаратной информации собирает вывод команд lshw, lsblk и df в простой текстовый файл.
194	194
	102	+== {{id name="НЕЙРОССТехобслуживание-Подключенияклиентов"/}}Подключения клиентов ==
195	195
196		-Используется тип метрики Gauge, записывается абсолютное значение в конкретный момент времени (тип метрики Gauge):
	104	+=== {{id name="НЕЙРОССТехобслуживание-Подключениякприложениям"/}}Подключения к приложениям ===
197	197
198		-* Используется / всего — текущая заполненность диска (15.47 ГБ / 95.90 ГБ).
199		-* Записано / прочитано — накопленный объём I/O с момента старта ОС (например, «записано 500 ГБ за всё время работы»).
	106	+Вкладка **Подключения к приложениям** позволяет отследить общее количество подключений по каждому из приложений НЕЙРОСС и отследить каждое текущее подключение. Раздел доступен с версии 20.43 Платформы НЕЙРОСС.
200	200
201		-Это не «скорость прямо сейчас», а «сколько всего накопилось к этому моменту».
	108	+[[image:attach:maintenance_connections.png||width="900"]]
202	202
	110	+Щелчком левой клавиши мыши по кнопке [[image:attach:ui.Параметры узла.WebHome@fa-uplink.png||thumbnail="true" height="16"]] вы можете просмотреть записи Системного журнала по указанному адресу клиента или по имени пользователя ~[[[doc:ui.Системный журнал.WebHome]]].
203	203
204		-**На графиках — не абсолют, а разница**
	112	+[[image:attach:maintenance_uplinks.png||thumbnail="true" height="100"]]
205	205
206		-Если отображать абсолютное «записано с момента старта», график будет почти всегда расти вверх — это малоинформативно для мониторинга активности.
	114	+=== {{id name="НЕЙРОССТехобслуживание-Подключениякмедиаисточникам"/}}Подключения к медиаисточникам ===
207	207
208		-Поэтому на графиках показывается разница между двумя последовательными семплами:
	116	+Вкладка** Подключения к медиаисточникам** позволяет отследить нагрузку на каждый из медиаисточников: каждое подключение к «живому» видео камеры. При очень высоком количестве клиентов камера может не успевать обрабатывать запросы и «зависать». По ссылке из графы **Медиаисточник** вы можете просмотреть последние события Системного журнала по данному медиаисточнику. По ссылке из графы **Клиент** вы можете отследить все действия данного клиента. Ссылка на Системный журнал с соответствующими параметрами фильтра открывается в новом окне браузера.
209	209
210		-скорость за интервал = значение сейчас − значение N секунд назад
	118	+[[image:attach:maintenance_mediaconnections.png||width="900"]]
211	211
212		-|=Режим|=Интервал|=Что видно на графике
213		-|(((
214		-Живые данные
215		-)))|(((
216		-5 сек (по умолчанию)
217		-)))|(((
218		-Скорость чтения/записи за последние 5 секунд
219		-)))
220		-|(((
221		-Исторические данные
222		-)))|(((
223		-10 мин
224		-)))|(((
225		-Скорость за 10-минутный интервал
226		-)))
	120	+{{info}}
	121	+**ЗАМЕЧАНИЕ**
227	227
	123	+Если задана настройка «прямого» подключения к видеорегистратору, минуя сервер-диспетчер, отслеживание подключений необходимо проводить непосредственно на видеорегистраторе. На сервере-диспетчере они не детектируются. Также вы можете отследить подключение к конкретному медиаисточнику непосредственно в окне настройки параметров медиаисточника (вкладка **Подключения**) ~[[[doc:ui.Параметры узла.Медиаисточники.ONVIF-медиаисточники.WebHome]], [[doc:ui.Параметры узла.Медиаисточники.RTSP-медиаисточники.WebHome]] ].
	124	+{{/info}}
228	228
	126	+\\
229	229
230		-Пример: в 15:00 «записано» = 1000 ГБ, в 15:00:05 = 1000.01 ГБ → на графике будет ~~10 МБ за 5 секунд, а не «1000 ГБ».
	128	+== {{id name="НЕЙРОССТехобслуживание-Дампыпроцессов"/}}Дампы процессов ==
231	231
232		-
	130	+Платформа НЕЙРОСС собирает core dump файлы, формирующиеся по факту возникновения критичной проблемы в работе сервера. Файлы содержат отладочную информацию, собранную в момент ошибки. Приложение** Дампы процессов** позволяет:
	131	+
	132	+* Отследить появление таких дампов, уточнить тип дампа, время создания и размер файла;
	133	+* Скачать файл для последующей отправки специалистам компании ИТРИУМ с целью проведения расширенной диагностики: нажмите на кнопку [[image:attach:ui.Параметры узла.WebHome@btn_down.png||thumbnail="true" height="16"]] **Скачать** для сохранения файла в папку загрузок браузера.
	134	+* Удалить файлы после изучения: нажмите на кнопку **[[image:attach:ui.Параметры узла.WebHome@fa-del.png||thumbnail="true" height="16"]]Удалить** для удаления конкретного файла дампа, либо [[image:attach:ui.Параметры узла.WebHome@fa-del.png||thumbnail="true" height="16"]]**Удалить все** для удаления всех файлов..
	135	+
	136	+[[image:attach:maintenance_dumps.png||width="900"]]
	137	+
	138	+{{info}}
	139	+В целях защиты от переполнения системного диска обеспечивается ротация файлов: старые файлы удаляются по мере исчерпания выделенного места (500 Мб).
	140	+{{/info}}
	141	+
	142	+\\
	143	+
	144	+== {{id name="НЕЙРОССТехобслуживание-Примерработыприложения(предыдущаяверсия)"/}}Пример работы приложения (предыдущая версия)(%%) ==
	145	+
	146	+[[~[~[image:attach:ui.Параметры узла.WebHome@btn_lesson.png~|~|thumbnail="true" height="91"~]~]>>url:https://rutube.ru/video/5bc9dde210594cbe336c71664435d5a2/?r=wd||shape="rect"]]
	147	+
	148	+\\
	149	+
	150	+{{code title="Адрес веб-приложения"}}
	151	+/neyross/metrics/
	152	+{{/code}}

maintenance_sys_disks.png

Автор

...	...	@@ -1,1 +1,0 @@
1		-XWiki.admin

Размер

...	...	@@ -1,1 +1,0 @@
1		-28.7 KB

Содержимое

maintenance_sys_wnd.png

Автор

...	...	@@ -1,1 +1,1 @@
1		-XWiki.admin
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,1 +1,1 @@
1		-82.0 KB
	1	+28.5 KB

Содержимое

fa-uplink.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+235 bytes

Содержимое

maintenance_connections.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+44.7 KB

Содержимое

maintenance_diagnostic.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+13.2 KB

Содержимое

maintenance_dumps.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+69.3 KB

Содержимое

maintenance_media.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+18.1 KB

Содержимое

maintenance_mediaconnections.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+41.4 KB

Содержимое

maintenance_uplinks.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+7.7 KB

Содержимое

maintenance_wnd.png

Автор

...	...	@@ -1,0 +1,1 @@
	1	+XWiki.pugachevskaya_elena

Размер

...	...	@@ -1,0 +1,1 @@
	1	+80.4 KB

Содержимое

XWiki.ShortUrlClass[0]

Last known target (debug)

...	...	@@ -1,1 +1,1 @@
1		-ui.НЕЙРОСС Техобслуживание.Системные ресурсы.WebHome
	1	+ui.Параметры узла.Основные параметры.НЕЙРОСС Техобслуживание.WebHome