.. _standard_loader_metrics: Метрики стандартного загрузчика ----------------------------------------- .. _tab_standard_loader_tags: .. table:: Метки, используемые в метриках стандартного загрузчика +------------------+---------------------+------------------------------------------------------------------------------------+ | Название метки | Описание | Возможные значения | +==================+=====================+====================================================================================+ | service | Наименование модуля | standard-loader-metrics | +------------------+---------------------+------------------------------------------------------------------------------------+ | exported_service | Наименование сервиса| - buffer; | | | модуля | | | | | - comparator; | | | | | | | | - deployer; | | | | | | | | - flk; | | | | | | | | - manager; | | | | | | | | - reader; | | | | | | | | - uploader. | +------------------+---------------------+------------------------------------------------------------------------------------+ | function | Функция сервиса | **Для сервиса Manager:** | | | | | | | | - assignment - функция делегирования Сеансов (общая); | | | | | | | | - assignment FLK - функция делегирования Сеансов сервису ФЛК; | | | | | | | | - assignment reader- функция делегирования Сеансов сервису Reader; | | | | | | | | - assignment uploader- функция делегирования Сеансов сервису Uploader; | | | | | | | | - register component - функция регистрации компонентов; | | | | | | | | - deployment - функция отправки списков компонентов для развертывания; | | | | | | | | - reassignment - функция возврата Сеансов в очередь после потери исполняющего | | | | сервиса; | | | | | | | | - register deployer - функция регистрации Deployer; | | | | | | | | - reset assignment - функция переназначения Сеансов; | | | | | | | | - revert session - функция возврата Сеанса в предыдущее состояние; | | | | | | | | - scheduling - функция обработки Расписаний; | | | | | | | | - scheduling wait - функция ожидания завершения предыдущих Сеансов по Расписанию; | | | | | | | | - session management - функция управления Сеансами. | | | | | | | | **Для сервиса Deployer:** | | | | | | | | - register deployer - функция регистрации Deployer; | | | | | | | | - start - функция развертывания сервисов; | | | | | | | | - stop - функция остановки сервисов; | | | | | | | | - update - функция обновления сервисов. | | | | | | | | **Для сервиса Reader:** | | | | | | | | - register component - функция регистрации сервиса; | | | | | | | | - dequeue - функция запроса Сеанса; | | | | | | | | - session receiving - функция получения Сеанса; | | | | | | | | - row - подсчет прочитанных строк; | | | | | | | | - byte - подсчет объема прочитанных данных. | | | | | | | | **Для сервиса Buffer:** | | | | | | | | - register component - функция регистрации сервиса; | | | | | | | | - chunk receiving - функция получения чанков данных. | | | | | | | | **Для сервиса FLK:** | | | | | | | | - register component - функция регистрации сервиса; | | | | | | | | - dequeue - функция запроса Сеанса; | | | | | | | | - session receiving - функция получения Сеанса; | | | | | | | | - data control - функция контроля данных. | | | | | | | | - row - подсчет проверенных строк;м | | | | | | | | - byte - подсчет объема проверенных данных. | | | | | | | | **Для сервиса Uploader:** | | | | | | | | - session process - функция обработки Сеансов; | | | | | | | | - register component - функция регистрации сервиса; | | | | | | | | - file read operation - функция чтения из Buffer; | | | | | | | | - stream operation - функция записи в потоковом режиме; | | | | | | | | - llw operation - функция записи в режиме llw; | | | | | | | | - row - подсчет загруженных строк; | | | | | | | | - byte - подсчет объема загруженных данных. | | | | | | | | **Для сервиса Comparator:** | | | | | | | | - compare session - функция сверки; | | | | | | | | - register component - функция регистрации сервиса. | +------------------+---------------------+------------------------------------------------------------------------------------+ | quantile | Квантиль для | - 0.5; | | | метрики | | | | | - 0.75; | | | | | | | | - 0.95. | +------------------+---------------------+------------------------------------------------------------------------------------+ | status_code | Код статуса Сеанса | - 100 "Новый"; | | | загрузки | | | | | - 101 "Ридер назначен"; | | | | | | | | - 102 "Буферизация"; | | | | | | | | - 105 "Ожидание контроля"; | | | | | | | | - 106 "Контроль (ФЛК)"; | | | | | | | | - 107 "Ожидание загрузки"; | | | | | | | | - 108 "Загрузка"; | | | | | | | | - 109 "Ожидание закрытия дельты"; | | | | | | | | - 300 "Успешно обработан"; | | | | | | | | - 301 "Ошибка обработки"; | | | | | | | | - 302 "Ошибки контроля"; | | | | | | | | - 303 "Отменен". | +------------------+---------------------+------------------------------------------------------------------------------------+ | datamart | Датамарт, для | Выбирается из списка прикладных датамартов текущей Витрины данных. | | | которого рассчитана | | | | метрика | | +------------------+---------------------+------------------------------------------------------------------------------------+ | table | Таблица, для которой| Выбирается из списка таблиц прикладного датамарта, указанного в метке datamart. | | | рассчитана метрика | | +------------------+---------------------+------------------------------------------------------------------------------------+ | action_type | Выполняемое действие| - upsert - загрузка или обновление данных; | | | | | | | | - delete - логическое удаление: | | | | | | | | - truncate - удаление данных, включая исторические; | | | | | | | | - modify - совмещение загрузки и логического удаления. | +------------------+---------------------+------------------------------------------------------------------------------------+ | mode | Результат для | Для сервиса Reader: | | | подсчета строк или | | | | объема данных | - read success - успешно прочитано; | | | | | | | | - synchron check fail - ошибка на этапе синхронных проверок (неверный формат); | | | | | | | | -technical fail - технологические ошибки (внутренние технические ошибки сервисов). | | | | | | | | Для сервиса FLK: | | | | | | | | - check - проверено ФЛК. | | | | | | | | Для сервиса Uploader: | | | | | | | | - upload success - успешно загружено; | | | | | | | | - technical fail - технологические ошибки (внутренние технические ошибки сервисов).| +------------------+---------------------+------------------------------------------------------------------------------------+ .. _tab_standard_loader_manager_metrics: .. table:: Метрики сервиса Manager +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | Метрика | Метки | Описание | +========================+===================================+====================================================================================+ | req_count_total | service= "standard-loader-metrics"| Число операций регистраций (подключений) экземпляров сервисов к менеджеру, каждое | | | | обращение любого компонента за регистрацией на менеджере учитывается в этой | | | exported_service= "manager" | метрике. | | | | | | | function= "register component" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций регистраций (подключений) экземпляров Deployer к менеджеру, | | | | каждое обращение любого из деплоеров за регистрацией на менеджере учитывается в | | | exported_service= "manager" | этой метрике. | | | | | | | function= "register deployer" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций формирования списков сервисов для разворачивания. | | | | | | | exported_service= "manager" | | | | | | | | function= "deployment" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций возврата Сеансов в очередь после потери исполняющего сервиса, в | | | | рамках одной операции анализируются все зависшие сеансы. | | | exported_service= "manager" | | | | | | | | function= "reset assignment" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число возвращенных на предыдущий статус Сеансов (после потери исполняющего | | | | сервиса). | | | exported_service= "manager" | | | | | | | | function= "revert session" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_count | service= "standard-loader-metrics"| Число операций формирования Сеансов по расписанию. | | | | | | | exported_service= "manager" | | | | | | | | function= "scheduling" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций ожидания, пока предыдущие сеансы завершатся, в рамках операций | | | | формирования Сеансов по расписанию. | | | exported_service= "manager" | | | | | | | | function= "scheduling wait" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций делегирования Сеансов Reader. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment reader" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций делегирования Сеансов ФЛК. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment FLK" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций делегирования Сеансов Uploader. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment uploader" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций возврата Сеансов в очередь после потери исполняющего сервиса, в | | | | рамках одной операции анализируются все зависшие сеансы. | | | exported_service= "manager" | | | | | Аналог метрики req_count_total {service= "standard-loader-metrics", | | | function= "reset assignment" | exported_service= "manager", function= "reset assignment"} | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | object_count | service= "standard-loader-metrics"| Число Сеансов загрузки в разрезе: Код статуса / Датамарт / Таблица. | | | | | | | exported_service= "manager" | Обновлять с конфигурируемым периодом, по умолчанию 1 минута. | | | | | | | function= "session management" | | | | | | | | status_code= "" | | | | | | | | datamart= "" | | | | | | | | table= "" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | schedule_active | exported_service= "manager" | Число активных Расписаний в разрезе датамарт / таблица. | | | | | | | function= "scheduling" | Обновлять с периодом из конфига, по умолчанию 1 минута. | | | | | | | datamart= "" | | | | | | | | table= "
" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | object_processed_total | service= "standard-loader-metrics"| Счетчик числа Сеансов загрузки, переведенных в определенный статус. | | | | | | | exported_service= "manager" | | | | | | | | function= "session management" | | | | | | | | status_code= "" | | | | | | | | datamart= "" | | | | | | | | table= "
" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_error_count_total | service= "standard-loader-metrics"| Число ошибок регистрации (подключения) экземпляров сервисов. | | | | | | | exported_service= "manager" | | | | | | | | function= "register component" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок регистрации (подключения) экземпляров Deployer. | | | | | | | exported_service= "manager" | | | | | | | | function= "register deployer" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок отправки списков сервисов для разворачивания. | | | | | | | exported_service= "manager" | | | | | | | | function= "deployment" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок создания Сеансов по расписанию (в т.ч. пропуска и откладывания). | | | | | | | exported_service= "manager" | | | | | | | | function= "scheduling" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок операций делегирования Сеансов. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок возврата Сеансов в очередь после потери исполняющего сервиса. | | | | | | | exported_service= "manager" | | | | | | | | function= "reassignment" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds | service= "standard-loader-metrics"| Время выполнения операций формирования Сеансов по расписанию для заданного | | | | квантиля запросов. | | | exported_service= "manager" | | | | | | | | function= "scheduling" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время ожидания, пока предыдущие сеансы завершатся, в рамках операций формирования | | | | Сеансов по расписанию для заданного квантиля запросов | | | exported_service= "manager" | | | | | | | | function= "scheduling wait" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения операций делегирования Сеансов Reader для заданного квантиля | | | | запросов. | | | exported_service= "manager" | | | | | | | | function= "assignment reader" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения операций делегирования Сеансов ФЛК для заданного квантиля | | | | запросов. | | | exported_service= "manager" | | | | | | | | function= "assignment FLK" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения операций делегирования Сеансов Uploader для заданного квантиля | | | | запросов. | | | exported_service= "manager" | | | | | | | | function= "assignment uploader" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения операций возврата Сеансов в очередь после потери исполняющего | | | | сервиса, в рамках одной операции анализируются все зависшие сеансы для заданного | | | exported_service= "manager" | квантиля запросов. | | | | | | | function= "reset assignment" | | | | | | | | quantile= "0.95" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_max | service= "standard-loader-metrics"| Максимальное время выполнения операций формирования Сеансов по расписанию. | | | | | | | exported_service= "manager" | | | | | | | | function= "scheduling" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное время ожидания, пока предыдущие сеансы завершатся, в рамках операций | | | | формирования Сеансов по расписанию. | | | exported_service= "manager" | | | | | | | | function= "scheduling wait" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное Время выполнения операций делегирования Сеансов Reader. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment reader" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное Время выполнения операций делегирования Сеансов ФЛК. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment FLK" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное Время выполнения операций делегирования Сеансов Uploader. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment uploader" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное Время выполнения операций возврата Сеансов в очередь после потери | | | | исполняющего компонента, в рамках одной операции анализируются все зависшие сеансы.| | | exported_service= "manager" | | | | | | | | function= "reset assignment" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_sum | service= "standard-loader-metrics"| Суммарное время выполнения операций формирования Сеансов по расписанию. | | | | | | | exported_service= "manager" | | | | | | | | function= "scheduling" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время ожидания, пока предыдущие сеансы завершатся, в рамках операций | | | | формирования Сеансов по расписанию. | | | exported_service= "manager" | | | | | | | | function= "scheduling wait" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения операций делегирования Сеансов Reader. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment reader" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения операций делегирования Сеансов ФЛК. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment FLK" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения операций делегирования Сеансов Uploader. | | | | | | | exported_service= "manager" | | | | | | | | function= "assignment uploader" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения операций возврата Сеансов в очередь после потери | | | | исполняющего компонента, в рамках одной операции анализируются все зависшие сеансы.| | | exported_service= "manager" | | | | | | | | function= "reset assignment" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ .. _tab_standard_loader_deployer_metrics: .. table:: Метрики сервиса Deployer +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | Метрика | Метки | Описание | +========================+===================================+====================================================================================+ | req_count_total | service= "standard-loader-metrics"| Число операций регистрации Deployer. | | | | | | | exported_service= "deployer" | | | | | | | | function= "register deployer" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_count | service= "standard-loader-metrics"| Число операций обновления сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "update" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций разворачивания сервисов | | | | | | | exported_service= "deployer" | | | | | | | | function= "start" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций остановки сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "stop" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_error_count_total | service= "standard-loader-metrics"| Число ошибок регистрации Deployer. | | | | | | | exported_service= "deployer" | | | | | | | | function= "register deployer" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок обновления сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "update" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок разворачивания сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "start" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок остановки сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "stop" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds | service= "standard-loader-metrics"| Время выполнения операций обновления сервисов для заданного квантиля запросов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "update" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения операций разворачивания сервисов для заданного квантиля запросов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "start" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения операций остановки сервисов для заданного квантиля запросов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "stop" | | | | | | | | quantile= "0.95" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_max | service= "standard-loader-metrics"| Максимальное время выполнения операций обновления сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "update" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное время выполнения операций разворачивания сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "start" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное время выполнения операций остановки сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "stop" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_sum | service= "standard-loader-metrics"| Суммарное время выполнения операций обновления сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "update" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения операций разворачивания сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "start" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения операций остановки сервисов. | | | | | | | exported_service= "deployer" | | | | | | | | function= "stop" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ .. _tab_standard_loader_reader_metrics: .. table:: Метрики сервиса Reader +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | Метрика | Метки | Описание | +========================+===================================+====================================================================================+ | req_count_total | service= "standard-loader-metrics"| Число операций регистрации сервиса. | | | | | | | exported_service= "reader" | | | | | | | | function= "register component" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число полученных от Manager Сеансов. | | | | | | | exported_service= "reader" | | | | | | | | function= "session receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_count | service= "standard-loader-metrics"| Число вызовов операций запроса Сеанса у менеджера. | | | | | | | exported_service= "reader" | | | | | | | | function= "dequeue" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число полученных от Manager Сеансов. Аналог метрики req_count_total {service= | | | | "standard-loader-metrics", exported_service= "reader", function= | | | exported_service= "reader" | "session receiving"}. | | | | | | | function= "session receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_error_count_total | service= "standard-loader-metrics"| Число ошибок запроса Сеанса. | | | | | | | exported_service= "reader" | | | | | | | | function= "dequeue" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок парсинга полей Сеанса. | | | | | | | exported_service= "reader" | | | | | | | | function= "session receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | reader_total | service= "standard-loader-metrics"| Число прочитанных строк. | | | | | | | exported_service= "reader" | | | | | | | | function= "row" | | | | | | | | datamart= "" | | | | | | | | table= "
" | | | | | | | | action_type = | | | | "upsert/delete/truncate/modify" | | | | | | | | mode= | | | | "read success/synchron check fail/| | | | technical fail" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Объем прочитанных данных в байтах | | | | | | | exported_service= "reader" | | | | | | | | function= "byte" | | | | | | | | datamart= "" | | | | | | | | table= "
" | | | | | | | | action_type = | | | | "upsert/delete/truncate/modify" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds | service= "standard-loader-metrics"| Время выполнения операций запроса Сеанса для заданного квантиля запросов. | | | | | | | exported_service= "reader" | | | | | | | | function= "dequeue" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения операций получения Сеанса для заданного квантиля запросов. | | | | | | | exported_service= "reader" | | | | | | | | function= "session receiving" | | | | | | | | quantile= "0.95" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_max | service= "standard-loader-metrics"| Максимальное время выполнения операций запроса Сеанса. | | | | | | | exported_service= "reader" | | | | | | | | function= "dequeue" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное время выполнения операций получения Сеанса. | | | | | | | exported_service= "reader" | | | | | | | | function= "session receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_sum | service= "standard-loader-metrics"| Суммарное время выполнения операций запроса Сеанса. | | | | | | | exported_service= "reader" | | | | | | | | function= "dequeue" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения операций получения Сеанса. | | | | | | | exported_service= "reader" | | | | | | | | function= "session receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ .. _tab_standard_loader_buffer_metrics: .. table:: Метрики сервиса Buffer +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | Метрика | Метки | Описание | +========================+===================================+====================================================================================+ | req_count_total | service= "standard-loader-metrics"| Число операций регистрации сервиса. | | | | | | | exported_service= "buffer" | | | | | | | | function= "register component" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_count | service= "standard-loader-metrics"| Число операций получения и записи чанков в файловое хранилище. | | | | | | | exported_service= "buffer" | | | | | | | | function= "chunk receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_error_count_total | service= "standard-loader-metrics"| Число ошибок получения и записи чанков в файловое хранилище. | | | | | | | exported_service= "buffer" | | | | | | | | function= "chunk receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds | service= "standard-loader-metrics"| Время выполнения операций получения и записи чанков в файловое хранилище для | | | | заданного квантиля запросов. | | | exported_service= "buffer" | | | | | | | | function= "chunk receiving" | | | | | | | | quantile= "0.95" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_max | service= "standard-loader-metrics"| Максимальное время выполнения операций получения и записи чанков в файловое | | | | хранилище. | | | exported_service= "buffer" | | | | | | | | function= "chunk receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_sum | service= "standard-loader-metrics"| Суммарное время выполнения операций получения и записи чанков в файловое хранилище.| | | | | | | exported_service= "buffer" | | | | | | | | function= "chunk receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ .. _tab_standard_loader_flk_metrics: .. table:: Метрики сервиса FLK +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | Метрика | Метки | Описание | +========================+===================================+====================================================================================+ | req_count_total | service= "standard-loader-metrics"| Число операций регистрации компонента. | | | | | | | exported_service= "flk" | | | | | | | | function= "register component" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций получения Сеанса. | | | | | | | exported_service= "flk" | | | | | | | | function= "session receiving" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_count | service= "standard-loader-metrics"| Число операций запроса Сеанса. | | | | | | | exported_service= "flk" | | | | | | | | function= "dequeue" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций проверки данных Сеанса. | | | | | | | exported_service= "flk" | | | | | | | | function= "data control" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_error_count_total | service= "standard-loader-metrics"| Число ошибок запроса Сеанса. | | | | | | | exported_service= "flk" | | | | | | | | function= "dequeue" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок проверки данных Сеанса. | | | | | | | exported_service= "flk" | | | | | | | | function= "data control" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | flk_total | service= "standard-loader-metrics"| Число проверенных строк | | | | | | | exported_service= "flk" | | | | | | | | function= "row" | | | | | | | | datamart= "" | | | | | | | | table= "
" | | | | | | | | mode= "check" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Объем проверенных данных в байтах | | | | | | | exported_service= "flk" | | | | | | | | function= "byte" | | | | | | | | datamart= "" | | | | | | | | table= "
" | | | | | | | | mode= "check" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds | service= "standard-loader-metrics"| Время выполнения операций запроса Сеанса для заданного квантиля запросов. | | | | | | | exported_service= "flk" | | | | | | | | function= "dequeue" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения проверки данных Сеанса для заданного квантиля запросов. | | | | | | | exported_service= "flk" | | | | | | | | function= "data control" | | | | | | | | quantile= "0.95" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_max | service= "standard-loader-metrics"| Максимальное время выполнения операций запроса Сеанса. | | | | | | | exported_service= "flk" | | | | | | | | function= "dequeue" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное время выполнения проверки данных Сеанса. | | | | | | | exported_service= "flk" | | | | | | | | function= "data control" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_sum | service= "standard-loader-metrics"| Суммарное время выполнения операций запроса Сеанса. | | | | | | | exported_service= "flk" | | | | | | | | function= "dequeue" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения проверки данных Сеанса. | | | | | | | exported_service= "flk" | | | | | | | | function= "data control" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ .. _tab_standard_loader_uploader_metrics: .. table:: Метрики сервиса Uploader +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | Метрика | Метки | Описание | +========================+===================================+====================================================================================+ | req_count_total | service= "standard-loader-metrics"| Число сеансов, поступивших в обработку. | | | | | | | exported_service= "uploader" | | | | | | | | function= "session process" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций регистрации сервиса. | | | | | | | exported_service= "uploader" | | | | | | | | function= "register component" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_count | service= "standard-loader-metrics"| Число операций чтения из файлового хранилища. | | | | | | | exported_service= "uploader" | | | | | | | | function= "file read operation" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций потоковой загрузки в Prostore. | | | | | | | exported_service= "uploader" | | | | | | | | function= "stream operation" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число сеансов, поступивших в обработку. Аналог метрики req_count_total {service= | | | | "standard-loader-metrics", exported_service= "uploader", function= | | | exported_service= "uploader" | "session process"}. | | | | | | | function= "session process " | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_error_count_total | service= "standard-loader-metrics"| Число ошибок обработки Сеансов загрузки. | | | | | | | exported_service= "uploader" | | | | | | | | function= "session process" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок при выполнении операций чтения из Buffer. | | | | | | | exported_service= "uploader" | | | | | | | | function= "file read operation" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок выполнения потоковой загрузки в Prostore. | | | | | | | exported_service= "uploader" | | | | | | | | function= "stream operation" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число ошибок выполнения llw загрузок в Prostore. | | | | | | | exported_service= "uploader" | | | | | | | | function= "llw operation" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | uploader_total | service= "standard-loader-metrics"| Число проверенных строк. | | | | | | | exported_service= "uploader" | | | | | | | | function= "row" | | | | | | | | datamart= "" | | | | | | | | table= "
" | | | | | | | | action_type= | | | | "upsert/delete/truncate/modify" | | | | | | | | mode= | | | | "upload success/technical fail" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Объем загруженных данных в байтах. | | | | | | | exported_service= "uploader" | | | | | | | | function= "byte" | | | | | | | | datamart= "" | | | | | | | | table= "
" | | | | | | | | action_type= | | | | "upsert/delete/truncate/modify" | | | | | | | | mode= | | | | "upload success/technical fail" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds | service= "standard-loader-metrics"| Время обработки Сеансов загрузки для заданного квантиля запросов. | | | | | | | exported_service= "uploader" | | | | | | | | function= "session process" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время операций чтения из Buffer для заданного квантиля запросов. | | | | | | | exported_service= "uploader" | | | | | | | | function= "file read operation" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения операций потоковой загрузки в Prostore для заданного квантиля | | | | запросов. | | | exported_service= "uploader" | | | | | | | | function= "stream operation" | | | | | | | | quantile= "0.95" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Время выполнения llw загрузок в Prostore для заданного квантиля запросов. | | | | | | | exported_service= "uploader" | | | | | | | | function= "llw operation" | | | | | | | | quantile= "0.95" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_max | service= "standard-loader-metrics"| Максимальное время обработки Сеансов загрузки. | | | | | | | exported_service= "uploader" | | | | | | | | function= "session process" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное время операций чтения из Buffer. | | | | | | | exported_service= "uploader" | | | | | | | | function= "file read operation" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное время выполнения потоковой загрузки в Prostore. | | | | | | | exported_service= "uploader" | | | | | | | | function= "stream operation" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Максимальное время выполнения llw загрузок в Prostore. | | | | | | | exported_service= "uploader" | | | | | | | | function= "llw operation" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_sum | service= "standard-loader-metrics"| Суммарное время обработки Сеансов загрузки. | | | | | | | exported_service= "uploader" | | | | | | | | function= "session process" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время операций чтения из Buffer. | | | | | | | exported_service= "uploader" | | | | | | | | function= "file read operation" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения потоковой загрузки в Prostore. | | | | | | | exported_service= "uploader" | | | | | | | | function= "stream operation" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Суммарное время выполнения llw загрузок в Prostore. | | | | | | | exported_service= "uploader" | | | | | | | | function= "llw operation" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ .. _tab_standard_loader_comparator_metrics: .. table:: Метрики сервиса Comparator +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | Метрика | Метки | Описание | +========================+===================================+====================================================================================+ | req_count_total | service= "standard-loader-metrics"| Число успешно выполненных сверок. | | | | | | | exported_service= "comparator" | | | | | | | | function= "compare session" | | | +-----------------------------------+------------------------------------------------------------------------------------+ | | service= "standard-loader-metrics"| Число операций регистрации сервиса. | | | | | | | exported_service= "comparator" | | | | | | | | function= "register component" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_count | service= "standard-loader-metrics"| Число успешно выполненных сверок. Аналог метрики req_count_total {service= | | | | "standard-loader-metrics", exported_service= "comparator", function= | | | exported_service= "comparator" | "compare session"}. | | | | | | | function= "compare session" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_error_count_total | service= "standard-loader-metrics"| Число ошибочно завершенных сверок. | | | | | | | exported_service= "comparator" | | | | | | | | function= "compare session" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds | service= "standard-loader-metrics"| Время выполнения задач сверки для заданного квантиля запросов. | | | | | | | exported_service= "comparator" | | | | | | | | function= "compare session" | | | | | | | | quantile= "0.95" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_max | service= "standard-loader-metrics"| Максимальное время выполнения задач сверки. | | | | | | | exported_service= "comparator" | | | | | | | | function= "compare session" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+ | req_time_seconds_sum | service= "standard-loader-metrics"| Суммарное время выполнения задач сверки. | | | | | | | exported_service= "comparator" | | | | | | | | function= "compare session" | | +------------------------+-----------------------------------+------------------------------------------------------------------------------------+