Guest User

Logstash TPL

a guest
Feb 6th, 2025
91
0
Never
Not a member of Pastebin yet? Sign Up, it unlocks many cool features!
JSON 147.05 KB | None | 0 0
  1. {
  2.     "zabbix_export": {
  3.         "version": "7.0",
  4.         "template_groups": [
  5.             {
  6.                 "uuid": "7df96b18c230490a9a0a9e2307226338",
  7.                 "name": "Templates"
  8.             },
  9.             {
  10.                 "uuid": "1deb683c24ff4730907012f50ab23c32",
  11.                 "name": "[Host Group] RHEL 9 - General Commonality"
  12.             },
  13.             {
  14.                 "uuid": "130373c3b5e64bc8bc468b8a61d739ce",
  15.                 "name": "[Host Group] RHEL 9 - Logstash Servers"
  16.             }
  17.         ],
  18.         "templates": [
  19.             {
  20.                 "uuid": "65859d7d6b0c4a53a7b8f0b0c09653ad",
  21.                 "template": "Template - RHEL 9 - Syslog Collector - Logstash",
  22.                 "name": "Template - RHEL 9 - Syslog Collector - Logstash",
  23.                 "description": "This is designed to monitor the available metrics from Logstash's API on localhost:9600. This template requires 5 \"UserParameters\" to be defined in the Zabbix Agent 2 configuration file (typically: /etc/zabbix/zabbix-agent2.conf).",
  24.                 "groups": [
  25.                     {
  26.                         "name": "Templates"
  27.                     },
  28.                     {
  29.                         "name": "[Host Group] RHEL 9 - General Commonality"
  30.                     },
  31.                     {
  32.                         "name": "[Host Group] RHEL 9 - Logstash Servers"
  33.                     }
  34.                 ],
  35.                 "items": [
  36.                     {
  37.                         "uuid": "b53de42971de4742bee0690596167aed",
  38.                         "name": "[Item] [LS] [Log] Documents Not Sent",
  39.                         "type": "ZABBIX_ACTIVE",
  40.                         "key": "logrt[/var/log/logstash/logstash-plain.log,\"Could not resend \\d+ document\"]",
  41.                         "history": "90d",
  42.                         "value_type": "LOG",
  43.                         "trends": "0",
  44.                         "tags": [
  45.                             {
  46.                                 "tag": "Program",
  47.                                 "value": "Logstash"
  48.                             },
  49.                             {
  50.                                 "tag": "Service",
  51.                                 "value": "NULL"
  52.                             },
  53.                             {
  54.                                 "tag": "Service Type",
  55.                                 "value": "NULL"
  56.                             }
  57.                         ],
  58.                         "triggers": [
  59.                             {
  60.                                 "uuid": "249491f833b64428b6ee849d7b8e938c",
  61.                                 "expression": "count(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"Could not resend \\d+ document\"],15m)>10",
  62.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  63.                                 "recovery_expression": "count(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"Could not resend \\d+ document\"],15)=0 or nodata(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"Could not resend \\d+ document\"],15m)=1",
  64.                                 "name": "[Trigger] [LS] [Log] Error Posting Logs to Analytics API",
  65.                                 "priority": "HIGH",
  66.                                 "manual_close": "YES"
  67.                             }
  68.                         ]
  69.                     },
  70.                     {
  71.                         "uuid": "2cda063490284e8ba8d005f801dbe3ad",
  72.                         "name": "[Item] [Logstash] [Log] Main Pipeline Terminated",
  73.                         "type": "ZABBIX_ACTIVE",
  74.                         "key": "logrt[/var/log/logstash/logstash-plain.log,\"Pipeline terminated {\\\"pipeline.id\\\"=>\\\"main\\\"}$\"]",
  75.                         "history": "90d",
  76.                         "value_type": "LOG",
  77.                         "trends": "0",
  78.                         "tags": [
  79.                             {
  80.                                 "tag": "Program",
  81.                                 "value": "Logstash"
  82.                             },
  83.                             {
  84.                                 "tag": "Service",
  85.                                 "value": "NULL"
  86.                             },
  87.                             {
  88.                                 "tag": "Service Type",
  89.                                 "value": "NULL"
  90.                             }
  91.                         ]
  92.                     },
  93.                     {
  94.                         "uuid": "270c76e7fadb47c58dd9a1474bce2ffd",
  95.                         "name": "[Item] [Logstash] [Log] Successfully Posted Log",
  96.                         "type": "ZABBIX_ACTIVE",
  97.                         "key": "logrt[/var/log/logstash/logstash-plain.log,\"Successfully posted [0-9]+ logs\"]",
  98.                         "history": "90d",
  99.                         "value_type": "LOG",
  100.                         "trends": "0",
  101.                         "tags": [
  102.                             {
  103.                                 "tag": "Program",
  104.                                 "value": "Logstash"
  105.                             },
  106.                             {
  107.                                 "tag": "Service",
  108.                                 "value": "NULL"
  109.                             },
  110.                             {
  111.                                 "tag": "Service Type",
  112.                                 "value": "NULL"
  113.                             }
  114.                         ],
  115.                         "triggers": [
  116.                             {
  117.                                 "uuid": "9e35c27c4b8341f2beeea08745696670",
  118.                                 "expression": "nodata(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"Successfully posted [0-9]+ logs\"],1h)=1",
  119.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  120.                                 "recovery_expression": "nodata(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"Successfully posted [0-9]+ logs\"],5m)=0",
  121.                                 "name": "[Trigger] [Logstash] No Data Uploaded in 1 Hour",
  122.                                 "priority": "INFO",
  123.                                 "manual_close": "YES"
  124.                             }
  125.                         ]
  126.                     },
  127.                     {
  128.                         "uuid": "fb5f98593a054d8086dfea19e9c38072",
  129.                         "name": "[Item] [LS] [Log] Fatal Error Detected",
  130.                         "type": "ZABBIX_ACTIVE",
  131.                         "key": "logrt[/var/log/logstash/logstash-plain.log,\"\\[FATAL\\]\"]",
  132.                         "history": "90d",
  133.                         "value_type": "LOG",
  134.                         "trends": "0",
  135.                         "tags": [
  136.                             {
  137.                                 "tag": "Program",
  138.                                 "value": "Logstash"
  139.                             },
  140.                             {
  141.                                 "tag": "Service",
  142.                                 "value": "NULL"
  143.                             },
  144.                             {
  145.                                 "tag": "Service Type",
  146.                                 "value": "NULL"
  147.                             }
  148.                         ],
  149.                         "triggers": [
  150.                             {
  151.                                 "uuid": "05d69d5a1743486984ad45fa950a7212",
  152.                                 "expression": "count(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"\\[FATAL\\]\"],15m)>0",
  153.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  154.                                 "recovery_expression": "nodata(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"\\[FATAL\\]\"],15m) or count(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"\\[FATAL\\]\"],15m)=0",
  155.                                 "name": "[Trigger] [LS] [Log] Fatal Error Detected",
  156.                                 "priority": "HIGH",
  157.                                 "manual_close": "YES"
  158.                             }
  159.                         ]
  160.                     },
  161.                     {
  162.                         "uuid": "e4e8eac72918427ab1d38b47636a48be",
  163.                         "name": "[Item] [LS] [Event] Event.Filtered",
  164.                         "type": "DEPENDENT",
  165.                         "key": "logstash.event.filtered",
  166.                         "delay": "0",
  167.                         "history": "90d",
  168.                         "value_type": "FLOAT",
  169.                         "description": "The total number of events filtered to LogStash over the course of the instances lifetime.",
  170.                         "preprocessing": [
  171.                             {
  172.                                 "type": "JSONPATH",
  173.                                 "parameters": [
  174.                                     "$.events.filtered"
  175.                                 ]
  176.                             }
  177.                         ],
  178.                         "master_item": {
  179.                             "key": "logstashEVENT"
  180.                         },
  181.                         "tags": [
  182.                             {
  183.                                 "tag": "Program",
  184.                                 "value": "Logstash"
  185.                             },
  186.                             {
  187.                                 "tag": "Service",
  188.                                 "value": "NULL"
  189.                             },
  190.                             {
  191.                                 "tag": "Service Type",
  192.                                 "value": "NULL"
  193.                             }
  194.                         ]
  195.                     },
  196.                     {
  197.                         "uuid": "3b7ab42ce675417abb4ba61f7596efd5",
  198.                         "name": "[Item] [LS] [Event] Event.In",
  199.                         "type": "DEPENDENT",
  200.                         "key": "logstash.event.in",
  201.                         "delay": "0",
  202.                         "history": "90d",
  203.                         "value_type": "FLOAT",
  204.                         "description": "The total number of events incoming to LogStash over the course of the instances lifetime.",
  205.                         "preprocessing": [
  206.                             {
  207.                                 "type": "JSONPATH",
  208.                                 "parameters": [
  209.                                     "$.events.in"
  210.                                 ]
  211.                             }
  212.                         ],
  213.                         "master_item": {
  214.                             "key": "logstashEVENT"
  215.                         },
  216.                         "tags": [
  217.                             {
  218.                                 "tag": "Program",
  219.                                 "value": "Logstash"
  220.                             },
  221.                             {
  222.                                 "tag": "Service",
  223.                                 "value": "NULL"
  224.                             },
  225.                             {
  226.                                 "tag": "Service Type",
  227.                                 "value": "NULL"
  228.                             }
  229.                         ]
  230.                     },
  231.                     {
  232.                         "uuid": "9838d8be2b0e4558b3a9fae871c73e3b",
  233.                         "name": "[Item] [LS] [Event] Event.Out",
  234.                         "type": "DEPENDENT",
  235.                         "key": "logstash.event.out",
  236.                         "delay": "0",
  237.                         "history": "90d",
  238.                         "value_type": "FLOAT",
  239.                         "description": "The total number of events outgoing to LogStash over the course of the instances lifetime.",
  240.                         "preprocessing": [
  241.                             {
  242.                                 "type": "JSONPATH",
  243.                                 "parameters": [
  244.                                     "$.events.out"
  245.                                 ]
  246.                             }
  247.                         ],
  248.                         "master_item": {
  249.                             "key": "logstashEVENT"
  250.                         },
  251.                         "tags": [
  252.                             {
  253.                                 "tag": "Program",
  254.                                 "value": "Logstash"
  255.                             },
  256.                             {
  257.                                 "tag": "Service",
  258.                                 "value": "NULL"
  259.                             },
  260.                             {
  261.                                 "tag": "Service Type",
  262.                                 "value": "NULL"
  263.                             }
  264.                         ]
  265.                     },
  266.                     {
  267.                         "uuid": "704c91a7722a48f7bb77402287617f3e",
  268.                         "name": "[Item] [LS] [Flow] Flow.Filter_Throughput.Current",
  269.                         "type": "DEPENDENT",
  270.                         "key": "logstash.flow.filter_throughput.current",
  271.                         "delay": "0",
  272.                         "history": "90d",
  273.                         "value_type": "FLOAT",
  274.                         "description": "The current (at the time of query) throughput of the Logstash Filter measured in Events Per Second (EPS)",
  275.                         "preprocessing": [
  276.                             {
  277.                                 "type": "JSONPATH",
  278.                                 "parameters": [
  279.                                     "$.flow.filter_throughput.current"
  280.                                 ]
  281.                             }
  282.                         ],
  283.                         "master_item": {
  284.                             "key": "logstashFLOW"
  285.                         },
  286.                         "tags": [
  287.                             {
  288.                                 "tag": "Program",
  289.                                 "value": "Logstash"
  290.                             },
  291.                             {
  292.                                 "tag": "Service",
  293.                                 "value": "NULL"
  294.                             },
  295.                             {
  296.                                 "tag": "Service Type",
  297.                                 "value": "NULL"
  298.                             }
  299.                         ]
  300.                     },
  301.                     {
  302.                         "uuid": "29c7d388dc4245b0adfa1ce854878f9e",
  303.                         "name": "[Item] [LS] [Flow] Flow.Filter_Throughput.Last_1_Hour",
  304.                         "type": "DEPENDENT",
  305.                         "key": "logstash.flow.filter_throughput.last_1_hour",
  306.                         "delay": "0",
  307.                         "history": "90d",
  308.                         "value_type": "FLOAT",
  309.                         "description": "The sliding 1-hour window (at the time of query) throughput of the Logstash Filter measured in Events Per Second (EPS)",
  310.                         "preprocessing": [
  311.                             {
  312.                                 "type": "JSONPATH",
  313.                                 "parameters": [
  314.                                     "$.flow.filter_throughput.last_1_hour"
  315.                                 ]
  316.                             }
  317.                         ],
  318.                         "master_item": {
  319.                             "key": "logstashFLOW"
  320.                         },
  321.                         "tags": [
  322.                             {
  323.                                 "tag": "Program",
  324.                                 "value": "Logstash"
  325.                             },
  326.                             {
  327.                                 "tag": "Service",
  328.                                 "value": "NULL"
  329.                             },
  330.                             {
  331.                                 "tag": "Service Type",
  332.                                 "value": "NULL"
  333.                             }
  334.                         ]
  335.                     },
  336.                     {
  337.                         "uuid": "c7c0971f1c39493d9c5f691c31f99fd8",
  338.                         "name": "[Item] [LS] [Flow] Flow.Filter_Throughput.Last_1_Minute",
  339.                         "type": "DEPENDENT",
  340.                         "key": "logstash.flow.filter_throughput.last_1_minute",
  341.                         "delay": "0",
  342.                         "history": "90d",
  343.                         "value_type": "FLOAT",
  344.                         "description": "The sliding 1-minute window (at the time of query) throughput of the Logstash Filter measured in Events Per Second (EPS)",
  345.                         "preprocessing": [
  346.                             {
  347.                                 "type": "JSONPATH",
  348.                                 "parameters": [
  349.                                     "$.flow.filter_throughput.last_1_minute"
  350.                                 ]
  351.                             }
  352.                         ],
  353.                         "master_item": {
  354.                             "key": "logstashFLOW"
  355.                         },
  356.                         "tags": [
  357.                             {
  358.                                 "tag": "Program",
  359.                                 "value": "Logstash"
  360.                             },
  361.                             {
  362.                                 "tag": "Service",
  363.                                 "value": "NULL"
  364.                             },
  365.                             {
  366.                                 "tag": "Service Type",
  367.                                 "value": "NULL"
  368.                             }
  369.                         ]
  370.                     },
  371.                     {
  372.                         "uuid": "934027fe57cc45dfb2e2c466b3a46259",
  373.                         "name": "[Item] [LS] [Flow] Flow.Filter_Throughput.Last_5_Minutes",
  374.                         "type": "DEPENDENT",
  375.                         "key": "logstash.flow.filter_throughput.last_5_minutes",
  376.                         "delay": "0",
  377.                         "history": "90d",
  378.                         "value_type": "FLOAT",
  379.                         "description": "The sliding 5-minute window (at the time of query) throughput of the Logstash Filter measured in Events Per Second (EPS)",
  380.                         "preprocessing": [
  381.                             {
  382.                                 "type": "JSONPATH",
  383.                                 "parameters": [
  384.                                     "$.flow.filter_throughput.last_5_minutes"
  385.                                 ]
  386.                             }
  387.                         ],
  388.                         "master_item": {
  389.                             "key": "logstashFLOW"
  390.                         },
  391.                         "tags": [
  392.                             {
  393.                                 "tag": "Program",
  394.                                 "value": "Logstash"
  395.                             },
  396.                             {
  397.                                 "tag": "Service",
  398.                                 "value": "NULL"
  399.                             },
  400.                             {
  401.                                 "tag": "Service Type",
  402.                                 "value": "NULL"
  403.                             }
  404.                         ]
  405.                     },
  406.                     {
  407.                         "uuid": "58f4bd9f80fb4dc9b7bbc04aa23bd628",
  408.                         "name": "[Item] [LS] [Flow] Flow.Filter_Throughput.Last_15_Minutes",
  409.                         "type": "DEPENDENT",
  410.                         "key": "logstash.flow.filter_throughput.last_15_minutes",
  411.                         "delay": "0",
  412.                         "history": "90d",
  413.                         "value_type": "FLOAT",
  414.                         "description": "The sliding 15-minute window (at the time of query) throughput of the Logstash Filter measured in Events Per Second (EPS)",
  415.                         "preprocessing": [
  416.                             {
  417.                                 "type": "JSONPATH",
  418.                                 "parameters": [
  419.                                     "$.flow.filter_throughput.last_15_minutes"
  420.                                 ]
  421.                             }
  422.                         ],
  423.                         "master_item": {
  424.                             "key": "logstashFLOW"
  425.                         },
  426.                         "tags": [
  427.                             {
  428.                                 "tag": "Program",
  429.                                 "value": "Logstash"
  430.                             },
  431.                             {
  432.                                 "tag": "Service",
  433.                                 "value": "NULL"
  434.                             },
  435.                             {
  436.                                 "tag": "Service Type",
  437.                                 "value": "NULL"
  438.                             }
  439.                         ]
  440.                     },
  441.                     {
  442.                         "uuid": "0361bbb3189a4c7e9b59d6871068e15c",
  443.                         "name": "[Item] [LS] [Flow] Flow.Filter_Throughput.Lifetime",
  444.                         "type": "DEPENDENT",
  445.                         "key": "logstash.flow.filter_throughput.lifetime",
  446.                         "delay": "0",
  447.                         "history": "90d",
  448.                         "value_type": "FLOAT",
  449.                         "description": "The lifetime (at the time of query) throughput of the Logstash Filter measured in Events Per Second (EPS)",
  450.                         "preprocessing": [
  451.                             {
  452.                                 "type": "JSONPATH",
  453.                                 "parameters": [
  454.                                     "$.flow.filter_throughput.lifetime"
  455.                                 ]
  456.                             }
  457.                         ],
  458.                         "master_item": {
  459.                             "key": "logstashFLOW"
  460.                         },
  461.                         "tags": [
  462.                             {
  463.                                 "tag": "Program",
  464.                                 "value": "Logstash"
  465.                             },
  466.                             {
  467.                                 "tag": "Service",
  468.                                 "value": "NULL"
  469.                             },
  470.                             {
  471.                                 "tag": "Service Type",
  472.                                 "value": "NULL"
  473.                             }
  474.                         ]
  475.                     },
  476.                     {
  477.                         "uuid": "8b98fad660b94d498daa752c4c12fd23",
  478.                         "name": "[Item] [LS] [Flow] Flow.Input_Throughput.Current",
  479.                         "type": "DEPENDENT",
  480.                         "key": "logstash.flow.input_throughput.current",
  481.                         "delay": "0",
  482.                         "history": "90d",
  483.                         "value_type": "FLOAT",
  484.                         "preprocessing": [
  485.                             {
  486.                                 "type": "JSONPATH",
  487.                                 "parameters": [
  488.                                     "$.flow.input_throughput.current"
  489.                                 ]
  490.                             }
  491.                         ],
  492.                         "master_item": {
  493.                             "key": "logstashFLOW"
  494.                         },
  495.                         "tags": [
  496.                             {
  497.                                 "tag": "Program",
  498.                                 "value": "Logstash"
  499.                             },
  500.                             {
  501.                                 "tag": "Service",
  502.                                 "value": "NULL"
  503.                             },
  504.                             {
  505.                                 "tag": "Service Type",
  506.                                 "value": "NULL"
  507.                             }
  508.                         ]
  509.                     },
  510.                     {
  511.                         "uuid": "256eccf6370d40fd998e57adbec7b6c2",
  512.                         "name": "[Item] [LS] [Flow] Flow.Input_Throughput.Last_1_Hour",
  513.                         "type": "DEPENDENT",
  514.                         "key": "logstash.flow.input_throughput.last_1_hour",
  515.                         "delay": "0",
  516.                         "history": "90d",
  517.                         "value_type": "FLOAT",
  518.                         "preprocessing": [
  519.                             {
  520.                                 "type": "JSONPATH",
  521.                                 "parameters": [
  522.                                     "$.flow.input_throughput.last_1_hour"
  523.                                 ]
  524.                             }
  525.                         ],
  526.                         "master_item": {
  527.                             "key": "logstashFLOW"
  528.                         },
  529.                         "tags": [
  530.                             {
  531.                                 "tag": "Program",
  532.                                 "value": "Logstash"
  533.                             },
  534.                             {
  535.                                 "tag": "Service",
  536.                                 "value": "NULL"
  537.                             },
  538.                             {
  539.                                 "tag": "Service Type",
  540.                                 "value": "NULL"
  541.                             }
  542.                         ]
  543.                     },
  544.                     {
  545.                         "uuid": "685d0afb769f413896aa318d114ebb90",
  546.                         "name": "[Item] [LS] [Flow] Flow.Input_Throughput.Last_1_Minute",
  547.                         "type": "DEPENDENT",
  548.                         "key": "logstash.flow.input_throughput.last_1_minute",
  549.                         "delay": "0",
  550.                         "history": "90d",
  551.                         "value_type": "FLOAT",
  552.                         "preprocessing": [
  553.                             {
  554.                                 "type": "JSONPATH",
  555.                                 "parameters": [
  556.                                     "$.flow.input_throughput.last_1_minute"
  557.                                 ]
  558.                             }
  559.                         ],
  560.                         "master_item": {
  561.                             "key": "logstashFLOW"
  562.                         },
  563.                         "tags": [
  564.                             {
  565.                                 "tag": "Program",
  566.                                 "value": "Logstash"
  567.                             },
  568.                             {
  569.                                 "tag": "Service",
  570.                                 "value": "NULL"
  571.                             },
  572.                             {
  573.                                 "tag": "Service Type",
  574.                                 "value": "NULL"
  575.                             }
  576.                         ]
  577.                     },
  578.                     {
  579.                         "uuid": "5c013230ecf5458fae1e5d21ee4aa085",
  580.                         "name": "[Item] [LS] [Flow] Flow.Input_Throughput.Last_5_Minutes",
  581.                         "type": "DEPENDENT",
  582.                         "key": "logstash.flow.input_throughput.last_5_minutes",
  583.                         "delay": "0",
  584.                         "history": "90d",
  585.                         "value_type": "FLOAT",
  586.                         "preprocessing": [
  587.                             {
  588.                                 "type": "JSONPATH",
  589.                                 "parameters": [
  590.                                     "$.flow.input_throughput.last_5_minutes"
  591.                                 ]
  592.                             }
  593.                         ],
  594.                         "master_item": {
  595.                             "key": "logstashFLOW"
  596.                         },
  597.                         "tags": [
  598.                             {
  599.                                 "tag": "Program",
  600.                                 "value": "Logstash"
  601.                             },
  602.                             {
  603.                                 "tag": "Service",
  604.                                 "value": "NULL"
  605.                             },
  606.                             {
  607.                                 "tag": "Service Type",
  608.                                 "value": "NULL"
  609.                             }
  610.                         ]
  611.                     },
  612.                     {
  613.                         "uuid": "00c2e1f070f74d619a81d36dba5c3df8",
  614.                         "name": "[Item] [LS] [Flow] Flow.Input_Throughput.Last_15_Minutes",
  615.                         "type": "DEPENDENT",
  616.                         "key": "logstash.flow.input_throughput.last_15_minutes",
  617.                         "delay": "0",
  618.                         "history": "90d",
  619.                         "value_type": "FLOAT",
  620.                         "preprocessing": [
  621.                             {
  622.                                 "type": "JSONPATH",
  623.                                 "parameters": [
  624.                                     "$.flow.input_throughput.last_15_minutes"
  625.                                 ]
  626.                             }
  627.                         ],
  628.                         "master_item": {
  629.                             "key": "logstashFLOW"
  630.                         },
  631.                         "tags": [
  632.                             {
  633.                                 "tag": "Program",
  634.                                 "value": "Logstash"
  635.                             },
  636.                             {
  637.                                 "tag": "Service",
  638.                                 "value": "NULL"
  639.                             },
  640.                             {
  641.                                 "tag": "Service Type",
  642.                                 "value": "NULL"
  643.                             }
  644.                         ]
  645.                     },
  646.                     {
  647.                         "uuid": "7404feb744b64c5cb39ec643052eadd4",
  648.                         "name": "[Item] [LS] [Flow] Flow.Input_Throughput.Lifetime",
  649.                         "type": "DEPENDENT",
  650.                         "key": "logstash.flow.input_throughput.lifetime",
  651.                         "delay": "0",
  652.                         "history": "90d",
  653.                         "value_type": "FLOAT",
  654.                         "preprocessing": [
  655.                             {
  656.                                 "type": "JSONPATH",
  657.                                 "parameters": [
  658.                                     "$.flow.input_throughput.lifetime"
  659.                                 ]
  660.                             }
  661.                         ],
  662.                         "master_item": {
  663.                             "key": "logstashFLOW"
  664.                         },
  665.                         "tags": [
  666.                             {
  667.                                 "tag": "Program",
  668.                                 "value": "Logstash"
  669.                             },
  670.                             {
  671.                                 "tag": "Service",
  672.                                 "value": "NULL"
  673.                             },
  674.                             {
  675.                                 "tag": "Service Type",
  676.                                 "value": "NULL"
  677.                             }
  678.                         ]
  679.                     },
  680.                     {
  681.                         "uuid": "4ee702ead1dd4075b391e17a3477d58c",
  682.                         "name": "[Item] [LS] [Flow] Flow.Output_Throughput.Current",
  683.                         "type": "DEPENDENT",
  684.                         "key": "logstash.flow.output_throughput.current",
  685.                         "delay": "0",
  686.                         "history": "90d",
  687.                         "value_type": "FLOAT",
  688.                         "preprocessing": [
  689.                             {
  690.                                 "type": "JSONPATH",
  691.                                 "parameters": [
  692.                                     "$.flow.output_throughput.current"
  693.                                 ]
  694.                             }
  695.                         ],
  696.                         "master_item": {
  697.                             "key": "logstashFLOW"
  698.                         },
  699.                         "tags": [
  700.                             {
  701.                                 "tag": "Program",
  702.                                 "value": "Logstash"
  703.                             },
  704.                             {
  705.                                 "tag": "Service",
  706.                                 "value": "NULL"
  707.                             },
  708.                             {
  709.                                 "tag": "Service Type",
  710.                                 "value": "NULL"
  711.                             }
  712.                         ]
  713.                     },
  714.                     {
  715.                         "uuid": "0b3eeb3f56134fa4835ffdcd954a2fc6",
  716.                         "name": "[Item] [LS] [Flow] Flow.Output_Throughput.Last_1_Hour",
  717.                         "type": "DEPENDENT",
  718.                         "key": "logstash.flow.output_throughput.last_1_hour",
  719.                         "delay": "0",
  720.                         "history": "90d",
  721.                         "value_type": "FLOAT",
  722.                         "preprocessing": [
  723.                             {
  724.                                 "type": "JSONPATH",
  725.                                 "parameters": [
  726.                                     "$.flow.output_throughput.last_1_hour"
  727.                                 ]
  728.                             }
  729.                         ],
  730.                         "master_item": {
  731.                             "key": "logstashFLOW"
  732.                         },
  733.                         "tags": [
  734.                             {
  735.                                 "tag": "Program",
  736.                                 "value": "Logstash"
  737.                             },
  738.                             {
  739.                                 "tag": "Service",
  740.                                 "value": "NULL"
  741.                             },
  742.                             {
  743.                                 "tag": "Service Type",
  744.                                 "value": "NULL"
  745.                             }
  746.                         ]
  747.                     },
  748.                     {
  749.                         "uuid": "eae228de3b9645dc97994d6e053ab79d",
  750.                         "name": "[Item] [LS] [Flow] Flow.Output_Throughput.Last_1_Minute",
  751.                         "type": "DEPENDENT",
  752.                         "key": "logstash.flow.output_throughput.last_1_minute",
  753.                         "delay": "0",
  754.                         "history": "90d",
  755.                         "value_type": "FLOAT",
  756.                         "preprocessing": [
  757.                             {
  758.                                 "type": "JSONPATH",
  759.                                 "parameters": [
  760.                                     "$.flow.output_throughput.last_1_minute"
  761.                                 ]
  762.                             }
  763.                         ],
  764.                         "master_item": {
  765.                             "key": "logstashFLOW"
  766.                         },
  767.                         "tags": [
  768.                             {
  769.                                 "tag": "Program",
  770.                                 "value": "Logstash"
  771.                             },
  772.                             {
  773.                                 "tag": "Service",
  774.                                 "value": "NULL"
  775.                             },
  776.                             {
  777.                                 "tag": "Service Type",
  778.                                 "value": "NULL"
  779.                             }
  780.                         ]
  781.                     },
  782.                     {
  783.                         "uuid": "1b85e6f4a57844808e18ecc85acd8096",
  784.                         "name": "[Item] [LS] [Flow] Flow.Output_Throughput.Last_5_Minutes",
  785.                         "type": "DEPENDENT",
  786.                         "key": "logstash.flow.output_throughput.last_5_minutes",
  787.                         "delay": "0",
  788.                         "history": "90d",
  789.                         "value_type": "FLOAT",
  790.                         "preprocessing": [
  791.                             {
  792.                                 "type": "JSONPATH",
  793.                                 "parameters": [
  794.                                     "$.flow.output_throughput.last_5_minutes"
  795.                                 ]
  796.                             }
  797.                         ],
  798.                         "master_item": {
  799.                             "key": "logstashFLOW"
  800.                         },
  801.                         "tags": [
  802.                             {
  803.                                 "tag": "Program",
  804.                                 "value": "Logstash"
  805.                             },
  806.                             {
  807.                                 "tag": "Service",
  808.                                 "value": "NULL"
  809.                             },
  810.                             {
  811.                                 "tag": "Service Type",
  812.                                 "value": "NULL"
  813.                             }
  814.                         ]
  815.                     },
  816.                     {
  817.                         "uuid": "29bd016814fa40d9b76c5127da24520e",
  818.                         "name": "[Item] [LS] [Flow] Flow.Output_Throughput.Last_15_Minutes",
  819.                         "type": "DEPENDENT",
  820.                         "key": "logstash.flow.output_throughput.last_15_minutes",
  821.                         "delay": "0",
  822.                         "history": "90d",
  823.                         "value_type": "FLOAT",
  824.                         "preprocessing": [
  825.                             {
  826.                                 "type": "JSONPATH",
  827.                                 "parameters": [
  828.                                     "$.flow.output_throughput.last_15_minutes"
  829.                                 ]
  830.                             }
  831.                         ],
  832.                         "master_item": {
  833.                             "key": "logstashFLOW"
  834.                         },
  835.                         "tags": [
  836.                             {
  837.                                 "tag": "Program",
  838.                                 "value": "Logstash"
  839.                             },
  840.                             {
  841.                                 "tag": "Service",
  842.                                 "value": "NULL"
  843.                             },
  844.                             {
  845.                                 "tag": "Service Type",
  846.                                 "value": "NULL"
  847.                             }
  848.                         ]
  849.                     },
  850.                     {
  851.                         "uuid": "1ad635fc7d5a4766885ab0ca7c148630",
  852.                         "name": "[Item] [LS] [Flow] Flow.Output_Throughput.Lifetime",
  853.                         "type": "DEPENDENT",
  854.                         "key": "logstash.flow.output_throughput.lifetime",
  855.                         "delay": "0",
  856.                         "history": "90d",
  857.                         "value_type": "FLOAT",
  858.                         "preprocessing": [
  859.                             {
  860.                                 "type": "JSONPATH",
  861.                                 "parameters": [
  862.                                     "$.flow.output_throughput.lifetime"
  863.                                 ]
  864.                             }
  865.                         ],
  866.                         "master_item": {
  867.                             "key": "logstashFLOW"
  868.                         },
  869.                         "tags": [
  870.                             {
  871.                                 "tag": "Program",
  872.                                 "value": "Logstash"
  873.                             },
  874.                             {
  875.                                 "tag": "Service",
  876.                                 "value": "NULL"
  877.                             },
  878.                             {
  879.                                 "tag": "Service Type",
  880.                                 "value": "NULL"
  881.                             }
  882.                         ]
  883.                     },
  884.                     {
  885.                         "uuid": "83d2be811e7d426584bcf319fc465d2e",
  886.                         "name": "[Item] [LS] [Flow] Pipeline.BatchDelay",
  887.                         "type": "DEPENDENT",
  888.                         "key": "logstash.flow.pipeline.batchdelay",
  889.                         "delay": "0",
  890.                         "history": "90d",
  891.                         "preprocessing": [
  892.                             {
  893.                                 "type": "JSONPATH",
  894.                                 "parameters": [
  895.                                     "$.pipeline.batch_delay"
  896.                                 ]
  897.                             }
  898.                         ],
  899.                         "master_item": {
  900.                             "key": "logstashFLOW"
  901.                         },
  902.                         "tags": [
  903.                             {
  904.                                 "tag": "Program",
  905.                                 "value": "Logstash"
  906.                             },
  907.                             {
  908.                                 "tag": "Service",
  909.                                 "value": "NULL"
  910.                             },
  911.                             {
  912.                                 "tag": "Service Type",
  913.                                 "value": "NULL"
  914.                             }
  915.                         ]
  916.                     },
  917.                     {
  918.                         "uuid": "8f934a6df35a4d8b8bc6ca9639e2379e",
  919.                         "name": "[Item] [LS] [Flow] Pipeline.BatchSize",
  920.                         "type": "DEPENDENT",
  921.                         "key": "logstash.flow.pipeline.batchsize",
  922.                         "delay": "0",
  923.                         "history": "90d",
  924.                         "preprocessing": [
  925.                             {
  926.                                 "type": "JSONPATH",
  927.                                 "parameters": [
  928.                                     "$.pipeline.batch_size"
  929.                                 ]
  930.                             }
  931.                         ],
  932.                         "master_item": {
  933.                             "key": "logstashFLOW"
  934.                         },
  935.                         "tags": [
  936.                             {
  937.                                 "tag": "Program",
  938.                                 "value": "Logstash"
  939.                             },
  940.                             {
  941.                                 "tag": "Service",
  942.                                 "value": "NULL"
  943.                             },
  944.                             {
  945.                                 "tag": "Service Type",
  946.                                 "value": "NULL"
  947.                             }
  948.                         ]
  949.                     },
  950.                     {
  951.                         "uuid": "949953e2e1e74af298f44b615177f0a8",
  952.                         "name": "[Item] [LS] [Flow] Pipeline.Workers",
  953.                         "type": "DEPENDENT",
  954.                         "key": "logstash.flow.pipeline.workers",
  955.                         "delay": "0",
  956.                         "history": "90d",
  957.                         "preprocessing": [
  958.                             {
  959.                                 "type": "JSONPATH",
  960.                                 "parameters": [
  961.                                     "$.pipeline.workers"
  962.                                 ]
  963.                             }
  964.                         ],
  965.                         "master_item": {
  966.                             "key": "logstashFLOW"
  967.                         },
  968.                         "tags": [
  969.                             {
  970.                                 "tag": "Program",
  971.                                 "value": "Logstash"
  972.                             },
  973.                             {
  974.                                 "tag": "Service",
  975.                                 "value": "NULL"
  976.                             },
  977.                             {
  978.                                 "tag": "Service Type",
  979.                                 "value": "NULL"
  980.                             }
  981.                         ]
  982.                     },
  983.                     {
  984.                         "uuid": "949444b36c904947b9e8fca2bf413eac",
  985.                         "name": "[Item] [LS] [Flow] Flow.Queue_Backpressure.Current",
  986.                         "type": "DEPENDENT",
  987.                         "key": "logstash.flow.queue_backpressure.current",
  988.                         "delay": "0",
  989.                         "history": "90d",
  990.                         "value_type": "FLOAT",
  991.                         "preprocessing": [
  992.                             {
  993.                                 "type": "JSONPATH",
  994.                                 "parameters": [
  995.                                     "$.flow.queue_backpressure.current"
  996.                                 ]
  997.                             }
  998.                         ],
  999.                         "master_item": {
  1000.                             "key": "logstashFLOW"
  1001.                         },
  1002.                         "tags": [
  1003.                             {
  1004.                                 "tag": "Program",
  1005.                                 "value": "Logstash"
  1006.                             },
  1007.                             {
  1008.                                 "tag": "Service",
  1009.                                 "value": "NULL"
  1010.                             },
  1011.                             {
  1012.                                 "tag": "Service Type",
  1013.                                 "value": "NULL"
  1014.                             }
  1015.                         ]
  1016.                     },
  1017.                     {
  1018.                         "uuid": "2e135391375b49c9b42c0b5e4a9b7290",
  1019.                         "name": "[Item] [LS] [Flow] Flow.Queue_Backpressure.Last_1_Minute",
  1020.                         "type": "DEPENDENT",
  1021.                         "key": "logstash.flow.queue_backpressure.last_1_minute",
  1022.                         "delay": "0",
  1023.                         "history": "90d",
  1024.                         "value_type": "FLOAT",
  1025.                         "preprocessing": [
  1026.                             {
  1027.                                 "type": "JSONPATH",
  1028.                                 "parameters": [
  1029.                                     "$.flow.queue_backpressure.last_1_minute"
  1030.                                 ]
  1031.                             }
  1032.                         ],
  1033.                         "master_item": {
  1034.                             "key": "logstashFLOW"
  1035.                         },
  1036.                         "tags": [
  1037.                             {
  1038.                                 "tag": "Program",
  1039.                                 "value": "Logstash"
  1040.                             },
  1041.                             {
  1042.                                 "tag": "Service",
  1043.                                 "value": "NULL"
  1044.                             },
  1045.                             {
  1046.                                 "tag": "Service Type",
  1047.                                 "value": "NULL"
  1048.                             }
  1049.                         ]
  1050.                     },
  1051.                     {
  1052.                         "uuid": "7348557e14504821acc9f1ee31aa522d",
  1053.                         "name": "[Item] [LS] [Flow] Flow.Queue_Backpressure.Last_5_Minutes",
  1054.                         "type": "DEPENDENT",
  1055.                         "key": "logstash.flow.queue_backpressure.last_5_minutes",
  1056.                         "delay": "0",
  1057.                         "history": "90d",
  1058.                         "value_type": "FLOAT",
  1059.                         "preprocessing": [
  1060.                             {
  1061.                                 "type": "JSONPATH",
  1062.                                 "parameters": [
  1063.                                     "$.flow.queue_backpressure.last_5_minutes"
  1064.                                 ]
  1065.                             }
  1066.                         ],
  1067.                         "master_item": {
  1068.                             "key": "logstashFLOW"
  1069.                         },
  1070.                         "tags": [
  1071.                             {
  1072.                                 "tag": "Program",
  1073.                                 "value": "Logstash"
  1074.                             },
  1075.                             {
  1076.                                 "tag": "Service",
  1077.                                 "value": "NULL"
  1078.                             },
  1079.                             {
  1080.                                 "tag": "Service Type",
  1081.                                 "value": "NULL"
  1082.                             }
  1083.                         ]
  1084.                     },
  1085.                     {
  1086.                         "uuid": "62509e807618470582168490b3197dcf",
  1087.                         "name": "[Item] [LS] [Flow] Flow.Queue_Backpressure.Last_15_Minutes",
  1088.                         "type": "DEPENDENT",
  1089.                         "key": "logstash.flow.queue_backpressure.last_15_minutes",
  1090.                         "delay": "0",
  1091.                         "history": "90d",
  1092.                         "value_type": "FLOAT",
  1093.                         "preprocessing": [
  1094.                             {
  1095.                                 "type": "JSONPATH",
  1096.                                 "parameters": [
  1097.                                     "$.flow.queue_backpressure.last_15_minutes"
  1098.                                 ]
  1099.                             }
  1100.                         ],
  1101.                         "master_item": {
  1102.                             "key": "logstashFLOW"
  1103.                         },
  1104.                         "tags": [
  1105.                             {
  1106.                                 "tag": "Program",
  1107.                                 "value": "Logstash"
  1108.                             },
  1109.                             {
  1110.                                 "tag": "Service",
  1111.                                 "value": "NULL"
  1112.                             },
  1113.                             {
  1114.                                 "tag": "Service Type",
  1115.                                 "value": "NULL"
  1116.                             }
  1117.                         ]
  1118.                     },
  1119.                     {
  1120.                         "uuid": "15088fc031994ec3923e4fd477750446",
  1121.                         "name": "[Item] [LS] [Flow] Flow.Queue_Backpressure.Lifetime",
  1122.                         "type": "DEPENDENT",
  1123.                         "key": "logstash.flow.queue_backpressure.lifetime",
  1124.                         "delay": "0",
  1125.                         "history": "90d",
  1126.                         "value_type": "FLOAT",
  1127.                         "preprocessing": [
  1128.                             {
  1129.                                 "type": "JSONPATH",
  1130.                                 "parameters": [
  1131.                                     "$.flow.queue_backpressure.lifetime"
  1132.                                 ]
  1133.                             }
  1134.                         ],
  1135.                         "master_item": {
  1136.                             "key": "logstashFLOW"
  1137.                         },
  1138.                         "tags": [
  1139.                             {
  1140.                                 "tag": "Program",
  1141.                                 "value": "Logstash"
  1142.                             },
  1143.                             {
  1144.                                 "tag": "Service",
  1145.                                 "value": "NULL"
  1146.                             },
  1147.                             {
  1148.                                 "tag": "Service Type",
  1149.                                 "value": "NULL"
  1150.                             }
  1151.                         ]
  1152.                     },
  1153.                     {
  1154.                         "uuid": "534bbee5f3554af98aa5de38a2769f90",
  1155.                         "name": "[Item] [LS] [Flow] Flow.Queue_Backpressure.Last_1_Hour",
  1156.                         "type": "DEPENDENT",
  1157.                         "key": "logstash.flow.queue_backpressure_1_hour",
  1158.                         "delay": "0",
  1159.                         "history": "90d",
  1160.                         "value_type": "FLOAT",
  1161.                         "preprocessing": [
  1162.                             {
  1163.                                 "type": "JSONPATH",
  1164.                                 "parameters": [
  1165.                                     "$.flow.queue_backpressure.last_1_hour"
  1166.                                 ]
  1167.                             }
  1168.                         ],
  1169.                         "master_item": {
  1170.                             "key": "logstashFLOW"
  1171.                         },
  1172.                         "tags": [
  1173.                             {
  1174.                                 "tag": "Program",
  1175.                                 "value": "Logstash"
  1176.                             },
  1177.                             {
  1178.                                 "tag": "Service",
  1179.                                 "value": "NULL"
  1180.                             },
  1181.                             {
  1182.                                 "tag": "Service Type",
  1183.                                 "value": "NULL"
  1184.                             }
  1185.                         ]
  1186.                     },
  1187.                     {
  1188.                         "uuid": "64944026308e4042babb83681a22fc47",
  1189.                         "name": "[Item] [LS] [Flow] Status",
  1190.                         "type": "DEPENDENT",
  1191.                         "key": "logstash.flow.status",
  1192.                         "delay": "0",
  1193.                         "history": "90d",
  1194.                         "value_type": "TEXT",
  1195.                         "trends": "0",
  1196.                         "preprocessing": [
  1197.                             {
  1198.                                 "type": "JSONPATH",
  1199.                                 "parameters": [
  1200.                                     "$.status"
  1201.                                 ]
  1202.                             }
  1203.                         ],
  1204.                         "master_item": {
  1205.                             "key": "logstashFLOW"
  1206.                         },
  1207.                         "tags": [
  1208.                             {
  1209.                                 "tag": "Program",
  1210.                                 "value": "Logstash"
  1211.                             },
  1212.                             {
  1213.                                 "tag": "Service",
  1214.                                 "value": "NULL"
  1215.                             },
  1216.                             {
  1217.                                 "tag": "Service Type",
  1218.                                 "value": "NULL"
  1219.                             }
  1220.                         ],
  1221.                         "triggers": [
  1222.                             {
  1223.                                 "uuid": "1cb59308a9a4482e839053a82fe8ca8e",
  1224.                                 "expression": "find(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.flow.status,1m,\"iregexp\",\"^green$\")=0",
  1225.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  1226.                                 "recovery_expression": "find(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.flow.status,1m,\"iregexp\",\"^green$\")=1",
  1227.                                 "name": "[Trigger] [LS] [Flow] Flow Pipeline Unhealthy",
  1228.                                 "priority": "DISASTER",
  1229.                                 "description": "This indicates that the pipeline has entered a generally unhealthy state. Manual investigation of the issue is necessary. This is a high level check.",
  1230.                                 "manual_close": "YES"
  1231.                             }
  1232.                         ]
  1233.                     },
  1234.                     {
  1235.                         "uuid": "f50682b320124856b138c54d83699eb8",
  1236.                         "name": "[Item] [LS] [Flow] Flow.Worker_Concurrency.Current",
  1237.                         "type": "DEPENDENT",
  1238.                         "key": "logstash.flow.worker_concurrency.current",
  1239.                         "delay": "0",
  1240.                         "history": "90d",
  1241.                         "value_type": "FLOAT",
  1242.                         "preprocessing": [
  1243.                             {
  1244.                                 "type": "JSONPATH",
  1245.                                 "parameters": [
  1246.                                     "$.flow.worker_concurrency.current"
  1247.                                 ]
  1248.                             }
  1249.                         ],
  1250.                         "master_item": {
  1251.                             "key": "logstashFLOW"
  1252.                         },
  1253.                         "tags": [
  1254.                             {
  1255.                                 "tag": "Program",
  1256.                                 "value": "Logstash"
  1257.                             },
  1258.                             {
  1259.                                 "tag": "Service",
  1260.                                 "value": "NULL"
  1261.                             },
  1262.                             {
  1263.                                 "tag": "Service Type",
  1264.                                 "value": "NULL"
  1265.                             }
  1266.                         ]
  1267.                     },
  1268.                     {
  1269.                         "uuid": "58cb23667ef24ecbb05df5fc749db0e0",
  1270.                         "name": "[Item] [LS] [Flow] Flow.Worker_Concurrency.Last_1_Minute",
  1271.                         "type": "DEPENDENT",
  1272.                         "key": "logstash.flow.worker_concurrency.last_1_minute",
  1273.                         "delay": "0",
  1274.                         "history": "90d",
  1275.                         "value_type": "FLOAT",
  1276.                         "preprocessing": [
  1277.                             {
  1278.                                 "type": "JSONPATH",
  1279.                                 "parameters": [
  1280.                                     "$.flow.worker_concurrency.last_1_minute"
  1281.                                 ]
  1282.                             }
  1283.                         ],
  1284.                         "master_item": {
  1285.                             "key": "logstashFLOW"
  1286.                         },
  1287.                         "tags": [
  1288.                             {
  1289.                                 "tag": "Program",
  1290.                                 "value": "Logstash"
  1291.                             },
  1292.                             {
  1293.                                 "tag": "Service",
  1294.                                 "value": "NULL"
  1295.                             },
  1296.                             {
  1297.                                 "tag": "Service Type",
  1298.                                 "value": "NULL"
  1299.                             }
  1300.                         ]
  1301.                     },
  1302.                     {
  1303.                         "uuid": "158141d4035a4b808dac3f5701c9b831",
  1304.                         "name": "[Item] [LS] [Flow] Flow.Worker_Concurrency.Last_5_Minutes",
  1305.                         "type": "DEPENDENT",
  1306.                         "key": "logstash.flow.worker_concurrency.last_5_minutes",
  1307.                         "delay": "0",
  1308.                         "history": "90d",
  1309.                         "value_type": "FLOAT",
  1310.                         "preprocessing": [
  1311.                             {
  1312.                                 "type": "JSONPATH",
  1313.                                 "parameters": [
  1314.                                     "$.flow.worker_concurrency.last_5_minutes"
  1315.                                 ]
  1316.                             }
  1317.                         ],
  1318.                         "master_item": {
  1319.                             "key": "logstashFLOW"
  1320.                         },
  1321.                         "tags": [
  1322.                             {
  1323.                                 "tag": "Program",
  1324.                                 "value": "Logstash"
  1325.                             },
  1326.                             {
  1327.                                 "tag": "Service",
  1328.                                 "value": "NULL"
  1329.                             },
  1330.                             {
  1331.                                 "tag": "Service Type",
  1332.                                 "value": "NULL"
  1333.                             }
  1334.                         ]
  1335.                     },
  1336.                     {
  1337.                         "uuid": "47f0fa64302e447595936cce0c6f0975",
  1338.                         "name": "[Item] [LS] [Flow] Flow.Worker_Concurrency.Last_15_Minutes",
  1339.                         "type": "DEPENDENT",
  1340.                         "key": "logstash.flow.worker_concurrency.last_15_minutes",
  1341.                         "delay": "0",
  1342.                         "history": "90d",
  1343.                         "value_type": "FLOAT",
  1344.                         "preprocessing": [
  1345.                             {
  1346.                                 "type": "JSONPATH",
  1347.                                 "parameters": [
  1348.                                     "$.flow.worker_concurrency.last_15_minutes"
  1349.                                 ]
  1350.                             }
  1351.                         ],
  1352.                         "master_item": {
  1353.                             "key": "logstashFLOW"
  1354.                         },
  1355.                         "tags": [
  1356.                             {
  1357.                                 "tag": "Program",
  1358.                                 "value": "Logstash"
  1359.                             },
  1360.                             {
  1361.                                 "tag": "Service",
  1362.                                 "value": "NULL"
  1363.                             },
  1364.                             {
  1365.                                 "tag": "Service Type",
  1366.                                 "value": "NULL"
  1367.                             }
  1368.                         ]
  1369.                     },
  1370.                     {
  1371.                         "uuid": "47e8a529cac8469ab012a383416f2a12",
  1372.                         "name": "[Item] [LS] [Flow] Flow.Worker_Concurrency.Lifetime",
  1373.                         "type": "DEPENDENT",
  1374.                         "key": "logstash.flow.worker_concurrency.lifetime",
  1375.                         "delay": "0",
  1376.                         "history": "90d",
  1377.                         "value_type": "FLOAT",
  1378.                         "preprocessing": [
  1379.                             {
  1380.                                 "type": "JSONPATH",
  1381.                                 "parameters": [
  1382.                                     "$.flow.worker_concurrency.lifetime"
  1383.                                 ]
  1384.                             }
  1385.                         ],
  1386.                         "master_item": {
  1387.                             "key": "logstashFLOW"
  1388.                         },
  1389.                         "tags": [
  1390.                             {
  1391.                                 "tag": "Program",
  1392.                                 "value": "Logstash"
  1393.                             },
  1394.                             {
  1395.                                 "tag": "Service",
  1396.                                 "value": "NULL"
  1397.                             },
  1398.                             {
  1399.                                 "tag": "Service Type",
  1400.                                 "value": "NULL"
  1401.                             }
  1402.                         ]
  1403.                     },
  1404.                     {
  1405.                         "uuid": "a4f33b23e83447cfb2ad1e6f062ee091",
  1406.                         "name": "[Item] [LS] [Flow] Flow.Worker_Concurrency.Last_1_Hour",
  1407.                         "type": "DEPENDENT",
  1408.                         "key": "logstash.flow.worker_concurrency_1_hour",
  1409.                         "delay": "0",
  1410.                         "history": "90d",
  1411.                         "value_type": "FLOAT",
  1412.                         "preprocessing": [
  1413.                             {
  1414.                                 "type": "JSONPATH",
  1415.                                 "parameters": [
  1416.                                     "$.flow.worker_concurrency.last_1_hour"
  1417.                                 ]
  1418.                             }
  1419.                         ],
  1420.                         "master_item": {
  1421.                             "key": "logstashFLOW"
  1422.                         },
  1423.                         "tags": [
  1424.                             {
  1425.                                 "tag": "Program",
  1426.                                 "value": "Logstash"
  1427.                             },
  1428.                             {
  1429.                                 "tag": "Service",
  1430.                                 "value": "NULL"
  1431.                             },
  1432.                             {
  1433.                                 "tag": "Service Type",
  1434.                                 "value": "NULL"
  1435.                             }
  1436.                         ]
  1437.                     },
  1438.                     {
  1439.                         "uuid": "b7cca76a7cd24de9b917da8eb14e48b1",
  1440.                         "name": "[Item] [LS] [JVM] JVM.Memory.Heap_Committed_In_Bytes",
  1441.                         "type": "DEPENDENT",
  1442.                         "key": "logstash.jvm.Memory.Heap_Committed_In_Bytes",
  1443.                         "delay": "0",
  1444.                         "history": "90d",
  1445.                         "units": "B",
  1446.                         "preprocessing": [
  1447.                             {
  1448.                                 "type": "JSONPATH",
  1449.                                 "parameters": [
  1450.                                     "$.jvm.mem.heap_committed_in_bytes"
  1451.                                 ]
  1452.                             }
  1453.                         ],
  1454.                         "master_item": {
  1455.                             "key": "logstashJVM"
  1456.                         },
  1457.                         "tags": [
  1458.                             {
  1459.                                 "tag": "Program",
  1460.                                 "value": "Logstash"
  1461.                             },
  1462.                             {
  1463.                                 "tag": "Service",
  1464.                                 "value": "NULL"
  1465.                             },
  1466.                             {
  1467.                                 "tag": "Service Type",
  1468.                                 "value": "NULL"
  1469.                             }
  1470.                         ]
  1471.                     },
  1472.                     {
  1473.                         "uuid": "03477455d3054ffabc155629cca7a124",
  1474.                         "name": "[Item] [LS] [JVM] JVM.Memory.Heap_Max_In_Bytes",
  1475.                         "type": "DEPENDENT",
  1476.                         "key": "logstash.jvm.Memory.Heap_Max_In_Bytes",
  1477.                         "delay": "0",
  1478.                         "history": "90d",
  1479.                         "units": "B",
  1480.                         "preprocessing": [
  1481.                             {
  1482.                                 "type": "JSONPATH",
  1483.                                 "parameters": [
  1484.                                     "$.jvm.mem.heap_max_in_bytes"
  1485.                                 ]
  1486.                             }
  1487.                         ],
  1488.                         "master_item": {
  1489.                             "key": "logstashJVM"
  1490.                         },
  1491.                         "tags": [
  1492.                             {
  1493.                                 "tag": "Program",
  1494.                                 "value": "Logstash"
  1495.                             },
  1496.                             {
  1497.                                 "tag": "Service",
  1498.                                 "value": "NULL"
  1499.                             },
  1500.                             {
  1501.                                 "tag": "Service Type",
  1502.                                 "value": "NULL"
  1503.                             }
  1504.                         ]
  1505.                     },
  1506.                     {
  1507.                         "uuid": "c434903328114a7ebdd6593c511907ae",
  1508.                         "name": "[Item] [LS] [JVM] JVM.Memory.Heap_Used_In_Bytes",
  1509.                         "type": "DEPENDENT",
  1510.                         "key": "logstash.jvm.Memory.Heap_Used_In_Bytes",
  1511.                         "delay": "0",
  1512.                         "history": "90d",
  1513.                         "units": "B",
  1514.                         "preprocessing": [
  1515.                             {
  1516.                                 "type": "JSONPATH",
  1517.                                 "parameters": [
  1518.                                     "$.jvm.mem.heap_used_in_bytes"
  1519.                                 ]
  1520.                             }
  1521.                         ],
  1522.                         "master_item": {
  1523.                             "key": "logstashJVM"
  1524.                         },
  1525.                         "tags": [
  1526.                             {
  1527.                                 "tag": "Program",
  1528.                                 "value": "Logstash"
  1529.                             },
  1530.                             {
  1531.                                 "tag": "Service",
  1532.                                 "value": "NULL"
  1533.                             },
  1534.                             {
  1535.                                 "tag": "Service Type",
  1536.                                 "value": "NULL"
  1537.                             }
  1538.                         ]
  1539.                     },
  1540.                     {
  1541.                         "uuid": "64b0c0500acf447f96242dee78ea7012",
  1542.                         "name": "[Item] [LS] [JVM] JVM.Memory.Heap_Used_Percent",
  1543.                         "type": "DEPENDENT",
  1544.                         "key": "logstash.jvm.Memory.Heap_Used_Percent",
  1545.                         "delay": "0",
  1546.                         "history": "90d",
  1547.                         "preprocessing": [
  1548.                             {
  1549.                                 "type": "JSONPATH",
  1550.                                 "parameters": [
  1551.                                     "$.jvm.mem.heap_used_percent"
  1552.                                 ]
  1553.                             }
  1554.                         ],
  1555.                         "master_item": {
  1556.                             "key": "logstashJVM"
  1557.                         },
  1558.                         "tags": [
  1559.                             {
  1560.                                 "tag": "Program",
  1561.                                 "value": "Logstash"
  1562.                             },
  1563.                             {
  1564.                                 "tag": "Service",
  1565.                                 "value": "NULL"
  1566.                             },
  1567.                             {
  1568.                                 "tag": "Service Type",
  1569.                                 "value": "NULL"
  1570.                             }
  1571.                         ],
  1572.                         "triggers": [
  1573.                             {
  1574.                                 "uuid": "08414ff67bc14ff9bfc0e826bbc22751",
  1575.                                 "expression": "last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.jvm.Memory.Heap_Used_Percent)>=85",
  1576.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  1577.                                 "recovery_expression": "last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.jvm.Memory.Heap_Used_Percent)<85",
  1578.                                 "name": "[Trigger] [LS] [JVM] High Heap Memory Utilization",
  1579.                                 "priority": "AVERAGE",
  1580.                                 "description": "The memory utilization of the Java Virtual Machine (JVM) on the heap has become high. Monitoring and trend usage should be considered. Tuning or extending the JVM startup options to increase the memory heap size might be advisable depending on trends.",
  1581.                                 "manual_close": "YES"
  1582.                             }
  1583.                         ]
  1584.                     },
  1585.                     {
  1586.                         "uuid": "ff27dff301a84f6ea7bdffba26544e26",
  1587.                         "name": "[Item] [LS] [JVM] JVM.Memory.Non_Heap_Committed_In_Bytes",
  1588.                         "type": "DEPENDENT",
  1589.                         "key": "logstash.jvm.Memory.Non_Heap_Committed_In_Bytes",
  1590.                         "delay": "0",
  1591.                         "history": "90d",
  1592.                         "units": "B",
  1593.                         "preprocessing": [
  1594.                             {
  1595.                                 "type": "JSONPATH",
  1596.                                 "parameters": [
  1597.                                     "$.jvm.mem.non_heap_committed_in_bytes"
  1598.                                 ]
  1599.                             }
  1600.                         ],
  1601.                         "master_item": {
  1602.                             "key": "logstashJVM"
  1603.                         },
  1604.                         "tags": [
  1605.                             {
  1606.                                 "tag": "Program",
  1607.                                 "value": "Logstash"
  1608.                             },
  1609.                             {
  1610.                                 "tag": "Service",
  1611.                                 "value": "NULL"
  1612.                             },
  1613.                             {
  1614.                                 "tag": "Service Type",
  1615.                                 "value": "NULL"
  1616.                             }
  1617.                         ]
  1618.                     },
  1619.                     {
  1620.                         "uuid": "c38dff02d0444c2f84d4175c58353d9b",
  1621.                         "name": "[Item] [LS] [JVM] JVM.Memory.Non_Heap_Used_In_Bytes",
  1622.                         "type": "DEPENDENT",
  1623.                         "key": "logstash.jvm.Memory.Non_Heap_Used_In_Bytes",
  1624.                         "delay": "0",
  1625.                         "history": "90d",
  1626.                         "units": "B",
  1627.                         "preprocessing": [
  1628.                             {
  1629.                                 "type": "JSONPATH",
  1630.                                 "parameters": [
  1631.                                     "$.jvm.mem.non_heap_used_in_bytes"
  1632.                                 ]
  1633.                             }
  1634.                         ],
  1635.                         "master_item": {
  1636.                             "key": "logstashJVM"
  1637.                         },
  1638.                         "tags": [
  1639.                             {
  1640.                                 "tag": "Program",
  1641.                                 "value": "Logstash"
  1642.                             },
  1643.                             {
  1644.                                 "tag": "Service",
  1645.                                 "value": "NULL"
  1646.                             },
  1647.                             {
  1648.                                 "tag": "Service Type",
  1649.                                 "value": "NULL"
  1650.                             }
  1651.                         ]
  1652.                     },
  1653.                     {
  1654.                         "uuid": "6844df69bc6e49d28c028bfe3fbbd83d",
  1655.                         "name": "[Item] [LS] [JVM] Uptime (Preprocessed to Seconds)",
  1656.                         "type": "DEPENDENT",
  1657.                         "key": "logstash.jvm.uptime_in_millis",
  1658.                         "delay": "0",
  1659.                         "history": "90d",
  1660.                         "preprocessing": [
  1661.                             {
  1662.                                 "type": "JSONPATH",
  1663.                                 "parameters": [
  1664.                                     "$.jvm.uptime_in_millis"
  1665.                                 ]
  1666.                             },
  1667.                             {
  1668.                                 "type": "MULTIPLIER",
  1669.                                 "parameters": [
  1670.                                     "0.001"
  1671.                                 ]
  1672.                             }
  1673.                         ],
  1674.                         "master_item": {
  1675.                             "key": "logstashJVM"
  1676.                         },
  1677.                         "tags": [
  1678.                             {
  1679.                                 "tag": "Program",
  1680.                                 "value": "Logstash"
  1681.                             },
  1682.                             {
  1683.                                 "tag": "Service",
  1684.                                 "value": "NULL"
  1685.                             },
  1686.                             {
  1687.                                 "tag": "Service Type",
  1688.                                 "value": "NULL"
  1689.                             }
  1690.                         ],
  1691.                         "triggers": [
  1692.                             {
  1693.                                 "uuid": "09d79cb5ae7f4c01ac8b87667d8705d6",
  1694.                                 "expression": "last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.jvm.uptime_in_millis)<600",
  1695.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  1696.                                 "recovery_expression": "last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.jvm.uptime_in_millis)>=600",
  1697.                                 "name": "[Trigger] [LS] [JVM] Logstash Has Recently Restarted",
  1698.                                 "priority": "WARNING",
  1699.                                 "description": "Tracks and reports when the Logstash service was restarted. Note that this will only fire when the logstash JVM process has a uptime less than 10 minutes (600 seconds).",
  1700.                                 "manual_close": "YES"
  1701.                             }
  1702.                         ]
  1703.                     },
  1704.                     {
  1705.                         "uuid": "4e57c5d6e6e44eb48ddd1c4acfb74a14",
  1706.                         "name": "[Item] [LS] [Events] Master",
  1707.                         "type": "ZABBIX_ACTIVE",
  1708.                         "key": "logstashEVENT",
  1709.                         "history": "90d",
  1710.                         "value_type": "TEXT",
  1711.                         "trends": "0",
  1712.                         "tags": [
  1713.                             {
  1714.                                 "tag": "Program",
  1715.                                 "value": "Logstash"
  1716.                             },
  1717.                             {
  1718.                                 "tag": "Service",
  1719.                                 "value": "NULL"
  1720.                             },
  1721.                             {
  1722.                                 "tag": "Service Type",
  1723.                                 "value": "NULL"
  1724.                             }
  1725.                         ]
  1726.                     },
  1727.                     {
  1728.                         "uuid": "b14ea8ca3a6c4d2ea83057607a881169",
  1729.                         "name": "[Item] [LS] [Flow] Master",
  1730.                         "type": "ZABBIX_ACTIVE",
  1731.                         "key": "logstashFLOW",
  1732.                         "history": "90d",
  1733.                         "value_type": "TEXT",
  1734.                         "trends": "0",
  1735.                         "tags": [
  1736.                             {
  1737.                                 "tag": "Program",
  1738.                                 "value": "Logstash"
  1739.                             },
  1740.                             {
  1741.                                 "tag": "Service",
  1742.                                 "value": "NULL"
  1743.                             },
  1744.                             {
  1745.                                 "tag": "Service Type",
  1746.                                 "value": "NULL"
  1747.                             }
  1748.                         ]
  1749.                     },
  1750.                     {
  1751.                         "uuid": "eeff55ab7ebf4018979126bd227bd77e",
  1752.                         "name": "[Item] [LS] [JVM] Master",
  1753.                         "type": "ZABBIX_ACTIVE",
  1754.                         "key": "logstashJVM",
  1755.                         "history": "90d",
  1756.                         "value_type": "TEXT",
  1757.                         "trends": "0",
  1758.                         "tags": [
  1759.                             {
  1760.                                 "tag": "Program",
  1761.                                 "value": "Logstash"
  1762.                             },
  1763.                             {
  1764.                                 "tag": "Service",
  1765.                                 "value": "NULL"
  1766.                             },
  1767.                             {
  1768.                                 "tag": "Service Type",
  1769.                                 "value": "NULL"
  1770.                             }
  1771.                         ]
  1772.                     },
  1773.                     {
  1774.                         "uuid": "1c6f9a568e0146808df4eb35f841b538",
  1775.                         "name": "[Item] [LS] [Pipeline] Master",
  1776.                         "type": "ZABBIX_ACTIVE",
  1777.                         "key": "logstashPIPELINE",
  1778.                         "history": "90d",
  1779.                         "value_type": "TEXT",
  1780.                         "trends": "0",
  1781.                         "tags": [
  1782.                             {
  1783.                                 "tag": "Program",
  1784.                                 "value": "Logstash"
  1785.                             },
  1786.                             {
  1787.                                 "tag": "Service",
  1788.                                 "value": "NULL"
  1789.                             },
  1790.                             {
  1791.                                 "tag": "Service Type",
  1792.                                 "value": "NULL"
  1793.                             }
  1794.                         ]
  1795.                     },
  1796.                     {
  1797.                         "uuid": "c37d288480b04526b7972fb3489553e2",
  1798.                         "name": "[Item] [LS] [Process] Master",
  1799.                         "type": "ZABBIX_ACTIVE",
  1800.                         "key": "logstashPROCESS",
  1801.                         "history": "90d",
  1802.                         "value_type": "TEXT",
  1803.                         "trends": "0",
  1804.                         "tags": [
  1805.                             {
  1806.                                 "tag": "Program",
  1807.                                 "value": "Logstash"
  1808.                             },
  1809.                             {
  1810.                                 "tag": "Service",
  1811.                                 "value": "NULL"
  1812.                             },
  1813.                             {
  1814.                                 "tag": "Service Type",
  1815.                                 "value": "NULL"
  1816.                             }
  1817.                         ]
  1818.                     },
  1819.                     {
  1820.                         "uuid": "e0b1300ddeae42bcb5cc9185b0afaef8",
  1821.                         "name": "[Item] [LS] Error Authenticating to AAD (v1)",
  1822.                         "type": "ZABBIX_ACTIVE",
  1823.                         "key": "log[/var/log/logstash/logstash-plain.log,\"Error while authenticating with AAD\"]",
  1824.                         "value_type": "LOG",
  1825.                         "trends": "0",
  1826.                         "tags": [
  1827.                             {
  1828.                                 "tag": "Program",
  1829.                                 "value": "Logstash"
  1830.                             },
  1831.                             {
  1832.                                 "tag": "Service",
  1833.                                 "value": "NULL"
  1834.                             },
  1835.                             {
  1836.                                 "tag": "Service Type",
  1837.                                 "value": "NULL"
  1838.                             }
  1839.                         ]
  1840.                     },
  1841.                     {
  1842.                         "uuid": "5ad9b34ca993428388484c59c21917ac",
  1843.                         "name": "[Item] [LS] Expired AAD Credentials",
  1844.                         "type": "ZABBIX_ACTIVE",
  1845.                         "key": "log[/var/log/logstash/logstash-plain.log,\"The provided client secret keys for app (.*?) are expired\"]",
  1846.                         "value_type": "LOG",
  1847.                         "trends": "0",
  1848.                         "tags": [
  1849.                             {
  1850.                                 "tag": "Program",
  1851.                                 "value": "Logstash"
  1852.                             },
  1853.                             {
  1854.                                 "tag": "Service",
  1855.                                 "value": "NULL"
  1856.                             },
  1857.                             {
  1858.                                 "tag": "Service Type",
  1859.                                 "value": "NULL"
  1860.                             }
  1861.                         ],
  1862.                         "triggers": [
  1863.                             {
  1864.                                 "uuid": "ff8b9bd5ca5b4c159f69735b96c6641a",
  1865.                                 "expression": "count(/Template - RHEL 9 - Syslog Collector - Logstash/log[/var/log/logstash/logstash-plain.log,\"The provided client secret keys for app (.*?) are expired\"],15m)>1",
  1866.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  1867.                                 "recovery_expression": "nodata(/Template - RHEL 9 - Syslog Collector - Logstash/log[/var/log/logstash/logstash-plain.log,\"The provided client secret keys for app (.*?) are expired\"],30m)=1",
  1868.                                 "name": "[Trigger] [LS] Expired AAD Credentials",
  1869.                                 "priority": "HIGH",
  1870.                                 "description": "This triggers will alert whenever Logstash has received error code ''7000222\". This trigger can only auto-close. The only known remediation is to regenerate the credentials in Azure (client tenant)\n\nhttps://login.microsoftonline.com/error?code=7000222"
  1871.                             }
  1872.                         ]
  1873.                     },
  1874.                     {
  1875.                         "uuid": "ba7d72be9ddf4e52b10535324a32d7a3",
  1876.                         "name": "[Item] [LS] [Pipeline] Filter Pipelines JSON",
  1877.                         "type": "DEPENDENT",
  1878.                         "key": "ls.pipeline.main.plugins.filters",
  1879.                         "delay": "0",
  1880.                         "history": "90d",
  1881.                         "value_type": "TEXT",
  1882.                         "trends": "0",
  1883.                         "preprocessing": [
  1884.                             {
  1885.                                 "type": "JSONPATH",
  1886.                                 "parameters": [
  1887.                                     "$.pipelines.main.plugins.filters"
  1888.                                 ]
  1889.                             }
  1890.                         ],
  1891.                         "master_item": {
  1892.                             "key": "logstashPIPELINE"
  1893.                         },
  1894.                         "tags": [
  1895.                             {
  1896.                                 "tag": "Program",
  1897.                                 "value": "Logstash"
  1898.                             },
  1899.                             {
  1900.                                 "tag": "Service",
  1901.                                 "value": "NULL"
  1902.                             },
  1903.                             {
  1904.                                 "tag": "Service Type",
  1905.                                 "value": "NULL"
  1906.                             }
  1907.                         ]
  1908.                     },
  1909.                     {
  1910.                         "uuid": "15e9fa7eeacd44c9beb927ef763f8228",
  1911.                         "name": "[Item] [LS] [Pipeline] Input Pipelines JSON",
  1912.                         "type": "DEPENDENT",
  1913.                         "key": "ls.pipeline.main.plugins.inputs",
  1914.                         "delay": "0",
  1915.                         "history": "90d",
  1916.                         "value_type": "TEXT",
  1917.                         "trends": "0",
  1918.                         "preprocessing": [
  1919.                             {
  1920.                                 "type": "JSONPATH",
  1921.                                 "parameters": [
  1922.                                     "$.pipelines.main.plugins.inputs"
  1923.                                 ]
  1924.                             }
  1925.                         ],
  1926.                         "master_item": {
  1927.                             "key": "logstashPIPELINE"
  1928.                         },
  1929.                         "tags": [
  1930.                             {
  1931.                                 "tag": "Program",
  1932.                                 "value": "Logstash"
  1933.                             },
  1934.                             {
  1935.                                 "tag": "Service",
  1936.                                 "value": "NULL"
  1937.                             },
  1938.                             {
  1939.                                 "tag": "Service Type",
  1940.                                 "value": "NULL"
  1941.                             }
  1942.                         ]
  1943.                     },
  1944.                     {
  1945.                         "uuid": "f276e823e98d46c68d2ce3b95eac1a8c",
  1946.                         "name": "[Item] [LS] [Pipeline] Output Pipelines JSON",
  1947.                         "type": "DEPENDENT",
  1948.                         "key": "ls.pipeline.main.plugins.outputs",
  1949.                         "delay": "0",
  1950.                         "history": "90d",
  1951.                         "value_type": "TEXT",
  1952.                         "trends": "0",
  1953.                         "preprocessing": [
  1954.                             {
  1955.                                 "type": "JSONPATH",
  1956.                                 "parameters": [
  1957.                                     "$.pipelines.main.plugins.outputs"
  1958.                                 ]
  1959.                             }
  1960.                         ],
  1961.                         "master_item": {
  1962.                             "key": "logstashPIPELINE"
  1963.                         },
  1964.                         "tags": [
  1965.                             {
  1966.                                 "tag": "Program",
  1967.                                 "value": "Logstash"
  1968.                             },
  1969.                             {
  1970.                                 "tag": "Service",
  1971.                                 "value": "NULL"
  1972.                             },
  1973.                             {
  1974.                                 "tag": "Service Type",
  1975.                                 "value": "NULL"
  1976.                             }
  1977.                         ]
  1978.                     },
  1979.                     {
  1980.                         "uuid": "49d4fa85fe9c4bc2b85f5b61ec6cdfd7",
  1981.                         "name": "[Item] [LS] [Process] [CPU] Load Average over 1 Minute",
  1982.                         "type": "DEPENDENT",
  1983.                         "key": "ls.process.process.cpu.load_average.1m",
  1984.                         "delay": "0",
  1985.                         "history": "90d",
  1986.                         "value_type": "FLOAT",
  1987.                         "preprocessing": [
  1988.                             {
  1989.                                 "type": "JSONPATH",
  1990.                                 "parameters": [
  1991.                                     "$.process.cpu.load_average.1m"
  1992.                                 ]
  1993.                             }
  1994.                         ],
  1995.                         "master_item": {
  1996.                             "key": "logstashPROCESS"
  1997.                         },
  1998.                         "tags": [
  1999.                             {
  2000.                                 "tag": "Program",
  2001.                                 "value": "Logstash"
  2002.                             },
  2003.                             {
  2004.                                 "tag": "Service",
  2005.                                 "value": "NULL"
  2006.                             },
  2007.                             {
  2008.                                 "tag": "Service Type",
  2009.                                 "value": "NULL"
  2010.                             }
  2011.                         ]
  2012.                     },
  2013.                     {
  2014.                         "uuid": "14108029de1f4fbca4bad0d11e6d8c20",
  2015.                         "name": "[Item] [LS] [Process] [CPU] Load Average over 5 Minutes",
  2016.                         "type": "DEPENDENT",
  2017.                         "key": "ls.process.process.cpu.load_average.5m",
  2018.                         "delay": "0",
  2019.                         "history": "90d",
  2020.                         "value_type": "FLOAT",
  2021.                         "preprocessing": [
  2022.                             {
  2023.                                 "type": "JSONPATH",
  2024.                                 "parameters": [
  2025.                                     "$.process.cpu.load_average.5m"
  2026.                                 ]
  2027.                             }
  2028.                         ],
  2029.                         "master_item": {
  2030.                             "key": "logstashPROCESS"
  2031.                         },
  2032.                         "tags": [
  2033.                             {
  2034.                                 "tag": "Program",
  2035.                                 "value": "Logstash"
  2036.                             },
  2037.                             {
  2038.                                 "tag": "Service",
  2039.                                 "value": "NULL"
  2040.                             },
  2041.                             {
  2042.                                 "tag": "Service Type",
  2043.                                 "value": "NULL"
  2044.                             }
  2045.                         ]
  2046.                     },
  2047.                     {
  2048.                         "uuid": "8761820c542c4b27acf5a9a75a1c0d1d",
  2049.                         "name": "[Item] [LS] [Process] [CPU] Load Average over 15 Minutes",
  2050.                         "type": "DEPENDENT",
  2051.                         "key": "ls.process.process.cpu.load_average.15m",
  2052.                         "delay": "0",
  2053.                         "history": "90d",
  2054.                         "value_type": "FLOAT",
  2055.                         "preprocessing": [
  2056.                             {
  2057.                                 "type": "JSONPATH",
  2058.                                 "parameters": [
  2059.                                     "$.process.cpu.load_average.15m"
  2060.                                 ]
  2061.                             }
  2062.                         ],
  2063.                         "master_item": {
  2064.                             "key": "logstashPROCESS"
  2065.                         },
  2066.                         "tags": [
  2067.                             {
  2068.                                 "tag": "Program",
  2069.                                 "value": "Logstash"
  2070.                             },
  2071.                             {
  2072.                                 "tag": "Service",
  2073.                                 "value": "NULL"
  2074.                             },
  2075.                             {
  2076.                                 "tag": "Service Type",
  2077.                                 "value": "NULL"
  2078.                             }
  2079.                         ],
  2080.                         "triggers": [
  2081.                             {
  2082.                                 "uuid": "23bb8ca96da94b058ef67c9e0d4a6ea2",
  2083.                                 "expression": "last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.cpu.load_average.15m)>=2",
  2084.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  2085.                                 "recovery_expression": "last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.cpu.load_average.15m)<2",
  2086.                                 "name": "[Trigger] [LS] [Process] Logstash Approaching 50+% CPU Load",
  2087.                                 "priority": "AVERAGE",
  2088.                                 "manual_close": "YES"
  2089.                             }
  2090.                         ]
  2091.                     },
  2092.                     {
  2093.                         "uuid": "ead5ba611f734ff188940aead706349a",
  2094.                         "name": "[Item] [LS] [Process] [CPU] Percent Usage",
  2095.                         "type": "DEPENDENT",
  2096.                         "key": "ls.process.process.cpu.percent",
  2097.                         "delay": "0",
  2098.                         "history": "90d",
  2099.                         "value_type": "FLOAT",
  2100.                         "preprocessing": [
  2101.                             {
  2102.                                 "type": "JSONPATH",
  2103.                                 "parameters": [
  2104.                                     "$.process.cpu.percent"
  2105.                                 ]
  2106.                             }
  2107.                         ],
  2108.                         "master_item": {
  2109.                             "key": "logstashPROCESS"
  2110.                         },
  2111.                         "tags": [
  2112.                             {
  2113.                                 "tag": "Program",
  2114.                                 "value": "Logstash"
  2115.                             },
  2116.                             {
  2117.                                 "tag": "Service",
  2118.                                 "value": "NULL"
  2119.                             },
  2120.                             {
  2121.                                 "tag": "Service Type",
  2122.                                 "value": "NULL"
  2123.                             }
  2124.                         ]
  2125.                     },
  2126.                     {
  2127.                         "uuid": "5320d94489334139981b52d5ee7b4d56",
  2128.                         "name": "[Item] [LS] [Process] Max (Allowed) File Descriptors",
  2129.                         "type": "DEPENDENT",
  2130.                         "key": "ls.process.process.max_file_descriptors",
  2131.                         "delay": "0",
  2132.                         "history": "90d",
  2133.                         "preprocessing": [
  2134.                             {
  2135.                                 "type": "JSONPATH",
  2136.                                 "parameters": [
  2137.                                     "$.process.max_file_descriptors"
  2138.                                 ]
  2139.                             }
  2140.                         ],
  2141.                         "master_item": {
  2142.                             "key": "logstashPROCESS"
  2143.                         },
  2144.                         "tags": [
  2145.                             {
  2146.                                 "tag": "Program",
  2147.                                 "value": "Logstash"
  2148.                             },
  2149.                             {
  2150.                                 "tag": "Service",
  2151.                                 "value": "NULL"
  2152.                             },
  2153.                             {
  2154.                                 "tag": "Service Type",
  2155.                                 "value": "NULL"
  2156.                             }
  2157.                         ]
  2158.                     },
  2159.                     {
  2160.                         "uuid": "7754f31c8e8e4c5b99f6a8196e1adf10",
  2161.                         "name": "[Item] [LS] [Process] [Memory] Total Memory Usage (Bytes)",
  2162.                         "type": "DEPENDENT",
  2163.                         "key": "ls.process.process.mem.total_virtual_in_bytes",
  2164.                         "delay": "0",
  2165.                         "history": "90d",
  2166.                         "units": "B",
  2167.                         "preprocessing": [
  2168.                             {
  2169.                                 "type": "JSONPATH",
  2170.                                 "parameters": [
  2171.                                     "$.process.mem.total_virtual_in_bytes"
  2172.                                 ]
  2173.                             }
  2174.                         ],
  2175.                         "master_item": {
  2176.                             "key": "logstashPROCESS"
  2177.                         },
  2178.                         "tags": [
  2179.                             {
  2180.                                 "tag": "Program",
  2181.                                 "value": "Logstash"
  2182.                             },
  2183.                             {
  2184.                                 "tag": "Service",
  2185.                                 "value": "NULL"
  2186.                             },
  2187.                             {
  2188.                                 "tag": "Service Type",
  2189.                                 "value": "NULL"
  2190.                             }
  2191.                         ]
  2192.                     },
  2193.                     {
  2194.                         "uuid": "e989b3f96f554d9c948c297c12b8a15b",
  2195.                         "name": "[Item] [LS] [Process] Open File Descriptors",
  2196.                         "type": "DEPENDENT",
  2197.                         "key": "ls.process.process.open_file_descriptors",
  2198.                         "delay": "0",
  2199.                         "history": "90d",
  2200.                         "preprocessing": [
  2201.                             {
  2202.                                 "type": "JSONPATH",
  2203.                                 "parameters": [
  2204.                                     "$.process.open_file_descriptors"
  2205.                                 ]
  2206.                             }
  2207.                         ],
  2208.                         "master_item": {
  2209.                             "key": "logstashPROCESS"
  2210.                         },
  2211.                         "tags": [
  2212.                             {
  2213.                                 "tag": "Program",
  2214.                                 "value": "Logstash"
  2215.                             },
  2216.                             {
  2217.                                 "tag": "Service",
  2218.                                 "value": "NULL"
  2219.                             },
  2220.                             {
  2221.                                 "tag": "Service Type",
  2222.                                 "value": "NULL"
  2223.                             }
  2224.                         ]
  2225.                     },
  2226.                     {
  2227.                         "uuid": "c8698cd15a4a4a14bd7472b3ff171b88",
  2228.                         "name": "[Item] [LS] [Process] Peak Open File Descriptors",
  2229.                         "type": "DEPENDENT",
  2230.                         "key": "ls.process.process.peak_open_file_descriptors",
  2231.                         "delay": "0",
  2232.                         "history": "90d",
  2233.                         "preprocessing": [
  2234.                             {
  2235.                                 "type": "JSONPATH",
  2236.                                 "parameters": [
  2237.                                     "$.process.peak_open_file_descriptors"
  2238.                                 ]
  2239.                             }
  2240.                         ],
  2241.                         "master_item": {
  2242.                             "key": "logstashPROCESS"
  2243.                         },
  2244.                         "tags": [
  2245.                             {
  2246.                                 "tag": "Program",
  2247.                                 "value": "Logstash"
  2248.                             },
  2249.                             {
  2250.                                 "tag": "Service",
  2251.                                 "value": "NULL"
  2252.                             },
  2253.                             {
  2254.                                 "tag": "Service Type",
  2255.                                 "value": "NULL"
  2256.                             }
  2257.                         ]
  2258.                     },
  2259.                     {
  2260.                         "uuid": "fce12e895f8b45cd9d9dddc50790fa1e",
  2261.                         "name": "[Item] [LS] [Daemon Check] Logstash Service",
  2262.                         "type": "ZABBIX_ACTIVE",
  2263.                         "key": "systemd.unit.info[logstash.service,ActiveState]",
  2264.                         "history": "90d",
  2265.                         "value_type": "TEXT",
  2266.                         "trends": "0",
  2267.                         "tags": [
  2268.                             {
  2269.                                 "tag": "Program",
  2270.                                 "value": "Logstash"
  2271.                             },
  2272.                             {
  2273.                                 "tag": "Service",
  2274.                                 "value": "logstash"
  2275.                             },
  2276.                             {
  2277.                                 "tag": "Service Type",
  2278.                                 "value": "service"
  2279.                             }
  2280.                         ],
  2281.                         "triggers": [
  2282.                             {
  2283.                                 "uuid": "b3374ddec11e4d48b54a7b8b295a94ad",
  2284.                                 "expression": "find(/Template - RHEL 9 - Syslog Collector - Logstash/systemd.unit.info[logstash.service,ActiveState],1m,\"iregexp\",\"^active$\")=0",
  2285.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  2286.                                 "recovery_expression": "find(/Template - RHEL 9 - Syslog Collector - Logstash/systemd.unit.info[logstash.service,ActiveState],1m,\"iregexp\",\"^active$\")=1",
  2287.                                 "name": "[Trigger] [LS] [Daemon Check] Logstash Service Dead",
  2288.                                 "priority": "HIGH",
  2289.                                 "manual_close": "YES"
  2290.                             }
  2291.                         ]
  2292.                     },
  2293.                     {
  2294.                         "uuid": "d531114eb1564852910bb6136da9f6c9",
  2295.                         "name": "[Item] [LS] [Daemon Check] [is-enabled] Logstash Service",
  2296.                         "type": "ZABBIX_ACTIVE",
  2297.                         "key": "systemd.unit.info[logstash.service,UnitFileState]",
  2298.                         "history": "90d",
  2299.                         "value_type": "TEXT",
  2300.                         "trends": "0",
  2301.                         "tags": [
  2302.                             {
  2303.                                 "tag": "Program",
  2304.                                 "value": "Logstash"
  2305.                             },
  2306.                             {
  2307.                                 "tag": "Service",
  2308.                                 "value": "logstash"
  2309.                             },
  2310.                             {
  2311.                                 "tag": "Service Type",
  2312.                                 "value": "service"
  2313.                             }
  2314.                         ],
  2315.                         "triggers": [
  2316.                             {
  2317.                                 "uuid": "549e60a4620148a9a441f6415b152b63",
  2318.                                 "expression": "find(/Template - RHEL 9 - Syslog Collector - Logstash/systemd.unit.info[logstash.service,UnitFileState],1m,\"iregexp\",\"^enabled$\")=0",
  2319.                                 "recovery_mode": "RECOVERY_EXPRESSION",
  2320.                                 "recovery_expression": "find(/Template - RHEL 9 - Syslog Collector - Logstash/systemd.unit.info[logstash.service,UnitFileState],1m,\"iregexp\",\"^enabled$\")=1",
  2321.                                 "name": "[Trigger] [LS] [Daemon Check] Logstash Service Not Autoloaded",
  2322.                                 "priority": "WARNING",
  2323.                                 "manual_close": "YES"
  2324.                             }
  2325.                         ]
  2326.                     }
  2327.                 ],
  2328.                 "discovery_rules": [
  2329.                     {
  2330.                         "uuid": "6c3e0118cd1747f8a0ddce551001d1cc",
  2331.                         "name": "Discover Filter Pipelines",
  2332.                         "type": "DEPENDENT",
  2333.                         "key": "logstash.filter.pipeline.discover",
  2334.                         "delay": "0",
  2335.                         "lifetime_type": "DELETE_IMMEDIATELY",
  2336.                         "lifetime": "0",
  2337.                         "item_prototypes": [
  2338.                             {
  2339.                                 "uuid": "457fecb9d9a344c8a3d23a7d210d9f72",
  2340.                                 "name": "Filter Pipeline: {#LSID} Duration In Seconds",
  2341.                                 "type": "DEPENDENT",
  2342.                                 "key": "ls.pipeline.filter.events.duration_in_millis[{#LSID}]",
  2343.                                 "delay": "0",
  2344.                                 "history": "90d",
  2345.                                 "preprocessing": [
  2346.                                     {
  2347.                                         "type": "JSONPATH",
  2348.                                         "parameters": [
  2349.                                             "$.[?(@.id == \"{#LSID}\")].events.duration_in_millis.first()"
  2350.                                         ]
  2351.                                     },
  2352.                                     {
  2353.                                         "type": "MULTIPLIER",
  2354.                                         "parameters": [
  2355.                                             "0.001"
  2356.                                         ]
  2357.                                     }
  2358.                                 ],
  2359.                                 "master_item": {
  2360.                                     "key": "ls.pipeline.main.plugins.filters"
  2361.                                 }
  2362.                             },
  2363.                             {
  2364.                                 "uuid": "dfef732e2fee4e219dfb041c41c9491a",
  2365.                                 "name": "Filter Pipeline: {#LSID} Events Out",
  2366.                                 "type": "DEPENDENT",
  2367.                                 "key": "ls.pipeline.filter.events.out[{#LSID}]",
  2368.                                 "delay": "0",
  2369.                                 "history": "90d",
  2370.                                 "preprocessing": [
  2371.                                     {
  2372.                                         "type": "JSONPATH",
  2373.                                         "parameters": [
  2374.                                             "$.[?(@.id == \"{#LSID}\")].events.out.first()"
  2375.                                         ]
  2376.                                     }
  2377.                                 ],
  2378.                                 "master_item": {
  2379.                                     "key": "ls.pipeline.main.plugins.filters"
  2380.                                 }
  2381.                             },
  2382.                             {
  2383.                                 "uuid": "501a367333cb479cbe28c974c2f29058",
  2384.                                 "name": "Filter Pipeline: {#LSID} Lifetime Worker Utilization",
  2385.                                 "type": "DEPENDENT",
  2386.                                 "key": "ls.pipeline.filter.flow.lifetime.current[{#LSID}]",
  2387.                                 "delay": "0",
  2388.                                 "history": "90d",
  2389.                                 "value_type": "FLOAT",
  2390.                                 "preprocessing": [
  2391.                                     {
  2392.                                         "type": "JSONPATH",
  2393.                                         "parameters": [
  2394.                                             "$.[?(@.id == \"{#LSID}\")].flow.worker_utilization.lifetime.first()"
  2395.                                         ]
  2396.                                     }
  2397.                                 ],
  2398.                                 "master_item": {
  2399.                                     "key": "ls.pipeline.main.plugins.filters"
  2400.                                 }
  2401.                             },
  2402.                             {
  2403.                                 "uuid": "49fb29743538449caff9a3264a2647b5",
  2404.                                 "name": "Filter Pipeline: {#LSID} Current Worker Utilization",
  2405.                                 "type": "DEPENDENT",
  2406.                                 "key": "ls.pipeline.filter.flow.worker_utilization.current[{#LSID}]",
  2407.                                 "delay": "0",
  2408.                                 "history": "90d",
  2409.                                 "value_type": "FLOAT",
  2410.                                 "preprocessing": [
  2411.                                     {
  2412.                                         "type": "JSONPATH",
  2413.                                         "parameters": [
  2414.                                             "$.[?(@.id == \"{#LSID}\")].flow.worker_utilization.current.first()"
  2415.                                         ]
  2416.                                     }
  2417.                                 ],
  2418.                                 "master_item": {
  2419.                                     "key": "ls.pipeline.main.plugins.filters"
  2420.                                 }
  2421.                             },
  2422.                             {
  2423.                                 "uuid": "19bb2a1dcfb14dd492bb4936dc74264b",
  2424.                                 "name": "Filter Pipeline: {#LSID} Worker Utilization over 1 Hour",
  2425.                                 "type": "DEPENDENT",
  2426.                                 "key": "ls.pipeline.filter.flow.worker_utilization.last_1_hour[{#LSID}]",
  2427.                                 "delay": "0",
  2428.                                 "history": "90d",
  2429.                                 "value_type": "FLOAT",
  2430.                                 "preprocessing": [
  2431.                                     {
  2432.                                         "type": "JSONPATH",
  2433.                                         "parameters": [
  2434.                                             "$.[?(@.id == \"{#LSID}\")].flow.worker_utilization.last_1_hour.first()"
  2435.                                         ]
  2436.                                     }
  2437.                                 ],
  2438.                                 "master_item": {
  2439.                                     "key": "ls.pipeline.main.plugins.filters"
  2440.                                 }
  2441.                             },
  2442.                             {
  2443.                                 "uuid": "f93885bc1f634f67ac65c1ecdc78ba18",
  2444.                                 "name": "Filter Pipeline: {#LSID} Worker Utilization over 15 Minutes",
  2445.                                 "type": "DEPENDENT",
  2446.                                 "key": "ls.pipeline.filter.flow.worker_utilization.last_15_minutes[{#LSID}]",
  2447.                                 "delay": "0",
  2448.                                 "history": "90d",
  2449.                                 "value_type": "FLOAT",
  2450.                                 "preprocessing": [
  2451.                                     {
  2452.                                         "type": "JSONPATH",
  2453.                                         "parameters": [
  2454.                                             "$.[?(@.id == \"{#LSID}\")].flow.worker_utilization.last_15_minutes.first()"
  2455.                                         ]
  2456.                                     }
  2457.                                 ],
  2458.                                 "master_item": {
  2459.                                     "key": "ls.pipeline.main.plugins.filters"
  2460.                                 }
  2461.                             },
  2462.                             {
  2463.                                 "uuid": "73e20f6ab4a248bfa474cc5020226643",
  2464.                                 "name": "Filter Pipeline: {#LSID} Worker Utilization over 24 Hours",
  2465.                                 "type": "DEPENDENT",
  2466.                                 "key": "ls.pipeline.filter.flow.worker_utilization.last_24_hours[{#LSID}]",
  2467.                                 "delay": "0",
  2468.                                 "history": "90d",
  2469.                                 "value_type": "FLOAT",
  2470.                                 "preprocessing": [
  2471.                                     {
  2472.                                         "type": "JSONPATH",
  2473.                                         "parameters": [
  2474.                                             "$.[?(@.id == \"{#LSID}\")].flow.worker_utilization.last_24_hours.first()"
  2475.                                         ]
  2476.                                     }
  2477.                                 ],
  2478.                                 "master_item": {
  2479.                                     "key": "ls.pipeline.main.plugins.filters"
  2480.                                 }
  2481.                             },
  2482.                             {
  2483.                                 "uuid": "4653a2894c184bc7bac62978b8da05ea",
  2484.                                 "name": "Filter Pipeline: {#LSID}",
  2485.                                 "type": "DEPENDENT",
  2486.                                 "key": "ls.pipeline.filter.id[{#LSID}]",
  2487.                                 "delay": "0",
  2488.                                 "history": "90d",
  2489.                                 "value_type": "TEXT",
  2490.                                 "trends": "0",
  2491.                                 "preprocessing": [
  2492.                                     {
  2493.                                         "type": "JSONPATH",
  2494.                                         "parameters": [
  2495.                                             "$..[?(@.id == \"{#LSID}\")]"
  2496.                                         ]
  2497.                                     }
  2498.                                 ],
  2499.                                 "master_item": {
  2500.                                     "key": "ls.pipeline.main.plugins.filters"
  2501.                                 }
  2502.                             },
  2503.                             {
  2504.                                 "uuid": "dfb6c9ea99fd4798b03220a7499568e8",
  2505.                                 "name": "Filter Pipeline: {#LSID} Name",
  2506.                                 "type": "DEPENDENT",
  2507.                                 "key": "ls.pipeline.filter.name[{#LSID}]",
  2508.                                 "delay": "0",
  2509.                                 "history": "90d",
  2510.                                 "value_type": "TEXT",
  2511.                                 "trends": "0",
  2512.                                 "preprocessing": [
  2513.                                     {
  2514.                                         "type": "JSONPATH",
  2515.                                         "parameters": [
  2516.                                             "$.[?(@.id == \"{#LSID}\")].name.first()"
  2517.                                         ]
  2518.                                     }
  2519.                                 ],
  2520.                                 "master_item": {
  2521.                                     "key": "ls.pipeline.main.plugins.filters"
  2522.                                 }
  2523.                             }
  2524.                         ],
  2525.                         "master_item": {
  2526.                             "key": "ls.pipeline.main.plugins.filters"
  2527.                         },
  2528.                         "lld_macro_paths": [
  2529.                             {
  2530.                                 "lld_macro": "{#LSID}",
  2531.                                 "path": "$.id"
  2532.                             },
  2533.                             {
  2534.                                 "lld_macro": "{#LSNAME}",
  2535.                                 "path": "$.name"
  2536.                             }
  2537.                         ]
  2538.                     },
  2539.                     {
  2540.                         "uuid": "df945bad27934bfb9a42b1313ce56102",
  2541.                         "name": "Discover Input Pipelines",
  2542.                         "type": "DEPENDENT",
  2543.                         "key": "logstash.input.pipeline.discover",
  2544.                         "delay": "0",
  2545.                         "lifetime_type": "DELETE_IMMEDIATELY",
  2546.                         "lifetime": "0",
  2547.                         "item_prototypes": [
  2548.                             {
  2549.                                 "uuid": "b14671fdbe91437dad04ad6fee104617",
  2550.                                 "name": "Input Pipeline: {#LSID} Total Events Out",
  2551.                                 "type": "DEPENDENT",
  2552.                                 "key": "ls.pipeline.input.events.out[{#LSID}]",
  2553.                                 "delay": "0",
  2554.                                 "history": "90d",
  2555.                                 "preprocessing": [
  2556.                                     {
  2557.                                         "type": "JSONPATH",
  2558.                                         "parameters": [
  2559.                                             "$.[?(@.id == \"{#LSID}\")].events.out.first()"
  2560.                                         ]
  2561.                                     }
  2562.                                 ],
  2563.                                 "master_item": {
  2564.                                     "key": "ls.pipeline.main.plugins.inputs"
  2565.                                 }
  2566.                             },
  2567.                             {
  2568.                                 "uuid": "547671822cf24bcfabf1adbe4662b716",
  2569.                                 "name": "Input Pipeline: {#LSID} Duration In Seconds",
  2570.                                 "type": "DEPENDENT",
  2571.                                 "key": "ls.pipeline.input.events.queue_push_duration_in_millis[{#LSID}]",
  2572.                                 "delay": "0",
  2573.                                 "history": "90d",
  2574.                                 "preprocessing": [
  2575.                                     {
  2576.                                         "type": "JSONPATH",
  2577.                                         "parameters": [
  2578.                                             "$.[?(@.id == \"{#LSID}\")].events.queue_push_duration_in_millis.first()"
  2579.                                         ]
  2580.                                     },
  2581.                                     {
  2582.                                         "type": "MULTIPLIER",
  2583.                                         "parameters": [
  2584.                                             "0.001"
  2585.                                         ]
  2586.                                     }
  2587.                                 ],
  2588.                                 "master_item": {
  2589.                                     "key": "ls.pipeline.main.plugins.inputs"
  2590.                                 }
  2591.                             },
  2592.                             {
  2593.                                 "uuid": "d10fcd5f222a46fb9c24766845d885ee",
  2594.                                 "name": "Input Pipeline: {#LSID} Worker Utilization over 1h",
  2595.                                 "type": "DEPENDENT",
  2596.                                 "key": "ls.pipeline.input.flow.throughput.last_1_hour[{#LSID}]",
  2597.                                 "delay": "0",
  2598.                                 "history": "90d",
  2599.                                 "value_type": "FLOAT",
  2600.                                 "preprocessing": [
  2601.                                     {
  2602.                                         "type": "JSONPATH",
  2603.                                         "parameters": [
  2604.                                             "$.[?(@.id == \"{#LSID}\")].flow.throughput.last_1_hour.first()"
  2605.                                         ]
  2606.                                     }
  2607.                                 ],
  2608.                                 "master_item": {
  2609.                                     "key": "ls.pipeline.main.plugins.inputs"
  2610.                                 }
  2611.                             },
  2612.                             {
  2613.                                 "uuid": "9043877c1e144fbc840ece2bbe9e8892",
  2614.                                 "name": "Input Pipeline: {#LSID} Worker Utilization over 24h",
  2615.                                 "type": "DEPENDENT",
  2616.                                 "key": "ls.pipeline.input.flow.throughput.last_24_hours[{#LSID}]",
  2617.                                 "delay": "0",
  2618.                                 "history": "90d",
  2619.                                 "value_type": "FLOAT",
  2620.                                 "preprocessing": [
  2621.                                     {
  2622.                                         "type": "JSONPATH",
  2623.                                         "parameters": [
  2624.                                             "$.[?(@.id == \"{#LSID}\")].flow.throughput.last_24_hours.first()"
  2625.                                         ]
  2626.                                     }
  2627.                                 ],
  2628.                                 "master_item": {
  2629.                                     "key": "ls.pipeline.main.plugins.inputs"
  2630.                                 }
  2631.                             },
  2632.                             {
  2633.                                 "uuid": "047e7da674fd45b6b9f50b7e502d01d4",
  2634.                                 "name": "Input Pipeline: {#LSID} Worker Utilization over Lifetime",
  2635.                                 "type": "DEPENDENT",
  2636.                                 "key": "ls.pipeline.input.flow.throughput.lifetime[{#LSID}]",
  2637.                                 "delay": "0",
  2638.                                 "history": "90d",
  2639.                                 "value_type": "FLOAT",
  2640.                                 "preprocessing": [
  2641.                                     {
  2642.                                         "type": "JSONPATH",
  2643.                                         "parameters": [
  2644.                                             "$.[?(@.id == \"{#LSID}\")].flow.throughput.lifetime.first()"
  2645.                                         ]
  2646.                                     }
  2647.                                 ],
  2648.                                 "master_item": {
  2649.                                     "key": "ls.pipeline.main.plugins.inputs"
  2650.                                 }
  2651.                             },
  2652.                             {
  2653.                                 "uuid": "09f989f600514ae2b6d7433c33b2fafa",
  2654.                                 "name": "Input Pipeline: {#LSID} Current EPS",
  2655.                                 "type": "DEPENDENT",
  2656.                                 "key": "ls.pipeline.input.flow.throughput[{#LSID}]",
  2657.                                 "delay": "0",
  2658.                                 "history": "90d",
  2659.                                 "value_type": "FLOAT",
  2660.                                 "preprocessing": [
  2661.                                     {
  2662.                                         "type": "JSONPATH",
  2663.                                         "parameters": [
  2664.                                             "$.[?(@.id == \"{#LSID}\")].flow.throughput.current.first()"
  2665.                                         ]
  2666.                                     }
  2667.                                 ],
  2668.                                 "master_item": {
  2669.                                     "key": "ls.pipeline.main.plugins.inputs"
  2670.                                 },
  2671.                                 "trigger_prototypes": [
  2672.                                     {
  2673.                                         "uuid": "be8832b65ffa48e3b1c5bf673041cdc3",
  2674.                                         "expression": "avg(/Template - RHEL 9 - Syslog Collector - Logstash/ls.pipeline.input.flow.throughput[{#LSID}],#15)>7500",
  2675.                                         "recovery_mode": "RECOVERY_EXPRESSION",
  2676.                                         "recovery_expression": "avg(/Template - RHEL 9 - Syslog Collector - Logstash/ls.pipeline.input.flow.throughput[{#LSID}],#15)<=7500",
  2677.                                         "name": "{#LSID} Input Pipeline Approaching 75% EPS Capacity",
  2678.                                         "priority": "WARNING",
  2679.                                         "description": "Take the average of the last 15 values (#15) of the specified item and check if it's above or below 7500 (75% of 10000)",
  2680.                                         "type": "MULTIPLE",
  2681.                                         "manual_close": "YES"
  2682.                                     }
  2683.                                 ]
  2684.                             },
  2685.                             {
  2686.                                 "uuid": "c8c8fe6bb21043d9af6e5c2d72ef35ea",
  2687.                                 "name": "Input Pipeline: {#LSID}",
  2688.                                 "type": "DEPENDENT",
  2689.                                 "key": "ls.pipeline.input.id[{#LSID}]",
  2690.                                 "delay": "0",
  2691.                                 "history": "90d",
  2692.                                 "value_type": "TEXT",
  2693.                                 "trends": "0",
  2694.                                 "preprocessing": [
  2695.                                     {
  2696.                                         "type": "JSONPATH",
  2697.                                         "parameters": [
  2698.                                             "$..[?(@.id == \"{#LSID}\")]"
  2699.                                         ]
  2700.                                     }
  2701.                                 ],
  2702.                                 "master_item": {
  2703.                                     "key": "ls.pipeline.main.plugins.inputs"
  2704.                                 }
  2705.                             },
  2706.                             {
  2707.                                 "uuid": "64f950dbe91c4d18a13f295c13fab091",
  2708.                                 "name": "Input Pipeline: {#LSID} Plugin Name",
  2709.                                 "type": "DEPENDENT",
  2710.                                 "key": "ls.pipeline.input.name[{#LSID}]",
  2711.                                 "delay": "0",
  2712.                                 "history": "90d",
  2713.                                 "value_type": "TEXT",
  2714.                                 "trends": "0",
  2715.                                 "preprocessing": [
  2716.                                     {
  2717.                                         "type": "JSONPATH",
  2718.                                         "parameters": [
  2719.                                             "$.[?(@.id == \"{#LSID}\")].name"
  2720.                                         ]
  2721.                                     }
  2722.                                 ],
  2723.                                 "master_item": {
  2724.                                     "key": "ls.pipeline.main.plugins.inputs"
  2725.                                 }
  2726.                             },
  2727.                             {
  2728.                                 "uuid": "8ae2c7529d5f4ec3b5e8a9387b4a96b5",
  2729.                                 "name": "Input Pipeline: {#LSID} Queue Size",
  2730.                                 "type": "DEPENDENT",
  2731.                                 "key": "ls.pipeline.input.queue_size[{#LSID}]",
  2732.                                 "delay": "0",
  2733.                                 "history": "90d",
  2734.                                 "preprocessing": [
  2735.                                     {
  2736.                                         "type": "JSONPATH",
  2737.                                         "parameters": [
  2738.                                             "$.[?(@.id == \"{#LSID}\")].queue_size.first()"
  2739.                                         ],
  2740.                                         "error_handler": "DISCARD_VALUE"
  2741.                                     }
  2742.                                 ],
  2743.                                 "master_item": {
  2744.                                     "key": "ls.pipeline.main.plugins.inputs"
  2745.                                 }
  2746.                             },
  2747.                             {
  2748.                                 "uuid": "785ce48d1fcd4a158410d433e35f00e8",
  2749.                                 "name": "Input Pipeline: {#LSID} Number of Workers",
  2750.                                 "type": "DEPENDENT",
  2751.                                 "key": "ls.pipeline.input.workers[{#LSID}]",
  2752.                                 "delay": "0",
  2753.                                 "history": "90d",
  2754.                                 "preprocessing": [
  2755.                                     {
  2756.                                         "type": "JSONPATH",
  2757.                                         "parameters": [
  2758.                                             "$.[?(@.id == \"{#LSID}\")].workers.first()"
  2759.                                         ],
  2760.                                         "error_handler": "CUSTOM_VALUE",
  2761.                                         "error_handler_params": "0"
  2762.                                     }
  2763.                                 ],
  2764.                                 "master_item": {
  2765.                                     "key": "ls.pipeline.main.plugins.inputs"
  2766.                                 }
  2767.                             }
  2768.                         ],
  2769.                         "master_item": {
  2770.                             "key": "ls.pipeline.main.plugins.inputs"
  2771.                         },
  2772.                         "lld_macro_paths": [
  2773.                             {
  2774.                                 "lld_macro": "{#LSID}",
  2775.                                 "path": "$.id"
  2776.                             },
  2777.                             {
  2778.                                 "lld_macro": "{#LSNAME}",
  2779.                                 "path": "$.name"
  2780.                             }
  2781.                         ]
  2782.                     },
  2783.                     {
  2784.                         "uuid": "bac0f71144ed4d7eb2cdf1f3db45ba0b",
  2785.                         "name": "Discover Output Pipelines",
  2786.                         "type": "DEPENDENT",
  2787.                         "key": "logstash.output.pipeline.discover",
  2788.                         "delay": "0",
  2789.                         "lifetime_type": "DELETE_IMMEDIATELY",
  2790.                         "lifetime": "0",
  2791.                         "item_prototypes": [
  2792.                             {
  2793.                                 "uuid": "70d98e92639f438baff089da72315d45",
  2794.                                 "name": "Output Pipeline: {#LSID} Current Worker Utilization",
  2795.                                 "type": "DEPENDENT",
  2796.                                 "key": "current[{#LSID}]",
  2797.                                 "delay": "0",
  2798.                                 "history": "90d",
  2799.                                 "value_type": "FLOAT",
  2800.                                 "preprocessing": [
  2801.                                     {
  2802.                                         "type": "JSONPATH",
  2803.                                         "parameters": [
  2804.                                             "$.[?(@.id == \"{#LSID}\")].flow.worker_utilization.current.first()"
  2805.                                         ]
  2806.                                     }
  2807.                                 ],
  2808.                                 "master_item": {
  2809.                                     "key": "ls.pipeline.main.plugins.outputs"
  2810.                                 }
  2811.                             },
  2812.                             {
  2813.                                 "uuid": "a2e23c34a6b24e3e9dae6484604cb731",
  2814.                                 "name": "Output Pipeline: {#LSID} Duration In Seconds",
  2815.                                 "type": "DEPENDENT",
  2816.                                 "key": "events.duration_in_millis[{#LSID}]",
  2817.                                 "delay": "0",
  2818.                                 "history": "90d",
  2819.                                 "preprocessing": [
  2820.                                     {
  2821.                                         "type": "JSONPATH",
  2822.                                         "parameters": [
  2823.                                             "$.[?(@.id == \"{#LSID}\")].events.duration_in_millis.first()"
  2824.                                         ]
  2825.                                     },
  2826.                                     {
  2827.                                         "type": "MULTIPLIER",
  2828.                                         "parameters": [
  2829.                                             "0.001"
  2830.                                         ]
  2831.                                     }
  2832.                                 ],
  2833.                                 "master_item": {
  2834.                                     "key": "ls.pipeline.main.plugins.outputs"
  2835.                                 }
  2836.                             },
  2837.                             {
  2838.                                 "uuid": "8d400503db0b461bb23050770aa41dde",
  2839.                                 "name": "Output Pipeline: {#LSID} Total Events In",
  2840.                                 "type": "DEPENDENT",
  2841.                                 "key": "events.in[{#LSID}]",
  2842.                                 "delay": "0",
  2843.                                 "history": "90d",
  2844.                                 "preprocessing": [
  2845.                                     {
  2846.                                         "type": "JSONPATH",
  2847.                                         "parameters": [
  2848.                                             "$.[?(@.id == \"{#LSID}\")].events.in.first()"
  2849.                                         ]
  2850.                                     }
  2851.                                 ],
  2852.                                 "master_item": {
  2853.                                     "key": "ls.pipeline.main.plugins.outputs"
  2854.                                 }
  2855.                             },
  2856.                             {
  2857.                                 "uuid": "8d8795d6ffac47d7bd24f8a25ebe9390",
  2858.                                 "name": "Output Pipeline: {#LSID} Total Events Out",
  2859.                                 "type": "DEPENDENT",
  2860.                                 "key": "events.out[{#LSID}]",
  2861.                                 "delay": "0",
  2862.                                 "history": "90d",
  2863.                                 "preprocessing": [
  2864.                                     {
  2865.                                         "type": "JSONPATH",
  2866.                                         "parameters": [
  2867.                                             "$.[?(@.id == \"{#LSID}\")].events.out.first()"
  2868.                                         ]
  2869.                                     }
  2870.                                 ],
  2871.                                 "master_item": {
  2872.                                     "key": "ls.pipeline.main.plugins.outputs"
  2873.                                 }
  2874.                             },
  2875.                             {
  2876.                                 "uuid": "471b887328d541959549ce1e2972b3af",
  2877.                                 "name": "Output Pipeline: {#LSID} Worker Utilization over 1h",
  2878.                                 "type": "DEPENDENT",
  2879.                                 "key": "last_1_hour[{#LSID}]",
  2880.                                 "delay": "0",
  2881.                                 "history": "90d",
  2882.                                 "value_type": "FLOAT",
  2883.                                 "preprocessing": [
  2884.                                     {
  2885.                                         "type": "JSONPATH",
  2886.                                         "parameters": [
  2887.                                             "$.[?(@.id == \"{#LSID}\")].flow.worker_utilization.last_1_hour.first()"
  2888.                                         ]
  2889.                                     }
  2890.                                 ],
  2891.                                 "master_item": {
  2892.                                     "key": "ls.pipeline.main.plugins.outputs"
  2893.                                 }
  2894.                             },
  2895.                             {
  2896.                                 "uuid": "0a30f2d2e47e44bbb8c85509247d8e5e",
  2897.                                 "name": "Output Pipeline: {#LSID} Worker Utilization over 24h",
  2898.                                 "type": "DEPENDENT",
  2899.                                 "key": "last_24_hour[{#LSID}]",
  2900.                                 "delay": "0",
  2901.                                 "history": "90d",
  2902.                                 "value_type": "FLOAT",
  2903.                                 "preprocessing": [
  2904.                                     {
  2905.                                         "type": "JSONPATH",
  2906.                                         "parameters": [
  2907.                                             "$.[?(@.id == \"{#LSID}\")].flow.worker_utilization.last_24_hours.first()"
  2908.                                         ]
  2909.                                     }
  2910.                                 ],
  2911.                                 "master_item": {
  2912.                                     "key": "ls.pipeline.main.plugins.outputs"
  2913.                                 }
  2914.                             },
  2915.                             {
  2916.                                 "uuid": "eb67e6b239414fdcad2c75778bc76980",
  2917.                                 "name": "Output Pipeline: {#LSID} Worker Utilization over Lifetime",
  2918.                                 "type": "DEPENDENT",
  2919.                                 "key": "lifetime[{#LSID}]",
  2920.                                 "delay": "0",
  2921.                                 "history": "90d",
  2922.                                 "value_type": "FLOAT",
  2923.                                 "preprocessing": [
  2924.                                     {
  2925.                                         "type": "JSONPATH",
  2926.                                         "parameters": [
  2927.                                             "$.[?(@.id == \"{#LSID}\")].flow.worker_utilization.lifetime.first()"
  2928.                                         ]
  2929.                                     }
  2930.                                 ],
  2931.                                 "master_item": {
  2932.                                     "key": "ls.pipeline.main.plugins.outputs"
  2933.                                 }
  2934.                             },
  2935.                             {
  2936.                                 "uuid": "24b2982b1bbf4d2a97c46d802dd3d65d",
  2937.                                 "name": "Output Pipeline: {#LSID}",
  2938.                                 "type": "DEPENDENT",
  2939.                                 "key": "logstash.pipeline.output.id[{#LSID}]",
  2940.                                 "delay": "0",
  2941.                                 "history": "90d",
  2942.                                 "value_type": "TEXT",
  2943.                                 "trends": "0",
  2944.                                 "preprocessing": [
  2945.                                     {
  2946.                                         "type": "JSONPATH",
  2947.                                         "parameters": [
  2948.                                             "$..[?(@.id == \"{#LSID}\")]"
  2949.                                         ]
  2950.                                     }
  2951.                                 ],
  2952.                                 "master_item": {
  2953.                                     "key": "ls.pipeline.main.plugins.outputs"
  2954.                                 }
  2955.                             },
  2956.                             {
  2957.                                 "uuid": "66970ebd816c4e12bbeb0ce84d42cddd",
  2958.                                 "name": "Output Pipeline: {#LSID} Plugin Name",
  2959.                                 "type": "DEPENDENT",
  2960.                                 "key": "name[{#LSID}]",
  2961.                                 "delay": "0",
  2962.                                 "history": "90d",
  2963.                                 "value_type": "TEXT",
  2964.                                 "trends": "0",
  2965.                                 "preprocessing": [
  2966.                                     {
  2967.                                         "type": "JSONPATH",
  2968.                                         "parameters": [
  2969.                                             "$.[?(@.id == \"{#LSID}\")].name"
  2970.                                         ]
  2971.                                     }
  2972.                                 ],
  2973.                                 "master_item": {
  2974.                                     "key": "ls.pipeline.main.plugins.outputs"
  2975.                                 }
  2976.                             }
  2977.                         ],
  2978.                         "master_item": {
  2979.                             "key": "ls.pipeline.main.plugins.outputs"
  2980.                         },
  2981.                         "lld_macro_paths": [
  2982.                             {
  2983.                                 "lld_macro": "{#LSID}",
  2984.                                 "path": "$.id"
  2985.                             },
  2986.                             {
  2987.                                 "lld_macro": "{#LSNAME}",
  2988.                                 "path": "$.name"
  2989.                             },
  2990.                             {
  2991.                                 "lld_macro": "{#WORKERUTIL}",
  2992.                                 "path": "$.flow.worker_utilization"
  2993.                             }
  2994.                         ]
  2995.                     }
  2996.                 ],
  2997.                 "tags": [
  2998.                     {
  2999.                         "tag": "Logstash",
  3000.                         "value": "Yes"
  3001.                     },
  3002.                     {
  3003.                         "tag": "Logstash_Service_Name",
  3004.                         "value": "logstash"
  3005.                     },
  3006.                     {
  3007.                         "tag": "Logstash_Service_Type",
  3008.                         "value": "service"
  3009.                     }
  3010.                 ],
  3011.                 "macros": [
  3012.                     {
  3013.                         "macro": "{$ZBX_TPL_VERSION}",
  3014.                         "value": "0.0.1"
  3015.                     }
  3016.                 ]
  3017.             }
  3018.         ],
  3019.         "triggers": [
  3020.             {
  3021.                 "uuid": "dc40e02ce7e8452980562f9a5905c20d",
  3022.                 "expression": "count(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"Pipeline terminated {\\\"pipeline.id\\\"=>\\\"main\\\"}$\"],15m)>=1",
  3023.                 "recovery_mode": "RECOVERY_EXPRESSION",
  3024.                 "recovery_expression": "count(/Template - RHEL 9 - Syslog Collector - Logstash/logrt[/var/log/logstash/logstash-plain.log,\"Successfully posted [0-9]+ logs\"],5m)>=1",
  3025.                 "name": "[Trigger] [Logstash] Main Pipeline Crashed",
  3026.                 "priority": "HIGH",
  3027.                 "description": "Indicates when the main data pipeline in logstash has terminated itself and hasn't recovered normally.",
  3028.                 "manual_close": "YES"
  3029.             },
  3030.             {
  3031.                 "uuid": "3a50fb03e07a41ab9e85661255abfd37",
  3032.                 "expression": "length(last(/Template - RHEL 9 - Syslog Collector - Logstash/logstashPROCESS))=0 or find(/Template - RHEL 9 - Syslog Collector - Logstash/logstashPROCESS,1m,\"iregexp\",\"Not Found\")=1 or length(last(/Template - RHEL 9 - Syslog Collector - Logstash/logstashPIPELINE))=0 or find(/Template - RHEL 9 - Syslog Collector - Logstash/logstashPIPELINE,1m,\"iregexp\",\"Not Found\")=1 or length(last(/Template - RHEL 9 - Syslog Collector - Logstash/logstashEVENT))=0 or find(/Template - RHEL 9 - Syslog Collector - Logstash/logstashEVENT,1m,\"iregexp\",\"Not Found\")=1 or length(last(/Template - RHEL 9 - Syslog Collector - Logstash/logstashFLOW))=0 or find(/Template - RHEL 9 - Syslog Collector - Logstash/logstashFLOW,1m,\"iregexp\",\"Not Found\")=1 or length(last(/Template - RHEL 9 - Syslog Collector - Logstash/logstashJVM))=0 or find(/Template - RHEL 9 - Syslog Collector - Logstash/logstashJVM,1m,\"iregexp\",\"Not Found\")=1",
  3033.                 "recovery_mode": "RECOVERY_EXPRESSION",
  3034.                 "recovery_expression": "find(/Template - RHEL 9 - Syslog Collector - Logstash/logstashPROCESS,1m,\"iregexp\",\"green\")=1",
  3035.                 "name": "[Trigger] [LS] Failed to Retrieve Logstash Metrics",
  3036.                 "priority": "DISASTER",
  3037.                 "description": "Reports if Zabbix fails to retrieve the ProcessMetrics from the Logstash API. This is characterized by a NULL entry. Recovery is defined by the JVM \"status\" being \"green\" which indicates it return normally.",
  3038.                 "manual_close": "YES"
  3039.             },
  3040.             {
  3041.                 "uuid": "1b6a223b975c4ff9959495105d554f7d",
  3042.                 "expression": "last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.flow.input_throughput.last_1_hour)>=7500 or last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.event.in)/last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.jvm.uptime_in_millis)>=7500",
  3043.                 "recovery_mode": "RECOVERY_EXPRESSION",
  3044.                 "recovery_expression": "last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.flow.input_throughput.last_1_hour)<=7500 or last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.event.in)/last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.jvm.uptime_in_millis)<=7500",
  3045.                 "name": "[Trigger] [LS] [Flow] Logstash EPS Reaching Capacity",
  3046.                 "priority": "WARNING",
  3047.                 "description": "This tracks and alerts on the average EPS over a 1-hour sliding time window. When the EPS queue (tracked under the Flow throughput of all pipelines, aka: cumulative statistics) reaches 7500 EPS or higher, an alert is generated. Sustained rates of 7500 EPS on Logstash is approaching max capacity for the output plugin. This is one of many indicators that can be used to justify clustering with F5.",
  3048.                 "manual_close": "YES"
  3049.             },
  3050.             {
  3051.                 "uuid": "0007aa74134145d5aacf4eec1f9331db",
  3052.                 "expression": "100*last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.flow.worker_concurrency.last_15_minutes)/last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.flow.pipeline.workers)>=75",
  3053.                 "recovery_mode": "RECOVERY_EXPRESSION",
  3054.                 "recovery_expression": "100*last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.flow.worker_concurrency.last_15_minutes)/last(/Template - RHEL 9 - Syslog Collector - Logstash/logstash.flow.pipeline.workers)<75",
  3055.                 "name": "[Trigger] [LS] [Flow] Total Pipeline Workers Approaching Saturation",
  3056.                 "priority": "HIGH",
  3057.                 "description": "The saturation of the worker concurrency is becoming parallel with the number of workers. This generally indicates that the pipeline is also becoming saturated with work. It is advisable to increase the number of workers (and vCPUs) assigned Logstash and the virtual machine.",
  3058.                 "manual_close": "YES"
  3059.             },
  3060.             {
  3061.                 "uuid": "9c5cc0dc574f4470be870b9de7ada383",
  3062.                 "expression": "(last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.open_file_descriptors)/last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.max_file_descriptors)*100)>=75",
  3063.                 "recovery_mode": "RECOVERY_EXPRESSION",
  3064.                 "recovery_expression": "(last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.open_file_descriptors)/last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.max_file_descriptors)*100)<75",
  3065.                 "name": "[Trigger] [LS] [Process] Approaching Max File Descriptors (75%)",
  3066.                 "priority": "WARNING"
  3067.             },
  3068.             {
  3069.                 "uuid": "5ae34d64b1674a19a71c488e3b582543",
  3070.                 "expression": "(last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.open_file_descriptors)/last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.max_file_descriptors)*100)>=90",
  3071.                 "recovery_mode": "RECOVERY_EXPRESSION",
  3072.                 "recovery_expression": "(last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.open_file_descriptors)/last(/Template - RHEL 9 - Syslog Collector - Logstash/ls.process.process.max_file_descriptors)*100)<90",
  3073.                 "name": "[Trigger] [LS] [Process] Approaching Max File Descriptors (90%)",
  3074.                 "priority": "HIGH"
  3075.             }
  3076.         ]
  3077.     }
  3078. }
Advertisement
Add Comment
Please, Sign In to add comment