Advertisement
Guest User

nodemgr_daemon_status

a guest
Nov 5th, 2018
257
0
Never
Not a member of Pastebin yet? Sign Up, it unlocks many cool features!
JSON 28.06 KB | None | 0 0
  1. [root@node-1-1 ~]# nodemgr daemon status --format json
  2. {
  3.     "cluster": {
  4.         "id": "c9c8b62e-a3d7-11e8-8424-5254007acf57",
  5.         "name": "app1-rocking-cluster"
  6.     },
  7.     "collector": {
  8.         "created": "2018-10-24T08:26:14Z",
  9.         "state": "running"
  10.     },
  11.     "hb#6.rx": {
  12.         "config": {
  13.             "addr": "192.168.100.11",
  14.             "port": 10000,
  15.             "timeout": 15
  16.         },
  17.         "created": "2018-10-24T08:26:14Z",
  18.         "peers": {
  19.             "node-1-1": {},
  20.             "node-1-2": {
  21.                 "beating": true,
  22.                 "last": "2018-11-05T16:33:53Z"
  23.             }
  24.         },
  25.         "state": "running",
  26.         "stats": {
  27.             "beats": 216228,
  28.             "bytes": 52064700,
  29.             "errors": 0,
  30.             "since": 1540369574.913248
  31.         }
  32.     },
  33.     "hb#6.tx": {
  34.         "config": {},
  35.         "created": "2018-10-24T08:26:14Z",
  36.         "peers": {
  37.             "node-1-1": {},
  38.             "node-1-2": {
  39.                 "beating": true,
  40.                 "last": "2018-11-05T16:33:53Z"
  41.             }
  42.         },
  43.         "state": "running",
  44.         "stats": {
  45.             "beats": 216763,
  46.             "bytes": 52027903,
  47.             "errors": 0,
  48.             "since": 1540369574.932315
  49.         }
  50.     },
  51.     "listener": {
  52.         "config": {
  53.             "addr": "0.0.0.0",
  54.             "port": 1214
  55.         },
  56.         "created": "2018-10-24T08:26:14Z",
  57.         "state": "running",
  58.         "stats": {
  59.             "sessions": {
  60.                 "accepted": 34087,
  61.                 "auth_validated": 34087,
  62.                 "clients": {
  63.                     "127.0.0.1": {
  64.                         "accepted": 1,
  65.                         "auth_validated": 1,
  66.                         "rx": 174,
  67.                         "tx": 154
  68.                     },
  69.                     "192.168.121.109": {
  70.                         "accepted": 297,
  71.                         "auth_validated": 297,
  72.                         "rx": 83498,
  73.                         "tx": 47534
  74.                     },
  75.                     "local": {
  76.                         "accepted": 33789,
  77.                         "auth_validated": 33789,
  78.                         "rx": 2945188,
  79.                         "tx": 179395214
  80.                     }
  81.                 },
  82.                 "rx": 3028860,
  83.                 "tx": 179442902
  84.             }
  85.         }
  86.     },
  87.     "monitor": {
  88.         "compat": true,
  89.         "created": "2018-10-24T08:26:14Z",
  90.         "frozen": "thawed",
  91.         "nodes": {
  92.             "node-1-1": {
  93.                 "agent": "1.9-2506",
  94.                 "compat": 5,
  95.                 "env": "TST",
  96.                 "frozen": 0,
  97.                 "gen": {
  98.                     "node-1-1": 6287,
  99.                     "node-1-2": 5411
  100.                 },
  101.                 "min_avail_mem": 2,
  102.                 "min_avail_swap": 10,
  103.                 "monitor": {
  104.                     "status": "idle",
  105.                     "status_updated": 1540369578.187757
  106.                 },
  107.                 "services": {
  108.                     "config": {
  109.                         "gitlab": {
  110.                             "csum": "9536beba239467a74a1fbdd86a91bc7b",
  111.                             "scope": [
  112.                                 "node-1-1",
  113.                                 "node-1-2"
  114.                             ],
  115.                             "updated": "2018-10-24T08:17:23.603648Z"
  116.                         },
  117.                         "servdrbd": {
  118.                             "csum": "cd6d2e91e78023ec42262f3f44561f1d",
  119.                             "scope": [
  120.                                 "node-1-1",
  121.                                 "node-1-2"
  122.                             ],
  123.                             "updated": "2018-11-05T15:59:14.527767Z"
  124.                         }
  125.                     },
  126.                     "status": {
  127.                         "gitlab": {
  128.                             "app": "default",
  129.                             "avail": "down",
  130.                             "csum": "105a25bdf132beced12e977953fc2c43",
  131.                             "encap": {},
  132.                             "env": "TST",
  133.                             "frozen": 0,
  134.                             "monitor": {
  135.                                 "global_expect_updated": 1540369576.017241,
  136.                                 "placement": "leader",
  137.                                 "status": "idle",
  138.                                 "status_updated": 1540369576.017251
  139.                             },
  140.                             "mtime": 1541435346.982633,
  141.                             "optional": "n/a",
  142.                             "overall": "down",
  143.                             "placement": "nodes order",
  144.                             "provisioned": true,
  145.                             "resources": {
  146.                                 "container#0": {
  147.                                     "label": "docker container gitlab.container.0@busybox:latest",
  148.                                     "log": [
  149.                                         "info: docker daemon is not running"
  150.                                     ],
  151.                                     "provisioned": {
  152.                                         "mtime": 1537896233.2509408,
  153.                                         "state": true
  154.                                     },
  155.                                     "status": "down",
  156.                                     "type": "container.docker"
  157.                                 },
  158.                                 "container#1": {
  159.                                     "label": "docker container gitlab.container.1@busybox",
  160.                                     "log": [
  161.                                         "info: docker daemon is not running"
  162.                                     ],
  163.                                     "provisioned": {
  164.                                         "mtime": 1537896242.912954,
  165.                                         "state": true
  166.                                     },
  167.                                     "status": "down",
  168.                                     "type": "container.docker"
  169.                                 },
  170.                                 "disk#1": {
  171.                                     "label": "vg gitlab",
  172.                                     "provisioned": {
  173.                                         "mtime": 1537896232.1939394,
  174.                                         "state": true
  175.                                     },
  176.                                     "status": "down",
  177.                                     "type": "disk.vg"
  178.                                 },
  179.                                 "disk#1pr": {
  180.                                     "label": "/dev/sdq, /dev/sdr",
  181.                                     "provisioned": {
  182.                                         "mtime": 1537896232.4129398,
  183.                                         "state": true
  184.                                     },
  185.                                     "status": "down",
  186.                                     "type": "disk.scsireserv"
  187.                                 },
  188.                                 "fs#1": {
  189.                                     "label": "xfs /dev/gitlab/data@/srv/gitlab",
  190.                                     "provisioned": {
  191.                                         "mtime": 1537896233.0559406,
  192.                                         "state": true
  193.                                     },
  194.                                     "status": "down",
  195.                                     "type": "fs"
  196.                                 },
  197.                                 "ip#0": {
  198.                                     "info": {
  199.                                         "gateway": "192.168.100.1",
  200.                                         "ipaddr": "192.168.100.126",
  201.                                         "ipdev": "br-prd",
  202.                                         "mask": "24"
  203.                                     },
  204.                                     "label": "192.168.100.126@br-prd@container#0",
  205.                                     "provisioned": {
  206.                                         "mtime": 1537896239.310949,
  207.                                         "state": true
  208.                                     },
  209.                                     "status": "down",
  210.                                     "tags": [
  211.                                         "container#0",
  212.                                         "docker"
  213.                                     ],
  214.                                     "type": "ip.docker"
  215.                                 },
  216.                                 "sync#i0": {
  217.                                     "label": "rsync svc config to nodes",
  218.                                     "optional": true,
  219.                                     "status": "up",
  220.                                     "type": "sync.rsync"
  221.                                 }
  222.                             },
  223.                             "running": [],
  224.                             "status_group": {
  225.                                 "app": "n/a",
  226.                                 "container": "down",
  227.                                 "disk": "down",
  228.                                 "fs": "down",
  229.                                 "ip": "down",
  230.                                 "share": "n/a",
  231.                                 "sync": "n/a",
  232.                                 "task": "n/a"
  233.                             },
  234.                             "topology": "failover",
  235.                             "updated": "2018-11-05T16:29:06.982633Z"
  236.                         },
  237.                         "servdrbd": {
  238.                             "app": "default",
  239.                             "avail": "up",
  240.                             "csum": "aa1b170bb9490f46f30223bf69dc9bf1",
  241.                             "env": "TST",
  242.                             "frozen": 0,
  243.                             "monitor": {
  244.                                 "global_expect": null,
  245.                                 "global_expect_updated": 1541433079.624664,
  246.                                 "local_expect": "started",
  247.                                 "placement": "leader",
  248.                                 "status": "idle",
  249.                                 "status_updated": 1541433079.605888
  250.                             },
  251.                             "mtime": 1541435407.92148,
  252.                             "optional": "n/a",
  253.                             "orchestrate": "ha",
  254.                             "overall": "warn",
  255.                             "placement": "nodes order",
  256.                             "provisioned": true,
  257.                             "resources": {
  258.                                 "app#1": {
  259.                                     "disable": true,
  260.                                     "label": "forking: redis_init_script",
  261.                                     "status": "n/a",
  262.                                     "type": "app.forking"
  263.                                 },
  264.                                 "disk#0": {
  265.                                     "label": "loop /root/loopback.file",
  266.                                     "provisioned": {
  267.                                         "mtime": 1535017367.6809719,
  268.                                         "state": true
  269.                                     },
  270.                                     "standby": true,
  271.                                     "status": "stdby up",
  272.                                     "type": "disk.loop"
  273.                                 },
  274.                                 "disk#1": {
  275.                                     "label": "vg drdbvg",
  276.                                     "provisioned": {
  277.                                         "mtime": 1535017367.755972,
  278.                                         "state": true
  279.                                     },
  280.                                     "standby": true,
  281.                                     "status": "stdby up",
  282.                                     "type": "disk.vg"
  283.                                 },
  284.                                 "disk#2": {
  285.                                     "label": "drbd servdrbd",
  286.                                     "log": [
  287.                                         "info: Primary",
  288.                                         "warn: unexpected drbd resource servdrbd state: UpToDate/DUnknown"
  289.                                     ],
  290.                                     "standby": true,
  291.                                     "status": "stdby up",
  292.                                     "type": "disk.drbd"
  293.                                 },
  294.                                 "fs#0": {
  295.                                     "label": "ext4 /dev/drbd11@/srv/servdrbd",
  296.                                     "monitor": true,
  297.                                     "provisioned": {
  298.                                         "mtime": 1535017791.372143,
  299.                                         "state": true
  300.                                     },
  301.                                     "status": "up",
  302.                                     "type": "fs"
  303.                                 },
  304.                                 "ip#vip": {
  305.                                     "info": {
  306.                                         "ipaddr": "192.168.100.13",
  307.                                         "ipdev": "br-prd"
  308.                                     },
  309.                                     "label": "192.168.100.13@br-prd",
  310.                                     "provisioned": {
  311.                                         "mtime": 1541432997.9581158,
  312.                                         "state": true
  313.                                     },
  314.                                     "status": "up",
  315.                                     "type": "ip"
  316.                                 },
  317.                                 "sync#i0": {
  318.                                     "label": "rsync svc config to nodes",
  319.                                     "optional": true,
  320.                                     "status": "up",
  321.                                     "type": "sync.rsync"
  322.                                 }
  323.                             },
  324.                             "running": [],
  325.                             "status_group": {
  326.                                 "app": "n/a",
  327.                                 "container": "n/a",
  328.                                 "disk": "stdby up",
  329.                                 "fs": "up",
  330.                                 "ip": "up",
  331.                                 "share": "n/a",
  332.                                 "sync": "n/a",
  333.                                 "task": "n/a"
  334.                             },
  335.                             "topology": "failover",
  336.                             "updated": "2018-11-05T16:30:07.921480Z"
  337.                         }
  338.                     }
  339.                 },
  340.                 "speaker": true,
  341.                 "stats": {
  342.                     "load_15m": 0.1,
  343.                     "mem_avail": 59,
  344.                     "mem_total": 991,
  345.                     "score": 93,
  346.                     "swap_avail": 97,
  347.                     "swap_total": 1535
  348.                 },
  349.                 "updated": 1541435629.022329
  350.             },
  351.             "node-1-2": {
  352.                 "agent": "1.9-2506",
  353.                 "compat": 5,
  354.                 "env": "TST",
  355.                 "frozen": 0,
  356.                 "gen": {
  357.                     "node-1-1": 6287,
  358.                     "node-1-2": 5411
  359.                 },
  360.                 "min_avail_mem": 2,
  361.                 "min_avail_swap": 10,
  362.                 "monitor": {
  363.                     "status": "idle",
  364.                     "status_updated": 1540369593.444469
  365.                 },
  366.                 "services": {
  367.                     "config": {
  368.                         "gitlab": {
  369.                             "csum": "9536beba239467a74a1fbdd86a91bc7b",
  370.                             "scope": [
  371.                                 "node-1-1",
  372.                                 "node-1-2"
  373.                             ],
  374.                             "updated": "2018-10-24T08:17:23.603648Z"
  375.                         },
  376.                         "servdrbd": {
  377.                             "csum": "cd6d2e91e78023ec42262f3f44561f1d",
  378.                             "scope": [
  379.                                 "node-1-1",
  380.                                 "node-1-2"
  381.                             ],
  382.                             "updated": "2018-11-05T15:59:14.527767Z"
  383.                         }
  384.                     },
  385.                     "status": {
  386.                         "gitlab": {
  387.                             "app": "default",
  388.                             "avail": "up",
  389.                             "csum": "a04b318651334b5416d5d243624f3500",
  390.                             "encap": {},
  391.                             "env": "TST",
  392.                             "frozen": 0,
  393.                             "monitor": {
  394.                                 "global_expect_updated": 1540369591.350063,
  395.                                 "local_expect": "started",
  396.                                 "placement": "",
  397.                                 "status": "idle",
  398.                                 "status_updated": 1540376674.705855
  399.                             },
  400.                             "mtime": 1541435385.692434,
  401.                             "optional": "n/a",
  402.                             "overall": "up",
  403.                             "placement": "nodes order",
  404.                             "provisioned": true,
  405.                             "resources": {
  406.                                 "container#0": {
  407.                                     "label": "docker container gitlab.container.0@busybox:latest",
  408.                                     "provisioned": {
  409.                                         "mtime": 1537896233.25094,
  410.                                         "state": true
  411.                                     },
  412.                                     "status": "up",
  413.                                     "type": "container.docker"
  414.                                 },
  415.                                 "container#1": {
  416.                                     "label": "docker container gitlab.container.1@busybox",
  417.                                     "provisioned": {
  418.                                         "mtime": 1537896242.912954,
  419.                                         "state": true
  420.                                     },
  421.                                     "status": "up",
  422.                                     "type": "container.docker"
  423.                                 },
  424.                                 "disk#1": {
  425.                                     "label": "vg gitlab",
  426.                                     "provisioned": {
  427.                                         "mtime": 1537896232.193939,
  428.                                         "state": true
  429.                                     },
  430.                                     "status": "up",
  431.                                     "type": "disk.vg"
  432.                                 },
  433.                                 "disk#1pr": {
  434.                                     "label": "/dev/sdq, /dev/sdr",
  435.                                     "provisioned": {
  436.                                         "mtime": 1537896232.412939,
  437.                                         "state": true
  438.                                     },
  439.                                     "status": "up",
  440.                                     "type": "disk.scsireserv"
  441.                                 },
  442.                                 "fs#1": {
  443.                                     "label": "xfs /dev/gitlab/data@/srv/gitlab",
  444.                                     "provisioned": {
  445.                                         "mtime": 1537896233.05594,
  446.                                         "state": true
  447.                                     },
  448.                                     "status": "up",
  449.                                     "type": "fs"
  450.                                 },
  451.                                 "ip#0": {
  452.                                     "info": {
  453.                                         "gateway": "192.168.100.1",
  454.                                         "ipaddr": "192.168.100.126",
  455.                                         "ipdev": "br-prd",
  456.                                         "mask": "24"
  457.                                     },
  458.                                     "label": "192.168.100.126@br-prd@container#0",
  459.                                     "provisioned": {
  460.                                         "mtime": 1537896239.310949,
  461.                                         "state": true
  462.                                     },
  463.                                     "status": "up",
  464.                                     "tags": [
  465.                                         "container#0",
  466.                                         "docker"
  467.                                     ],
  468.                                     "type": "ip.docker"
  469.                                 },
  470.                                 "sync#i0": {
  471.                                     "label": "rsync svc config to nodes",
  472.                                     "optional": true,
  473.                                     "status": "up",
  474.                                     "type": "sync.rsync"
  475.                                 }
  476.                             },
  477.                             "running": [],
  478.                             "status_group": {
  479.                                 "app": "n/a",
  480.                                 "container": "up",
  481.                                 "disk": "up",
  482.                                 "fs": "up",
  483.                                 "ip": "up",
  484.                                 "share": "n/a",
  485.                                 "sync": "n/a",
  486.                                 "task": "n/a"
  487.                             },
  488.                             "topology": "failover",
  489.                             "updated": "2018-11-05T16:29:45.692434Z"
  490.                         },
  491.                         "servdrbd": {
  492.                             "app": "default",
  493.                             "avail": "stdby up",
  494.                             "csum": "8f0207d84b84f6caab757ea5396c2d84",
  495.                             "env": "TST",
  496.                             "frozen": 0,
  497.                             "monitor": {
  498.                                 "global_expect": null,
  499.                                 "global_expect_updated": 1541433079.966412,
  500.                                 "local_expect": null,
  501.                                 "placement": "",
  502.                                 "status": "idle",
  503.                                 "status_updated": 1541433077.411484
  504.                             },
  505.                             "mtime": 1541435507.869924,
  506.                             "optional": "n/a",
  507.                             "orchestrate": "ha",
  508.                             "overall": "warn",
  509.                             "placement": "nodes order",
  510.                             "provisioned": true,
  511.                             "resources": {
  512.                                 "app#1": {
  513.                                     "disable": true,
  514.                                     "label": "forking: redis_init_script",
  515.                                     "status": "n/a",
  516.                                     "type": "app.forking"
  517.                                 },
  518.                                 "disk#0": {
  519.                                     "label": "loop /root/loopback.file",
  520.                                     "provisioned": {
  521.                                         "mtime": 1535017277.8893247,
  522.                                         "state": true
  523.                                     },
  524.                                     "standby": true,
  525.                                     "status": "stdby up",
  526.                                     "type": "disk.loop"
  527.                                 },
  528.                                 "disk#1": {
  529.                                     "label": "vg drdbvg",
  530.                                     "provisioned": {
  531.                                         "mtime": 1535017277.9383247,
  532.                                         "state": true
  533.                                     },
  534.                                     "standby": true,
  535.                                     "status": "stdby up",
  536.                                     "type": "disk.vg"
  537.                                 },
  538.                                 "disk#2": {
  539.                                     "label": "drbd servdrbd",
  540.                                     "log": [
  541.                                         "info: Secondary",
  542.                                         "warn: unexpected drbd resource servdrbd state: UpToDate/DUnknown"
  543.                                     ],
  544.                                     "standby": true,
  545.                                     "status": "stdby up",
  546.                                     "type": "disk.drbd"
  547.                                 },
  548.                                 "fs#0": {
  549.                                     "label": "ext4 /dev/drbd11@/srv/servdrbd",
  550.                                     "monitor": true,
  551.                                     "provisioned": {
  552.                                         "mtime": 1535017791.372143,
  553.                                         "state": true
  554.                                     },
  555.                                     "status": "down",
  556.                                     "type": "fs"
  557.                                 },
  558.                                 "ip#vip": {
  559.                                     "info": {
  560.                                         "ipaddr": "192.168.100.13",
  561.                                         "ipdev": "br-prd"
  562.                                     },
  563.                                     "label": "192.168.100.13@br-prd",
  564.                                     "provisioned": {
  565.                                         "mtime": 1541432999.0679634,
  566.                                         "state": true
  567.                                     },
  568.                                     "status": "down",
  569.                                     "type": "ip"
  570.                                 },
  571.                                 "sync#i0": {
  572.                                     "label": "rsync svc config to nodes",
  573.                                     "optional": true,
  574.                                     "status": "up",
  575.                                     "type": "sync.rsync"
  576.                                 }
  577.                             },
  578.                             "running": [],
  579.                             "status_group": {
  580.                                 "app": "n/a",
  581.                                 "container": "n/a",
  582.                                 "disk": "stdby up",
  583.                                 "fs": "down",
  584.                                 "ip": "down",
  585.                                 "share": "n/a",
  586.                                 "sync": "n/a",
  587.                                 "task": "n/a"
  588.                             },
  589.                             "topology": "failover",
  590.                             "updated": "2018-11-05T16:31:47.869924Z"
  591.                         }
  592.                     }
  593.                 },
  594.                 "speaker": false,
  595.                 "stats": {
  596.                     "load_15m": 0.1,
  597.                     "mem_avail": 56,
  598.                     "mem_total": 991,
  599.                     "score": 93,
  600.                     "swap_avail": 98,
  601.                     "swap_total": 1535
  602.                 },
  603.                 "updated": 1541435508.130597
  604.             }
  605.         },
  606.         "services": {
  607.             "gitlab": {
  608.                 "avail": "up",
  609.                 "frozen": "thawed",
  610.                 "overall": "up",
  611.                 "placement": "non-optimal",
  612.                 "provisioned": true
  613.             },
  614.             "servdrbd": {
  615.                 "avail": "up",
  616.                 "frozen": "thawed",
  617.                 "overall": "warn",
  618.                 "placement": "optimal",
  619.                 "provisioned": true
  620.             }
  621.         },
  622.         "state": "running",
  623.         "transitions": 0
  624.     },
  625.     "scheduler": {
  626.         "created": "2018-10-24T08:26:14Z",
  627.         "delayed": [],
  628.         "running": 0,
  629.         "state": "running"
  630.     }
  631. }
Advertisement
Add Comment
Please, Sign In to add comment
Advertisement