API tools faq
paste
phoerious

mds-perf-dump.1

phoerious
Dec 17th, 2019
122
0
Never
Add comment
Not a member of Pastebin yet? Sign Up, it unlocks many cool features!
JSON 14.81 KB | None | 0 0
raw download clone embed print report
  1. {
  2.     "AsyncMessenger::Worker-0": {
  3.         "msgr_recv_messages": 4961492,
  4.         "msgr_send_messages": 52773172,
  5.         "msgr_recv_bytes": 20506112226,
  6.         "msgr_send_bytes": 73102400301,
  7.         "msgr_created_connections": 14858,
  8.         "msgr_active_connections": 418,
  9.         "msgr_running_total_time": 973.709635347,
  10.         "msgr_running_send_time": 569.825948827,
  11.         "msgr_running_recv_time": 220058.842268705,
  12.         "msgr_running_fast_dispatch_time": 60.582383280
  13.     },
  14.     "AsyncMessenger::Worker-1": {
  15.         "msgr_recv_messages": 2483142,
  16.         "msgr_send_messages": 6991450,
  17.         "msgr_recv_bytes": 17815456895,
  18.         "msgr_send_bytes": 21073184782,
  19.         "msgr_created_connections": 14832,
  20.         "msgr_active_connections": 410,
  21.         "msgr_running_total_time": 442.288572615,
  22.         "msgr_running_send_time": 196.671731893,
  23.         "msgr_running_recv_time": 581.154378410,
  24.         "msgr_running_fast_dispatch_time": 58.592059321
  25.     },
  26.     "AsyncMessenger::Worker-2": {
  27.         "msgr_recv_messages": 2382794,
  28.         "msgr_send_messages": 3068646,
  29.         "msgr_recv_bytes": 67270942610,
  30.         "msgr_send_bytes": 70362854473,
  31.         "msgr_created_connections": 14887,
  32.         "msgr_active_connections": 402,
  33.         "msgr_running_total_time": 538.075035090,
  34.         "msgr_running_send_time": 195.689376226,
  35.         "msgr_running_recv_time": 8819.100110713,
  36.         "msgr_running_fast_dispatch_time": 39.263605935
  37.     },
  38.     "cct": {
  39.         "total_workers": 1,
  40.         "unhealthy_workers": 0
  41.     },
  42.     "finisher-PurgeQueue": {
  43.         "queue_len": 0,
  44.         "complete_latency": {
  45.             "avgcount": 25636,
  46.             "sum": 2.092556655,
  47.             "avgtime": 0.000081625
  48.         }
  49.     },
  50.     "mds": {
  51.         "request": 3904030,
  52.         "reply": 3339311,
  53.         "reply_latency": {
  54.             "avgcount": 3339311,
  55.             "sum": 8299.525587148,
  56.             "avgtime": 0.002485400
  57.         },
  58.         "forward": 564713,
  59.         "dir_fetch": 486640,
  60.         "dir_commit": 55061,
  61.         "dir_split": 0,
  62.         "dir_merge": 0,
  63.         "inode_max": 2147483647,
  64.         "inodes": 14675750,
  65.         "inodes_top": 1017,
  66.         "inodes_bottom": 7921,
  67.         "inodes_pin_tail": 14666812,
  68.         "inodes_pinned": 14674297,
  69.         "inodes_expired": 134649388,
  70.         "inodes_with_caps": 14664333,
  71.         "caps": 14685414,
  72.         "subtrees": 2124,
  73.         "traverse": 4025388,
  74.         "traverse_hit": 3426130,
  75.         "traverse_forward": 541865,
  76.         "traverse_discover": 50371,
  77.         "traverse_dir_fetch": 237,
  78.         "traverse_remote_ino": 0,
  79.         "traverse_lock": 0,
  80.         "load_cent": 14601917,
  81.         "q": 0,
  82.         "exported": 74541,
  83.         "exported_inodes": 71486260,
  84.         "imported": 83980,
  85.         "imported_inodes": 62930221,
  86.         "openino_dir_fetch": 144892,
  87.         "openino_backtrace_fetch": 0,
  88.         "openino_peer_discover": 0,
  89.         "root_rfiles": 126646214,
  90.         "root_rbytes": 86372028672941,
  91.         "root_rsnaps": 0
  92.     },
  93.     "mds_cache": {
  94.         "num_strays": 40,
  95.         "num_strays_delayed": 0,
  96.         "num_strays_enqueuing": 0,
  97.         "strays_created": 188,
  98.         "strays_enqueued": 173,
  99.         "strays_reintegrated": 4,
  100.         "strays_migrated": 0,
  101.         "num_recovering_processing": 0,
  102.         "num_recovering_enqueued": 0,
  103.         "num_recovering_prioritized": 0,
  104.         "recovery_started": 0,
  105.         "recovery_completed": 0,
  106.         "ireq_enqueue_scrub": 0,
  107.         "ireq_exportdir": 76819,
  108.         "ireq_flush": 0,
  109.         "ireq_fragmentdir": 0,
  110.         "ireq_fragstats": 0,
  111.         "ireq_inodestats": 0
  112.     },
  113.     "mds_log": {
  114.         "evadd": 2983531,
  115.         "evex": 2973421,
  116.         "evtrm": 2973421,
  117.         "ev": 24617,
  118.         "evexg": 0,
  119.         "evexd": 1024,
  120.         "segadd": 11647,
  121.         "segex": 11647,
  122.         "segtrm": 11647,
  123.         "seg": 129,
  124.         "segexg": 0,
  125.         "segexd": 1,
  126.         "expos": 5795260977645,
  127.         "wrpos": 5795876940249,
  128.         "rdpos": 5750548463140,
  129.         "jlat": {
  130.             "avgcount": 200537,
  131.             "sum": 128113.442364112,
  132.             "avgtime": 0.638851894
  133.         },
  134.         "replayed": 14507
  135.     },
  136.     "mds_mem": {
  137.         "ino": 14675754,
  138.         "ino+": 150079313,
  139.         "ino-": 135403559,
  140.         "dir": 15175,
  141.         "dir+": 2373596,
  142.         "dir-": 2358421,
  143.         "dn": 14675750,
  144.         "dn+": 150080714,
  145.         "dn-": 135404964,
  146.         "cap": 14685414,
  147.         "cap+": 119257614,
  148.         "cap-": 104572200,
  149.         "rss": 46237972,
  150.         "heap": 330480
  151.     },
  152.     "mds_server": {
  153.         "dispatch_client_request": 4420090,
  154.         "dispatch_server_request": 4197,
  155.         "handle_client_request": 3904030,
  156.         "handle_client_session": 666693,
  157.         "handle_slave_request": 5409,
  158.         "req_create_latency": {
  159.             "avgcount": 2707,
  160.             "sum": 70.146810086,
  161.             "avgtime": 0.025913117
  162.         },
  163.         "req_getattr_latency": {
  164.             "avgcount": 450665,
  165.             "sum": 298.226493605,
  166.             "avgtime": 0.000661747
  167.         },
  168.         "req_getfilelock_latency": {
  169.             "avgcount": 0,
  170.             "sum": 0.000000000,
  171.             "avgtime": 0.000000000
  172.         },
  173.         "req_link_latency": {
  174.             "avgcount": 2,
  175.             "sum": 0.000366130,
  176.             "avgtime": 0.000183065
  177.         },
  178.         "req_lookup_latency": {
  179.             "avgcount": 1067235,
  180.             "sum": 395.872137976,
  181.             "avgtime": 0.000370932
  182.         },
  183.         "req_lookuphash_latency": {
  184.             "avgcount": 0,
  185.             "sum": 0.000000000,
  186.             "avgtime": 0.000000000
  187.         },
  188.         "req_lookupino_latency": {
  189.             "avgcount": 409,
  190.             "sum": 1.891534712,
  191.             "avgtime": 0.004624779
  192.         },
  193.         "req_lookupname_latency": {
  194.             "avgcount": 0,
  195.             "sum": 0.000000000,
  196.             "avgtime": 0.000000000
  197.         },
  198.         "req_lookupparent_latency": {
  199.             "avgcount": 0,
  200.             "sum": 0.000000000,
  201.             "avgtime": 0.000000000
  202.         },
  203.         "req_lookupsnap_latency": {
  204.             "avgcount": 0,
  205.             "sum": 0.000000000,
  206.             "avgtime": 0.000000000
  207.         },
  208.         "req_lssnap_latency": {
  209.             "avgcount": 0,
  210.             "sum": 0.000000000,
  211.             "avgtime": 0.000000000
  212.         },
  213.         "req_mkdir_latency": {
  214.             "avgcount": 165,
  215.             "sum": 0.371873962,
  216.             "avgtime": 0.002253781
  217.         },
  218.         "req_mknod_latency": {
  219.             "avgcount": 0,
  220.             "sum": 0.000000000,
  221.             "avgtime": 0.000000000
  222.         },
  223.         "req_mksnap_latency": {
  224.             "avgcount": 0,
  225.             "sum": 0.000000000,
  226.             "avgtime": 0.000000000
  227.         },
  228.         "req_open_latency": {
  229.             "avgcount": 390,
  230.             "sum": 0.525386094,
  231.             "avgtime": 0.001347143
  232.         },
  233.         "req_readdir_latency": {
  234.             "avgcount": 632917,
  235.             "sum": 7303.624091760,
  236.             "avgtime": 0.011539623
  237.         },
  238.         "req_rename_latency": {
  239.             "avgcount": 157,
  240.             "sum": 9.702408550,
  241.             "avgtime": 0.061798780
  242.         },
  243.         "req_renamesnap_latency": {
  244.             "avgcount": 0,
  245.             "sum": 0.000000000,
  246.             "avgtime": 0.000000000
  247.         },
  248.         "req_rmdir_latency": {
  249.             "avgcount": 18,
  250.             "sum": 0.193786719,
  251.             "avgtime": 0.010765928
  252.         },
  253.         "req_rmsnap_latency": {
  254.             "avgcount": 0,
  255.             "sum": 0.000000000,
  256.             "avgtime": 0.000000000
  257.         },
  258.         "req_rmxattr_latency": {
  259.             "avgcount": 0,
  260.             "sum": 0.000000000,
  261.             "avgtime": 0.000000000
  262.         },
  263.         "req_setattr_latency": {
  264.             "avgcount": 1052619,
  265.             "sum": 190.276012225,
  266.             "avgtime": 0.000180764
  267.         },
  268.         "req_setdirlayout_latency": {
  269.             "avgcount": 0,
  270.             "sum": 0.000000000,
  271.             "avgtime": 0.000000000
  272.         },
  273.         "req_setfilelock_latency": {
  274.             "avgcount": 0,
  275.             "sum": 0.000000000,
  276.             "avgtime": 0.000000000
  277.         },
  278.         "req_setlayout_latency": {
  279.             "avgcount": 0,
  280.             "sum": 0.000000000,
  281.             "avgtime": 0.000000000
  282.         },
  283.         "req_setxattr_latency": {
  284.             "avgcount": 131935,
  285.             "sum": 28.603823760,
  286.             "avgtime": 0.000216802
  287.         },
  288.         "req_symlink_latency": {
  289.             "avgcount": 8,
  290.             "sum": 0.005998908,
  291.             "avgtime": 0.000749863
  292.         },
  293.         "req_unlink_latency": {
  294.             "avgcount": 84,
  295.             "sum": 0.084862661,
  296.             "avgtime": 0.001010269
  297.         },
  298.         "cap_revoke_eviction": 0
  299.     },
  300.     "mds_sessions": {
  301.         "session_count": 228,
  302.         "session_add": 234,
  303.         "session_remove": 6,
  304.         "sessions_open": 228,
  305.         "sessions_stale": 0,
  306.         "total_load": 1826,
  307.         "average_load": 8,
  308.         "avg_session_uptime": 12671156
  309.     },
  310.     "mempool": {
  311.         "bloom_filter_bytes": 23594488,
  312.         "bloom_filter_items": 23594488,
  313.         "bluestore_alloc_bytes": 0,
  314.         "bluestore_alloc_items": 0,
  315.         "bluestore_cache_data_bytes": 0,
  316.         "bluestore_cache_data_items": 0,
  317.         "bluestore_cache_onode_bytes": 0,
  318.         "bluestore_cache_onode_items": 0,
  319.         "bluestore_cache_other_bytes": 0,
  320.         "bluestore_cache_other_items": 0,
  321.         "bluestore_fsck_bytes": 0,
  322.         "bluestore_fsck_items": 0,
  323.         "bluestore_txc_bytes": 0,
  324.         "bluestore_txc_items": 0,
  325.         "bluestore_writing_deferred_bytes": 0,
  326.         "bluestore_writing_deferred_items": 0,
  327.         "bluestore_writing_bytes": 0,
  328.         "bluestore_writing_items": 0,
  329.         "bluefs_bytes": 0,
  330.         "bluefs_items": 0,
  331.         "buffer_anon_bytes": 568676563,
  332.         "buffer_anon_items": 7980,
  333.         "buffer_meta_bytes": 88000,
  334.         "buffer_meta_items": 1000,
  335.         "osd_bytes": 0,
  336.         "osd_items": 0,
  337.         "osd_mapbl_bytes": 0,
  338.         "osd_mapbl_items": 0,
  339.         "osd_pglog_bytes": 0,
  340.         "osd_pglog_items": 0,
  341.         "osdmap_bytes": 200544,
  342.         "osdmap_items": 12908,
  343.         "osdmap_mapping_bytes": 0,
  344.         "osdmap_mapping_items": 0,
  345.         "pgmap_bytes": 0,
  346.         "pgmap_items": 0,
  347.         "mds_co_bytes": 40120623200,
  348.         "mds_co_items": 655264105,
  349.         "unittest_1_bytes": 0,
  350.         "unittest_1_items": 0,
  351.         "unittest_2_bytes": 0,
  352.         "unittest_2_items": 0
  353.     },
  354.     "objecter": {
  355.         "op_active": 0,
  356.         "op_laggy": 0,
  357.         "op_send": 800842,
  358.         "op_send_bytes": 46095604513,
  359.         "op_resend": 0,
  360.         "op_reply": 800842,
  361.         "op": 800842,
  362.         "op_r": 486956,
  363.         "op_w": 313886,
  364.         "op_rmw": 0,
  365.         "op_pg": 0,
  366.         "osdop_stat": 54926,
  367.         "osdop_create": 1667,
  368.         "osdop_read": 308,
  369.         "osdop_write": 202014,
  370.         "osdop_writefull": 2662,
  371.         "osdop_writesame": 0,
  372.         "osdop_append": 0,
  373.         "osdop_zero": 2,
  374.         "osdop_truncate": 0,
  375.         "osdop_delete": 47315,
  376.         "osdop_mapext": 0,
  377.         "osdop_sparse_read": 0,
  378.         "osdop_clonerange": 0,
  379.         "osdop_getxattr": 463244,
  380.         "osdop_setxattr": 3334,
  381.         "osdop_cmpxattr": 0,
  382.         "osdop_rmxattr": 0,
  383.         "osdop_resetxattrs": 0,
  384.         "osdop_call": 0,
  385.         "osdop_watch": 0,
  386.         "osdop_notify": 0,
  387.         "osdop_src_cmpxattr": 0,
  388.         "osdop_pgls": 0,
  389.         "osdop_pgls_filter": 0,
  390.         "osdop_other": 2,
  391.         "linger_active": 0,
  392.         "linger_send": 0,
  393.         "linger_resend": 0,
  394.         "linger_ping": 0,
  395.         "poolop_active": 0,
  396.         "poolop_send": 0,
  397.         "poolop_resend": 0,
  398.         "poolstat_active": 0,
  399.         "poolstat_send": 0,
  400.         "poolstat_resend": 0,
  401.         "statfs_active": 0,
  402.         "statfs_send": 0,
  403.         "statfs_resend": 0,
  404.         "command_active": 0,
  405.         "command_send": 0,
  406.         "command_resend": 0,
  407.         "map_epoch": 502811,
  408.         "map_full": 0,
  409.         "map_inc": 8,
  410.         "osd_sessions": 1005,
  411.         "osd_session_open": 42673,
  412.         "osd_session_close": 41668,
  413.         "osd_laggy": 0,
  414.         "omap_wr": 108919,
  415.         "omap_rd": 973284,
  416.         "omap_del": 1945
  417.     },
  418.     "purge_queue": {
  419.         "pq_executing_ops": 0,
  420.         "pq_executing": 0,
  421.         "pq_executed": 173
  422.     },
  423.     "throttle-msgr_dispatch_throttler-mds": {
  424.         "val": 161,
  425.         "max": 104857600,
  426.         "get_started": 0,
  427.         "get": 9827423,
  428.         "get_sum": 104865279818,
  429.         "get_or_fail_fail": 0,
  430.         "get_or_fail_success": 9827423,
  431.         "take": 0,
  432.         "take_sum": 0,
  433.         "put": 9827422,
  434.         "put_sum": 104865279657,
  435.         "wait": {
  436.             "avgcount": 0,
  437.             "sum": 0.000000000,
  438.             "avgtime": 0.000000000
  439.         }
  440.     },
  441.     "throttle-objecter_bytes": {
  442.         "val": 0,
  443.         "max": 104857600,
  444.         "get_started": 0,
  445.         "get": 0,
  446.         "get_sum": 0,
  447.         "get_or_fail_fail": 0,
  448.         "get_or_fail_success": 0,
  449.         "take": 800842,
  450.         "take_sum": 46693915454,
  451.         "put": 730112,
  452.         "put_sum": 46693915454,
  453.         "wait": {
  454.             "avgcount": 0,
  455.             "sum": 0.000000000,
  456.             "avgtime": 0.000000000
  457.         }
  458.     },
  459.     "throttle-objecter_ops": {
  460.         "val": 0,
  461.         "max": 1024,
  462.         "get_started": 0,
  463.         "get": 0,
  464.         "get_sum": 0,
  465.         "get_or_fail_fail": 0,
  466.         "get_or_fail_success": 0,
  467.         "take": 800842,
  468.         "take_sum": 800842,
  469.         "put": 800842,
  470.         "put_sum": 800842,
  471.         "wait": {
  472.             "avgcount": 0,
  473.             "sum": 0.000000000,
  474.             "avgtime": 0.000000000
  475.         }
  476.     },
  477.     "throttle-write_buf_throttle": {
  478.         "val": 0,
  479.         "max": 3758096384,
  480.         "get_started": 0,
  481.         "get": 173,
  482.         "get_sum": 17473,
  483.         "get_or_fail_fail": 0,
  484.         "get_or_fail_success": 173,
  485.         "take": 0,
  486.         "take_sum": 0,
  487.         "put": 156,
  488.         "put_sum": 17473,
  489.         "wait": {
  490.             "avgcount": 0,
  491.             "sum": 0.000000000,
  492.             "avgtime": 0.000000000
  493.         }
  494.     },
  495.     "throttle-write_buf_throttle-0x5589434e3e00": {
  496.         "val": 0,
  497.         "max": 3758096384,
  498.         "get_started": 0,
  499.         "get": 2983531,
  500.         "get_sum": 45328475161,
  501.         "get_or_fail_fail": 0,
  502.         "get_or_fail_success": 2983531,
  503.         "take": 0,
  504.         "take_sum": 0,
  505.         "put": 200537,
  506.         "put_sum": 45328475161,
  507.         "wait": {
  508.             "avgcount": 0,
  509.             "sum": 0.000000000,
  510.             "avgtime": 0.000000000
  511.         }
  512.     }
  513. }
Add Comment
Please, Sign In to add comment
Public Pastes
We use cookies for various purposes including analytics. By continuing to use Pastebin, you agree to our use of cookies as described in the Cookies Policy.  OK, I Understand
Not a member of Pastebin yet?
Sign Up, it unlocks many cool features!