phoerious

mds-perf-dump.0

Dec 17th, 2019
44
Never
Not a member of Pastebin yet? Sign Up, it unlocks many cool features!
  1. {
  2.     "AsyncMessenger::Worker-0": {
  3.         "msgr_recv_messages": 4961357,
  4.         "msgr_send_messages": 52723184,
  5.         "msgr_recv_bytes": 20503469353,
  6.         "msgr_send_bytes": 73080861297,
  7.         "msgr_created_connections": 14858,
  8.         "msgr_active_connections": 418,
  9.         "msgr_running_total_time": 973.245883116,
  10.         "msgr_running_send_time": 569.436802418,
  11.         "msgr_running_recv_time": 220058.777086013,
  12.         "msgr_running_fast_dispatch_time": 60.579524628
  13.     },
  14.     "AsyncMessenger::Worker-1": {
  15.         "msgr_recv_messages": 2483059,
  16.         "msgr_send_messages": 6991361,
  17.         "msgr_recv_bytes": 17808425342,
  18.         "msgr_send_bytes": 21073175477,
  19.         "msgr_created_connections": 14832,
  20.         "msgr_active_connections": 410,
  21.         "msgr_running_total_time": 442.252890234,
  22.         "msgr_running_send_time": 196.666519465,
  23.         "msgr_running_recv_time": 581.143546706,
  24.         "msgr_running_fast_dispatch_time": 58.577400801
  25.     },
  26.     "AsyncMessenger::Worker-2": {
  27.         "msgr_recv_messages": 2382656,
  28.         "msgr_send_messages": 3068484,
  29.         "msgr_recv_bytes": 67259280004,
  30.         "msgr_send_bytes": 70321801050,
  31.         "msgr_created_connections": 14887,
  32.         "msgr_active_connections": 402,
  33.         "msgr_running_total_time": 537.899937657,
  34.         "msgr_running_send_time": 195.600864104,
  35.         "msgr_running_recv_time": 8819.063760196,
  36.         "msgr_running_fast_dispatch_time": 39.246797728
  37.     },
  38.     "cct": {
  39.         "total_workers": 1,
  40.         "unhealthy_workers": 0
  41.     },
  42.     "finisher-PurgeQueue": {
  43.         "queue_len": 0,
  44.         "complete_latency": {
  45.             "avgcount": 25636,
  46.             "sum": 2.092556655,
  47.             "avgtime": 0.000081625
  48.         }
  49.     },
  50.     "mds": {
  51.         "request": 3903944,
  52.         "reply": 3339294,
  53.         "reply_latency": {
  54.             "avgcount": 3339294,
  55.             "sum": 8296.776911670,
  56.             "avgtime": 0.002484590
  57.         },
  58.         "forward": 564644,
  59.         "dir_fetch": 486632,
  60.         "dir_commit": 55061,
  61.         "dir_split": 0,
  62.         "dir_merge": 0,
  63.         "inode_max": 2147483647,
  64.         "inodes": 14757668,
  65.         "inodes_top": 23861,
  66.         "inodes_bottom": 33922,
  67.         "inodes_pin_tail": 14699885,
  68.         "inodes_pinned": 14723580,
  69.         "inodes_expired": 134542134,
  70.         "inodes_with_caps": 14713616,
  71.         "caps": 14734697,
  72.         "subtrees": 2124,
  73.         "traverse": 4025295,
  74.         "traverse_hit": 3426106,
  75.         "traverse_forward": 541796,
  76.         "traverse_discover": 50371,
  77.         "traverse_dir_fetch": 237,
  78.         "traverse_remote_ino": 0,
  79.         "traverse_lock": 0,
  80.         "load_cent": 14601917,
  81.         "q": 0,
  82.         "exported": 74532,
  83.         "exported_inodes": 71445376,
  84.         "imported": 83967,
  85.         "imported_inodes": 62930221,
  86.         "openino_dir_fetch": 144892,
  87.         "openino_backtrace_fetch": 0,
  88.         "openino_peer_discover": 0,
  89.         "root_rfiles": 126646214,
  90.         "root_rbytes": 86372028672941,
  91.         "root_rsnaps": 0
  92.     },
  93.     "mds_cache": {
  94.         "num_strays": 40,
  95.         "num_strays_delayed": 0,
  96.         "num_strays_enqueuing": 0,
  97.         "strays_created": 188,
  98.         "strays_enqueued": 173,
  99.         "strays_reintegrated": 4,
  100.         "strays_migrated": 0,
  101.         "num_recovering_processing": 0,
  102.         "num_recovering_enqueued": 0,
  103.         "num_recovering_prioritized": 0,
  104.         "recovery_started": 0,
  105.         "recovery_completed": 0,
  106.         "ireq_enqueue_scrub": 0,
  107.         "ireq_exportdir": 76808,
  108.         "ireq_flush": 0,
  109.         "ireq_fragmentdir": 0,
  110.         "ireq_fragstats": 0,
  111.         "ireq_inodestats": 0
  112.     },
  113.     "mds_log": {
  114.         "evadd": 2983494,
  115.         "evex": 2973421,
  116.         "evtrm": 2973421,
  117.         "ev": 24580,
  118.         "evexg": 0,
  119.         "evexd": 1024,
  120.         "segadd": 11647,
  121.         "segex": 11647,
  122.         "segtrm": 11647,
  123.         "seg": 129,
  124.         "segexg": 0,
  125.         "segexd": 1,
  126.         "expos": 5795260977645,
  127.         "wrpos": 5795876887413,
  128.         "rdpos": 5750548463140,
  129.         "jlat": {
  130.             "avgcount": 200509,
  131.             "sum": 128113.239702467,
  132.             "avgtime": 0.638940095
  133.         },
  134.         "replayed": 14507
  135.     },
  136.     "mds_mem": {
  137.         "ino": 14757672,
  138.         "ino+": 150053977,
  139.         "ino-": 135296305,
  140.         "dir": 15176,
  141.         "dir+": 2373596,
  142.         "dir-": 2358420,
  143.         "dn": 14757668,
  144.         "dn+": 150055378,
  145.         "dn-": 135297710,
  146.         "cap": 14734697,
  147.         "cap+": 119241957,
  148.         "cap-": 104507260,
  149.         "rss": 46227272,
  150.         "heap": 330480
  151.     },
  152.     "mds_server": {
  153.         "dispatch_client_request": 4419989,
  154.         "dispatch_server_request": 4197,
  155.         "handle_client_request": 3903944,
  156.         "handle_client_session": 666649,
  157.         "handle_slave_request": 5409,
  158.         "req_create_latency": {
  159.             "avgcount": 2707,
  160.             "sum": 70.146810086,
  161.             "avgtime": 0.025913117
  162.         },
  163.         "req_getattr_latency": {
  164.             "avgcount": 450665,
  165.             "sum": 298.226493605,
  166.             "avgtime": 0.000661747
  167.         },
  168.         "req_getfilelock_latency": {
  169.             "avgcount": 0,
  170.             "sum": 0.000000000,
  171.             "avgtime": 0.000000000
  172.         },
  173.         "req_link_latency": {
  174.             "avgcount": 2,
  175.             "sum": 0.000366130,
  176.             "avgtime": 0.000183065
  177.         },
  178.         "req_lookup_latency": {
  179.             "avgcount": 1067235,
  180.             "sum": 395.872137976,
  181.             "avgtime": 0.000370932
  182.         },
  183.         "req_lookuphash_latency": {
  184.             "avgcount": 0,
  185.             "sum": 0.000000000,
  186.             "avgtime": 0.000000000
  187.         },
  188.         "req_lookupino_latency": {
  189.             "avgcount": 409,
  190.             "sum": 1.891534712,
  191.             "avgtime": 0.004624779
  192.         },
  193.         "req_lookupname_latency": {
  194.             "avgcount": 0,
  195.             "sum": 0.000000000,
  196.             "avgtime": 0.000000000
  197.         },
  198.         "req_lookupparent_latency": {
  199.             "avgcount": 0,
  200.             "sum": 0.000000000,
  201.             "avgtime": 0.000000000
  202.         },
  203.         "req_lookupsnap_latency": {
  204.             "avgcount": 0,
  205.             "sum": 0.000000000,
  206.             "avgtime": 0.000000000
  207.         },
  208.         "req_lssnap_latency": {
  209.             "avgcount": 0,
  210.             "sum": 0.000000000,
  211.             "avgtime": 0.000000000
  212.         },
  213.         "req_mkdir_latency": {
  214.             "avgcount": 165,
  215.             "sum": 0.371873962,
  216.             "avgtime": 0.002253781
  217.         },
  218.         "req_mknod_latency": {
  219.             "avgcount": 0,
  220.             "sum": 0.000000000,
  221.             "avgtime": 0.000000000
  222.         },
  223.         "req_mksnap_latency": {
  224.             "avgcount": 0,
  225.             "sum": 0.000000000,
  226.             "avgtime": 0.000000000
  227.         },
  228.         "req_open_latency": {
  229.             "avgcount": 390,
  230.             "sum": 0.525386094,
  231.             "avgtime": 0.001347143
  232.         },
  233.         "req_readdir_latency": {
  234.             "avgcount": 632900,
  235.             "sum": 7300.875416282,
  236.             "avgtime": 0.011535590
  237.         },
  238.         "req_rename_latency": {
  239.             "avgcount": 157,
  240.             "sum": 9.702408550,
  241.             "avgtime": 0.061798780
  242.         },
  243.         "req_renamesnap_latency": {
  244.             "avgcount": 0,
  245.             "sum": 0.000000000,
  246.             "avgtime": 0.000000000
  247.         },
  248.         "req_rmdir_latency": {
  249.             "avgcount": 18,
  250.             "sum": 0.193786719,
  251.             "avgtime": 0.010765928
  252.         },
  253.         "req_rmsnap_latency": {
  254.             "avgcount": 0,
  255.             "sum": 0.000000000,
  256.             "avgtime": 0.000000000
  257.         },
  258.         "req_rmxattr_latency": {
  259.             "avgcount": 0,
  260.             "sum": 0.000000000,
  261.             "avgtime": 0.000000000
  262.         },
  263.         "req_setattr_latency": {
  264.             "avgcount": 1052619,
  265.             "sum": 190.276012225,
  266.             "avgtime": 0.000180764
  267.         },
  268.         "req_setdirlayout_latency": {
  269.             "avgcount": 0,
  270.             "sum": 0.000000000,
  271.             "avgtime": 0.000000000
  272.         },
  273.         "req_setfilelock_latency": {
  274.             "avgcount": 0,
  275.             "sum": 0.000000000,
  276.             "avgtime": 0.000000000
  277.         },
  278.         "req_setlayout_latency": {
  279.             "avgcount": 0,
  280.             "sum": 0.000000000,
  281.             "avgtime": 0.000000000
  282.         },
  283.         "req_setxattr_latency": {
  284.             "avgcount": 131935,
  285.             "sum": 28.603823760,
  286.             "avgtime": 0.000216802
  287.         },
  288.         "req_symlink_latency": {
  289.             "avgcount": 8,
  290.             "sum": 0.005998908,
  291.             "avgtime": 0.000749863
  292.         },
  293.         "req_unlink_latency": {
  294.             "avgcount": 84,
  295.             "sum": 0.084862661,
  296.             "avgtime": 0.001010269
  297.         },
  298.         "cap_revoke_eviction": 0
  299.     },
  300.     "mds_sessions": {
  301.         "session_count": 228,
  302.         "session_add": 234,
  303.         "session_remove": 6,
  304.         "sessions_open": 228,
  305.         "sessions_stale": 0,
  306.         "total_load": 1871,
  307.         "average_load": 8,
  308.         "avg_session_uptime": 12671156
  309.     },
  310.     "mempool": {
  311.         "bloom_filter_bytes": 23740307,
  312.         "bloom_filter_items": 23740307,
  313.         "bluestore_alloc_bytes": 0,
  314.         "bluestore_alloc_items": 0,
  315.         "bluestore_cache_data_bytes": 0,
  316.         "bluestore_cache_data_items": 0,
  317.         "bluestore_cache_onode_bytes": 0,
  318.         "bluestore_cache_onode_items": 0,
  319.         "bluestore_cache_other_bytes": 0,
  320.         "bluestore_cache_other_items": 0,
  321.         "bluestore_fsck_bytes": 0,
  322.         "bluestore_fsck_items": 0,
  323.         "bluestore_txc_bytes": 0,
  324.         "bluestore_txc_items": 0,
  325.         "bluestore_writing_deferred_bytes": 0,
  326.         "bluestore_writing_deferred_items": 0,
  327.         "bluestore_writing_bytes": 0,
  328.         "bluestore_writing_items": 0,
  329.         "bluefs_bytes": 0,
  330.         "bluefs_items": 0,
  331.         "buffer_anon_bytes": 566388431,
  332.         "buffer_anon_items": 7982,
  333.         "buffer_meta_bytes": 87912,
  334.         "buffer_meta_items": 999,
  335.         "osd_bytes": 0,
  336.         "osd_items": 0,
  337.         "osd_mapbl_bytes": 0,
  338.         "osd_mapbl_items": 0,
  339.         "osd_pglog_bytes": 0,
  340.         "osd_pglog_items": 0,
  341.         "osdmap_bytes": 200544,
  342.         "osdmap_items": 12908,
  343.         "osdmap_mapping_bytes": 0,
  344.         "osdmap_mapping_items": 0,
  345.         "pgmap_bytes": 0,
  346.         "pgmap_items": 0,
  347.         "mds_co_bytes": 39938684783,
  348.         "mds_co_items": 651907706,
  349.         "unittest_1_bytes": 0,
  350.         "unittest_1_items": 0,
  351.         "unittest_2_bytes": 0,
  352.         "unittest_2_items": 0
  353.     },
  354.     "objecter": {
  355.         "op_active": 0,
  356.         "op_laggy": 0,
  357.         "op_send": 800806,
  358.         "op_send_bytes": 46095551549,
  359.         "op_resend": 0,
  360.         "op_reply": 800806,
  361.         "op": 800806,
  362.         "op_r": 486948,
  363.         "op_w": 313858,
  364.         "op_rmw": 0,
  365.         "op_pg": 0,
  366.         "osdop_stat": 54926,
  367.         "osdop_create": 1667,
  368.         "osdop_read": 308,
  369.         "osdop_write": 201986,
  370.         "osdop_writefull": 2662,
  371.         "osdop_writesame": 0,
  372.         "osdop_append": 0,
  373.         "osdop_zero": 2,
  374.         "osdop_truncate": 0,
  375.         "osdop_delete": 47315,
  376.         "osdop_mapext": 0,
  377.         "osdop_sparse_read": 0,
  378.         "osdop_clonerange": 0,
  379.         "osdop_getxattr": 463244,
  380.         "osdop_setxattr": 3334,
  381.         "osdop_cmpxattr": 0,
  382.         "osdop_rmxattr": 0,
  383.         "osdop_resetxattrs": 0,
  384.         "osdop_call": 0,
  385.         "osdop_watch": 0,
  386.         "osdop_notify": 0,
  387.         "osdop_src_cmpxattr": 0,
  388.         "osdop_pgls": 0,
  389.         "osdop_pgls_filter": 0,
  390.         "osdop_other": 2,
  391.         "linger_active": 0,
  392.         "linger_send": 0,
  393.         "linger_resend": 0,
  394.         "linger_ping": 0,
  395.         "poolop_active": 0,
  396.         "poolop_send": 0,
  397.         "poolop_resend": 0,
  398.         "poolstat_active": 0,
  399.         "poolstat_send": 0,
  400.         "poolstat_resend": 0,
  401.         "statfs_active": 0,
  402.         "statfs_send": 0,
  403.         "statfs_resend": 0,
  404.         "command_active": 0,
  405.         "command_send": 0,
  406.         "command_resend": 0,
  407.         "map_epoch": 502811,
  408.         "map_full": 0,
  409.         "map_inc": 8,
  410.         "osd_sessions": 1005,
  411.         "osd_session_open": 42673,
  412.         "osd_session_close": 41668,
  413.         "osd_laggy": 0,
  414.         "omap_wr": 108919,
  415.         "omap_rd": 973268,
  416.         "omap_del": 1945
  417.     },
  418.     "purge_queue": {
  419.         "pq_executing_ops": 0,
  420.         "pq_executing": 0,
  421.         "pq_executed": 173
  422.     },
  423.     "throttle-msgr_dispatch_throttler-mds": {
  424.         "val": 0,
  425.         "max": 104857600,
  426.         "get_started": 0,
  427.         "get": 9827067,
  428.         "get_sum": 104843969130,
  429.         "get_or_fail_fail": 0,
  430.         "get_or_fail_success": 9827067,
  431.         "take": 0,
  432.         "take_sum": 0,
  433.         "put": 9827067,
  434.         "put_sum": 104843969130,
  435.         "wait": {
  436.             "avgcount": 0,
  437.             "sum": 0.000000000,
  438.             "avgtime": 0.000000000
  439.         }
  440.     },
  441.     "throttle-objecter_bytes": {
  442.         "val": 0,
  443.         "max": 104857600,
  444.         "get_started": 0,
  445.         "get": 0,
  446.         "get_sum": 0,
  447.         "get_or_fail_fail": 0,
  448.         "get_or_fail_success": 0,
  449.         "take": 800806,
  450.         "take_sum": 46693862618,
  451.         "put": 730084,
  452.         "put_sum": 46693862618,
  453.         "wait": {
  454.             "avgcount": 0,
  455.             "sum": 0.000000000,
  456.             "avgtime": 0.000000000
  457.         }
  458.     },
  459.     "throttle-objecter_ops": {
  460.         "val": 0,
  461.         "max": 1024,
  462.         "get_started": 0,
  463.         "get": 0,
  464.         "get_sum": 0,
  465.         "get_or_fail_fail": 0,
  466.         "get_or_fail_success": 0,
  467.         "take": 800806,
  468.         "take_sum": 800806,
  469.         "put": 800806,
  470.         "put_sum": 800806,
  471.         "wait": {
  472.             "avgcount": 0,
  473.             "sum": 0.000000000,
  474.             "avgtime": 0.000000000
  475.         }
  476.     },
  477.     "throttle-write_buf_throttle": {
  478.         "val": 0,
  479.         "max": 3758096384,
  480.         "get_started": 0,
  481.         "get": 173,
  482.         "get_sum": 17473,
  483.         "get_or_fail_fail": 0,
  484.         "get_or_fail_success": 173,
  485.         "take": 0,
  486.         "take_sum": 0,
  487.         "put": 156,
  488.         "put_sum": 17473,
  489.         "wait": {
  490.             "avgcount": 0,
  491.             "sum": 0.000000000,
  492.             "avgtime": 0.000000000
  493.         }
  494.     },
  495.     "throttle-write_buf_throttle-0x5589434e3e00": {
  496.         "val": 0,
  497.         "max": 3758096384,
  498.         "get_started": 0,
  499.         "get": 2983494,
  500.         "get_sum": 45328422325,
  501.         "get_or_fail_fail": 0,
  502.         "get_or_fail_success": 2983494,
  503.         "take": 0,
  504.         "take_sum": 0,
  505.         "put": 200509,
  506.         "put_sum": 45328422325,
  507.         "wait": {
  508.             "avgcount": 0,
  509.             "sum": 0.000000000,
  510.             "avgtime": 0.000000000
  511.         }
  512.     }
  513. }
RAW Paste Data