Not the answer you need?
Register and ask your own question!

too many FC msg sent from node1

split-brainsplit-brain EntrantCurrent User Role Supporter
Hi all!

I'm testing PXC 8 with ProxySQL  and sysbench and I've noticed, that my node1 is sending too many FC messages. The scenario is sysbench feeding proxysql setup with max_writers=1, so now only third node is receiving traffic and node1 and node2 are only aplying wsrep. Now only node1 is sending FC messages to the cluster and I want to know why and where I should look for the solution.
Can you please guide me with this? I can provide any info from logs, proxysql tables, variables etc.
sysbench /usr/share/sysbench/oltp_read_write.lua --db-driver=mysql --mysql-host=127.0.0.1 --mysql-user='sbuser' --mysql-password='sbpass' --mysql-port=6033 --mysql-db=sbtest --tables=1 --table_size=1000000 --db-ps-mode=disable --threads=16 --report-interval=1 --time=1800 --skip-trx=off --mysql-ignore-errors=all run

node1:
pxc-avv / pxc-1-euw-1 (idx: 2) / Galera 4.3(r752664d)
         Cluster  Node       Outbound      Inbound       FlowC     Conflct Gcache     Appl
    time P cnf  # stat laten msgs data que msgs data que pause snt lcf bfa   ist  idx  %ef
09:11:17 P   5  3 Sync 1.9ms    0   0b   0  475 768K 172  85ms  18   0   0 79161  807  95%
09:11:18 P   5  3 Sync 1.9ms    0   0b   0  516 840K 131 298ms  15   0   0 79196  441  95%
09:11:19 P   5  3 Sync 1.9ms    0   0b   0  395 636K 169 443ms  22   0   0 79161  816  95%
09:11:20 P   5  3 Sync 1.9ms    0   0b   0  501 813K 167  13ms   1   0   0 79148  434  95%
09:11:21 P   5  3 Sync 1.9ms    0   0b   0  445 727K 124 482ms  14   0   0 79189  596  95%
09:11:22 P   5  3 Sync 1.9ms    0   0b   0  397 642K 182  89ms   6   0   0 79124  609  95%
09:11:23 P   5  3 Sync 1.9ms    0   0b   0  486 787K 153 355ms  15   0   0 79146  535  95%
09:11:24 P   5  3 Sync 1.8ms    0   0b   0  418 683K 186 225ms  16   0   0 79113  617  95%
09:11:25 P   5  3 Sync 1.9ms    0   0b   0  450 724K 116 567ms  21   0   0 79182  816  95%
09:11:26 P   5  3 Sync 1.9ms    0   0b   0  460 744K 156   0ns   0   0   0 79137  629  95%
09:11:27 P   5  3 Sync 1.9ms    0   0b   0  464 756K 154 334ms  42   0   0 79141  836  95%
09:11:28 P   5  3 Sync 1.9ms    0   0b   0  475 766K 175 5.6ms   1   0   0 79124  721  95%
09:11:29 P   5  3 Sync 1.9ms    0   0b   0  491 796K 112 489ms  19   0   0 79182  649  95%
09:11:30 P   5  3 Sync 1.9ms    0   0b   0  359 580K 176 404ms  13   0   0 79114  573  95%
09:11:31 P   5  3 Sync 1.9ms    0   0b   0  525 850K 108  65ms   4   0   0 79184  582  95%
09:11:32 P   5  3 Sync 1.9ms    0   0b   0  381 623K 172 116ms   5   0   0 79118  569  95%
09:11:33 P   5  3 Sync 1.9ms    0   0b   0  486 780K 180 133ms  10   0   0 79111  473  95%
09:11:34 P   5  3 Sync 1.9ms    0   0b   0  418 672K 181 493ms  27   0   0 79113  559  95%
09:11:35 P   5  3 Sync 1.9ms    0   0b   0  479 776K 150 223ms   5   0   0 79136  458  95%
09:11:36 P   5  3 Sync 1.9ms    0   0b   0  430 700K 145 525ms  28   0   0 79138  581  95%
09:11:37 P   5  3 Sync 1.9ms    0   0b   0  436 709K 188  43ms   4   0   0 79098  706  95%
09:11:38 P   5  3 Sync 1.9ms    0   0b   0  458 739K 141 409ms  19   0   0 79144  558  95%
09:11:39 P   5  3 Sync 1.9ms    0   0b   0  374 610K 170 355ms  17   0   0 79114  511  95%
09:11:40 P   5  3 Sync 1.9ms    0   0b   0  485 788K 165 124ms   5   0   0 79115  420  95%
09:11:41 P   5  3 Sync 1.9ms    0   0b   0  509 832K 123 452ms  45   0   0 79155  750  95%
09:11:42 P   5  3 Sync 1.9ms    0   0b   0  298 483K 187 444ms  12   0   0 79084  512  95%
09:11:43 P   5  3 Sync 1.9ms    0   0b   0  466 757K 174 185ms  11   0   0 79096  371  95%
09:11:44 P   5  3 Sync 1.7ms    0   0b   0  499 813K 126 358ms  20   0   0 79143  332  95%
09:11:45 P   5  3 Sync 1.6ms    0   0b   0  413 673K 148 435ms  22   0   0 79117  755  95%
09:11:46 P   5  3 Sync 2.1ms    0   0b   0  448 721K 122 347ms  11   0   0 79153  554  95%
09:11:47 P   5  3 Sync 2.0ms    0   0b   0  333 534K 173 423ms  17   0   0 79102  749  95%
09:11:48 P   5  3 Sync 2.1ms    0   0b   0  423 683K 171 104ms   6   0   0 79101  504  95%
09:11:49 P   5  3 Sync 2.1ms    0   0b   0  411 668K 173 243ms  23   0   0 79096  573  95%
09:11:50 P   5  3 Sync 2.1ms    0   0b   0  416 672K 179 309ms  13   0   0 79091  641  95%
09:11:51 P   5  3 Sync 2.1ms    0   0b   0  471 760K  96 507ms  13   0   0 79170  551  95%
09:11:52 P   5  3 Sync 2.1ms    0   0b   0  402 654K 146   0ns   0   0   0 79113  569  95%
09:11:53 P   5  3 Sync 2.0ms    0   0b   0  490 792K 109 411ms  16   0   0 79156  522  95%
09:11:54 P   5  3 Sync 2.0ms    0   0b   0  414 679K 171  53ms   6   0   0 79076  577  95%
09:11:55 P   5  3 Sync 2.0ms    0   0b   1  453 741K 183 295ms  27   0   0 79055  766  95%
09:11:56 P   5  3 Sync 2.0ms    0   0b   0  491 794K 156 268ms  19   0   0 79078  675  95%
09:11:57 P   5  3 Sync 2.0ms    0   0b   0  503 816K 127 248ms  19   0   0 79105  650  95%
09:11:58 P   5  3 Sync 1.9ms    0   0b   0  441 714K 168 302ms  24   0   0 79061  777  95%








Best Answer

Answers

  • split-brainsplit-brain Entrant Current User Role Supporter
    thank you for your detailed answer! I've followed your recommendations and it solved my issue. Now it looks so much better.
    Thank you very much!

    node1:
    pxc-avv / pxc-1-euw-1 (idx: 2) / Galera 4.3(r752664d)
             Cluster  Node       Outbound      Inbound       FlowC     Conflct Gcache     Appl
        time P cnf  # stat laten msgs data que msgs data que pause snt lcf bfa   ist  idx  %ef
    13:52:53 P   5  3 Sync 1.3ms    0   0b   0  526 876K   0   0ns   0   0   0   113  394  32%
    13:52:54 P   5  3 Sync 1.3ms    0   0b   0  525 873K   0   0ns   0   0   0   133  392  32%
    13:52:55 P   5  3 Sync 1.3ms    0   0b   0  532 879K   0   0ns   0   0   0   111  329  32%
    13:52:56 P   5  3 Sync 1.3ms    0   0b   0  504 835K   0   0ns   0   0   0   113  336  32%
    13:52:57 P   5  3 Sync 1.3ms    0   0b   0  510 846K   1   0ns   0   0   0    95  284  32%
    13:52:58 P   5  3 Sync 1.3ms    0   0b   0  520 861K   2   0ns   0   0   0    77  238  32%
    13:52:59 P   5  3 Sync 1.3ms    0   0b   0  527 876K   1   0ns   0   0   0    81  244  32%
    13:53:00 P   5  3 Sync 1.3ms    0   0b   0  510 849K   1   0ns   0   0   0   124  384  32%
    13:53:01 P   5  3 Sync 1.3ms    0   0b   0  492 816K   0   0ns   0   0   0    95  382  32%
    13:53:02 P   5  3 Sync 1.3ms    0   0b   0  516 862K   1   0ns   0   0   0   124  374  32%
    13:53:03 P   5  3 Sync 1.3ms    0   0b   0  513 849K   0   0ns   0   0   0   132  395  32%
    13:53:04 P   5  3 Sync 1.3ms    0   0b   0  526 875K   0   0ns   0   0   0   122  364  32%
    13:53:05 P   5  3 Sync 1.3ms    0   0b   0  493 818K   0   0ns   0   0   0    94  280  32%
    13:53:06 P   5  3 Sync 1.3ms    0   0b   0  513 852K   0   0ns   0   0   0    74  224  32%
    13:53:07 P   5  3 Sync 1.3ms    0   0b   0  515 853K   0   0ns   0   0   0   127  376  32%
    13:53:08 P   5  3 Sync 1.3ms    0   0b   0  522 867K   0   0ns   0   0   0   124  367  32%
    13:53:09 P   5  3 Sync 1.3ms    0   0b   0  536 887K   0   0ns   0   0   0   136  404  32%
    13:53:10 P   5  3 Sync 1.3ms    0   0b   0  518 861K   0   0ns   0   0   0   126  376  32%
    13:53:11 P   5  3 Sync 1.3ms    0   0b   0  500 826K   0   0ns   0   0   0    95  286  32%
    13:53:12 P   5  3 Sync 1.3ms    0   0b   0  519 865K   1   0ns   0   0   0   125  392  32%
    13:53:13 P   5  3 Sync 1.3ms    0   0b   0  516 856K   0   0ns   0   0   0   124  391  32%
    13:53:14 P   5  3 Sync 1.3ms    0   0b   0  524 874K   0   0ns   0   0   0   126  378  32%
    13:53:15 P   5  3 Sync 1.3ms    0   0b   0  527 873K   0   0ns   0   0   0   125  373  32%
    13:53:16 P   5  3 Sync 1.3ms    0   0b   0  515 853K   0   0ns   0   0   0   101  295  32%
    13:53:17 P   5  3 Sync 1.0ms    0   0b   0  520 863K   0   0ns   0   0   0    90  263  32%
    13:53:18 P   5  3 Sync 1.0ms    0   0b   0  518 865K   0   0ns   0   0   0    78  236  32%
    13:53:19 P   5  3 Sync 1.1ms    0   0b   0  520 868K   0   0ns   0   0   0    71  212  32%
    13:53:20 P   5  3 Sync 1.1ms    0   0b   0  521 870K   0   0ns   0   0   0    62  187  32%
    13:53:21 P   5  3 Sync 1.4ms    0   0b   0  500 831K   0   0ns   0   0   0    44  136  32%
    13:53:22 P   5  3 Sync 1.3ms    0   0b   0  524 868K   0   0ns   0   0   0    38  125  32%
    13:53:23 P   5  3 Sync 1.3ms    0   0b   0  518 862K   0   0ns   0   0   0    41  133  32%
    13:53:24 P   5  3 Sync 1.3ms    0   0b   0  514 855K   0   0ns   0   0   0   128  379  32%
    13:53:25 P   5  3 Sync 1.2ms    0   0b   0  519 869K   0   0ns   0   0   0   133  395  32%
    13:53:26 P   5  3 Sync 1.2ms    0   0b   0  524 874K   0   0ns   0   0   0   122  373  32%
    13:53:27 P   5  3 Sync 1.2ms    0   0b   0  522 867K   0   0ns   0   0   0   121  353  32%
    13:53:28 P   5  3 Sync 1.2ms    0   0b   0  519 867K   0   0ns   0   0   0   138  411  32%
    13:53:29 P   5  3 Sync 1.2ms    0   0b   0  522 868K   0   0ns   0   0   0   120  356  32%
    13:53:30 P   5  3 Sync 1.2ms    0   0b   0  492 816K   0   0ns   0   0   0    90  271  32%
    13:53:31 P   5  3 Sync 1.2ms    0   0b   0  499 827K   0   0ns   0   0   0    59  179  32%
    13:53:32 P   5  3 Sync 1.2ms    0   0b   0  523 870K   0   0ns   0   0   0    62  184  32%
    13:53:33 P   5  3 Sync 1.2ms    0   0b   0  520 865K   0   0ns   0   0   0    45  394  32%
    13:53:34 P   5  3 Sync 1.2ms    0   0b   0  524 868K   0   0ns   0   0   0   129  378  32%




Sign In or Register to comment.

MySQL, InnoDB, MariaDB and MongoDB are trademarks of their respective owners.
Copyright ©2005 - 2020 Percona LLC. All rights reserved.