ProxySQL集群配置
ProxySQL集群
实验环境信息
MySQL主从信息
| IP 1 | 角色 |
|---|---|
| 188.188.0.68 | Node1 |
| 188.188.0.69 | Node2 |
| 188.188.0.70 | Node3 |
ProxySQL服务节点
| IP 1 | 角色 |
|---|---|
| 188.188.0.68 | 节点68 |
| 188.188.0.71 | 节点71 |
ProxySQL版本： 2.0.3-29-g00f26d5
一、ProxySQL服务安装
在多个服务器上安装相同版本的ProxySQL服务；并在各个节点启动服务。
安装方式参考官网或\<01_ProxySQL安装.txt>
二、设置集群内节点信息
！！！在各节点分别执行以下操作！！！
1）登录ProxySQL点
登录各个节点，设置通一的用户名、密码：
mysql -u admin -padmin -h 127.0.0.1 -P 6032 --prompt ‘Admin> ‘
2）设置服务器信息
Admin> SELECT * FROM proxysql_servers; Empty set (0.00 sec) Admin> INSERT INTO proxysql_servers(hostname,port,weight,comment) VALUES (‘188.188.0.68‘,6032,1,‘节点68‘),(‘188.188.0.71‘,6032,1,‘节点71‘); Query OK, 2 rows affected (0.00 sec) Admin> SELECT * FROM proxysql_servers; +--------------+------+--------+----------+ | hostname | port | weight | comment | +--------------+------+--------+----------+ | 188.188.0.68 | 6032 | 1 | 节点68 | | 188.188.0.71 | 6032 | 1 | 节点71 | +--------------+------+--------+----------+ 2 rows in set (0.00 sec)
3）配置生效
Admin> LOAD PROXYSQL SERVERS TO RUNTIME; Query OK, 0 rows affected (0.00 sec) Admin> SELECT * FROM runtime_proxysql_servers; +--------------+------+--------+----------+ | hostname | port | weight | comment | +--------------+------+--------+----------+ | 188.188.0.71 | 6032 | 1 | 节点71 | | 188.188.0.68 | 6032 | 1 | 节点68 | +--------------+------+--------+----------+ 2 rows in set (0.00 sec)
三、设置集群节点间数据同步用户
！！！在各节点分别执行以下操作！！！
1)查看原始值
Admin> SHOW VARIABLES LIKE ‘admin-cluster_username‘; +------------------------+-------+ | Variable_name | Value | +------------------------+-------+ | admin-cluster_username | | +------------------------+-------+ 1 row in set (0.00 sec) Admin> SHOW VARIABLES LIKE ‘admin-cluster_password‘; +------------------------+-------+ | Variable_name | Value | +------------------------+-------+ | admin-cluster_password | | +------------------------+-------+ 1 row in set (0.00 sec) Admin> SHOW VARIABLES LIKE ‘admin_admin_credentials‘; +-------------------------+-------------+ | Variable_name | Value | +-------------------------+-------------+ | admin-admin_credentials | admin:admin | +-------------------------+-------------+ 1 row in set (0.00 sec)
注意，对同步使用的username/password也应该出现在admin-admin_credentials中，否则连接将失败。
2）指定特定值
Admin> SET admin-cluster_username = ‘cluser‘; Query OK, 1 row affected (0.00 sec) Admin> SET admin-cluster_password = ‘654987‘; Query OK, 1 row affected (0.00 sec) Admin> UPDATE global_variables SET variable_value=‘admin:admin;cluser:654987‘ WHERE variable_name=‘admin-admin_credentials‘; Query OK, 1 row affected (0.01 sec)
注意：不同用户间用分号(;)分隔。账号不需要提前建立，直接用就好。
3）查看结果
Admin> SHOW VARIABLES LIKE ‘admin-cluster_username‘; +------------------------+--------+ | Variable_name | Value | +------------------------+--------+ | admin-cluster_username | cluser | +------------------------+--------+ 1 row in set (0.00 sec) Admin> SHOW VARIABLES LIKE ‘admin-cluster_password‘; +------------------------+--------+ | Variable_name | Value | +------------------------+--------+ | admin-cluster_password | 654987 | +------------------------+--------+ 1 row in set (0.00 sec) Admin> SHOW VARIABLES LIKE ‘admin_admin_credentials‘ ; +-------------------------+---------------------------+ | Variable_name | Value | +-------------------------+---------------------------+ | admin-admin_credentials | admin:admin;cluser:654987 | +-------------------------+---------------------------+ 1 row in set (0.00 sec)
4）使配置生效
Admin> LOAD ADMIN VARIABLES TO RUNTIME ; Query OK, 0 rows affected (0.00 sec)
四、在各节点查看集群状态
！！！在各节点分别执行以下操作！！！
1）查看ProxySQL集群节点校验和
Admin> SELECT * FROM stats.stats_proxysql_servers_checksums ; +--------------+------+-------------------+---------+------------+--------------------+------------+------------+------------+ | hostname | port | name | version | epoch | checksum | changed_at | updated_at | diff_check | +--------------+------+-------------------+---------+------------+--------------------+------------+------------+------------+ | 188.188.0.71 | 6032 | admin_variables | 0 | 0 | | 0 | 1558360976 | 0 | | 188.188.0.71 | 6032 | mysql_query_rules | 9 | 1558251408 | 0x0000000000000000 | 1558360877 | 1558360976 | 0 | | 188.188.0.71 | 6032 | mysql_servers | 671 | 1558360886 | 0xA98C8BA3A59F15B6 | 1558360877 | 1558360976 | 100 | | 188.188.0.71 | 6032 | mysql_users | 8 | 1558251284 | 0xFE7A30305853A000 | 1558360877 | 1558360976 | 0 | | 188.188.0.71 | 6032 | mysql_variables | 0 | 0 | | 0 | 1558360976 | 0 | | 188.188.0.71 | 6032 | proxysql_servers | 2 | 1558359750 | 0x93A30F7C7F6EE496 | 1558360877 | 1558360976 | 0 | | 188.188.0.68 | 6032 | admin_variables | 0 | 0 | | 0 | 1558360975 | 0 | | 188.188.0.68 | 6032 | mysql_query_rules | 1 | 1558357984 | 0x0000000000000000 | 1558359728 | 1558360975 | 0 | | 188.188.0.68 | 6032 | mysql_servers | 3 | 1558360886 | 0x624AF2D0247C16D3 | 1558360880 | 1558360975 | 0 | | 188.188.0.68 | 6032 | mysql_users | 2 | 1558360880 | 0xFE7A30305853A000 | 1558360880 | 1558360975 | 0 | | 188.188.0.68 | 6032 | mysql_variables | 0 | 0 | | 0 | 1558360975 | 0 | | 188.188.0.68 | 6032 | proxysql_servers | 2 | 1558359728 | 0x93A30F7C7F6EE496 | 1558359728 | 1558360975 | 0 | +--------------+------+-------------------+---------+------------+--------------------+------------+------------+------------+ 12 rows in set (0.00 sec)
注意：
A）如果该表中的记录都为0，那么很有可能是同步失败了。需要去查看错误日志来判断具体问题。
B）对于admin_variables和mysql_variables的参数配置是不会同步的，这需要手动的在各个节点上分别设置；
2）查看ProxySQL集群节点间全局状态信息同步状况
Admin> SELECT * FROM stats.stats_proxysql_servers_metrics ; +--------------+------+--------+----------+------------------+----------+---------------+---------+------------------------------+----------------------------+ | hostname | port | weight | comment | response_time_ms | Uptime_s | last_check_ms | Queries | Client_Connections_connected | Client_Connections_created | +--------------+------+--------+----------+------------------+----------+---------------+---------+------------------------------+----------------------------+ | 188.188.0.71 | 6032 | 1 | 节点71 | 3 | 641614 | 4021 | 172 | 0 | 87 | | 188.188.0.68 | 6032 | 1 | 节点68 | 3 | 3023 | 2442 | 0 | 0 | 0 | +--------------+------+--------+----------+------------------+----------+---------------+---------+------------------------------+----------------------------+ 2 rows in set (0.00 sec)
到这里，基础的集群设置已经完毕，再次基础上可以对集群进行参数优化；以及加入后端MySQL服务器进行使用！！！
- 》》》》压测篇《《《《
一、后端为MGR多主模式
可以对MGR多主压测，但要注意：
由于ProxySQL监控主从状态是靠在后端MySQL上建立一个sys.gr_member_routing_candidate_status的状态视图，而对该视图的查询实际上是对多个系统表查询结果的汇总。因此，在MySQL繁忙时访问该视图会导致监控程序获取信息超时而失败，继而误判主机状态而修改runtime_mysql_servers的状态，导致连接后端MGR线程断开。所以，压测时最好将该视图用一个同名表代替，并在里面写死服务器状态，这样就不会在监控程序访问时获取内容超时异常，也就不会杀死后端连接线程。
对Proxy SQL压测时，如果后端使用了MGR多主模式，则压测可以参考以下思路：
由于MGR在对大事务支持和事务冲突检测上的限制和不足，导致对MGR直接并行压测是不可能的。Oracle官方的Multi-Primary Mode测试是在每个结点上，对不同的测试库进行压测，即这样可以避免了工具无法并行压测的问题，同时，这样也减少了冲突的可能性。切记，Multi-Primary Mode一定要避免热点数据冲突的场景。
例如MGR集群中有3个节点，分别为A、B、C；那么，压测时需要建立至少3个库；这样每个tpcc压测都使用1个线程来测试一个库，并且同时启动多个tpcc来测试。
可以这样测试：
A节点：
./tpcc_start -h188.188.0.68 -P3306 -uroot -p ‘123456‘ -d tpcc1 -w 5 -c 1 -r 10 -l 30 -i 10 -f tpcc_mysql.log -t tpcc_mysql.rtx .....
B节点：
./tpcc_start -h188.188.0.69 -P3306 -uroot -p ‘123456‘ -d tpcc2 -w 5 -c 1 -r 10 -l 30 -i 10 -f tpcc_mysql.log -t tpcc_mysql.rtx .....
C节点： ./tpcc_start -h188.188.0.70 -P3306 -uroot -p ‘123456‘ -d tpcc3 -w 5 -c 1 -r 10 -l 30 -i 10 -f tpcc_mysql.log -t tpcc_mysql.rtx .....
不过对Multi-Primary Mode压测并不会有一个很好的结果，因为热点太过集中，会导致提交失败很多，或许反而会导致了性能的下降。
如果用sysbench压测，也是一样的思路，只能使用多库+单线程+多测试终端运行的方式。
二、后端为MGR单主模式
可以直接用多线程压测PROXYSQL，就像压测普通MySQL一样。但要注意：后端MySQL上建立的sys.gr_member_routing_candidate_status视图，参考上面多主压测说明内容。
~
~
完毕！