[MXS-4406] State Shown was Not Correct by 'maxctrl list servers' Command - Jira

Details

Type: Bug
Status: Closed (View Workflow)
Priority: Major
Resolution: Fixed
Affects Version/s: None
Fix Version/s: 22.08.3
Component/s: Monitor
Labels:
- galera
Environment:
Red Hat Enterprise Linux Server release 7.7
MariaDB 10.4.25
MaxScale 22.08.2

Description

Last week on Nov 18, I set up three galera cluster nodes on testing MaxScale functionalities.

After starting galera clustering and MaxScale, I executed the 'maxctrl' to verify the result:

node 1

maxctrl list servers

 ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐

 │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │

 ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

 │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Auth Error, Down │ │ MariaDB-Monitor │

 ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

 │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │

 ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

 │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │

 └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

node2

maxctrl list servers

┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐

│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │

├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │

├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │

├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │

└─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

node3

maxctrl list servers

 ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐

 │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │

 ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

 │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │

 ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

 │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │

 ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

 │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │

 └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

I had checked all configuration on all the nodes and I could not figure out what was wrong. Then I shut them down.

Today, I tried again. I started the cluster first and then the MaxScale. This time the behaviour was different:

node 1

maxctrl list servers

┌─────────┬───────────┬───────┬─────────────┬───────┬──────┬─────────────────┐

│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │

├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤

│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │

├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤

│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │

├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤

│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │

└─────────┴───────────┴───────┴─────────────┴───────┴──────┴─────────────────┘

Node 2

maxctrl list servers

 ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐

 │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │

 ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

 │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │

 ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

 │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │

 ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

 │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │

 └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

Node 3

maxctrl list servers

┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐

│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │

├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │

├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │

├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤

│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │

└─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

This time, no more 'Auth Error, Down' but all nodes 'Down'. Actually all nodes were up and running. What's wrong? Here attached are my.cnf, server.cnf and maxscale.cnf configuration files from all the nodes for your reference.

Attachments

- Sort By Name
- Sort By Date
- Ascending
- Descending
- Thumbnails
- List
- Download All

node3-maxscale-conf.tar.gz
172 kB
2022-11-23 04:17
node3.my.cnf.20221121.tar.gz
2 kB
2022-11-21 09:00
node2-maxscale-conf.tar.gz
198 kB
2022-11-23 04:17
node2.my.cnf.20221121.tar.gz
2 kB
2022-11-21 09:00
node1-maxscale-conf.tar.gz
171 kB
2022-11-23 04:17
node1.my.cnf.20221121.tar.gz
2 kB
2022-11-21 09:00
maxscale logs.zip
10 kB
2022-11-22 03:04
maxscale.log
21 kB
2022-11-23 07:29

Activity

Ascending order - Click to sort in descending order

Test Jetco created issue - 2022-11-21 09:02

markus makela made changes - 2022-11-21 11:15

Field	Original Value	New Value
Assignee		markus makela [ <markus.makela ]

markus makela made changes - 2022-11-21 11:15

Status

Open [ 1 ]

Needs Feedback [ 10501 ]

Test Jetco made changes - 2022-11-22 03:04

Attachment

maxscale logs.zip [ 66998 ]

markus makela made changes - 2022-11-22 04:50

Description

Last week on Nov 18, I set up three galera cluster nodes on testing MaxScale functionalities.

After starting galera clustering and MaxScale, I executed the 'maxctrl' to verify the result:

node 1
-------
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Auth Error, Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

node2
--------
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

node3
--------
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

I had checked all configuration on all the nodes and I could not figure out what was wrong. Then I shut them down.

Today, I tried again. I started the cluster first and then the MaxScale. This time the behaviour was different:

node 1
--------
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬───────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴───────┴──────┴─────────────────┘

Node 2
----------
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

Node 3
---------
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘

This time, no more 'Auth Error, Down' but all nodes 'Down'. Actually all nodes were up and running. What's wrong? Here attached are my.cnf, server.cnf and maxscale.cnf configuration files from all the nodes for your reference.

Last week on Nov 18, I set up three galera cluster nodes on testing MaxScale functionalities.

After starting galera clustering and MaxScale, I executed the 'maxctrl' to verify the result:

node 1
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Auth Error, Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node2
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node3
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
I had checked all configuration on all the nodes and I could not figure out what was wrong. Then I shut them down.

Today, I tried again. I started the cluster first and then the MaxScale. This time the behaviour was different:

node 1
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬───────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴───────┴──────┴─────────────────┘
{code}
Node 2
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
Node 3
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
This time, no more 'Auth Error, Down' but all nodes 'Down'. Actually all nodes were up and running. What's wrong? Here attached are my.cnf, server.cnf and maxscale.cnf configuration files from all the nodes for your reference.

markus makela made changes - 2022-11-22 04:52

Description

Last week on Nov 18, I set up three galera cluster nodes on testing MaxScale functionalities.

After starting galera clustering and MaxScale, I executed the 'maxctrl' to verify the result:

node 1
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Auth Error, Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node2
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node3
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
I had checked all configuration on all the nodes and I could not figure out what was wrong. Then I shut them down.

Today, I tried again. I started the cluster first and then the MaxScale. This time the behaviour was different:

node 1
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬───────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴───────┴──────┴─────────────────┘
{code}
Node 2
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
Node 3
{code}
maxctrl list servers ┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐ │ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤ │ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
This time, no more 'Auth Error, Down' but all nodes 'Down'. Actually all nodes were up and running. What's wrong? Here attached are my.cnf, server.cnf and maxscale.cnf configuration files from all the nodes for your reference.

Last week on Nov 18, I set up three galera cluster nodes on testing MaxScale functionalities.

After starting galera clustering and MaxScale, I executed the 'maxctrl' to verify the result:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Auth Error, Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
I had checked all configuration on all the nodes and I could not figure out what was wrong. Then I shut them down.

Today, I tried again. I started the cluster first and then the MaxScale. This time the behaviour was different:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬───────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴───────┴──────┴─────────────────┘
{code}
Node 2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
Node 3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
This time, no more 'Auth Error, Down' but all nodes 'Down'. Actually all nodes were up and running. What's wrong? Here attached are my.cnf, server.cnf and maxscale.cnf configuration files from all the nodes for your reference.

markus makela made changes - 2022-11-22 04:53

Description

Last week on Nov 18, I set up three galera cluster nodes on testing MaxScale functionalities.

After starting galera clustering and MaxScale, I executed the 'maxctrl' to verify the result:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Auth Error, Down │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
I had checked all configuration on all the nodes and I could not figure out what was wrong. Then I shut them down.

Today, I tried again. I started the cluster first and then the MaxScale. This time the behaviour was different:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬───────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴───────┴──────┴─────────────────┘
{code}
Node 2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
Node 3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
This time, no more 'Auth Error, Down' but all nodes 'Down'. Actually all nodes were up and running. What's wrong? Here attached are my.cnf, server.cnf and maxscale.cnf configuration files from all the nodes for your reference.

Last week on Nov 18, I set up three galera cluster nodes on testing MaxScale functionalities.

After starting galera clustering and MaxScale, I executed the 'maxctrl' to verify the result:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Auth Error, Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
I had checked all configuration on all the nodes and I could not figure out what was wrong. Then I shut them down.

Today, I tried again. I started the cluster first and then the MaxScale. This time the behaviour was different:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬───────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴───────┴──────┴─────────────────┘
{code}
Node 2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
Node 3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
This time, no more 'Auth Error, Down' but all nodes 'Down'. Actually all nodes were up and running. What's wrong? Here attached are my.cnf, server.cnf and maxscale.cnf configuration files from all the nodes for your reference.

markus makela made changes - 2022-11-22 04:56

Description

Last week on Nov 18, I set up three galera cluster nodes on testing MaxScale functionalities.

After starting galera clustering and MaxScale, I executed the 'maxctrl' to verify the result:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Auth Error, Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
I had checked all configuration on all the nodes and I could not figure out what was wrong. Then I shut them down.

Today, I tried again. I started the cluster first and then the MaxScale. This time the behaviour was different:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬───────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴───────┴──────┴─────────────────┘
{code}
Node 2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
Node 3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │ ├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │ └─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
This time, no more 'Auth Error, Down' but all nodes 'Down'. Actually all nodes were up and running. What's wrong? Here attached are my.cnf, server.cnf and maxscale.cnf configuration files from all the nodes for your reference.

Last week on Nov 18, I set up three galera cluster nodes on testing MaxScale functionalities.

After starting galera clustering and MaxScale, I executed the 'maxctrl' to verify the result:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Auth Error, Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
node3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
I had checked all configuration on all the nodes and I could not figure out what was wrong. Then I shut them down.

Today, I tried again. I started the cluster first and then the MaxScale. This time the behaviour was different:

node 1
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬───────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼───────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Down │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴───────┴──────┴─────────────────┘
{code}
Node 2
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
Node 3
{code}
maxctrl list servers
┌─────────┬───────────┬───────┬─────────────┬─────────────────────────┬──────┬─────────────────┐
│ Server │ Address │ Port │ Connections │ State │ GTID │ Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server1 │ 10.0.2.14 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server2 │ 10.0.2.15 │ 33063 │ 0 │ Slave, Synced, Running │ │ MariaDB-Monitor │
├─────────┼───────────┼───────┼─────────────┼─────────────────────────┼──────┼─────────────────┤
│ server3 │ 10.0.2.16 │ 33063 │ 0 │ Master, Synced, Running │ │ MariaDB-Monitor │
└─────────┴───────────┴───────┴─────────────┴─────────────────────────┴──────┴─────────────────┘
{code}
This time, no more 'Auth Error, Down' but all nodes 'Down'. Actually all nodes were up and running. What's wrong? Here attached are my.cnf, server.cnf and maxscale.cnf configuration files from all the nodes for your reference.

Test Jetco made changes - 2022-11-23 04:17

Attachment		node1-maxscale-conf.tar.gz [ 67048 ]
Attachment		node2-maxscale-conf.tar.gz [ 67049 ]
Attachment		node3-maxscale-conf.tar.gz [ 67050 ]

Test Jetco made changes - 2022-11-23 07:29

Attachment

maxscale.log [ 67051 ]

Test Jetco made changes - 2022-11-29 05:59

Comment

[ Sorry, it complained 'maxscale'@'ekycdb1', not 'monitor'@'ekycdb1'. I will delete user entry, 'monitor'@'ekycdb1', and add 'maxscale'@'ekycdb1' instead. ]

markus makela made changes - 2022-11-29 09:05

Status

Needs Feedback [ 10501 ]

Open [ 1 ]

markus makela made changes - 2022-11-29 09:05

Fix Version/s		22.08.3 [ 28470 ]
Resolution		Fixed [ 1 ]
Status	Open [ 1 ]	Closed [ 6 ]

People

Assignee:: markus makela

Reporter:: Test Jetco

Votes:: 0 Vote for this issue

Watchers:: 2 Start watching this issue

Dates

Created:: 2022-11-21 09:02

Updated:: 2022-12-01 02:16

Resolved:: 2022-11-29 09:05

Git Integration

Error rendering 'com.xiplink.jira.git.jira_git_plugin:git-issue-webpanel'. Please contact your Jira administrators.

MariaDB MaxScale

Details

Description

Attachments

Attachments

Activity

People

Dates

Git Integration