03 septiembre 2012

COMO CONFIGURAR DOS SERVIDORES DE MYSQL MASTER-MASTER

-=REPLICAMIENTO MASTER - MASTER=-


-=ESPECIFICACIONES DE LA MAQUINA VIRTUAL=-

serv1.mysql 172.16.1.70   ;este sera el Master
serv2.mysql 122.16.1.71   ;este sera el Esclavo

mysql passwd root: 123456
base de datos: prueba
usuario replicamiento: replica
passwd replica 123456



-=INSTALACION DE MYSQL=-
NOTA: este paso debemos hacerlo en ambos servers

-instalamos mysql con sus dependencias
#yum install -y mysql mysql-server mysql-devel

-agregamos el demonio en el inicio del servidor
#chkconfig mysqld on

-iniciamos por primera vez mysql en nuestro sistema
#/etc/init.d/mysqld start   o   #service mysqld start



-=ADMINISTRACION DE MYSQL=-

NOTA: este paso debemos hacerlo en ambos servers

-Entramos a mysql
#mysql

-mostramos las base de datos actuales.  no debe de aparecer mas que mysql y test.
#mysql> show databases;

-utiliza seleccionamos
#mysql> use mysql;      

-agregamos un password al usuario root con la contrasena 123456
#mysql> update user set password=password('123456') where user='root';   

-actualizamos los privilegios a los usuarios
#mysql> flush privileges;              

-salimos de mysql para probar los cambios
#mysql> exit

-Probamos que nuestra contrasena funciona
#mysql -u root -p123456



-=CREACION EL USUARIO Y LA BASE DE DATOS=-

NOTA: estos pasos debemos de hacerlo en ambos servidores.

necesitamos:
1)crear una base de datos llamada prueba en cada servidor
2)crear un usuario replica con todos los privilegios en cada base de datos y con la contrasena 123456

-desplegamos todas las base de datos.
#mysql> show databases;

-creamos la base de datos llamada
#mysql> create database prueba;

-confirmamos que la base de datos esta creada
#mysql> show databases;

-seleccionamos la base mysql
#mysql> use mysql;

-mostramos todas las tablas.  vemos que existe la tabla user
#mysql> show tables;

-vemos el contenido de esta tabla.  verificamos que no existe el usuario replica
#mysql> select * from user;

-creamos el usuario replica y que tendra el pass=123456.
#mysql> create user replica@localhost identified by '123456'; --este solo desde la maquina local.
#mysql> create user 'replica' identified by '123456';  -- usamos eta opcion: este desde cualquier lugar

-vemos el contenido de esta tabla.  verificamos que existe el usuario.
#mysql> select * from user;

-verificamos sus permisos:
#mysql> show grants for replica@localhost;  -- usuario de acceso local
#mysql> show grants for replica;   -- si es un usuario de acceso remoto

-le agregamos todos los privilegios al usuario replica
#mysql> grant all privileges on *.* to 'replica'@'localhost' with grant option; -para el host local
#mysql> grant all privileges on *.* to replica with grant option;  -usamos esta opcion: para cualquier host

-verificamos que los permisos fueron cambiados
#mysql> show grants for replica;

-siempre que se actualizan los datos de los usuarios hay que hacer:
#mysql> flush privileges;

-si por alguna razon necesitamos  borrar el usuario creado necesitamos seleccionar la base mysql, ser root:
#mysql> drop user replica@localhost;   - si es un usuario de host local
#mysql> drop user replica;  - si es un usuario de host global




-=CONFIGRUACION REPLICAMIENTO MASTER - MASTER=-

===CONFIGURACION MASTER - SLAVE===

nota:
primero configuraremos un servidor master - slave.


-=MASTER1/SLAVE2=-

#vim /etc/my.cnf

debemos poner esto exactamente debajo de [mysqld], en la 2da linea del archivo.

--------------------------------------------------
[mysqld]
#inicio configuracion master1
#---------------------------------
#identificacion del server=2^32 max
server-id=1

#el log del servicio
log-bin = /var/log/mysql/mysql-bin.log

#configuracion de las bases que seran replicadas y las que son ignoradas
binlog-do-db=prueba
binlog-ignore-db=test
binlog-ignore-db=mysql
#---------------------------------
#fin configuracion replicamiento master1

#directorio donde se alojaran las base de datos
datadir=/var/lib/mysql
--------------------------------------------------

explicacion:
log-bin     es para guardar un log del sistema
binlog-do-db    los de la base de datos
binlog-ignore-db   logs que no se guardaran de las base de datos
server-id    id del servidor.  2^32 posibilidades y nunca debe de duplicarse

-si existe esto lo comentamos en el archivo my.cnd
#skip-networking
#bind-address=127.0.0.1

-crear la carpeta
#mkdir /var/log/mysql/

-darle permisos a mysql como dueno de grupo y usuario
#chown mysql:mysql /var/log/mysql

-reiniciamos el servicio mysql y entramos como root a mysql.ser   
#service mysqld restart

-este paso no es necesario almenos que vayas a restaurar o hacer un backup. si no es asi ejecuta el 2do comando.

bloquiamos las tablas para que nadie pueda escribir
#mysql> flush tables with read lock;

-nos mostrara una tabla con el archivo binario y algunos datos mas
#mysql> show master status;

nos aparecera el siguiente resultado:
+------------------+----------+--------------+------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000001 |       98 | prueba       | test,mysql       |
+------------------+----------+--------------+------------------+
1 row in set (0.00 sec)

-desbloquiamos las tablas.  esto se hace despues de copiar la base de datos
#mysql> unlock tables;




-=MASTER2/SLAVE1=-

pasamos al servidor esclavo y editamos el siguiente archivo:
#vim /etc/my.cnf

--------------------------------------------------
[mysqld]
#identificacion del server=2^32 max
server-id=2

#inicio configuracion esclavo1
#--------------------------------
#configuracion de la cuenta de acceso para el esclavo1
master-host=172.16.1.70
master-user=replica
master-password=123456
master-connect-retry=60
replicate-do-db=prueba
#-------------------------------
#fin configuracion esclavo1

#directorio donde se alojaran las base de datos
datadir=/var/lib/mysql
--------------------------------------------------

explicacion:
server-id    id del servidor.  2^32 posibilidades y nunca debe de duplicarse
master-host    el ip del servidor
master-user    el usuario destinado al replicamiento
master-password   contrasena del usuario para replicamiento
master-connect   cantidad de intentos
replicate-do-db   base a replicar

-crear la carpeta
#mkdir /var/log/mysql/

-darle permisos a mysql como dueno de grupo y usuario
#chown mysql:mysql /var/log/mysql

-reiniciamos el servicio mysql y entramos como root a mysql.ser   
#service mysqld restart


-=CREACION BASE DE DATOS=-

nos dirigiamos al servidor MASTER1/SLAVE2

-seleccionamos la base de datos
#mysql> use prueba;
1 row in set (0.00 sec)

-miramos que no hayan creadas ninguna tabla:
#mysql> show tables;
Empty set (0.00 sec)

-creamos una tabla llamada rempleados con un campo llamado nombre, apellido y fechanacimiento:
#mysql> create table empleados(nombre varchar(20), apellido varchar(20), ciudad varchar(10), fechanacimiento date);

#mysql> show tables;
+-------------------------+
| Tables_in_prueba        |
+-------------------------+
| empleados               |
+-------------------------+
1 row in set (0.00 sec)

vemos el contenido de los campos de la tabla empleados
#mysql> describe empleados;
+-----------------+-------------+------+-----+---------+-------+
| Field           | Type        | Null | Key | Default | Extra |
+-----------------+-------------+------+-----+---------+-------+
| nombre          | varchar(20) | YES  |     | NULL    |       |
| apellido        | varchar(20) | YES  |     | NULL    |       |
| ciudad          | varchar(20) | YES  |     | NULL    |       |
| fechanacimiento | date        | YES  |     | NULL    |       |
+-----------------+-------------+------+-----+---------+-------+
4 rows in set (0.00 sec)

confirmamos que no hay datos en la tabla empleados:
#mysql> select * from empleados;
Empty set (0.00 sec)

-insertamos datos en la tabla:
#mysql> insert into empleados values('pedro','peralta','santiago','2000-03-30');
#mysql> insert into empleados values('Mario','Garcia','La Vega','1900-03-30');

vemos que los datos fueron ingresador correctamente:
#mysql> select * from empleados;

+--------+----------+----------+-----------------+
| nombre | apellido | ciudad   | fechanacimiento |
+--------+----------+----------+-----------------+
| pedro  | peralta  | santiago | 2000-03-30      |
| Mario  | Garcia   | La Vega  | 1900-03-30      |
+--------+----------+----------+-----------------+
2 rows in set (0.00 sec)


EM EL MASTER2/SLAVE1

-iniciamos el servicio de esclavo:
mysql> start slave;
Query OK, 0 rows affected, 1 warning (0.00 sec)

-escribimos este comando para cargar la data desde el maestro:
#mysql> load data from master;
Query OK, 0 rows affected (0.10 sec)

-seleccionamos la base de datos
#mysql> use prueba;
1 row in set (0.00 sec)

-nos debe aparecer la tabla empleados
#mysql> show tables;
+---------------------+
| Tables_in_empleados |
+---------------------+
| empleados           |
+---------------------+
1 row in set (0.00 sec)

-vemos el contenido de la tabla
#mysql> select * from empleados;
+--------+----------+----------+-----------------+
| nombre | apellido | ciudad   | fechanacimiento |
+--------+----------+----------+-----------------+
| pedro  | peralta  | santiago | 2000-03-30      |
| Mario  | Garcia   | La Vega  | 1900-03-30      |
+--------+----------+----------+-----------------+
2 rows in set (0.00 sec)


-probamos que el slave este funcionando:
mysql> show slave status\G
*************************** 1. row ***************************
             Slave_IO_State: Waiting for master to send event
                Master_Host: 172.16.1.70
                Master_User: replica
                Master_Port: 3306
              Connect_Retry: 60
            Master_Log_File: mysql-bin.000001
        Read_Master_Log_Pos: 539
             Relay_Log_File: mysqld-relay-bin.000003
              Relay_Log_Pos: 676
      Relay_Master_Log_File: mysql-bin.000001
           Slave_IO_Running: Yes
          Slave_SQL_Running: Yes
            Replicate_Do_DB: prueba
        Replicate_Ignore_DB:
         Replicate_Do_Table:
     Replicate_Ignore_Table:
    Replicate_Wild_Do_Table:
Replicate_Wild_Ignore_Table:
                 Last_Errno: 0
                 Last_Error:
               Skip_Counter: 0
        Exec_Master_Log_Pos: 539
            Relay_Log_Space: 676
            Until_Condition: None
             Until_Log_File:
              Until_Log_Pos: 0
         Master_SSL_Allowed: No
         Master_SSL_CA_File:
         Master_SSL_CA_Path:
            Master_SSL_Cert:
          Master_SSL_Cipher:
             Master_SSL_Key:
      Seconds_Behind_Master: 0
1 row in set (0.00 sec)


ojo:
Slave_IO_Running y Slave_SQL_Running que deben estar en "Yes" y el Seconds_Behind_Master debe ir reduciendose hasta llegar a 0 cuando termine de copiar toda la data.  esta opcion casi nunca esta en 0 por la actividad del servidor

-vemos el estado de la comunicacion entre el MASTER2/SLAVE1 y MASTER1/SLAVE2
si hay una base de datos que contenga data deben de aparecer varias conexiones
mysql> show processlist;
+----+-------------+-----------+------+---------+------+-----------------------------------------------------------------------+------------------+
| Id | User        | Host      | db   | Command | Time | State                                                                 | Info             |
+----+-------------+-----------+------+---------+------+-----------------------------------------------------------------------+------------------+
|  1 | system user |           | NULL | Connect |   93 | Waiting for master to send event                                      | NULL             |
|  2 | system user |           | NULL | Connect |  324 | Has read all relay log; waiting for the slave I/O thread to update it | NULL             |
|  4 | root        | localhost | NULL | Query   |    0 | NULL                                                                  | show processlist |
+----+-------------+-----------+------+---------+------+-----------------------------------------------------------------------+------------------+
3 rows in set (0.00 sec)

fin configuracion MASTER - ESCLAVO


===CONFIGURACION MASTER - MASTER===

-=MASTER1/SLAVE2=-

vamos al archivo my.cnf dejamos agregamos las lineas esclavo2:
#vim/etc/my.cnf

--------------------------------------------------
[mysqld]
#parametros especiales
auto_increment_increment=2
auto_increment_offset=1

#inicio configuracion master1
#---------------------------------
#identificacion del server=2^32 max
server-id=1

#el log del servicio
log-bin = /var/log/mysql/mysql-bin.log

#configuracion de las bases que seran replicadas y las que son ignoradas
binlog-do-db=prueba
binlog-ignore-db=test
binlog-ignore-db=mysql
#---------------------------------
#fin configuracion replicamiento master1

#inicio configuracion esclavo2
#--------------------------------
#configuracion de la cuenta de acceso para esclavo2
master-host=172.16.1.71
master-user=replica
master-password=123456
master-connect-retry=60
replicate-do-db=prueba
#-------------------------------
#fin configuracion esclavo2

#directorio donde se alojaran las base de datos
datadir=/var/lib/mysql
--------------------------------------------------

explicacion:
log-bin     es para guardar un log del sistema
binlog-do-db    los de la base de datos
binlog-ignore-db   logs que no se guardaran de las base de datos
server-id    id del servidor.  2^32 posibilidades y nunca debe de duplicarse
server-id    id del servidor.  2^32 posibilidades y nunca debe de duplicarse
master-host    el ip del servidor
master-user    el usuario destinado al replicamiento
master-password   contrasena del usuario para replicamiento
master-connect   cantidad de intentos
replicate-do-db   base a replicar
auto_increment_increment=2 (n = total de servidores master - master). es una variable pensada para el replicamiento master-master.
auto_increment_offset=1,2 (n = n+1, como el id). determina el punto de inicio para el valor de las columnas.

-reiniciamos el servicio mysql
#service mysqld restart


-=MASTER2/SLAVE1=-

peditamos el archivo y agregamos las lineas de master2:
#vim /etc/my.ncf

--------------------------------------------------
[mysqld]
#parametros especiales
auto_increment_increment=2
auto_increment_offset=2

#inicio configuracion master2
#---------------------------------
#identificacion del server=2^32 max
server-id=2

#el log del servicio
log-bin = /var/log/mysql/mysql-bin.log

#configuracion de las bases que seran replicadas y las que son ignoradas
binlog-do-db=prueba
binlog-ignore-db=test
binlog-ignore-db=mysql
#---------------------------------
#fin configuracion replicamiento master2

#inicio configuracion esclavo1
#--------------------------------
#configuracion de la cuenta de acceso para el esclavo1
master-host=172.16.1.70
master-user=replica
master-password=123456
master-connect-retry=60
replicate-do-db=prueba
#-------------------------------
#fin configuracion esclavo1

#directorio donde se alojaran las base de datos
datadir=/var/lib/mysql
--------------------------------------------------

-salimos de mysql, reiniciamos el servicio.
#service mysqld restart



===PRUEBA DE AMBOS SERVERS==

en master 1
mysql> start slave;
Query OK, 0 rows affected, 1 warning (0.00 sec)

en master 1
mysql> show slave status\G;
*************************** 1. row ***************************
             Slave_IO_State: Waiting for master to send event
                Master_Host: 172.16.1.71
                Master_User: replica
                Master_Port: 3306
              Connect_Retry: 60
            Master_Log_File: mysql-bin.000001
        Read_Master_Log_Pos: 98
             Relay_Log_File: mysqld-relay-bin.000005
              Relay_Log_Pos: 235
      Relay_Master_Log_File: mysql-bin.000001
           Slave_IO_Running: Yes
          Slave_SQL_Running: Yes
            Replicate_Do_DB: prueba
        Replicate_Ignore_DB:
         Replicate_Do_Table:
     Replicate_Ignore_Table:
    Replicate_Wild_Do_Table:
Replicate_Wild_Ignore_Table:
                 Last_Errno: 0
                 Last_Error:
               Skip_Counter: 0
        Exec_Master_Log_Pos: 98
            Relay_Log_Space: 235
            Until_Condition: None
             Until_Log_File:
              Until_Log_Pos: 0
         Master_SSL_Allowed: No
         Master_SSL_CA_File:
         Master_SSL_CA_Path:
            Master_SSL_Cert:
          Master_SSL_Cipher:
             Master_SSL_Key:
      Seconds_Behind_Master: 0
1 row in set (0.00 sec)

ojo al final del comando no lleva ";", sino lo pones te da un error al final


en master 2
mysql > show master status;
+------------------+----------+--------------+------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000001 |       98 | prueba       | test,mysql       |
+------------------+----------+--------------+------------------+
1 row in set (0.00 sec)

==============================================================
COPIAR UNA BASE DE DATOS DE UN SERVER ANTERIOR AL NUEVO SERVER
==============================================================
Antes de activar la replicación ambos servidores deben tener la misma información (bases de datos) y en el mismo punto de restauración.
Lo primero que haremos antes de hacer la copia es hacer un flush de las tablas y bloquear las escrituras, de este modo podemos hacer el ‘snapshot’ sin tener que apagar el servidor MySQL.
Todo esto lo hacemos en el Master:

#mysql> flush tables with read lock;

Ahora podemos hacer la copia de muchas formas. Podemos usar mysqldump o rsync.  Cuando ya
se haya creado el backup utilizaremos el comando tar para comprimir el archivo y scp para enviarlo
por la red.

-vamos a esta carpeta:
#cd /var/log/mysql

-vemos todos los archivos mysql-bin.00000x
#ls

-creamos el backup
#mysql> mysqldump -u root -p123456 -c replica2 > archivo-backup

otras opciones:
--add-locks    Añade LOCK TABLES antes, y UNLOCK TABLE despues de la copia de cada tabla.
-A             copia todas las bases de datos
-F             Escribe en disco todos los logs antes de comenzar con la copia
--opt          Lo mismo que --quick --add-drop-table --add-locks --extended-insert --lock-tables. Esta opción le debería permitir realizar la copia de seguridad de la base de datos de la forma más rápida y efectiva.
-C            Comprime la información entre el cliente y el servidor, si ambos soportan compresión.

-crreamos un archivo comprimido
#tar czvf archivo-backup.tar.gz

-copiamos el archivo por la red
#scp ruta_archivo_a_copiar usuario@ip:/ruta_destino

-entramos a mysql y creamos la base de datos
#mysql> create database replica2;

-restauramos la base de datos al esclavo
#mysql -u root -p123456 -D replica2 < ariel-backup

-observamos el estado del master y copiamos el nombre del archivo y la posicion
#mysql> show master status;

+---------------+----------+--------------+------------------+
| File          | Position | Binlog_do_db | Binlog_ignore_db |
+---------------+----------+--------------+------------------+
| mysql-bin.004 | 760      | replica      |                  |
+---------------+----------+--------------+------------------+
1 row in set (0.00 sec)

-despues de copiar el archivo al servidor nuevo desbloqueamos las tablas
#mysql> unlock tables;

-pasamos al servidor esclavo y paramos el servicio en caso de que estuviera encendido:
#mysql> slave stop;

-descomprimimos el archivo en la carpeta de las base de datos que normalmente esta en var/lib/mysql
#tar xzvf archivo-backup.tar.gz

-cambiamos los parametros al
#mysql> CHANGE MASTER TO
    ->     MASTER_HOST='172.16.1.70',
    ->     MASTER_USER='replica',
    ->     MASTER_PASSWORD='123456',
    ->     MASTER_LOG_FILE='mysqld-bin.004',
    ->     MASTER_LOG_POS=760;

-encendemos el servicio
#mysql> slave start;

-corremos este comando y revisamos que existan varios procesos tanto en el esclavo como en el master
#mysql>show processlist;




Este ha sido mi trabajo desde hace semanas y lo comparto con ustedes. Es posible mejorarlo, agregar mas ejemplos, casos mas complicados. Esto sera trabajo para un futuro.

Este documento es liberado por la licencia GPL, asi que compartanlo, modifiquenlo y compartan sus modificaciones para que siga creciendo.  Cualquier preguntas o comentario estoy por aca...



---------------------------------------------------------------------------------------------------------------------------------------
REFERENCIAS:

http://dev.mysql.com/doc/refman/5.0/es/replication.html
http://www.howtoforge.com/mysql_master_master_replication
http://www.howtoforge.com/mysql_database_replication
http://www.simplicidade.org/how-to/mysql-master-master/
http://miguelangelnieto.net/?action=view&url=los-peligros-de-binlog-do-db-en-la-replicaci%C3%B3n
http://www.neocodesoftware.com/replication/
http://rm-rf.es/replicacion-mysql-maestro-esclavo/
http://www.telepieza.com/wordpress/2008/03/13/replicar-bases-de-datos-mysql-en-servidores-locales-o-remotos/
http://voztovoice.org/?q=node/261
http://crazytoon.com/2008/02/29/mysql-how-do-you-set-up-mastermaster-replication-in-mysql-centos-rhel-fedora/
http://dev.mysql.com/doc/refman/5.0/es/replication.html
http://systemadmin.es/2010/03/como-montar-replicacion-en-master-slave-con-mysql
http://wiki.cms-medios.com/index.php/Configuraci%C3%B3n_MYSQL_para_replicaci%C3%B3n_master/master

variables necesarias
http://dev.mysql.com/doc/refman/5.0/es/server-system-variables.html
http://dev.mysql.com/doc/refman/5.0/es/replication-options.html