Rsync es una potente herramienta de Linux para transferir y sincronizar archivos y directorios en el mismo ordenador o entre varios a través de la red. Usa un algoritmo delta que compara los ficheros en el origen y el destino, y en caso de que se haya modificado, en lugar de copiar el fichero entero, copia solo los cambios que tenga respecto al destino. Usaremos esta entrada como guía y manual de uso de rsync mostrando algunos ejemplos de uso típicos:

Copia normal

El siguiente ejemplo sería la forma más básica de usar rsync:

rsync -avh /origen /destino

Este comando copiará la carpeta origen y todo su contenido en la carpeta destino. Si quisieramos copiar solo el contenido y no la carpeta padre, pondriamos la barra al final /origen/.

Los parámetros usados en el ejemplo son:

• -a: modo archivo,  imprescindible para backups, hace copia recursiva, copia enlaces simbólicos y conserva en el destino los permisos, propietario (solo ejecutando como root) y fecha de modificación de los ficheros. No copia hard-links, permisos extendidos ni ACLS. Equivale a las opciones -rlptgoD (no -H,-A,-X).

• -v: modo verbose, muestra información del proceso durante la copia. Cuantas más v pongamos, más información, aunque con una sola suele ser suficiente.

• -h: human-readable, para mostrar la información del proceso en formato más entendible (GB y MB en lugar de bytes).

Si ejecutamos el comando una segunda vez sobre las mismas carpetas, solo copiará los ficheros que hayan sido modificados.

Reducir tamaño de datos durante la copia

Rsync dispone de un par de parámetros interesantes para reducir el tamaño de los ficheros que se copian:

• -z: comprime el fichero durante la transferencia. Así ahorramos ancho de banda, pero aumenta el consumo de CPU.
• -W: --whole-file: Con esta opción, al realizar las copias se enviará el fichero completo en lugar de solo sus modificaciones. Esta es la opción por defecto cuando al hacer copias el origen y el destino están especificados como discos locales (por ejemplo, copias entre el mismo ordenador, o copiar a una carpeta en la que montamos una carpeta compartida de otro equipo). Con esta opción la transferencia puede ser más rápida si el ancho de banda entre las máquinas de origen y destino es mayor que el ancho de banda del disco. También podemos usarla para recudir el consumo de CPU o si estamos copiando muchos archivos de pequeño tamaño.
• --no-whole-file: En lugar de copiar un fichero modificado entero, copiará solo las diferencias entre el origen y el destino. Es la opción por defecto al hacer copias en red con la opción -e (ver más adelante).

Hay que tener en cuenta que estos parámetros no reducen necesariamente el tiempo de la copia ya que, aunque en algunos casos copiemos menos cantidad de MBs, también se tarda tiempo en comprimir o calcular las diferencias entre archivos.

Sí pueden servirnos para ahorrar ancho de banda en copias en red.

Ver progreso de la copia

Tenemos 2 opciones para ver el progreso de la copia:

• -P: --progress: Muestra el progreso de cada archivo individual que se va copiando
• --info=progress2: Muestra el progreso de la copia completa. No usar con -v. Ejemplo de la salida de este parámetro:
  32.21M 3% 96.79kB/s 2:41:24 xfr#15, ir-chk=1010/5534)

Otros parámetros interesantes

• --log-file=archivo: Guarda en el archivo indicado el registro de la copia.
• -u: modo update,  evita que se sobrescriban los ficheros del destino que son más recientes que los del origen. Útil si hemos trabajado directamente sobre las copias de seguridad.
• -c: por defecto rsync comprueba si un fichero se ha actualizado comparando su tamaño y fecha de modificación. Con este parámetro en lugar de eso comprobará el checksum de los ficheros.
• -n: modo de prueba, simula la copia pero no hace ningún cambio en el sistema de ficheros.
• --delete: borra en el destino los ficheros o carpetas que ya no están en el origen. Recomendable probar primero con el modo de prueba. Si devuelve el error "cannot delete non-empty directory", usar con el parámetro --force para forzar su eliminación. Podemos decidir si los ficheros se borrarán antes, durante, o después de la transferencia. Esto es interesante por si se cancelase la transferencia a la mitad:
  • --delete-before: Es la opción por defecto. rsync borra los archivos antes del proceso de transferencia
  • --delete-after: rsync borra los archivos después del proceso de transferencia
  • --delete-during: rsync borra los archivos durante el proceso de transferencia
  • --delete-delay: rsync localizará los ficheros a borrar durante la transferencia, pero los borrará cuando ésta haya terminado.
• -A: Preservar ACLs.
• -X: Preservar atributos extendidos.
• --bwlimit: índica la máxima velocidad de transferencia que usará rsync. Por defecto viene en KB, pero podemos indicar otras unidades, ej. --bwlimit=1.5m para limitar a 1,5 MB.
• También hay algunos parámetros de exclusión de ficheros que no detallaré en este artículo por no haberlos probado, pero que podéis conocer en profundidad en ochobitshacenunbyte:
  • --exclude=PATTERN indicamos entre comillas simples el archivo o directorio a excluir.
  • --exclude-from=FILE indicamos un archivo con un listado de archivos y/carpetas a excluir de la copia
  • --include=PATTERN don't exclude files matching PATTERN
  • --include-from=FILE read include patterns from FILE
  • --files-from=FILE read list of source-file names from FILE

Copias incrementales

• -b: modo backup. Con esta opción, en lugar de sobrescribir directamente en el destino los ficheros modificados, guarda primero una copia de su versión anterior en la carpeta de destino, del mismo nombre pero terminada en ~.
• --suffix: indica el sufijo que queremos que aparezca en las versiones anteriores guardadas en modo backup, en lugar del ~ por defecto. Podemos indicar, por ejemplo, la fecha actual:
  rsync -avhb --delete –suffix=.$(date +%d%m%Y) origen/ destino/
• --backup-dir: indicamos el directorio donde nos guardará los ficheros modificados. Importante indicarlo fuera de la carpeta de destino porque sino se borrará si usamos --delete.
  rsync -avhb --delete --backup-dir=/destino/back_$(date +%d%m%Y%H%M) origen/ destino/

Al guardarlos en otra carpeta, no añadirá ningún sufijo a los archivos.

Con el comando anterior tendremos una copia espejo de origen en destino, y, aparte, carpetas diarias que contendran la versión anterior de los ficheros modificados ese día.

Otros parámetros interesantes a la hora de hacer backups:

• --compare-dest=DIR also compare received files relative to DIR
• --copy-dest=DIR ... and include copies of unchanged files
• --link-dest=DIR hardlink to files in DIR when unchanged

Con -b y --backup-dir=DIR, tienes una copia de la última versión en destino, y las versiones anteriores en DIR. Con --compare-dest=DIR en destino solo tendrás los ficheros que han cambiado respecto a DIR, que sería el último backup.

Como variación de la --compare-dest, está la --copy-dest=DIR, que hace lo mismo que la anterior pero además copia los ficheros que no hayan cambiado. ¡Pero ojo!, la ventaja de esta opción es que la copia de los ficheros que no han cambiado es local, de forma que en un rsync remoto, todos los ficheros que ya estaban en DIR no se tienen que transferir. La desventaja es que necesita mucho espacio en disco.

Finalmente, tenemos --link-dest=DIR, que hace lo mismo que --copy-dest pero usando hard links a los ficheros que ya existen, de manera que no consume apenas espacio en disco.

Copias en red

Con rsync también podemos hacer copias en red a través de SSH. Las copias mediante SSH van cifradas, por lo que son seguras. Veamos un ejemplo:

rsync -e ssh -avhPz /origen usuario@192.168.1.50:/destino

El formato del comando es igual, teniendo en cuenta que:

• -e: permite seleccionar un shell diferente para copias remotas, por defecto es SSH.
• -P: Equivale a los parámetros --partial --progress. Útil para copias en red. Si por ejemplo se corta la copia de un fichero muy grande a la mitad, al reanudarla solo copiará lo que resta del fichero, no el fichero completo. Además mostrará el progreso de la copia.
• -z: comprime el fichero durante la transferencia. Así ahorramos ancho de banda, pero aumenta el consumo de CPU.
• El destino viene indicado en el formato usuario@IP:/ruta. Debemos tener en cuenta que nos pedirá la contraseña del usuario del equipo de destino. Si queremos que no la pida debemos usar la Autentificación trasparente por clave pública/privada con OpenSSH.

Si hemos cambiado el puerto de SSH (cosa recomendable por seguridad) podemos indicarlo a rsync de la siguiente manera:

rsync -e "ssh -p puerto" -avhP /origen usuario@192.168.1.50:/destino

También podemos hacer copias entre servidores usando el propio protocolo de rsync, para lo que necesitaremos en el servidor remoto tener instalado rsync como daemon y abierto el puerto 873:

rsync -avhP /origen rsync://usuario@servidor_remoto:/carpeta_destino

Ojo: las copias usando este protocolo no son seguras porque no van cifradas. Podemos usar el protocolo rsync para copias a través de red local y SSH para copias a través de internet.

Script de ejemplo

#!/bin/sh
destinodiario=/home/copias/diaria/$(date +'%Y')
log=/home/datos/copias/logs/docs
fecha=$(date +'%Y%m%d')
rsync -avhb --delete --backup-dir=$destinodiario/copia_$fecha datos copias --log-file=$log/copia_$fecha.log

Este script copia la carpeta datos a copias y luego va creando en diaria una carpeta llamada como el año actual y dentro otra con la fecha actual donde va guardando los ficheros que se hayan modificado o borrado.

Así en copias tenemos una copia exacta de datos. Y en diaria tendremos las versiones anteriores y los archivos eliminados.

Cuidado, este script no está pulido. No elimina archivos antiguos y restaurar una copia completa de un día concreto sería muy trabajoso.

Otras utilidades interesantes

rsnapshot: Completa aplicación basada en rsync para facilitar la realización de copias de seguridad incrementales y con diferentes versiones. Se basa en este artículo: http://www.mikerubel.org/computers/rsync_snapshots/. Posee interfaces web como elkarbackup.

rdiff-backup: Otra alternativa a rsync, más sencilla de usar. Dispone de interfaces web como rdiff-backup-web y rdiffWeb

cwRsync: paquete para Windows que contiene cygwin, OpenSSH, OpenSSL y rsync. No necesita instalación.

Grsync: proporciona una interfaz gráfica para rsync y podemos usarlo tanto en linux como en Windows y MacOS.

Gadmin-Rsync: otra opción si queremos una interfaz para rsync. Forma parte de la colección gadmin, que proporciona interfaces para otros servicios como Samba, OpenVPN, Sendmail y algunas más.

rclone: Potente utilidad basada en rsync añadiendole soporte para multitud de servicios y protocolos como MEGA, Google Drive, OneDrive, Dropbox, Amazon S3, WebDAV, SFTP y muchos más.

Rsync.net: Servicio de copia en la nube con buen precio

Más información

Página oficial: https://rsync.samba.org/

https://linux.die.net/man/1/rsync

http://www.vicente-navarro.com/blog/2008/01/13/backups-con-rsync/

http://www.jveweb.net/archivo/2011/02/usando-rsync-y-cron-para-automatizar-respaldos-incrementales.html