Cómo configurar un servidor "bup remote" en 5 minutos usando docker-compose

El sistema de respaldo bup implementa respaldo remoto en un servidor conectándose vía SSH a dicho servidor, iniciando un proceso bup allí y luego comunicándose vía el túnel SSH.

En este post, configuraremos un servidor para respaldo remoto de bup basado en nuestra imagen ulikoehler/bup-server (la cual contiene tanto bup como dropbear como servidor SSH).

1. Inicializar la estructura de directorios y crear el conjunto de claves SSH para acceder al servidor

Recomiendo hacer esto en /opt/bup, pero en principio, cualquier directorio servirá.

bup_init_setup.sh
mkdir -p dotssh bup
# Generate new elliptic curve public key
ssh-keygen -t ed25519 -f id_bup -N ""
# Añadir clave SSH a la lista de claves autorizadas
cat id_bup.pub | sudo tee -a dotssh/authorized_keys
# Fix permissions so that dropbear does not complain
sudo chown -R 1111:1111 bup
sudo chmod 0600 dotssh/authorized_keys
sudo chmod 0700 dotssh

1111 es el ID de usuario del usuario bup en la VM.

2. Crear docker-compose.yml

Nota: Este docker-compose.yml usa un directorio de respaldo local - también puedes montar un directorio CIFS desde p. ej. un dispositivo NAS. Ver configuración docker-compose para servidor bup remoto con almacén de respaldo montado por CIFS para más detalles.

docker_compose.yml
services:
  bup-server:
    image: ulikoehler/bup-server:latest
    environment:
      - SSH_PORT=2022
    volumes:
      - ./dotssh:/home/bup/.ssh
      - ./dropbear:/etc/dropbear
      # BUP backup storage:
      - ./bup:/bup
    ports:
      - 2022:2022
    restart: unless-stopped

3. Iniciar el contenedor

En este punto, puedes usar docker-compose up para iniciar el servicio. Sin embargo, típicamente es más fácil simplemente usar el script de TechOverflow para generar un script systemd para iniciar automáticamente el servicio en el arranque (y iniciarlo ahora mismo):

create_docker_compose_service.sh
curl -fsSL https://techoverflow.net/scripts/create-docker-compose-service.sh | sudo bash /dev/stdin

Al ejecutar docker-compose logs -f, deberías ver un mensaje de saludo de dropbear como

bup_server_logs.txt
bupremotedocker-bup-remote-1  | [1] Dec 25 14:58:20 Not backgrounding

4. Crear una entrada .ssh/config en el cliente

Necesitas hacer esto para cada cliente.

Copia id_bup (que generamos anteriormente) a cada cliente en una carpeta como ~/.ssh. Dónde lo copias no importa, pero el usuario que ejecutará los respaldos más adelante necesitará acceso a este archivo. Además, para ese usuario necesitas crear una entrada .ssh/config indicando a SSH cómo acceder al servidor bup:

ssh_config_bup_server.txt
Host BupServer
    HostName 10.1.2.3
    User bup
    Port 2022
    IdentityFile ~/.ssh/id_bup

Establece HostName a la IP o nombre de dominio del host que ejecuta el contenedor docker. Establece User a bup. Esto está codificado de forma fija en el contenedor. Establece Port a cualquier puerto que mapeaste en docker-compose.yml. Si la línea ports: en docker-compose.yml es - 1234:2022, el valor correcto para Port en .ssh/config es 1234. Establece IdentityFile a donde sea que esté ubicado id_bup (ver arriba).

Ahora necesitas conectarte al contenedor del servidor bup una vez por cada cliente. Esto es tanto para detectar problemas con tu configuración SSH (como permisos incorrectos en el archivo id_bup) como para guardar la clave de host SSH del contenedor como clave conocida:

ssh_bupserver.sh
ssh BupServer

Si esto te pide una contraseña, algo está mal en tu configuración - posiblemente te estás conectando al host SSH equivocado ya que el contenedor del servidor bup tiene la autenticación por contraseña deshabilitada.

5. Conectar usando bup

Cada cliente necesitará que bup esté instalado. Ver Cómo instalar bup en Ubuntu 22.04 y posts similares.

Tienes que entender que bup necesitará tanto un directorio local (llamado el index) como un directorio en el servidor bup llamado directorio de destino. Tienes que usar un directorio index y un directorio de destino por proyecto de respaldo. Lo que definas como proyecto de respaldo depende de ti, pero recomiendo encarecidamente usar un proyecto de respaldo por aplicación que respaldes, para tener localidad de datos: Los respaldos de una aplicación pertenecen juntos.

Por convención, el directorio /bup en el servidor (i.e. contenedor) está dedicado a este propósito (y mapeado a un directorio o volumen fuera del contenedor).

En el host local, recomiendo usar ya sea /var/lib/bup/project.index.bup o ~/bup/project.index.bup y dejar que bup cree automáticamente directorios específicos del proyecto desde allí. Si usas un usuario especial en el cliente para hacer respaldos, también puedes colocar los índices. Si el índice se pierde, esto no es un problema siempre y cuando el respaldo funcione (solo tomará unos minutos revisar todos los archivos de nuevo). No deberías respaldar el directorio índice.

No hay requisito para el sufijo .bup o .index.bup pero si lo usas, te permitirá discernir rápidamente qué es un directorio y si es importante o no.

Para usar bup, primero necesitas inicializar los directorios. Puedes hacer esto múltiples veces sin ningún problema, así que lo hago al inicio de cada uno de mis scripts de respaldo.

bup_init_remote.sh
bup -d ~/buptest.index.bup init -r BupServer:/bup/buptest.bup

Después de eso, puedes empezar a respaldar. Generalmente esto se hace ejecutando primero bup index (esta operación es solo local) y luego ejecutando bup save (el cual guarda el respaldo en el servidor remoto bup).

bup_index_and_save.sh
bup -d ~/buptest.index.bup index . && bup save -r BupServer:/bup/buptest.bup -9 --strip-path $(pwd) -n mybackup .

Algunos parámetros requieren mayor explicación:

  • -9: Compresión máxima. bup es tan rápido que casi no hace diferencia pero ahorra una gran cantidad de espacio en disco especialmente para datos tipo texto.
  • --strip-path $(pwd) Si respaldas un directorio /home/uli/Documents/ con un archivo /home/uli/Documents/Letters/Myletter.txt esto hace que bup guarde el respaldo de dicho archivo bajo el nombre Letters/Myletter.txt en lugar de /home/uli/Documents/Letters/Myletter.txt.
  • -n mybackup. El nombre de este respaldo. Esto te permite separar diferentes respaldos en un solo repositorio.

6. ¡Vamos a restaurar!

Podrías querer decir espero que nunca necesite restaurar. EQUIVOCADO. Necesitas restaurar ahora mismo, y necesitas restaurar regularmente, como una prueba de que si realmente necesitas recuperar datos restaurándolos, realmente funcionará.

Para hacer esto, primero necesitaremos obtener acceso a la carpeta donde. Esto típicamente está almacenado en algún tipo de servidor Linux de todos modos, así que simplemente instala bup allí. En nuestro ejemplo anterior, el directorio con el que trabajaremos se llama buptest.bup.

Hay dos formas convenientes de ver los respaldos de bup:

  1. Usa bup web y abre tu navegador en http://localhost:8080 para ver los datos del respaldo (incluyendo historial):
bup_web.sh
bup -d buptest.bup web
  1. Usa bup fuse para montar todo el árbol incluyendo el historial a un directorio como /tmp/buptest:
bup_fuse_mount.sh
mkdir -p  /tmp/buptest && bup -d buptest.bup fuse /tmp/buptest

Echa un vistazo a artículos similares por categoría: Bup Contenedores Docker