Exportar archivos a Wasabi con Rclone

Kevin van Zonneveld

Cofundador · Ámsterdam, Países Bajos · Mostrar bio

Wasabi es un popular proveedor de almacenamiento en la nube conocido por su bajo costo, su velocidad y su compatibilidad con las API de Amazon S3. Los desarrolladores suelen elegir Wasabi por su modelo de precios predecible y sus capacidades de almacenamiento de alto rendimiento.

En este DevTip, exploraremos cómo exportar archivos a Wasabi de forma eficiente usando la potente herramienta de línea de comandos rclone.

¿Qué es Wasabi y por qué usarlo para almacenamiento en la nube?

Wasabi ofrece soluciones de almacenamiento en la nube totalmente compatibles con las API de Amazon S3, lo que facilita su integración en flujos de trabajo existentes. Ofrece:

• Precios predecibles y asequibles
• Transferencias de datos de alta velocidad
• Seguridad y cumplimiento sólidos
• Sin cargos por egreso ni por solicitudes de API

¿Cómo simplifica Rclone la gestión de archivos en la nube?

rclone es una herramienta de línea de comandos de código abierto diseñada para gestionar archivos en distintos proveedores de almacenamiento en la nube. Simplifica las transferencias de archivos, la sincronización y las copias de seguridad con una interfaz de CLI sencilla.

Instalación y configuración de Rclone para Wasabi

Instalación

Puedes instalar rclone con uno de estos métodos:

# Script installation (recommended)
sudo -v ; curl https://rclone.org/install.sh | sudo bash

# Or package manager installation
brew install rclone    # macOS with Homebrew
sudo apt install rclone # Debian/Ubuntu

Verifica la instalación:

rclone --version

Configuración

Configura rclone para conectarse a Wasabi:

rclone config

Sigue las indicaciones interactivas:

1. Elige n para un remoto nuevo.
2. Escribe un nombre para el remoto (por ejemplo, wasabi).
3. Elige Wasabi Object Storage entre las opciones de almacenamiento.
4. Introduce tu clave de acceso y tu clave secreta de Wasabi.
5. Elige el endpoint correcto para tu región (por ejemplo, s3.wasabisys.com).
6. Deja vacía la restricción de ubicación.
7. Elige private o public-read para la ACL.
8. Confirma la configuración.

Consideraciones de seguridad

Cuando trabajas con credenciales de almacenamiento en la nube, la seguridad es fundamental:

• Guarda tu archivo de configuración de forma segura, ya que contiene credenciales sensibles.
• Ubicación predeterminada del archivo de configuración: ~/.config/rclone/rclone.conf (Linux/macOS) o %USERPROFILE%\.config\rclone\rclone.conf (Windows).
• Usa la opción --config para especificar otra ubicación del archivo de configuración.
• Considera usar variables de entorno para las credenciales en scripts automatizados.

Comandos básicos de Rclone para exportar archivos

Copiar archivos

Para copiar archivos desde tu máquina local a Wasabi:

rclone copy /local/path wasabi:bucket-name/path

Sincronizar archivos

Para sincronizar un directorio local con Wasabi:

rclone sync /local/path wasabi:bucket-name/path

Funciones avanzadas de Rclone para transferencias de archivos eficientes

Transferencias paralelas

Aumenta la velocidad de transferencia ajustando las transferencias paralelas:

rclone copy /local/path wasabi:bucket-name/path --transfers=8

Filtrar archivos

Usa filtros para incluir o excluir archivos específicos:

rclone sync /local/path wasabi:bucket-name/path --exclude "*.tmp"

Control de ancho de banda

Limita el uso de ancho de banda para evitar la congestión de la red:

rclone copy /local/path wasabi:bucket-name/path --bwlimit=10M

Automatizar exportaciones de archivos a Wasabi con scripts de Rclone

Automatiza copias de seguridad o exportaciones periódicas creando un sencillo script de bash:

#!/bin/bash

# Backup script to wasabi
rclone sync /local/path wasabi:bucket-name/path --transfers=8 --exclude "*.tmp"

Haz que el script sea ejecutable y prográmalo con cron:

chmod +x backup-to-wasabi.sh
crontab -e

Agrega una tarea de cron que se ejecute a diario a medianoche:

0 0 * * * /path/to/backup-to-wasabi.sh

Solución de problemas comunes de Rclone con Wasabi

Problemas comunes

1. Error 403: comprueba tus credenciales de acceso y los permisos del bucket.
2. Conexión reiniciada: verifica que tu endpoint coincida con la región de tu bucket.
3. No se encuentra el archivo de configuración: usa la ruta absoluta con la opción --config.

Comandos de verificación

Usa estos comandos para probar tu configuración y diagnosticar problemas:

# Test configuration
rclone lsd wasabi:

# Check bucket access
rclone ls wasabi:your-bucket

# Test upload speed
rclone copy --progress test.file wasabi:your-bucket/

Depuración

Para obtener información de error más detallada, usa la opción -v:

rclone -v copy /local/path wasabi:bucket-name/path

Para una salida aún más detallada, usa -vv o -vvv.

Conclusión

Usar rclone para exportar archivos a Wasabi simplifica la gestión del almacenamiento en la nube y ofrece funciones potentes como transferencias paralelas, filtrado y automatización. Es una excelente opción para desarrolladores que buscan un manejo de archivos eficiente y confiable.

Transloadit ofrece integración nativa con Wasabi mediante el 🤖 Robot /wasabi/store como parte de nuestro servicio de Exportación de archivos.