Ajouter un stockage externe à son serveur

Introduction

En dehors du système de monitoring qui s'assure que les partitions de votre système ne sont pas trop petites, YunoHost ne s'occupe pour l'instant pas de l'organisation de vos partitions et de vos disques.

Si vous vous hébergez sur une carte ARM avec une carte SD ou sur un serveur avec un petit disque SSD, vous pourriez, pour des raisons de fiabilité ou de manque de place, vouloir ajouter un ou des disques à votre serveur.

Ci-dessous, vous trouverez des explications pour parvenir à déplacer vos données sur un disque dur de façon correcte avec un minimum d'impact vis-à-vis du fonctionnement de YunoHost. Cette opération peut se faire lors de l'installation ou, a posteriori, lorsque vos besoins de stockage ont augmenté ou lorsque vous n'avez plus confiance dans votre carte SD.

Pré-requis

• Avoir un peu de temps à un moment où les utilisateurs de votre serveur peuvent accepter un arrêt des services. Les étapes à réaliser, même si elles sont relativement simples, peuvent parfois paraître techniques et nécessitent dans tous les cas de prendre son temps.

• Savoir se connecter en root sur votre système, par exemple via SSH. (Note : en étant connecté en tant qu'utilisateur admin, vous pouvez passer root avec sudo su)

• Connaître les commandes basiques cd, ls, mkdir, rm

• Avoir une sauvegarde au cas où ça ne se passe pas comme prévu

• Disposer d'un stockage supplémentaire (disque SSD, disque dur, clé USB) branché à votre serveur en USB ou en SATA

1. Identifier les dossiers à déplacer

La commande ncdu / vous permet de naviguer dans les dossiers de votre serveur afin de constater leurs tailles.

Ci-dessous, une explication de certains chemins qui peuvent prendre du poids avec quelques commentaires pour vous aider à réduire leur poids ou à choisir de les déplacer.

2. Connecter et identifier le disque

Commencez par brancher votre disque à votre système. Il faut ensuite identifier sous quel nom est désigné le disque par le système.

Pour cela, utilisez la commande :

lsblk

Elle peut renvoyer quelque chose comme :

NAME        MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
sda           8:0    0 931.5G  0 disk
└─sda1        8:1    0 931.5G  0 part
mmcblk0     179:0    0  14.9G  0 disk
├─mmcblk0p1 179:1    0  47.7M  0 part /boot
└─mmcblk0p2 179:2    0  14.8G  0 part /

Ici, mmcblk0 correspond à une carte SD de 16Go (on voit que les partitions mmcblk0p1 et mmcblk0p2 correspondent à la partition de démarrage /boot et à la partition système /). Le disque dur branché correspond à sda qui fait environ 1To, et contient une seule partition sda1 qui n'est pas monté (pas de "MOUNTPOINT").

3. (Optionnel) Formater le disque

Cette opération est optionnelle si votre disque est déjà formaté avec un système de fichiers supportés par linux (donc pas NTFS ou FAT32).

Créons une partition sur le disque :

fdisk /dev/VOTRE_DISQUE

puis entrez successivement n, p, 1, Entrée, Entrée, et w pour créer une nouvelle partition.

Vérifiez avec lsblk que vous avez bien votre disque contenant une seule partition.

Avant de pouvoir utiliser votre disque, il doit être formaté.

Pour formater la partition :

mkfs.ext4 /dev/VOTRE_DISQUE1
# puis 'y' pour valider

Remplacez VOTRE_DISQUE1 par le nom de la première partition sur le disque par exemple sda1.

4. Monter le disque

Contrairement à Windows où les disques sont accessibles avec des lettres (C:/), sous linux, les disques sont rendus accessibles via l'arborescence. "Monter" un disque signifie le rendre effectivement accessible dans l'arborescence des fichiers. Nous allons choisir arbitrairement de monter le disque dans /mnt/hdd mais vous pouvez le nommer différemment (par exemple /mnt/disque ...).

Commençons par créer le répertoire :

mkdir /mnt/hdd

Puis nous pouvons monter le disque manuellement avec :

mount /dev/VOTRE_DISQUE1 /mnt/hdd

(Ici, /dev/VOTRE_DISQUE1 correspond à la première partition sur le disque)

5. Monter un dossier de /mnt/hdd sur un des dossiers dont on veut déplacer les données

Ici on va considérer que vous souhaitez déplacer les grosses données des applications qui se trouvent dans /home/yunohost.app ainsi que les mails sur votre disque dur.

5.1 Création des sous-dossiers sur le disque

Pour commencer, on crée un dossier dans le disque dur

mkdir -p /mnt/hdd/home/yunohost.app
mkdir -p /mnt/hdd/var/mail

5.2 Passage en mode maintenance

Puis, idéalement on passe en maintenance les applications qui pourraient être en train d'écrire des données.

Exemple, pour nextcloud:

sudo -u nextcloud /var/www/nextcloud/occ maintenance:mode --on

Exemple, pour le mail:

systemctl stop postfix
systemctl stop dovecot

5.3 Création des points de montages

Ensuite, on va renommer le dossier d'origine et créer un dossier vide éponyme.

mv /home/yunohost.app /home/yunohost.app.bkp
mkdir /home/yunohost.app
mv /var/mail /var/mail.bkp
mkdir /var/mail

On peut alors grâce à la commande mount --bind monter le dossier de notre disque dur sur le nouvel emplacement vide de l'arborescence.

mount --bind /mnt/hdd/home/yunohost.app /home/yunohost.app
mount --bind /mnt/hdd/var/mail /var/mail

5.4 Copie des données

Puis, on copie les données en conservant toutes les propriétés des dossiers et des fichiers. Cette opération peut prendre un peu de temps, avec un autre terminal, vous pourrez controler l'évolution en observant le poids associé au point de montage avec df -h

cp -a /home/yunohost.app.bkp/. /home/yunohost.app/
cp -a /var/mail.bkp/. /var/mail/

Une fois que c'est fini, vérifiez avec ls que le contenu est bien là:

ls -la /home/yunohost.app/
ls -la /var/mail/

5.5 Sortir du mode maintenance

A partir de là vous pouvez arréter le mode maintenance, la commande ci-dessous est à adapter selon les services que vous avez arrétés.

sudo -u nextcloud /var/www/nextcloud/occ maintenance:mode --off
systemctl start postfix
systemctl start dovecot

A partir de cette étape, vos services tournent avec leurs données sur le disque, il est donc temps de tester pour voir dans quelle mesure il y a un impact sur les performances (notamment si vus utilisez de l'USB 2.0).

6. Monter automatiquement au démarrage

Jusqu'ici, nous avons monté manuellement le disque et les sous-dossiers. Cependant, il est nécessaire de configurer le système pour qu'il monte automatiquement le disque après un démarrage.

Si vos tests sont concluants, il faut pérenniser les points de montages, sinon dépêchez-vous de faire machine arrière en commençant par remettre en maintenance.

Pour commencer, trouvons l'UUID (identifiant universel) de notre disque avec :

blkid | grep "/dev/VOTRE_DISQUE1:"
# Retourne quelque chose comme :
# /dev/sda1:UUID="cea0b7ae-2fbc-4f01-8884-3cb5884c8bb7" TYPE="ext4" PARTUUID="34e4b02c-02"

Ajoutons alors une ligne au fichier /etc/fstab qui gère le montage des disques au démarrage. On ouvre donc le fichier avec nano :

nano /etc/fstab

Puis on ajoute ces lignes à la fin du fichier :

UUID="cea0b7ae-2fbc-4f01-8884-3cb5884c8bb7" /mnt/hdd ext4 defaults,nofail 0 0
/mnt/hdd/home/yunohost.app /home/yunohost.app none defaults,bind 0 0
/mnt/hdd/var/mail /var/mail none defaults,bind 0 0

(il faut adapter cette ligne en fonction des informations et choix précédents)

Utiliser Ctrl+X puis o pour sauvegarder.

Vous pouvez ensuite tester de redémarrer le système pour vérifier si le disque et les sous-dossiers sont montés automatiquement.

7. Nettoyer les anciennes données

Dès que votre nouveau setup est validé, vous pouvez procéder à la suppression des anciennes données issues de l'étape 6.3:

rm -Rf /home/yunohost.app.bkp
rm -Rf /var/mail.bkp

Félicitations !

Si vous êtes arrivé jusqu'ici sans dommage, vous avez désormais un serveur qui tire parti d'un ou de plusieurs disques de stockage.