INFO les barques

QNAP RAID 5 : Changement d'un disque à chaud en images

Georges Charpenay — 2022-12-17T20:56:35Z

Un disque dur n'est pas indestructible, et au bout de quelques années de fonctionnement, il arrive parfois qu'il tombe tout simplement en panne, ou qu'il se dégrade progressivement en ayant de plus en plus de clusters défectueux pour que le système le déclare comme facteur à risque. Le système raid isole alors automatiquement le disque défectueux et fonctionne en mode dégradé, sauf s'il trouve un disque configuré en spare, auquel cas, il reconstruit automatiquement le raid avec le nouveau disque.

Pour la démonstration ci-dessous, nous partons sur un raid de 4 disques sans disque de spare.

Alors qu'il suffit de retirer le disque défectueux puis en réinsérer un autre quelques minutes plus tard pour que tout se reconstruise automatiquement, prenons le temps d'observer et de voir comment sont consignés les évènements dans le système.

Etape 1 : Constater et identifier le disque hors service

Il y a plein d'éléments qui confirment la mise hors service d'un disque par une baie raid.

Au delà de détailler tous les moyens d'alertes système que vous pouvez configurer (et il y en a), et si vous êtes physiquement éloigné du qnap, vous pouvez vérifier, cet état de disque principalement dans stockage et snapshots. Vous pouvez ainsi constater, sur la vue d'ensemble, qu'un disque est défectueux.

Le disque 3 est bien en situation anormale

On voit pertinemment aussi que le pool de stockage contenant le disque fonctionne en mode dégradé.

Cet état de fait se confirme en arrivant physiquement vers le qnap, avec une led disque qui est passée au rouge, pour bien identifier le disque défectueux

Alors, si vous n'avez pas de disque de rechange sous la main, il faut vite en commander un autre chez votre fournisseur préféré.
A réception du disque, je vous invite à noter ou photographier le numéro de série du disque pour l'enregistrer ultérieurement chez le constructeur et bénéficier de la garantie.

Numéro de série à enregistrer pour garantie

Quelques liens utiles pour Western Digital

Pour enregistrer un produit, il faut aller sur Enregistrement des produits WD mais attention, avec edge ou chrome, car j'ai rencontré des petits soucis avec firefox.

Se connecter à Western Digital

Se connecter à hotline Western Digital

Pour vérifier la garantie d'un disque Western Digital HS : Etat Garantie produits WD

Etape 2 - Changement de disque

Il faut aller sur le qnap, et extraire le disque défectueux

Au sortir du disque, le qnap émet deux bips longs et affiche le message disque éjecté.

Information qu'on peut retrouver dans les évènements du journal dans l'interface web.

Ensuite, il faut sortir l'ancien disque dans la cage du qnap et le remplacer par le nouveau

Pour insérer le nouveau disque, pousser doucement dans l'intérieur de la cage.

Puis clipser doucement la cage.

Le nouveau disque démarre, et au bout d'un petit temps, le qnap émet deux bips longs et affiche le nouveau disque. Le nouveau disque passe au vert

Etape 3 - Reconstruction du raid

La reconstruction du raid démarre automatiquement, on peut retrouver les informations dans le pool de stockage.

Ainsi que dans les tâches en arrière plan.

Vous pouvez modifier la vitesse de reconstruction

Attention, la reconstruction sollicite beaucoup les disques. Personnellement, j'ai prévu de suspendre les sauvegardes qui étaient planifiées et qui coïncidaient avec la reconstruction.

Voilà, au bout de quelques heures dont la durée varie en fonction de la taille de vos disques et de la vitesse de reconstruction que vous avez choisie, votre baie sera reconstruite et pourra de nouveau supporter la défection d'un de ses éléments.

INFORMATION IMPORTANTE

Si d'aventure, à l'étape 1, votre qnap, à l'entrée dans l'interface web, vous précise que le système de fichiers n'est pas propre (alors que le raid est bien en mode dégradé), il est préférable d'effectuer cette vérification APRES le remplacement du disque, et une fois que la reconstruction terminée. ( et donc que le RAID est Sain ).

Par cette vérification, avec l'aide des metadata du pool, les tables d'allocations sont vérifiées, corrigées. Cela est nécessaire dans le cas ou un volume n'est pas démonté correctement ( perte subite du RAID, coupure de courant, ... )

QNAP : Création d'un pool de stockage externe en 20 micro-étapes

Georges Charpenay — 2021-06-21T17:56:27Z

J'ai complété un Qnap TS453 avec deux baies de disques disposées sur des supports externes, des QNAP-TR004.

Une est exclusivement une baie SSD et héberge -principalement- des machines virtualisées sous Virtualization Station et l'autre baie externe sert en partie aux sauvegardes (sauvegardes 3-2-1), mais a aussi l'avantage d'héberger des services Qnap supplémentaires .

Ainsi, le Qnap dispose de trois contrôleurs de disques pour héberger chacun une baie raid 5 et les ressources aux accès disques sont répartis sur ces contrôleurs, donnant ainsi de meilleures performances.

Après installation, ces baies externes se comportent exactement comme des baies internes et font oublier leur aspect externe et en cas de reboot global, par exemple après une mise à jour du noyau, tous les services sont automatiquement redémarrés.

Petite préparation mentale, pour les néophytes :

Trois grandes étapes :

créer la baie raid - le raid est une protection matérielle par lequel les datas sont dupliquées sur plusieurs disques (datas redondées) et protège ainsi de la perte ou panne accidentelle d'un disque. Il faut cependant préciser à votre système quels disques doivent être concernés par cette protection pour qu'il s'organise et prépare les disques.

créer le pool de stockage (storage pool) - une fois les disques "contrôlés" par le système raid, il faut indiquer au Qnap s'il doit partager cet espace de stockage en plusieurs morceaux ou le conserver en un seul, pour y stocker des informations dessus. S'agissant d'un espace externe, j'ai décidé de faire un seul bloc, un seul pool de stockage par TR004 (ce qui n'est pas le cas pour d'autres espaces de stockage interne au qnap, mais c'est pour d'autres raisons que je dévoilerais dans un prochain article) - donc un espace de stockage unique par espace externe (bloc TR004).

créer le ou les volumes sur l'espace de stockage, un peu comme vous partitionneriez un disque externe sur windows..

Une fois ces étapes franchies, vous pourrez enfin créer vos dossiers partagés et tout marchera comme sur des roulettes, mais ne vous inquiétez pas, ça va y aller.

1 - Créer la baie raid

Avant tout celà, je précise que le TR004 est configuré, au niveau de ses DIP/SWITCH sur son boitier, en mode logiciel (pour être contrôlé et géré par le QNAP sur lequel il est branché). Le cas échéant, curseurs 1, 2 et 3 sur position ON.

Première étape, la création du pool de stockage :

Allez dans stockage et snapshots et choisissez l'assistant pour créer un pool de stockage

Chargement de la configuration

Nous retrouvons nos disques et notre TR004 et le système précise que cette unité externe TR004 ne peut contenir qu'un type de raid. Donc OK.

Patientez un petit temps de chargement le temps de l'analyse des disques sur le TR004.

Choisissez les disques du raid (cochez les disques à gauche). Dans ce cas de TR004 et vu que la carte mère du TR004 ne peut gérer qu'un seul raid, TOUS les disques.

Validez les disques et le type de raid à appliquer sur la destination.

A la fin du choix, validez la création du pool de raid. (validez la capacité totale des disques, sachant que la capacité affichée est la capacité utile du raid, la capacité de stockage sous la protection raid)

Un avertissement s'en suit avant la création du raid pour préciser que les données des disques seront définitivement perdues. Si vous vous apercevez que vous avez mis un disque avec des données à conserver, c'est le moment ou jamais de le retirer pour le sauvegarder, car après il sera trop tard.

Eh bien voilà, maintenant, c'est trop tard pour faire marche arrière car la construction du raid est lancée.

A la fin de la construction, le boitier est automatiquement éjecté. Pas de souci, il va revenir avec un tout petit peu de patience, une poignée qui peut s'élever à une dizaine de minutes quand même, voire même un peu plus.

Voilà, le boitier se retrouve dans l'interface de stockage et snapshots avec le raid 5 bien activé sur les 4 disques. En cliquant sur suivant, nous allons créer un pool de stockage sur lequel nous créerons ultérieurement le ou les volumes.

2- Créer un pool de stockage

Vous êtes ensuite invité à lancer l'assistant du pool de stockage. Validez-en les paramètres après les avoir vérifiés.

Juste avant la création, définissez le seuil d'alerte d'occupation du pool de stockage. Sachez que vous pourrez modifier ou supprimer ultérieurement ces alertes d'occupation de pool de stockage. Personnellement, je préfère mettre des alertes sur les volumes qui occupent les pools de stockage plutôt que sur les pools de stockage eux-même car j'utilise des volumes lourds (thick volumes). Dans le cas de volumes légers (thin volumes), il vaut mieux effectivement mettre une alerte au pool de stockage. Mais laissons la à 80 %, pour l'exemple.

Nouvel avertissement sur le choix du pool et sur la destruction des données. Validez par OK.
On peut s'interroger sur cet avertissement redondant sur celui de la création du raid, mais il ne faut pas oublier que vous pouvez redéfinir et recréer un pool de stockage sans redéfinir la prise en charge du raid. Donc avertissement utile.

Il vous précise aussi que le mode de stockage sera le mode de stockage NAS, c'est à dire que votre qnap central "verra" cette baie de disque comme une baie de disques internes et qu'en cas de reboot par exemple, il remontera automatiquement ces volumes.

3 - Création du ou des volumes

Vous retrouverez donc votre nouvel espace de stockage que vous devrez sélectionner et choisir ainsi d'y créer un nouveau volume (le disque "virtuel" final sur lequel vous pourrez créer des dossiers partagés.)

Ce qui amène à choisir le type de volume. thin ou thick (léger ou lourd), mais pour le cas, j'ai choisi le thick (volume lourd) où on définit "en dur" la place du volume et la place qu'il prend sur le pool de stockage. J'ai crée un volume unique, mais rien n'empêche d'en créer plusieurs, du moins sur le papier.
Nota bene : Si vous hésitez sur le type de pool (thick, thin...), sachez qu'il est toujours possible, plus tard, de décider de migrer un volume épais (thick) vers un volume léger (thin). Je l'ai fait à plusieurs reprises sans aucun incident, mais faisons le choix pour l'exemple de volumes thick.

L'assistant suivant vous demande la taille du volume et les octets par inodes. Plus les octets sont gros, plus c'est rapide, mais plus il y a de place perdue pour de petits fichiers. J'ai suivi une conférence d'optimisation en ligne avec Qnap, et un des meilleurs rapport est 16 Koctets.

Notez sur l'image qu'il y a une petite zone grise que je n'ai pas affectée et qui me permet de garder une petite réserve "secrète" à affecter sur un volume. Je fais toujours cela, notamment quand je crée plusieurs volumes lourds. Ainsi, en cas de volume plein, j'ai une petite réserve pour lui donner quelques gigaoctets en plus. Dans ce cas d'un volume unique, ce n'est pas forcément justifié, mais je la garde quand même et je sais ainsi que sur l'ensemble du qnap, j'ai des "roues de secours" avec de la surface disponible à redistribuer.

Récapitulatif et validation de la création du volume. Si vous êtes ok, cliquez sur terminer.

C'est parti pour quelques minutes de patience, le temps de la création du volume.

Enfin, une fois terminé, il y a un petit temps d'optimisation. Mais en principe, vous pouvez aller créer vos dossiers partagés sur le nouveau volume (ici datavol4).

Voilà, voilà... Votre pool de stockage est terminé.

Reconstruction de batterie raid 1

Georges Charpenay — 2013-10-26T14:37:22Z

Un disque de votre baie raid 1 à un petit malaise (cela commence par quelques secteurs défectueux). Il ne faut pas attendre et songer à changer le disque.

1- Sauvegarde et commande du disque de rechange

Bienheureusement, vous aviez choisi l'option raid 1 auquel cas vos données ne sont pas perdues. On ne peut noter qu'une perte de performances en lecture-écriture.

D'abord, et je ne le répéterais jamais assez, il faut faire une sauvegarde du contenu du nas sur un support externe. Si, nous le verrons après, elle ne sert pas à grand'chose, nous ne sommes jamais à l'abri d'une mauvaise manipulation.

Ensuite, il faut vite commander un nouveau disque dur d'au moins la même capacité que celui déficient. La prudence est de prendre exactement le même modèle du même constructeur.

2 - Installation physique

Une fois votre disque tout neuf et pimpant reçu, il faut le remplacer physiquement dans votre baie raid. Pour celà, arrêter la baie en baissant l'interrupteur derrière le nas en position basse et une fois la baie bien arrêtée, la débrancher électriquement.

Important : Si vous ne mettez pas un disque neuf, pensez-bien à le vider de toute information avant son insertion (disque vierge), sinon vous pourriez rencontrer des problèmes à la reconstruction de la baie, voire perdre des données.

Vous devez savoir le disque défectueux, celà vous est signalé par mail par la station buffalo (à condition toutefois que vous ayiez bien activé les fonctions de mail), sinon vous pouvez aller voir dans l'interface web, onglet système, sous-menu stockage, fenêtre batterie de disque raid. Le disque défectueux est signalé en "erreur".

Etiqueter les disques sur place si ce n'est déjà fait. Le disque de gauche est le numéro 1 et celui de droite est le numéro 2. On retrouve cette information sur les petits supports en plastique transparent qui bloque la sortie des disques. Si vous sortez les deux disques sans les avoir repérés, vous êtes embarrassé et il faudra les remettre et redémarrer la station pour voir le défectueux à travers l'interface web du nas.

Profitez-en pour sortir les deux disques (tirer l'anneau du haut en débloquant la petite clavette en plastique du bas et donner un petit coup de soufflette à air comprimé pour nettoyer la poussière accumulée car c'est l'occasion de faire le ménage).

3 - Démarrage et reconstruction de la baie

Replacer le nas dans son endroit préféré, connectez le câble réseau et la partie électrique et faites le démarrer et déplaçant l'interrupteur derrière le nas à la position immédiatement supérieure à celle du bas.

Il est plus long qu'à l'habitude pour démarrer, c'est normal, et une fois la lampe bleue stabilisée, vous pouvez vous y connecter dessus via l'interface web.

Une fois sur l'interface web, et en cliquant sur la batterie de disque raid (menu systeme, stockage). Cliquez sur batterie raid pour accéder à ses fonctionnalités.

En haut, vous avez le menu "reconstruction de la baie", cliquez dessus pour arriver à l'avertissement suivant.

Validez en cliquant sur appliquer. (ps : si vous n'avez pas fait de sauvegarde à ce moment crucial, c'est à vos risques et périls).

Le menu suivant se présente :

Saisissez le code proposé et validez.

L'écran suivant s'affiche.

Reconstruction en cours

Pendant quelques minutes, les dossiers partagés ne sont plus accessibles, mais rassurez-vous, l'interface complète de votre nas va arriver et vous pourrez de nouveau à vos dossiers partagés.

La reconstruction d'une baie peut prendre plusieurs heures (selon la taille des disques). On peut aller voir sur le nas sa lampe jaune qui clignote une fois long et huit fois courts, ce qui signifie que la baie est en reconstruction (duplication des données entre disques), et que l'accès est dégradé pendant cette période. (voir codes erreurs sur article suivant).

Vous pouvez vérifier que tout se passe bien sur l'interface web, système, stockage, baie raid comme illustré ci-dessous.

Reconstruction de la baie

Voilà, c'est fait. Il ne reste plus qu'à laisser travailler la machine.

Environ 10h plus tard (pour des disques de 2 To), vous recevrez dans votre mail un petit message sympa comme ci-dessous.

Vous pouvez aussi vous rassurer sur l'interface web.

Le statut de la baie est passé à "normal"

Et il n'y a plus que la lampe bleue allumée sur le nas lui-même, comme quoi tout va bien.

Enjoy it !

Construire une baie raid 1

Georges Charpenay — 2012-09-02T18:18:38Z

Vous venez de rajouter et initialiser vos disques neufs, frais et pimpants.
Votre NAS les a bien intégrés, et c'est là une bonne étape de franchie.

Allons configurer notre raid 1 et sélectionnons nos disques pour la batterie de raid (bas de l'écran). Puis validons "Construction de la batterie de Raid".

Vous avez bien entendu un message de confirmation vous prévenant que vous perdrez toutes données. Si vous avez oublié quelques données, il est encore temps de faire machine arrière et de sauvegarder.

Un capcha de confirmation, afin que la commande ne puisse pas provenir d'un script malveillant, mais bien d'une personne humaine...

Et voilà, c'est parti pour la construction et pendant cette période, il est évident de bien laisser notre nas travailler tranquillement.

A la fin, vous aurez droit à une vérification systématique de la baie (bas de l'écran). Notez que le nas lui même fait clignoter une petite lampe jaune, désignant une opération de maintenance.

Rien n'empêche de commencer à copier des fichiers pendant une vérification de baie, mais pour la première, j'évite de trop le solliciter.

LAMP : 1ère Etape - INSTALLATION INITIALE [DEBIAN]

Georges Charpenay — 2008-07-07T13:13:01Z

PREAMBULE

L'installation choisie est une installation par internet.

Je l'ai choisie parce c'est une distribution énorme qui tient sur plus de 6 dvd. L'intérêt unique d'avoir tous les dvd est seulement si vous allez installer une machine sur lequel vous n'avez pas de connection internet.

Avantage de la solution par le net : vous avez toujours les derniers paquets, les dernières mises à jour..

Il faut donc télécharger l'image sur le site de Debian. Veiller à bien choisir l'image cd qui correspond à votre architecture matérielle. (processeur 32 bits, image x86.. pour les core 2).

DEMARRAGE

La machine doit être une machine en état, avec une connexion internet active (de préférence dhcp activé). Le bios doit être réglé pour boot sur cd.

Insérer le cd et démarrer le pc, les choix suivants ont été faits :

– choix langue French
– pays france
– clavier fr-latin 9
– configurer le réseau : si le dhcp (de la connection internet) est activé, la machine trouve sa route pour sortir sur internet, si le dhcp n'est pas activé, la page "configurer le réseau" apparaît pour demander si on choisit la route par défaut. Dans ce cas, choisir "non", puis configurer vous-même le réseau (et choisir une adresse ip/passerelle/masque/dns qui va bien).
– nom du système : svr-lamp
– domaine : mondomaine.com

PREPARATION DES DISQUES

Le formatage que nous avons choisi est un formatage manuel car il faut rentrer les paramètres d'un raid logiciel (raid 1 - deux disques ), donc :

– partitionnement : manuel.

Avant d'aller plus loin, il faut se dire que le partitionnement raid sur debian passe par plusieurs étapes : - la première est de créer dans les disques de la baie les volumes futurs qu'utilisera le raid (par ex: une partition de x Mo pour la partition système et une partition de y mo pour le swap), et sélectionner le menu debian pour lui dire que ce seront tous des volumes RAID. ASTUCE : Pour éviter que le système ne se plante plus loin en téléchargeant des paquets, il est indispensable que les partitions disques soient exactement positionnées de la même façon. Soit vous le faites à la main, soi, pour cela, vous pouvez utiliser le partitionnement automatique qui vous créera deux partitions (une grosse, et une petite de swap), il suffit alors de paramétrer ces partitions pour les définir comme des partitions raid) - il faut répéter cette opération pour tous les disques de la baie : x et y Mo, devant fonctionner dans un même volume devront être strictement de même dimension. Votre écran vous montrera les volumes créés dans les disques. - ensuite, il faut sélectionner l'outil de configuration de raid logiciel pour créer un lien entre les premiers volumes (de taille x), et entre les deuxièmes volumes (de taille y). Debian affiche de nouveaux volumes (RAID), sur lequel vous pourrez agir pour affecter un type de partition, cette fois ext3 et swap...

Le choix que nous avons fait est de partitionner la baie raid en deux volumes, un volume pour le swap, un volume pour les données.

Le cas échéant, choisir, pour chaque disque, de réécrire une nouvelle table de partition. Sélection du disque, réécrire une nouvelle table (pour les deux disques). Les deux disques doivent afficher un espace libre de la taille du disque. Sélectionner dans un deuxième temps, les espaces libres, et choisir créer une nouvelle partition.

Le choix des partitions est arrêté ainsi :

– une partition swap de deux fois la ram (soit deux Go)
– une partition os pour le solde du disque.

Première partition - partition système

Taille de partition (nous avons des disques de 160 Go) :

– partition de 158 Go (os), en primaire, début de disque

caractéristiques de la partition :

- système de fichiers (attention, c'est le moment de choisir l'option volume physique pour raid, à la place d'ext3), puis fin du paramétrage de cette partition.

Deuxième partition - partition swap

– idem, et on arrive forcément au choix limité du swap, partition obligatoire (appelée espace d'échange).

Il faut bien penser à sélectionner les entrées choisies pour avoir les menus suivants...

On arrive à la fin du partitionnement où on doit voir les deux disques identiquement configurés (miroir) avec un volume raid, et un volume swap.

Le partitionnement est terminé.

Configuration du raid logiciel

– Choisir "Configurer le raid logiciel"

Choisir oui à "appliquer les changements aux disques et configurer le raid."
Sélectionner "créer un périphérique multidisque"
choisir raid 1
choisir 2 pour nbre de disques.
choisir 0 pour périphériques de réserve (mirroring de raid 1)
activer les deux partitions
choisir terminer.

On arrive sur l'écran principal où on voit les deux volumes (disques), avec chacun leur deux partitions, le tout encapsulé par le raid logiciel que nous venons de créer.

– Il faut choisir la partition du raid, utiliser comme, "ext3".
— *choisir "/" comme point de montage
et fin du paramétrage de cette partition.

Choisir, sur l'écran général "Terminer le partitionnement". Confirmer.

CREATION DES UTILISATEURS ET MOTS DE PASSE

– choix du mot de passe root : "MotdePasse_root" (penser à combiner chiffres, lettres, + 8 caractères, ponctuation, pas dans le dictionnaire)...

– création d'un utilisateur (obligatoire d'en saisir un) : "si"
– mot de passe "MotdePasse_Si"

Le système de base s'installe...

GESTION DES PAQUETS

Configurer l'outil de gestion des paquets
– Faut-il utiliser un miroir sur le réseau : oui.
– Choix du pays : France
– choisir un ftp qui marche bien (ex mir2.ovh.net)
– renseigner le proxy si nécessaire (si renseigné, vérifier que le proxy laisser passer les downloads, sinon passer hors proxy.)

CHOIX DES PAQUETS

Plutôt que de choisir les applications générales, nous prenons seulement le système standard, qui contient le système minimum pour fonctionner.

Après la copie des paquets, une modification de sécurité peut demander de redémarrer certains services (par exemple exim4), il faut valider.

Enfin, le choix de l'installation de GRUB dans la MBR est posée, valider OUI.

Le système redemande de démarrer.. ETAPE TERMINEE !