[RESOLU]Disques SAS pleins

[unnilennium]

tous les jours, non, mais à chaque changement de disque de mes SME ( augmentation de taille, ou simple changement préventif après 4 ans d'utilisation max) c'est ce que je fais.

un petit tuto : http://smeserver.pialasse.com/index.php/Lvmraid

[jdh]

Cela manque de retour de l'initiateur du fil ...
Il pourrait donner plus d'informations (fdisk -l, cat /proc/mdstat, df -h, volume de données importé, ...)

[Baobab]

Désolé, je suis en déplacement et je n'ai pas eu le temps de vous répondre donc je rectifie :
- Je rappelle que c'est de !SAS! et qu'un disque SAS pour un proliant comme celui-ci c'est 400€ pour 300G. Alors inutile de penser à installer un ou plusieurs disques de 1To autrement les budget explosent littéralement !!
- Il n'y a pas de ports SATA. Inutile donc de penser à installer du 1To en Sata.

En ce qui concerne la saturation de l'espace après seulement 4 jours d'utilisation qui amène l'incompréhension chez plusieurs d'entre vous, cela s'explique par le fait qu'avant que je mette en place ce système, le serveurs etait plus une légende qu'une utilité. Il n'était pas entretenu, pas sauvegardé et personne ne voulait risquer de stocker des informations dessus au risque de les perdre ou que les autres puissent les lire. La société a en fait changé de direction et celle-ci a souhaité remettre les choses à leur place et restructurer le parc informatique. Pour en revenir au principal, les utilisateurs ne se servaient pratiquement pas du serveur. Or, depuis la mise en place de ce système, les utilisateurs ont repris confiance et se sont mis a stocker un volume inattendu de données !! Voilà pourquoi les disques ont rapidement saturé !
Maintenant que les utilisateurs sont partis dans cet élan il faut pouvoir répondre à la demande !

Comme je suis reparti avec le matos d'origine, je n'ai pratiquement rien changé et je n'ai pas eu le choix du nombre ni du volume des disques !

Pour ce qui est des utilisateurs unnilennium il y en a 40 actuellement et c'est en augmentation avec la nouvelle direction. Et c'est donc bien ça, 300Go exploitables en fait et non 600 à cause du miroir raid1 de linux.

par contre facile de retirer la grappe hardware et :
- de la remplacer par un disque 1 To,
-synchroniser avec le 300 Go,
- enlever le 300 Go
- elargir le raid a 1To ( ainsi que le LVM qui est par dessus le RAID 1)
- rajouter un 1 To
- synchroniser le nouveau 1 To

et hop on simplifie l'architecture en augmentant l'espace sans rien reinstaller

Ton idée me parait bonne même si ce ne sera pas 1To à cause du SAS :
- en revanche est-ce que linux supportera l'élargissement du raid à 1To ?
- On ne disposera donc plus que d'un raid1 et non d'un raid5, on perd donc en rapidité (mais ce n'est peut être pas très grave)

Je suis désolé, dans l'immédiat je n'ai pas d'accès au serveur ni local, ni distant(ne l'ayant pas activé).

[jdh]

Si l'espace disponible est de 300G c'est qu'à l'install de SME, il a créé un raid 1 entre le disque virtuel de 300G (raid 5 hardware de 3x146G) et le disque de 300G. Ce qui est un gâchis juste idiot !
En fait, il eut fallu se dire, au départ, que disposant de raid hardware, il n'y a pas lieu de faire du raid software (option noraid à l'install ?).

Je pense qu'il faut
- casser le raid software pour récupérer le disque de 300 G,
- arrêter le serveur,
- insérer les 2 disques supplémentaires de 300G et, au redémarrage, créer une grappe raid5 des 3 disques de 300G = 600G,
- utiliser le nouveau disque pour agrandir l'espace dispo.

Le premier et dernier point sont très spécifiques SME : comment ajouter un disque et le rendre dispo ? Je ne suis pas spécialiste SME mais le problème a été abordé et doit être trouvable avec les liens de référence SME ...
(Je peux me tromper mais on doit pouvoir agrandir le physical volume puis le logical volume puis le file system dedans ...)

Cette démarche doit donner 900G dispo avec 2 grappes raid5. (3x146G raid5 = 300G + 3x300G raid5 = 600G).

Il faudra alors s'intéresser aussi aux alertes mails en cas de défaillance raid hardware : ne pas compter que sur les seuls voyants !!


Concernant les disques SAS, il existe des disques en 10.000 tours ou 15.000 tours jusqu'à 750G (en 3"1/2), mais il existe des disques aussi 'nearline' en 7.200 tours avec 1T ou 2T (en techno SAS et en 3"1/2). Mais SATA et SAS sont proches : j'ai des serveurs (DELL) dans lesquels j'ai inséré des SAS et SATA sans problème ! Par ailleurs, la rapidité de raid 1 versus raid 5 n'est surement pas si claire : le raid 5 est lent en écriture puisqu'il faut écrire tous les disques, avec du raid 10 on écrit sur 2 disques seulement.

[unnilennium]

l'elargissement se fait sans probleme avec la procedure que j'ai decrite en utilisant le raid 1 et LVM ( le mode par defaut SME)

en supprimant le raid 5 tu devrait meme gagner en efficacité, je m'explique tu cumule actuellement 2 RAID l'un sur l'autre, comme le precise jdh en écriture le raid 5 est plus lent et donc ralenti le total, et en lecture le raid 1 est plus lent ( et donc ralenti le gain possible du raid 5 avec le deuxième disque, car je suis pas convaincu qu'il lira sur le disque le plus rapide)

supprimer le raid 5 materiel simplifiera le montage, et donc les risques de pannes, et facilitera surtout l'intervention sans faire de conneries.

aopres tu peux essayer le raid 5 en logiciel avec sme mais cela te necessitera de totu reinstaller et migrer les données...

la solution intermédiaire que je t'ai proposée à l'avantage de simplifier le montage, garder la redondance pour sécuriser les données ( sans que cela dispense d'une bonne sauvegarde)

La demarche de JDH est pas mauvaise non plus mais te demande de faire deux grappes raid 5 materiel et surtout de réinstaller SME pour supprimer le raid miroir logiciel, car sinon il va chercher a reutiliser les deux grappes comme disques du miroir et tu restera a 300G, a moins de supprimer la grappe de 300 Go et d'Avoir qu'une grappe de 600 Go sans autre disque a coté, SME restera en raid 1 degradé avec 600Go ... mais encore une fois cela passe par le raid materiel et necessite une reinstallation, la migration des données et élargissement du disque raid n'etant pas aussi simple en mode matériel que en mode logiciel.

[Baobab]

J'ai bien envie de me passer de la réinstallation alors je vais garder ton idée Unnilennium, mais j'ai pas tout compris si je reprend ça à mes dimensions

par contre facile de retirer la grappe hardware et :
- de la remplacer par un disque 1 To,
-synchroniser avec le 300 Go,
- enlever le 300 Go
- elargir le raid a 1To ( ainsi que le LVM qui est par dessus le RAID 1)
- rajouter un 1 To
- synchroniser le nouveau 1 To

Au final si je comprend bien, je n'utilise que le raid mirroir logiciel ?
Sauf que pour lier les 3disques de 146Go je suis bien obligé de faire une grappe raid5...
Je suis un peu perdu là...

[unnilennium]

tu n'utilise plus les disques 146, ni le raid materiel

tu achete deux gros disques

le premier remplace la totalité de la grappe actuel materiel raid 5, que tu synchronise avec le disque 300 go actuel en raid logiciel

puis tu supprime le disque 300 go
tu redemarre verifie que tout boot
tu elargie la capacité du raid et lvm pour prendre tout le disque
tu etteinds
tu rajoute ensuite le deuxieme disque neuf de même capacité
tu redemarre et synchronise les deux apres avoir ajouter le deuxieme disque dans le raid logiciel



reste a choisir ta capacité : 500, 750 ou 1To suivant le prix et les disponibilités.

[jdh]

@unnilennium

Tu fais un peu abstraction du matériel existant !

Il y a 2 choix technologiques : SAS ou SATA : à préférer SAS
Il y a des choix de vitesse couplée à la taille disque : en 3.5" on trouve du SAS à 10.000 t et 15.000 t contre du SATA à 7.200 t, en 2.5" on plafonne en SAS 10.000 t.
Il y a des choix de tailles : en SAS 3.5" on trouve 146G, 300G, 450G, 600G (voire 750G), en SAS 2.5" on s'arrête à 300G, en SATA 3.5" on trouve 500G, 750G, 1T, 2T (voire 3T), en SATA 2,5" on doit se limiter à 500G.


Partant de ce qui existant : 3x 146G + 1x 300G + 2x 300G commandés, l'optimal me semble être 2 grappes raid 5 hardware (3x146 + 3x300) sans raid logique (ou raid 1 dégradé). Je pense qu'il est possible d'y arriver sans réinstallation de SME et cela fournit 900G dispo ce qui n'est pas si mal (total 1350G = dispo 900G + perte 450G). (Je n'ai pas compris ta vision d'une réinstallation nécessaire ...)

On peut aussi faire du raid 1 soft avec 2 disques de 1T via la démarche que tu proposes. Mais il reste étonnant de retirer des disques.
Il est probable, sous charge appuyée, que cette solution sera moins performante puisque 2 disques SATA 7.200 t n'offriront pas le débit d'un raid 5 avec des disques SAS 10.000 t. Enfin je peux me tromper ...

[Franck78]

Salut Baobab,

Je pense clairement comme jdh et ton collègue et tout le monde, le raid de SME entre les 300go est à détruire impérativement.

Dés que tu auras reçu tes deux disques SAS, branché ceux ci et vérifié qu'il sont utilisables tu te lances.

En préambule, tu peux avec trois disques en conserver un en spare et rester en mirror (raid1).
Ca dépend de l'espace qu'il te faut et tu as justement remarqué que 3x146 pour "sme/" c'était trop.

Ensuite on imagine que tu as cerné le dossier qui sera sur sa partition 3x300.
/home ou /var/quelquechose ou /var ....
Tu peux la aussi opter pour le disque de secours (raid1+spare), c'est toi qui vois.

L'idée serait dont de
-créer un RAID pour les données
-y copier ce qu'il faut
-réinstaller SME et lui inclure ce RAID existant

Je ne me prendrais pas du tout la tête a essayer de sauver l'installation SME existante. Elle a quatre jours (huit maintenant), donc toute fraîche dans ta tête, pas de bidouille accumulée.

En raid logiciel
Pas besoin de récupérer le 300Go tout de suite. On peut assembler un RAID5 en mode dégradé sans problème.
Donc tu gardes toujours une copie complète sur ce disque jusqu'a ce qu'il soit réintégré.

En raid matériel
-raid5: il faut récupérer le 300Go, donc casser le mirror SME, se passer temporairement de la copie de secours.
-raid1: pas de problème tu as les deux disques !

3x146
A casser selon moi pour passer en mirror+spare et récupérer direct le 300Go si pas encore fait.
Cependant si tu as déterminé qu'il te faut un espace de sauvegarde conséquent ou je sais quoi pour ton développeur, tu dois péter proprement le mirror soft de SME! Sous réserve que le partitionnement te convienne !

Je pense que SME sait s'installer en intégrant un disque existant sans le détruire. A vérifier (s'entrainer) avant bien entendu.


Cela ne devrait pas prendre plus d'un samedi si tu sais ou tu vas. Donnes nous tes choix définitifs.

[Baobab]

Salut,

Comme je l'avais précisé plus haut, j'ai commandé 2 disques de 300Go que j'ai reçu récemment. Je suis de retour aujourd'hui pour remettre ça.
J'ai fait un test hier soir :
- J'ai retiré le disque seul de 300Go
- Je l'ai réinstallé moins d'une minute après
- j'ai redémarré le serveur et je l'ai laissé toute la nuit comme si de rien n'était.
Le test a été concluant, le serveur a apparemment cassé le raid1 logiciel et a fait comme si le disque était neuf ou vide.
Dans la console admin du serveur :

Etat actuel des disques :

Disques installés: cciss/c0d0 cciss/c0d1
Disques utilisés: cciss/c0d0
Disques disponibles: cciss/c0d1

Votre système dispose d'un disque dur inutilisé. Voulez-vous le joindre à la grappe RAID existante ?

ATTENTION : TOUTES LES DONNéES DU NOUVEAU DISQUE VONT êTRES EFFACéES !

Ce que je compte faire :
Le test ayant été concluant :
- Je vais insérer mes deux autres disque de 300Go à côté de celui qu'il détecte comme inutilisé
- je vais redémarrer le serveur et créer une grappe raid5 matériel de mes 3disques de 300Go
- Au redémarrage le serveur me proposera normalement le même message et je lui demanderai de faire un mirroir.
- Une fois le miroir effectué, je retire mes 3 autres disques de 146Go

Problème :
tout devrais fonctionner mais je ne suis pas sûr que le serveur prenne en compte que la taille de mes disques est différente et j'ai peur qu'il se limite à utiliser 300Go au lieu de 600 qui lui sont disponibles.

Qu'en pensez-vous ?