Koozali.org: home of the SME Server

SME 9.2 X64 avec deux grappes de RAID1 et RAID5...

Offline STRyk

  • ****
  • 190
  • +0/-0
SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« on: September 21, 2017, 06:39:05 AM »
Bonjour à toutes et à tous,
Je suis en train de réfléchir à une solution unique : un seul serveur, qui me soulagerait pas mal :
Je dispose de deux disque dur de 8To que je vais monter en RAID1 ajouté à 3 disques durs de 3To que je voudrais monter en RAID5.
Est il possible de faire cohabiter ces deux grappes de RAID différents sur le même SME ?
Dites moi votre avis, dans le pire des cas je passerais tout en RAID1 donc 8+8 ET 3+3.
J'aimerai éviter de monter deux serveurs.
Merci par avance !

Offline Jean-Philippe Pialasse

  • *
  • 2,743
  • +11/-0
  • aka Unnilennium
    • http://smeserver.pialasse.com
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #1 on: September 22, 2017, 03:53:57 AM »
oui, c'est possible

tu peux mettre autant de raid que tu veux.

Offline STRyk

  • ****
  • 190
  • +0/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #2 on: September 22, 2017, 10:17:11 PM »
Merci.
J'utilise SME avec les options "nolvm" et "nospare", pour faciliter la restauration des données après un crash SME ou autre, bref...
Que préconises tu ? Installer le système sur la grappe RAID1 de 3To ou de 8To ?
Je vais chercher comment créer cette deuxième grappe de façon à ce que ce soit bien fait proprement pour SME (si tu as des liens, en passant).
J'ai trouvé ceci mais je me demande toujours si ces tutos sont bien valables sur SME : https://doc.ubuntu-fr.org/raid_logiciel
Enfin : Blinder à 97% un volume SME est-ce un problème ? Ce server servira d'archives "longues", il ne sera démarré que pour aller récupérer des données stockées depuis longtemps.

Encore merci pour tout !
« Last Edit: September 22, 2017, 10:25:59 PM by STRyk »

Offline Jean-Philippe Pialasse

  • *
  • 2,743
  • +11/-0
  • aka Unnilennium
    • http://smeserver.pialasse.com
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #3 on: September 25, 2017, 07:39:01 PM »
je suggères de ne connecter que les disques ou tu veux faire l'installation, isntaller avec le cd puis ajouter manuelement le deuxieme lot de disques avec le raid que tu veux puis faire manuellement les lignes de montage dans fstab.

alternativement si tu utilise le GUI du CD tu peux créer tes grapes raid puis choisir tes points de montage (home sur tel grappe, / sur telle grappe .....

pour le choix de quelle grappe utiliser ... à toi de voir suivant tes besoins !

Online ReetP

  • *
  • 3,722
  • +5/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #4 on: September 25, 2017, 08:05:23 PM »
I seriously do not recommend RAID 5. You can only lose one drive. The chance of a second drive failing during rebuild is high (because the drives are working at 100%) Buy some more drives and use RAID 6 minimum.

Make sure you have good backups !!

Je ne recommande pas sérieusement RAID 5. Vous ne pouvez perdre qu'un lecteur. La chance d'un deuxième disque de défaillance lors de la reconstruction est élevée (car les lecteurs fonctionnent à 100%) Achetez encore plus de lecteurs et utilisez RAID 6 minimum

Assurez-vous d'avoir de bonnes sauvegardes!
...
1. Read the Manual
2. Read the Wiki
3. Don't ask for support on Unsupported versions of software
4. I have a job, wife, and kids and do this in my spare time. If you want something fixed, please help.

Bugs are easier than you think: http://wiki.contribs.org/Bugzilla_Help

If you love SME and don't want to lose it, join in: http://wiki.contribs.org/Koozali_Foundation

Offline Arnaud

  • *
  • 143
  • +0/-0
    • GuedeL
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #5 on: September 25, 2017, 08:49:19 PM »
You can only lose one drive. The chance of a second drive failing during rebuild is high (because the drives are working at 100%)
Hi John,
c'est la réalité ou simplement une éventualité pessimiste? En RAID1 'est on pas dans le même cas lorsqu'un disque est défectueux??

Is it reality or only a pessimist eventuality? Is the situation in RAID1 different when 1 HD is down?

Offline Jean-Philippe Pialasse

  • *
  • 2,743
  • +11/-0
  • aka Unnilennium
    • http://smeserver.pialasse.com
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #6 on: September 25, 2017, 10:33:59 PM »
J'appuie John là dessus. Deux raisons :
- surcharge de travail soutenue pour la synchro, surtout sur une grappe de plusieurs Teraoctets, ceci entraine un risque accrus d'échec
- les disques ont généralement le même âge, donc si un disque a lâché, la probabilité qu'un autre lâche sans délais est très haute, et cela augmente avec le temps et l'utilisation ( à moins d'un défaut d'un seul lecteur).

Personnellement la majorité des pannes de RAID 1 que j'ai rencontré les deux disques étaient défectueux un a juste lâché avant l'autre

Online ReetP

  • *
  • 3,722
  • +5/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #7 on: September 26, 2017, 01:12:29 AM »
Jean Phillipe is correct. Personally for RAID 1 I usually run a 3 disk mirror. if one drive dies then I still have 2 and can replace the 3rd. As drive sizes increase the chances of failure during rebuild increases dramatically. Even RAID 6 is becoming redundant due to the length of the rebuild times. What level you choose dependa on what you can afford to lose, and for how long. You can read a lot on Google

Also I believe that a RAID 1 rebuild is easier on disks as the RAID does not have to calculate the required parity. It is a straight copy (I think this is correct)

Jean Phillipe a raison. Personnellement pour RAID 1 J'utilise généralement un miroir de 3 disques. Si un lecteur meurt alors j'ai encore 2 et peut remplacer le 3ème. Au fur et à mesure que la taille des disques augmente, les chances d'échec lors de la reconstruction augmentent de manière spectaculaire. Même RAID 6 devient redondant en raison de la durée des temps de reconstruction. Quel niveau que vous choisissez dépend de ce que vous pouvez vous permettre de perdre, et pour combien de temps. Vous pouvez lire beaucoup sur Google


De plus, je crois qu'une reconstruction RAID 1 est plus facile sur les disques car le RAID ne doit pas calculer la parité requise. C'est une copie directe (je pense que c'est correct)
...
1. Read the Manual
2. Read the Wiki
3. Don't ask for support on Unsupported versions of software
4. I have a job, wife, and kids and do this in my spare time. If you want something fixed, please help.

Bugs are easier than you think: http://wiki.contribs.org/Bugzilla_Help

If you love SME and don't want to lose it, join in: http://wiki.contribs.org/Koozali_Foundation

Offline STRyk

  • ****
  • 190
  • +0/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #8 on: September 26, 2017, 01:33:01 PM »
Merci pour ces rappels.
Effectivement le RAID5 je trouve que c'est plus sécurisant mais je n'ai que 2 HD de 8To et les finances n'étant pas énormes actuellement je ne peux pas acheter une 3eme disque de 8To, voilà pourquoi le RAID1 pour cette grappe.
Je pense que je vais faire la seconde grappe en RAID 5 mais comme la première est en RAID 1 je me posait la question, surtout pour ne pas avoir un serveur fait de "bric et de broc" surtout pour l'administration future.
Pour ce qui est de la création de la seconde grappe, je me suis habitué à l'installation façon "SME 6" et du coups j'ai regardé dans le GUI à l'installation : effectivement on peut faire une grappe comme on veux MAIS je ne sais pas ce que demanderait SME comme structure pour une seconde grappe. Surtout dans l'idée où ce soit bien reconnu sur SME et que tout fonctionne correctement ad vitam aeternam !
Et surtout que je ne me retourve pas avec un truc pas clair du genre :
Code: [Select]
# cat /proc/mdstat
Personalities : [raid1]
md0 : active raid1 sdc1[0]
      255936 blocks super 1.0 [2/1] [U_]
     
md127 : active (auto-read-only) raid1 sdb1[1] sda1[0]
      67107712 blocks super 1.0 [2/2] [UU]
      bitmap: 0/1 pages [0KB], 65536KB chunk

md1 : active raid1 sdc2[0]
      66819072 blocks super 1.1 [2/1] [U_]
      bitmap: 1/1 pages [4KB], 65536KB chunk
Et je vous avoue me demander si il faut une partition SWAP sur la seconde grappe et autre...
Ou encore plus : serait-ce mieux d'installer l'OS sur le RAID5 de 3disque de 3To (Volume de 6To) ou sur le RAID1 de 2 disques de 8To (volume de 8To).

Merci à vous car j'adore ce système SME, c'est efficace et coute relativement peu cher.
Un grand merci à le communauté en passant !
;)

Online ReetP

  • *
  • 3,722
  • +5/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #9 on: September 26, 2017, 03:03:11 PM »
We have said what we think about RAID 5. The bigger the disk drives, the higher the risk of total failure of the array. That is TOTAL failure.
You may not be able to afford a new disk now. But it might cost you a lot more if a disk dies.....
Seriously - stay clear of RAID 5. Either buy more disks or accept less space.
With RAID 1 if you get an unrecoverable error you can skip it - so you lose a file (you can use disk recovery software to get most of the data back)
With RAID 5 you get an unrecoverable error on ONE bit and the whole array is destroyed with no recovery options.
There is lots more information out there on why you should avoid RAID 5. You will be sensible to listen to it.
http://www.zdnet.com/article/raidfail-dont-use-raid-5-on-small-arrays/
In reality with drives like yours, even RAID 6 could struggle on a rebuild.

So the answer is go back, have a good read around, and come up with a new strategy!


Nous avons dit ce que nous pensons sur RAID 5. Plus les lecteurs de disque sont grands, plus le risque d'échec total du réseau est élevé. C'est l'échec TOTAL.
Vous ne pourrez probablement pas vous permettre un nouveau disque maintenant. Mais cela pourrait vous coûter beaucoup plus si un disque meurt .....
Sérieusement - Restez à l'écart de RAID 5. Achetez plus de disques ou acceptez moins d'espace.
Avec RAID 1 si vous obtenez une erreur irrécupérable, vous pouvez l'ignorer - afin que vous perdez un fichier (vous pouvez utiliser un logiciel de récupération de disque pour récupérer la plupart des données)
Avec RAID 5, vous obtenez une erreur irrécupérable sur un bit et toute la matrice est détruite sans options de récupération.
Il y a beaucoup d'informations sur la raison pour laquelle vous devriez éviter RAID 5. Vous serez judicieux de l'écouter.
http://www.zdnet.com/article/earfail-dont-use-raid-5-on-small-arrays/
En réalité, avec des disques comme le vôtre, même RIAD 6 pourrait avoir du mal à se reconstruire.

Donc, la réponse est de revenir en arrière, avoir une bonne lecture et proposer une nouvelle stratégie!
...
1. Read the Manual
2. Read the Wiki
3. Don't ask for support on Unsupported versions of software
4. I have a job, wife, and kids and do this in my spare time. If you want something fixed, please help.

Bugs are easier than you think: http://wiki.contribs.org/Bugzilla_Help

If you love SME and don't want to lose it, join in: http://wiki.contribs.org/Koozali_Foundation

Offline STRyk

  • ****
  • 190
  • +0/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #10 on: September 26, 2017, 03:06:43 PM »
Merci, pour moi ce sera donc définitivement le RAID1. La question ne se pose donc plus ! ;)
Reste à voir comment créer proprement cette seconde grappe.

Online ReetP

  • *
  • 3,722
  • +5/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #11 on: September 26, 2017, 03:52:06 PM »
How about:
Install on 2 x 3TB drives in RAID 1 (will add swap partition)
Reboot
Create RAID 1 with 2 x 8TB drives
Create new ibay
Mount new array in fstab at the new ibay directory


Que diriez-vous:
Installez sur 2 disques 3TB dans RAID 1 (ajoutera une partition swap)
Redémarrer
Créez RAID 1 avec 2 lecteurs de 8TB
Créer un nouvel ibay
Monter un nouveau tableau dans fstab au nouveau répertoire ibay
...
1. Read the Manual
2. Read the Wiki
3. Don't ask for support on Unsupported versions of software
4. I have a job, wife, and kids and do this in my spare time. If you want something fixed, please help.

Bugs are easier than you think: http://wiki.contribs.org/Bugzilla_Help

If you love SME and don't want to lose it, join in: http://wiki.contribs.org/Koozali_Foundation

Offline Jean-Philippe Pialasse

  • *
  • 2,743
  • +11/-0
  • aka Unnilennium
    • http://smeserver.pialasse.com
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #12 on: September 26, 2017, 05:08:18 PM »

Que diriez-vous:
Installez sur 2 disques 3TB dans RAID 1 (ajoutera une partition swap)
Redémarrer
Créez RAID 1 avec 2 lecteurs de 8TB
Créer un nouvel ibay
Monter un nouveau tableau dans fstab au nouveau répertoire ibay

je pense que John voulait dire :
- RAID 1 avec 2* 3TB + 1 disque 3TB en hot swap :  y mettre le système
- RAID 1 avec 2* 8TB: y mettre les ibays via une entrée dans fstab

Je seconde aussi ce genre d'approche, les emails et les données users seront sur le 3TB, et les ibays seront sur le 8TB. On peut aussi choisir de mettre le point de montage des 8TB sur /home ou sur /home/e-smith/files pour avoir toutes les données utilisateurs. Apres cela fait de vraiment gros disques (3TB) pour juste le systeme / logs et base de données mysql ...

L'achat d'un hot spare 8TB dans l'année serait à envisager, ou planifier le remplacement avant la fin de vie utile des disque ( soit 3 ans ou 5 ans suivant la garantie du disque)...

Évidemment les backups à prévoir en conséquence!


Online ReetP

  • *
  • 3,722
  • +5/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #13 on: September 26, 2017, 05:28:29 PM »
Exactly !

In the meantime save up for several smaller disks, server, and hardware raid.

Then take the 8TB and old server and use that as a Affa backup server

We won't tell your wife ;-)


Exactement !

En attendant, enregistrez-vous pour plusieurs petits disques, serveurs et raid de matériel.

Ensuite, prenez le 8TB et l'ancien serveur et utilisez-le comme serveur de sauvegarde Affa

Nous ne dirons pas à votre femme ;-)



Désolé pour ma mauvaise traduction Google :-)
...
1. Read the Manual
2. Read the Wiki
3. Don't ask for support on Unsupported versions of software
4. I have a job, wife, and kids and do this in my spare time. If you want something fixed, please help.

Bugs are easier than you think: http://wiki.contribs.org/Bugzilla_Help

If you love SME and don't want to lose it, join in: http://wiki.contribs.org/Koozali_Foundation

Offline Jean-Philippe Pialasse

  • *
  • 2,743
  • +11/-0
  • aka Unnilennium
    • http://smeserver.pialasse.com
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #14 on: September 26, 2017, 05:45:33 PM »

Désolé pour ma mauvaise traduction Google :-)
John,
Thanks for taking time to answer and more importantly for taking care to give a French answer on the French forum.
Merci de prendre le temps de répondre et surtout de proposer une réponse en Français sur le forum Français.

Offline Arnaud

  • *
  • 143
  • +0/-0
    • GuedeL
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #15 on: September 26, 2017, 06:34:38 PM »
many thanks from me too for these indications!  :-)
Merci beaucoup pour vos indications!

PS: and welcome into the bilingual topic!

Offline gieres

  • *
  • 213
  • +0/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #16 on: September 26, 2017, 10:25:46 PM »
Quote
and welcome into the bilingual topic!

Bonsoir à tous,

C'est exactement ce que je me disais !

Ça ne peut pas continuer comme cela sur tous les forums ? !

Bonne soirée.


Offline Stefano

  • *
  • 10,836
  • +2/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #17 on: September 26, 2017, 10:51:13 PM »
Ça ne peut pas continuer comme cela sur tous les forums ? !

no, unfortunately not.. :-)

some time ago we (the board) were thinking about closing forum in other languages..

generally speaking, if you want to have the widest visibility and support, you ought write in english language forums ;-)

there are may users here that come to foreign languages too to help other guys.. google translate is a good friend ;-)

Offline STRyk

  • ****
  • 190
  • +0/-0
Re: SME 9.2 X64 avec deux grappes de RAID1 et RAID5...
« Reply #18 on: September 27, 2017, 11:52:59 AM »
Oui, merci ReetP et merci à tous pour vos contributions car sans vous nous ne feront rien.
Et merci aussi à Jean-Philippe qui est très souvent présent.
C'est génial d'avoir des personnes étrangères qui suivent le forum Français !  :shock: ;)

Il ne me reste plus qu'à faire un sujet sur la création de la seconde grappe.