# ZFS in prod
Je suis actuellement en train de monter un système en ZFS pour du cold-storage de backup via NFS.
Hardware: Dell Server, deux alim, deux cartes SAS, 2 port 10GB, 2 port 1G, LACP, VLAN, OS : FreeNas Array Dell PowerVault ME4 Series Storage JBOD, double carte SAS 84 disks slots
Actuellement un tank de 2 VDEV de 12 disk en raidz2, la contrainte d’augmentation est que cela seras par VDEV de 12 disk de capacité équivalente pour augmenter l’espace globale du tank.
J’ai aussi eu du stockage de VM sur un freenas (Proxmox) avec un dataset/zvol par VM qui as bien fait le boulot en remplacement d’un pool CEPH qui as crash (qui étais à l’époque sur les même noeuds que les proxmox).
C’est possible, mais comme tout SAN, cela demande de la planification et une étude sérieuse.
Bonne journée,
Olivier
December 4, 2019 11:09 PM, "Olivier Duquesne aka DaffyDuke" daffyduke@lautre.net wrote:
Hello,
Alors, vu que ça parle ZFS, je ne peux que confirmer que sur NAS perso ça tient très bien (j'ai un freenas depuis 7 ans bientôt sans perte de données). Je n'ai pas testé de réplication vers un autre freenas (fonction incluse) mais il ne me semble pas qu'il y ait quoique ce soit pour gérer la haute dispo nativement. Faut ptêt mettre un keepalived ou autre truc moche en front. Ce qui est cool, c'est que point de vue accès, tu as du iscsi, du nfs, du cifs pour les mêmes volumes là ou Netapp se targuait d'être le seul à pouvoir faire ça il y a quelques années.
Pour en revenir à l'aspect scalable / HA, j'ai l'impression que les copains d'OpenIO peuvent répondre. Mais c'est de l'objet. Dépend du besoin du coup .... https://www.youtube.com/watch?v=M-A7jHuDnV0 1.3 Tbps sur 350 serveurs, ça va non ? :-)
Bye,
Le mercredi 04 décembre 2019 à 13:00 +0100, Jean-Christophe Janczak via FRsAG a écrit :
Hello Mes 2 cents au passage ... pour le côté open source et au risque de déterrer un troll ;-)
Pour le côté scalable « sur place » tu as ZFS qui est ton ami. ;-) Il suffit de remplacer par des disques plus gros pour étendre le stockage de tes grappes Raid-Zx :-)
Le hic c’est que ZFS c’est pas Cluster ready de base en full open source .....
- Mais bon c’est proddé depuis 2005 au moins sur Solaris, Illumos
puis plus tard Freebsd etc ....
- c’est relativement robuste pour les crash test que j’ai pu faire en
home lab.
- tu peux faire du ZFS send et receive
Si tu veux du cluster
- c’est TrueNas (payant)
- nexenta.com
- https://napp-it.org avec du support récemment ; j’avais découvert
en 2008/2009 mais l’interface freenas était plus sympa à gérer. ; j’ai découvert une proc pdf il y a qq temps pour faire du clustering assez poussé (pas testé)
- aussi FreeBSD avec la fonction HAST (ha storage)
- et enfin Nas4Free renommé XigmaNas avec du clustering HAST intègré
mais pas assez documenté ni retours d’expérience. J’ai vu passer des mots clef comme clustering split brain (pas assez creusé, pas testé mais pas rassurant ! Qqn a des retours sur le sujet sur la liste ? )
Côté Ceph je ne sais pas si on peux faire un équivalent de ZFS send | receive (?)
Voilà. Tu seras peut être un peu plus avancé .... ou pas ;-)
Bonne journée.
Merci aux bonnes âmes qui voudraient rebondir sur le sujet et communiquer des vrais REX sur ZFS en prod de leur côté :-)
Message envoyé depuis un terminal embarqué / Message sent from an embedded terminal.
Le 3 déc. 2019 à 17:41, Guillaume via FRsAG frsag@frsag.org a écrit :
Bien le bonsoir,
Etant nouveau sur la ML, j’espère m’y prendre correctement.
Pour faire très simple, je suis à la recherche d’une solution de stockage scalable, HA, ne nécéssitant pas une infrastucture démesurée. L’idéal étant de pouvoir faire de la réplication Multi Datacenter ( 4ms environs ) et de commencer petit. J’entends par là entre 5To et 10To, à terme environ 100To.
Avez-vous des solutions intéréssantes, des retours d’expériences qui pourraient m’aider dans ma recherche ?
J’ai déjà testé Ceph, j’avais été relativement déçu des performances. DrBD fait le taff mais niveau scalabilité, on repassera plus tard, et en cas de coupure d’electricité, très compliqué d’avoir quelque chose de correct. Je me pense sur une solution OpenSource/Maison car vu le tarif des baies de stockage….
Merci par avance.
Bien cordialement
Guillaume P.
Liste de diffusion du FRsAG http://www.frsag.org
Liste de diffusion du FRsAG http://www.frsag.org
-- Olivier Duquesne aka DaffyDuke Mail : daffyduke@lautre.net WWW : http://www.coincoin.fr.eu.org IM : daffy@mailfr.com µblog : https://mamot.fr/users/daffyduke GPG Key : 63F60C2C Club LinuX Nord-Pas de Calais, Le Grand Mix, L'Autre Net, PoleNord
It's time to kick ass and chew bubble gum, and I'm all outta gum! -+=Duke nukem.=+-
Liste de diffusion du FRsAG http://www.frsag.org