nexenta n'est pas pire que tous les autres projets open source du genre, FreeNAS, OpenFiler etc... l'essentiel étant zfs avec qui on perd rarement des données, ou alors il faut vraiment le chercher...

Donc, le bon choix est une solution ou l'on est a l'aise avec l'os en dessous...

Perso zfs m'a sauvé de nombreuses fois les fesses...

Christophe BAILLON Mobile :: +336 16 400 522 Home :: http://20h.com Twitter :: http://twitter.com/ctof

----- Mail original -----

De: "Julien Escario" escario@azylog.net À: "French SysAdmin Group" frsag@frsag.org Envoyé: Dimanche 3 Février 2013 10:55:28 Objet: Re: [FRsAG] [Stockage] Soft NAS/SAN

Le 02/02/2013 11:06, Manuel OZAN a écrit :

...

Bonjour, Regarde aussi du côté de NexentaStor, gratuit également jusqu'à 18To. Basé sur ZFS comme les grands !

Pas testé personnellement mais des specs sympa...

Sur un truc gratuit avec support communautaire, je baserais mon choix essentiellement sur l'activité de ladite communauté avant de vouloir la killer-feature dont je n'ai pas vraiment besoin.

Typiquement, Nexenta, c'est super sur le papier mais en version communautaire, faut pouvoir se passer de ces données pendant 1 mois 1/2 en cas de vrai problème qu'on ne peut pas résoudre seul. Un risque à pondérer quoi.

Julien _______________________________________________ Liste de diffusion du FRsAG http://www.frsag.org/

Bonjour,

En ce qui concerne le matériel, nous regardons différentes solution (dont certain complètement packagé type gros Qnap) sinon en terme de serveur, potentiellement des SuperMicro dans la gamme SuperStockage serveur 4U avec 24 emplacement Hot Swap, 8 ports GbE ou 2 ports 10Gb, pas mal de mémoire (24 ou 32 Go).

Mais surtout il y a de forte chance que nous fessions de réplication entre 2 serveurs ce qui nous permettrais d'avoir un maximum de sécurité et potentiellement un PRA/PCA puisque nous avons du 10Gb entre 2 sites :) donc nous pourrions attacher des LUN/NFS entre les sites sans de grosse latence.

En ce qui concerne le soft de gestion, effectivement NexentaStor semble vraiment pas mal (au vue des quelque petit test que j'ai effectuer depuis une VM).

Pour ceux que cela intéresse, j'essayerais de donner les choix retenues et les perf que nous aurons.

Merci pour les Info.

Cdt.

Cyrille

Le 3 février 2013 17:40, Olivier MARECHAL omarechal@gmail.com a écrit :

Bonjour à tous,

De mon coté ce qui m'intéresserait aussi c'est de savoir quel hardware acheter pour être tranquille coté matos (éviter la panne grave du genre la MB qui crame un lundi matin à 9h).

Du coup vous vous faites comment ? Quelle marque pour quel prix et quel service en SAV ?

Olivier

Le 3 février 2013 15:54, Christophe BAILLON cb@20h.com a écrit :

nexenta n'est pas pire que tous les autres projets open source du genre,

...

FreeNAS, OpenFiler etc... l'essentiel étant zfs avec qui on perd rarement des données, ou alors il faut vraiment le chercher...

Donc, le bon choix est une solution ou l'on est a l'aise avec l'os en dessous...

Perso zfs m'a sauvé de nombreuses fois les fesses...

Christophe BAILLON Mobile :: +336 16 400 522 Home :: http://20h.com Twitter :: http://twitter.com/ctof

----- Mail original -----

...

De: "Julien Escario" escario@azylog.net À: "French SysAdmin Group" frsag@frsag.org Envoyé: Dimanche 3 Février 2013 10:55:28 Objet: Re: [FRsAG] [Stockage] Soft NAS/SAN

Le 02/02/2013 11:06, Manuel OZAN a écrit :

...

Bonjour, Regarde aussi du côté de NexentaStor, gratuit également jusqu'à 18To. Basé sur ZFS comme les grands !

Pas testé personnellement mais des specs sympa...

Sur un truc gratuit avec support communautaire, je baserais mon choix essentiellement sur l'activité de ladite communauté avant de vouloir la killer-feature dont je n'ai pas vraiment besoin.

Typiquement, Nexenta, c'est super sur le papier mais en version communautaire, faut pouvoir se passer de ces données pendant 1 mois 1/2 en cas de vrai problème qu'on ne peut pas résoudre seul. Un risque à pondérer quoi.

Julien _______________________________________________ Liste de diffusion du FRsAG http://www.frsag.org/

---

Liste de diffusion du FRsAG http://www.frsag.org/

---

Liste de diffusion du FRsAG http://www.frsag.org/

moi aussi Cyrille, ça m'intéresse tout ça !!

Le dimanche 3 février 2013 à 19:03, Olivier MARECHAL a écrit :

Bonjour Cyrille,

Moi ça m'intéresse bien de savoir ce que vous choisirez et les perfs obtenues :-)

A bientôt et bon courage pour tout cela (dans le bon sens du terme),

Olivier

Le 3 février 2013 18:24, Cyrille Verger <cverger99@gmail.com (mailto:cverger99@gmail.com)> a écrit :

...

Bonjour,

En ce qui concerne le matériel, nous regardons différentes solution (dont certain complètement packagé type gros Qnap) sinon en terme de serveur, potentiellement des SuperMicro dans la gamme SuperStockage serveur 4U avec 24 emplacement Hot Swap, 8 ports GbE ou 2 ports 10Gb, pas mal de mémoire (24 ou 32 Go).

Mais surtout il y a de forte chance que nous fessions de réplication entre 2 serveurs ce qui nous permettrais d'avoir un maximum de sécurité et potentiellement un PRA/PCA puisque nous avons du 10Gb entre 2 sites :) donc nous pourrions attacher des LUN/NFS entre les sites sans de grosse latence.

En ce qui concerne le soft de gestion, effectivement NexentaStor semble vraiment pas mal (au vue des quelque petit test que j'ai effectuer depuis une VM).

Pour ceux que cela intéresse, j'essayerais de donner les choix retenues et les perf que nous aurons.

Merci pour les Info.

Cdt.

Cyrille

Le 3 février 2013 17:40, Olivier MARECHAL <omarechal@gmail.com (mailto:omarechal@gmail.com)> a écrit :

...

Bonjour à tous,

De mon coté ce qui m'intéresserait aussi c'est de savoir quel hardware acheter pour être tranquille coté matos (éviter la panne grave du genre la MB qui crame un lundi matin à 9h).

Du coup vous vous faites comment ? Quelle marque pour quel prix et quel service en SAV ?

Olivier

Le 3 février 2013 15:54, Christophe BAILLON <cb@20h.com (mailto:cb@20h.com)> a écrit :

...

nexenta n'est pas pire que tous les autres projets open source du genre, FreeNAS, OpenFiler etc... l'essentiel étant zfs avec qui on perd rarement des données, ou alors il faut vraiment le chercher...

Donc, le bon choix est une solution ou l'on est a l'aise avec l'os en dessous...

Perso zfs m'a sauvé de nombreuses fois les fesses...

Christophe BAILLON Mobile :: +336 16 400 522 (tel:%2B336%2016%20400%20522) Home :: http://20h.com Twitter :: http://twitter.com/ctof

----- Mail original -----

...

De: "Julien Escario" <escario@azylog.net (mailto:escario@azylog.net)> À: "French SysAdmin Group" <frsag@frsag.org (mailto:frsag@frsag.org)> Envoyé: Dimanche 3 Février 2013 10:55:28 Objet: Re: [FRsAG] [Stockage] Soft NAS/SAN

Le 02/02/2013 11:06, Manuel OZAN a écrit :

...

Bonjour, Regarde aussi du côté de NexentaStor, gratuit également jusqu'à 18To. Basé sur ZFS comme les grands !

Pas testé personnellement mais des specs sympa...

Sur un truc gratuit avec support communautaire, je baserais mon choix essentiellement sur l'activité de ladite communauté avant de vouloir la killer-feature dont je n'ai pas vraiment besoin.

Typiquement, Nexenta, c'est super sur le papier mais en version communautaire, faut pouvoir se passer de ces données pendant 1 mois 1/2 en cas de vrai problème qu'on ne peut pas résoudre seul. Un risque à pondérer quoi.

Julien _______________________________________________ Liste de diffusion du FRsAG http://www.frsag.org/

---

Liste de diffusion du FRsAG http://www.frsag.org/

---

Liste de diffusion du FRsAG http://www.frsag.org/

---

Liste de diffusion du FRsAG http://www.frsag.org/

---

Liste de diffusion du FRsAG http://www.frsag.org/

En effet, ZFS et des solutions particulières sur des OS "exotiques" qui ne sont pas forcément totalement testés voire même incompatibles avec certains matériels ou setups particuliers ou non maitrisées par la/les personne(s) en charge de l'admin sont à éviter (sauf si l'on à du temps et des ressources pour tester/vérifier la solution, se former puis documenter) et de plus pas forcément plus performantes que les "standards" (ex: l'EXT4 qui est dans quasi tous les cas de figure plus performant que du XFS ou BTRFS et même du ZFS (dans son implémentation Linux en tout cas).

La solution "classiques" serait un bon vieux filer Supermicro 24+2 disques dans lequel on mets 2 disques en RAID1 soft dans les emplacements non hot-swap, directement branchés sur la CM pour pouvoir toujours booter/être en mode dégradé si l'on rencontre des problèmes dus à des cartes RAID, au backplane et/ou au filesystem. J'ai d'ailleurs déjà rencontré ce type de problème : des cartes RAID Areca ne voyant d'un coup plus le backplane (à ce propos, bien prendre les cartes RAID "certifiées" comme pouvant fonctionner avec les backplanes pour éviter des mauvaises surprises un fois en prod) en cas de très forte charge (suppression de répertoires contenant des 10aines de millions de fichiers/sous répertoires en plus de l'activité habituelle) et le XFS derrière qui se retrouvais parfois crashé avec une bonne partie des données irrécupérables... la même chose se passant sur plusieurs machines ayant la même config ; on avait tout essayé : changement de CM/CPU/RAM, de backplane, de carte RAID (pour une autre Areca), de bios, de firmware de carte RAID et backplane... au final tout à fonctionné correctement une fois passé sur une carte LSI (listée comme compatible par Supermicro).

Sinon, une solution avec peu de disques à grande capacité en 7200trs/min et un/des SSD en cache permet d'avoir de très bonnes perf et une capacité importante sans avoir besoins d'une machine trop grosse ni trop consommatrice électriquement mais il y à toujours le risque d'utiliser des technologies encore jeunes (soit hard intégrées aux cartes RAID comme Cachecade, soit soft comme Bcache ou EnhanceIO). Il y à aussi la possibilité de faire un RAID "classique" de disques hybrides, à voire comment le cache agit/réagit en fonction du type de RAID mis en place et la fiabilité de ces disques au long terme.

Pour ce qui est de la maintenance, une idée est de prendre un serveur de backup identique (ou au moins assez bien équipé) et de pouvoir basculer de l'un à l'autre assez facilement, ce qui permet de prendre le temps d'intervenir sur la machine. Un avantage d'une solution de type Supermicro c'est qu'on peux facilement acheter des pièces en spare, notamment pour ce qui est des CM, backplanes et carte RAID qui ne sont pas forcément disponibles à l'achat chez certains ou à des prix pas très concurrentiels ; ça coutera moins cher que de payer des forfaits de maintenance sur du long terme qui ne sont pas toujours très efficaces ; il faut par contre dans ce cas avoir la possibilité d'intervenir physiquement sur le serveur.

Le 03/02/2013 21:21, Yacine Kheddache a écrit :

Bonjour,

Si je peux me permettre quelques commentaires en vracs sur ce thread... Oui ZFS c'est super mais faut connaitre comme disent les savoyards en parlant de leurs montagnes :-)

En bref la HCL hardware pour une base Nexenta/Illumos/... est un point *_critique_* pour la stabilité et la fiabilité de votre plateforme de stockage (plus facile coté hardware sur une base FreeBSD et dans ce cas voir FreeNAS).

Pour résumer et ceci n'engage que moi... Mais soit vous avez un bon background sur le sujet (zfs, *solaris, nexenta, illumos...) et vous avez du temps, alors oui vous pouvez envisager en connaissance de cause de faire du ZFS et votre propre appliance (base supermicro ou dell) home made.

Si vous avez pas le temps de "jouer", alors il me semble plus judicieux de payer pour une licence NexentaStor ou Coraid ZX series avec hardware (appliances certifiés sur base hardware supermicro, dell, sgi).

Ou alors resté sur un OS que vous maitrisez : Linux et appliquer le KISS principle(*) ;-)

(*) : http://en.wikipedia.org/wiki/KISS_principle

Cordialement, Yacine

Bonjour,

Le 03/02/2013 15:54, Christophe BAILLON a écrit :

nexenta n'est pas pire que tous les autres projets open source du genre, FreeNAS, OpenFiler etc... l'essentiel étant zfs avec qui on perd rarement des données, ou alors il faut vraiment le chercher...

Donc, le bon choix est une solution ou l'on est a l'aise avec l'os en dessous...

Perso zfs m'a sauvé de nombreuses fois les fesses...

+1 a condition de ne PAS utiliser toutes les features de ZFS.

(...)

...

Le 02/02/2013 11:06, Manuel OZAN a écrit :

(...)

...

Typiquement, Nexenta, c'est super sur le papier mais en version communautaire, faut pouvoir se passer de ces données pendant 1 mois 1/2 en cas de vrai problème qu'on ne peut pas résoudre seul. Un risque à pondérer quoi.

Si tes données ne peuvent supporter d'être indispos plusieurs semaines, je te conseille de réfléchir a 2 fois avant même de prendre "un truc gratuits".

Si les données ont une valeur forte pour ou ta boite, dans ce cas, le support est obligatoire (quelque soit le hardware : netapp / isilon / emc / ...).

Après prendre un machin gratis et ne pas sauver les données c'est aller dans le mur...

/Xavier

Le 04/02/2013 12:22, David Touitou a écrit :

'jour

...

Après prendre un machin gratis et ne pas sauver les données c'est aller dans le mur...

Avec un truc payant aussi, hein.

Oui mais avec un truc payant tu peux gueuler et de te faire réparer le machin quand il est en vrac (arrivé pour de vrai avec un cluster de netapp en 2000 qui avais fait *boom* et qu'on ne pouvais sauvarder à l'époque : 2To sur CD de 650 avec des choses qui bougent tout le temps = mort).

Mais dans ce cas on a pas perdu une data... juste 4h d'indispo... (et une grosse frayeur).

Apres un nearstore a été acheté... mais n'as jamais été utilise car jamais de perte de donnée ni fracassage du système.

Donc le support payant ça sauve la vie... Si c'était un netapp "ebayé" là on serait mort(tm)(c).

Xavier

Le 04/02/2013 13:00, Pierre `Sn4kY` DOLIDON a écrit :

Le 04/02/2013 12:19, Xavier Beaudouin a écrit :

...

Bonjour,

Bonjour

...

Après prendre un machin gratis et ne pas sauver les données c'est aller dans le mur...

J'ai déjà été contraint à faire comme ça... manque de budget et volumes faramineux de stockage (stockage de vidéo non compressées). Par chance, on a jamais rien perdu. on c'est déjà fait des belles frayeurs par contre

C'est juste super méga risqué, le fait de dédupliqué un espace de stockage n'est pas une option dans un projet quel qu'il soit. Une baie de stockage NAS/SAN est un gros spof, les entreprises les redondent mais cela reste encore trop sensible pour les données, une mauvaise manip, un bug et plus rien. Il faut donc au moins une copie incrémentale sur un autre système. Quand je vois certaines entreprise qui mettent 2 san en réplication et qui mettent dessus toutes les données de la boite (machines virtuelles, données, sauvegarde vmware), le jour où ça pète ils peuvent mettre la clef sous la porte. Toutes les coui..es de l'entreprise dans 2 éléments faut être irresponsable pour accepter cela.

C'est vraiment jouer avec le feu volontairement, les CTO, responsables divers qui acceptent cela sont justes incompétents, c'est leur rôle de bloquer ces projets auprès de la direction si le budget n'est pas en adéquation. Quitte à accepter de perdre des données autant éparpiller le risque sur pleins de serveurs physiques comme avant la virtualisation.

Petite anecdote au passage, dans une vie antérieure, j'ai organisé un déménagement à l'arrache de 5 baies d'un grand compte que je qualifierais de vital pour la société dans le sens où si la boite disparaît du jour au lendemain, cela a un impact très fort sur la population au niveau nourriture. (je reste vague volontairement).

Le client est informé par son datacenter que ce dernier ne renouvelle pas le contrat 6 mois à l'avance, le client ne fait rien et négocié 6 mois de plus et ne refait rien non plus et regagne 6 mois, soit 1 ans de délai supplémentaire pour migrer après le contrat. A une semaine de la fin du dernier délai, le DC informe que l'espace est loué et que dimanche soir minuit les baies seront mis à la benne (plus une menace qu'une chose réalisable à mon avis mais cela a marché).

Je vous passe les détails d'organisation à l'arrache, je suis chargé du projet le jeudi midi et tout doit être fini pour dimanche soir. Il faut gérer la manutention, la réintégration dans la sphère du client (firewall, vlan, adressage, ...) et bien sur tout doit marche le lundi et on nous demande même à ce que les tâches cron continuent de fonctionner sans coupure...

Le client devait gérer une seule chose, s'assurer que son cluster Oracle ait un backup correct avant d'embarquer les serveurs. Pour info un seul backup par semaine pour ces bases qui gèrent l'ensemble de l'activité de l'entreprise et notamment son inventaire temps réel permettant à des trans-palettes robotisés d'aller chercher la marchandise et la mettre sur les quais de chargement. Autant dire que ces deux pauvres petits serveurs étaient vitaux.

Le client n'arrive pas à faire ses sauvegardes (sa précédente remonte donc à une semaine), j'avais prévu de transporter les deux serveurs dans deux convois différents, après tout on était samedi soir 22H et il fallait prendre le périph avec tous les fous que l'on peut y croiser, le tout sans aucune assurance spécifique pour le déménagement et aucun matériel de spare. Le client exige que les deux serveurs partent ensemble. Ce soir là si la camionnette n'était pas arrivé à bon port ou si un choque avait rendu les disques inopérants, la boite mettait la clef sous la porte le lundi matin et vous n'auriez rien eu à manger quelques jours après...

Le pire dans l'histoire c'est que le client nous a traité de parano, qu'au final ça s'est bien passé mais il n'a pas dit merci pour cette action urgente qui a mobilisé une vingtaine de personnes quasi h24 pendant 4 jours (non payées) et à trouvé le moyen de négocier un rabais au motif que nous n'avions pas câblé correctement ses serveurs (câblage temporaire vu l'urgence et le fait que des erreurs de branchement pouvaient être possibles).

Donc malheureusement beaucoup de gens jouent encore au feu avec les données, dans la plupart des cas ça passe même si c'est irresponsable et dans d'autres ça finit mal. C'est comme ceux qui croient que le raid est une sécurité ...

Bonjour,

Le 05/02/2013 10:19, Wallace a écrit :

Petite anecdote au passage, dans une vie antérieure, j'ai organisé un déménagement à l'arrache de 5 baies d'un grand compte que je qualifierais de vital pour la société

Dans le genre j'ai aussi reçu un questionnaire d'audit de sécurité pour un grand compte tout aussi vital, reçu le vendredi soir, à rendre pour lundi matin 9h ah ah ah !

Christophe

Le 05/02/2013 10:59, Denis F. a écrit :

Là, ça vaudrait le coup d'avoir le nom pour un "public-shame" :)

il n'y a que 2 possibilités, c'est l'un ou l'autre ! Mon petit doigt me dit que ... :-)