Si tu comptes gérer la réplication via ZFS et n'avoir qu'un seul serveur par DC, tu pourrais utiliser une solution comme https://github.com/scality/cloudserver%C2%A0pour simplement exposer ton filesystem avec du S3.
Cependant si à l'avenir tu as besoin de plusieurs serveurs sur chaque site, je te conseille d'utiliser une solution comme Ceph ou MinIO pour gérer les problématiques de consistance/réplication/durabilité et se passer de ZFS.
Attention aux petits objets, on peut se retrouver dans une situation où ça demande plus d'espace que l'objet lui même. https://docs.ceph.com/en/latest/rados/configuration/bluestore-config-ref/#mi... pour Ceph, mais c'est la même problématique sur les cloud publiques Et les performances seront probablement décevantes. -- Étienne Menguy
Feb 21, 2024, 10:17 by david@network-studio.com:
Re-
Il y a déjà l'infra en place (serveurs dans différents DC, sous ZFS et qui font du send/receive).
L'idée est de tester S3 (vs NFS) pour des backups (de pleins de petits fichiers - des mails).
David
----- Mail original -----
De: "Etienne Menguy" contact@etienne-menguy.fr À: "David Touitou" david@network-studio.com Cc: "French SysAdmin Group" frsag@frsag.org Envoyé: Mercredi 21 Février 2024 09:55:43 Objet: Re: [FRsAG] Serveur S3
Hello,
Tu comptes rester sur un seul serveur?
Étienne Menguy
Feb 21, 2024, 09:46 by david@network-studio.com:
'jour les gens.
Je voudrais faire des tests (et peut-être un peu plus) en interne de backup vers du S3.
Le serveur qui va héberger le service existe déjà, c'est du ZFS, l'idée serait d'avoir un dataset qui est servi en S3. Du coup, pas besoin de distribution géographique (ou locale), pas besoin de contrôle de parité ou EC, juste un serveur S3.
J'ai trouvé Minio et Garage (qui font aussi tout ce dont je n'ai pas besoin).
Est-ce que vous auriez d'autres outils à proposer ?
Merci, David
Liste de diffusion du %(real_name)s http://www.frsag.org/
Liste de diffusion du %(real_name)s http://www.frsag.org/
-
Etienne Menguy