Si tu comptes gérer la réplication via ZFS et n'avoir qu'un seul serveur par DC, tu pourrais utiliser une solution comme https://github.com/scality/cloudserver pour simplement exposer ton filesystem avec du S3.

Cependant si à l'avenir tu as besoin de plusieurs serveurs sur chaque site, je te conseille d'utiliser une solution comme Ceph ou MinIO pour gérer les problématiques de consistance/réplication/durabilité et se passer de ZFS.

Attention aux petits objets, on peut se retrouver dans une situation où ça demande plus d'espace que l'objet lui même.
https://docs.ceph.com/en/latest/rados/configuration/bluestore-config-ref/#minimum-allocation-size
Ici pour Ceph, mais c'est la même problématique sur les cloud publiques 
Et les performances seront probablement décevantes.

--
Étienne Menguy



Feb 21, 2024, 10:17 by david@network-studio.com:
Re-

Il y a déjà l'infra en place (serveurs dans différents DC, sous ZFS et qui font du send/receive).

L'idée est de tester S3 (vs NFS) pour des backups (de pleins de petits fichiers - des mails).

David

----- Mail original -----
De: "Etienne Menguy" <contact@etienne-menguy.fr>
À: "David Touitou" <david@network-studio.com>
Cc: "French SysAdmin Group" <frsag@frsag.org>
Envoyé: Mercredi 21 Février 2024 09:55:43
Objet: Re: [FRsAG] Serveur S3
Hello,

Tu comptes rester sur un seul serveur?
--
Étienne Menguy



Feb 21, 2024, 09:46 by david@network-studio.com:
'jour les gens.

Je voudrais faire des tests (et peut-être un peu plus) en interne de backup vers
du S3.

Le serveur qui va héberger le service existe déjà, c'est du ZFS, l'idée serait
d'avoir un dataset qui est servi en S3.
Du coup, pas besoin de distribution géographique (ou locale), pas besoin de
contrôle de parité ou EC, juste un serveur S3.

J'ai trouvé Minio et Garage (qui font aussi tout ce dont je n'ai pas besoin).

Est-ce que vous auriez d'autres outils à proposer ?

Merci,
David

_______________________________________________
Liste de diffusion du %(real_name)s
http://www.frsag.org/

_______________________________________________
Liste de diffusion du %(real_name)s
http://www.frsag.org/