Bonjour à tous,
Je cherche une solution de stockage objet compatible S3 qui pourrait être répliquée de façon asynchrone et incrémentale dans un second DC.
Le lien entre les deux sites n'étant pas performant (stabilité et vitesse), il faut quelque chose de robuste pour la réplication. Dans l'idée, ce serait un stockage compatible S3 associé avec rdiffbackup.
J'ai testé Swift et LeoFS mais sans être convaincu par la partie réplication.
Est-ce que quelque chose comme ça existe ?
Merci, Denis
Ceph
J'ignore s'il est résilient à un lien pourri entre DC, cependant
On 25/05/2015 10:36, Denis Fondras wrote:
Bonjour à tous,
Je cherche une solution de stockage objet compatible S3 qui pourrait être répliquée de façon asynchrone et incrémentale dans un second DC.
Le lien entre les deux sites n'étant pas performant (stabilité et vitesse), il faut quelque chose de robuste pour la réplication. Dans l'idée, ce serait un stockage compatible S3 associé avec rdiffbackup.
J'ai testé Swift et LeoFS mais sans être convaincu par la partie réplication.
Est-ce que quelque chose comme ça existe ?
Merci, Denis _______________________________________________ Liste de diffusion du FRsAG http://www.frsag.org/
Merci pour les réponses.
En fait je n'ai pas besoin de la disponibilité qu'apporte Ceph (et la complexité qui va avec :p). J'ai mon stockage objet avec lequel je bosse le jour et une copie des fichiers sur un site distant se fait la nuit.
J'ai peut-être trouvé mon bonheur avec S3Proxy sur un stockage local et rdiffbackup qui passe derrière. A voir à l'usage sur la durée :)
Denis
J'ai peut-être trouvé mon bonheur avec S3Proxy sur un stockage local et rdiffbackup qui passe derrière. A voir à l'usage sur la durée :)
Bon en fait, c'est pas super sec :/ Je lui balance plusieurs dizaines de milliers de fichiers dans les dents et le truc part en vrille.
ben les bases NOSQL orientées document ça fait exactement ça, non ?
http://basho.com/riak/, l'une des meilleures. API très proche de S3.
Cordialement, Stéphane
Denis Fondras a écrit :
Bonjour à tous,
Je cherche une solution de stockage objet compatible S3 qui pourrait être répliquée de façon asynchrone et incrémentale dans un second DC.
Le lien entre les deux sites n'étant pas performant (stabilité et vitesse), il faut quelque chose de robuste pour la réplication. Dans l'idée, ce serait un stockage compatible S3 associé avec rdiffbackup.
J'ai testé Swift et LeoFS mais sans être convaincu par la partie réplication.
Est-ce que quelque chose comme ça existe ?
Merci, Denis _______________________________________________ Liste de diffusion du FRsAG http://www.frsag.org/
On 25/05/2015 22:14, Stephane Martin wrote:
ben les bases NOSQL orientées document ça fait exactement ça, non ?
http://basho.com/riak/, l'une des meilleures. API très proche de S3.
Le message original parle de plusieurs DC, Riak ne sait pas le faire (ou alors dans la version entreprise d'après la doc).
Je n'ai pas testé LeoFS mais je préfére encore RiakCS à Swift :)
Excerpts from Denis Fondras's message of 2015-05-25 10:36:11 +0200:
Bonjour à tous,
Je cherche une solution de stockage objet compatible S3 qui pourrait être répliquée de façon asynchrone et incrémentale dans un second DC.
Peut-être https://github.com/exoscale/pithos ?
C'est basé sur cassandra, qui est notoirement résilient à la disparition d'un datacenter complet (pour ceux qui maîtrisent la bête, en tout cas): http://techblog.netflix.com/2012/07/lessons-netflix-learned-from-aws-storm.h...
Mes 2¢...
Marc
-
Arnaud -
Denis Fondras -
frsag＠jack.fr.eu.org -
Marc Fournier -
Stephane Martin