Le 18/07/2010 14:40, Steven Le Roux a écrit :
Tu stockes quel genre de données ? taille ?

Car en fonction de ça, tu pourrais trouver ton bonheur là : http://hadoop.apache.org/

Pour les logs tu as Hive, pour du FS simple tu as HDFS, et pour designer des appli au dessus de tout ça, MapReduce te permet de sortir de bonnes perfs parmis des millions d'entrées clé/valeur.

Testé et éprouvé.

Le seul truc, c'est que ça jacte pas mal donc les switch en oversubscription tu peux les oublier. 

Et même guiguiabloc en parle ;) http://blog.guiguiabloc.fr/index.php/2009/11/12/hadoop-doop-doop-doop/

Si tes données sont très légères, tu peux même les stocker dans zookeeper ;)



Ta réponse me fait rebondir sur un autre sujet : je vais peut-etre avoir besoin de stocker quelques milliards d'objets de petite taille (~1ko), soit plusieurs tera octets de données. Memcached est très bien mais ça me couterait cher en RAM, il faut donc un système sur disque, et distribué toujours pour les mêmes problèmes de haute-dispo.
Quels systèmes vous viennent à l'esprit ?
-- 
Greg