Par Benoît Marchal, le Mardi 22 Juillet 2008, 19:02
Dans La photo

Sauvegarde distribuée des photos

Sauvegarde distribuée des photos

Les deux épisodes courts consacrés à la conservation des images et des fichiers ont provoqué, en commentaire, une discussion fort intéressante sur la préservation de nos photos. On sent bien qu'il y a en fait plusieurs problèmes : le format des fichiers et la préservation des supports physiques.

En parcourant cette discussion je me demande s'il n'y a pas là un nouveau service à inventer, sur base d'un réseau peer-to-peer ? Je pense à une sauvegarde distribuée auprès des amateurs photos du monde entier. Un peu à la manière dont un réseau comme BitTorrent fonctionne mais dont le but ne serait plus le partage mais au contraire la préservation des images.

J'imagine un dispositif connecté au réseau, à la manière d'un NAS mais dont une partie de la capacité seulement (disons 30%) serait consacrée au propriétaire. Le reste serait partagé entre tous les utilisateurs du réseau peer-to-peer.

Avantage : on assure automatiquement une bonne redondance de l'information, sur un support distribué et pour un surcoût somme toute minimum (un disque dur ne coûte plus très cher). Ainsi si mon matériel de stockage est perdu (incident technique, foudre, vol), j'ai la certitude de pouvoir récupérer une copie de mes données via le réseau : toutes les machines ne seront pas frappées par la foudre au même moment !

De même, l'obsolescence sera elle aussi résolue de manière distribuée. Au lieu de devoir activement copier depuis les anciens supports sur les nouveaux, je mettrais à jour mon matériel à intervalle régulier (comme je le ferais de toute façon) mais de façon totalement transparente : inutile de perdre du temps à effectuer des copies, il suffit de brancher la nouvelle machine pour qu'elle récupère une copie de mes photos depuis le réseau.

Seule limitation : il est toujours impossible de laisser une collection numérique à l'abandon pendant quelques dizaines d'années et puis de la re-découvrir... mais on peut certainement améliorer le concept. Qu'en pensez-vous ?

Photo : LaCie Ethernet Disk

P.S. : Pour suivre les coulisses de Déclencheur au quotidien, abonnez-vous à Déclencheur Carnet, par RSS ou par email, à l'aide des liens dans la colonne de gauche. C'est gratuit !

 
 
*
*

Par Joseph , le Mardi 22 Juillet 2008, 22:22

C'est vrai que l'idée est intéressante; j'avais vu quelqu'un qui faisait ca sur le Billaut Show, pour partager les photos avec ses amis et sa famille en peer 2 peer, peut être que c'etait Zoomorama ou un autre. Wua.la aussi fait du stockage en p2p, il y doit y en avoir pas mal sur le créneau, mais cela doit etre dur d'atteindre le point critique d'utilisateurs.
*

Par titib (Bruxelles), le Mercredi 23 Juillet 2008, 00:06

Le problème est le suivant. Sauf erreur, un système "à la bittorent" n'arrive à obtenir des débits correcte qu'en cas où le nombre de personne mettant à dispotion les informations est important.
Que se passe-t-il si une partie des usager "disparait", ne risque-t-on pas une perte partielle des données?
Et quid du problème de la sécurité?
Et je ne parle pas du problème de la bande passante. C'est encore aujourd'hui la limite des systèmes de sauvegarde en ligne. Le problème est à priori le même.

Cependant l'idée est sur le principe fort séduisante. J'aurai tendance à penser qu'un système similaire automatisé à petite échelle (cad réalisable entre amis) serait très interessant. Il évacue le problème sécuritaire (ou le diminue tout du moins) et facilite la récupération des données, celles-ci pouvant se faire physiquement.
*

Par Joseph , le Mercredi 23 Juillet 2008, 08:52

en effet cela pose plusieurs types de pb Carl de KoffeePhoto expliquait pourquoi leur logiciel est passé d'un système de p2p à un système de sauvegarde distribuée:

http://www.virusphoto.com/14278-la-solution-de-stockage-et-de-partage-dimages-koffeephoto-en-version-2-5-a.html

Mais lorsque tout le monde aura de la fibre optique chez soi on y reviendra peut être?
*

Par Ludovic (Saint Lo), le Mercredi 23 Juillet 2008, 08:54

Je pense comme titib qu'il est déjà possible de mettre en place un tel système entre famille et/ou amis.
De plus, sa famille/amis habitent rarement a proximité de soi, et dans mon cas, ma famille est par exemple à plus de 60km de chez moi, ce qui réduit les risques liés aux intempéries...

Reste à savoir quel logiciel se prete le plus à ce système, et à convaincre ses proches de bien vouloir mettre à disposition par exemple, 1/3 de la capacité nécessaire à ses photos :
Il y 5 participants à ma sauvegarde redondante, et j'ai 20Go de photos à stocker.
Si chacun met à dispo 6Go, avec mes 5 participants, je dois avoir une redondance suffisante pour assurer la pérénité de mon stockage (comme en RAID) ?
*

Par Joseph , le Mercredi 23 Juillet 2008, 08:56

la video de Carl Conrad:
http://billaut.typepad.com/jm/2007/10/connaissez-vo-9.html
*

Par Emmanuel (Tours), le Jeudi 24 Juillet 2008, 13:04

Je pense que l'idée est bonne, mais elle se heurte principalement à un problème de sécurité d'accès.
- Les problèmes de bande passante seront résolus (ou le sont deja d'ailleurs), car nous disposerons de canaux de plus en plus importants.

- Les aspects de conservation peuvent être résolus logiciellement. En prenant la notion de P2P comme base, et ajoutant des règles simples, comme "il faut au moins une copie de chaque photo", ou "avertir l'utilisateur lorsque la copie disparait" ...
A ma connaissance, ce type de logiciel n'existe pas encore, mais rien n'empêche techniquement sa réalisation.

- Par contre la gestion des accès au contenu est difficile à résoudre. Je ne vois globalement que le cryptage, mais c'est une technique lourde, et qui peut agraver les pertes d'infos en cas d'incident.

Je crois plutot a des solutions de sauvegarde en ligne. Ces solutions existent deja, mais elles manquent de serieux: pas de garantie de confidentialite, de securite, ...
Les entreprises aujourd'hui font heberger leurs applications par d'autres societes (plutot que d'utiliser leurs propres serveurs), nous pouvons imaginer une extension de ces services au stockage, avec un paiement au Giga par exemple.
*

Par Patrick (Bruxelles), le Mardi 29 Juillet 2008, 10:14

Bonjour à tous!
Je viens de lire ce post qui me semble très intéressant. Mais même si l'idée semble judicieuse, elle est difficilement réalisable par tous. En tant que photographe pro je voulais pour faire part de la solution que j'ai mis en place pour mes archives. Il faut savoir que lorsque je fait une commande pour un client corporate, je me retrouve en fin de reportage avec en générale entre 20 et 40gb d'images. Attention: je boss en raw+jpg et contractuellement je suis obligé de garder l'intégralité de mes images. Sur une année de boulot j'ai en moyenne 1To voir 1,5To de données.. hum... mais seulement 400 gb d'images sélectionnées ( livrable client: A4 ou A3 - 300 dpi )

La nécessite pour moi de sécuriser au maximum les choses est donc plus que vital!!

Donc.. j'ai à mon domicile un RAID LACIE de 4To ( attention capacité divisée par 2 et un Raid par année ) donc 2to utilisables. Mes dossiers Brut ainsi que les images sélectionnés se trouvent donc sur le Raid. Une copie des images sélectionnées est gravée sur un DVD-DL et placé dans une armoire à l'abri de la lumière et avec une variation de T° limité.

Avec un ami programmeur nous avons réalisé un programme de Digital Asset Management placé sur un serveur et qui me permet de distribuer mes images à mes clients et ou amis, famille etc..

Le programme est accessible via le web et protégé par mots de passe. Je peux réaliser une multitude de stocks ( exemple: stock famille ) et attribuer à ce stock une multitude de login et mots de passe. Ainsi une personne peut avoir acces à son stock et télécharger l' image qu il souhaite en basse/moyenne/haute def... Je peux aussi attribuer à une personne plusieurs stocks.. Il peut sélectionner 5 images et les mettre dans une sorte de liasse ou de dossier.. y revenir plus tard pour le compléter et télécharge la totalité du dossier en une seule fois.

Je ne dépose sur ce système que les images sélectionnées et corrigées.. de plus il intègre la recherche sur IPTC. Donc, dans un stock famille je peux faire une recherche sur papa et il ira me chercher toutes les images dont l IPTC comprend "papa".. Cette solution me sers d'une part à diffuser mes images mais du coup également comme backup.. Évidement cela présente un certain coût ( achat serveur + 4To d espace + hébergement du serveur / bande passante etc.. )

Vu le nombre de collègues qui me demandent de pouvoir " squater " le système, je suis entrain d' améliorer le système afin qu il soit commercialisable et avec un coût raisonnable..

Si jamais vous êtes intéressé par le système n' hésitez pas à me contacter.. une fois que j'aurai une démo grand publique je pourrai ainsi vous recontacter.. J'espère que ma contribution aidera votre réflexion grin

patrick ( pm@patrickmascart.be)
*

Par Daniel Halber , le Jeudi 07 Août 2008, 17:35

Salut Patrick,
C'est sympa la description de ton système, c'est vraiment intéressant.
Toutefois, si je ne me trompe pas, le sujet de discussion n'est pas la diffusion du contenu, mais sa sauvegarde et en particulier sa sauvegarde distribuée.
Si j'ai bien compris ce que tu écris, ton système de sauvegarde est le DVD-DL. Dont on ne sait pas trop bien comment il vieillit et qui reste à ton domicile, au même endroit que ton disque de travaille courant de 4GB.
Si c'est bien cela, ta "nécessite de sécuriser au maximum les choses" est loin d'être atteint non?
Merci pour ta contribution.
*
*