Labo ID
English

Contact Home Systèmes de fichiers distribués Rapport d'activités aIOLi NFSp MPI-MPI I/O Parallel I/O Encore plus...



Composition de service de données et de méta-données
dans un système de fichiers distribué


   Lors de mon DEA, j'ai eu le plaisir d'intégrer l'équipe NFSP (Pierre, Yves, Christian, Olivier, Rafael et l'ensemble du labo ID). Le travail réalise est présenté au sein de cette page. Aujourd'hui, l'équipe continue à ce concentrer sur les apsects I/O au sein des architectures parallèles. Pour ma part, je me préoccupe depuis avril 2003, des aspects performances aux niveaux des interfaces clients. Un aperçu de mon travail est accèssible ici.

Télécharger le rapport de DEA au format ps ou pdf.
Télécharger les transparents de l'exposé au format OpenOffice.
Une version format pdf sera rapidement disponible, en attendant vous pouvez accèder à la version HTML ici.

Résumé

   La gestion des fichiers est, depuis fort longtemps, une composante clé au sein d'un système informatique. Dépendantes de l'architecture sous-jacente, les contraintes imposées aux différents modèles de gestion de fichiers n'ont cessé d'évoluer (méthodes d'accès local, partage de ressources dans un LAN, au sein d'un cluster ou encore échange d'informations sur le web). Les systèmes de fichiers doivent s'adapter afin de proposer des solutions permettant d'exploiter au maximun les capacités proposées par les plate-formes actuelles (ressources importantes de stockage, agrégation des débits, puissance d'analyse) et ceci en tenant compte des diverses contraintes (passage à l'échelle, hétérogénéité, tolérance aux fautes ...).

   Par ailleurs, l'extension des grappes aux grilles (interconnection de plusieurs architectures de calculs par un réseau dédié, comme RENATER ou VTHD) a fait surgir de nouveaux paramètres tels que la sécurité et la disparité des différentes <<ossatures>>. En effet, une application distribuée sur une grille doit accéder conjointement à plusieurs intranets en tenant compte des multiples propriétés des réseaux, des configurations ainsi que des principales fonctionnalités de chaque sous système. De plus, le fait que certaines structures ne soient accesibles qu'à des périodes spécifiques (utilisation de réseau d'entreprise la nuit ou pendant les congés) entraîne là aussi, d'importantes complications (découverte dynamique de ressources, résilience ...) en plus d'un nouveau changement d'échelle en terme de nombre d'ordinateurs.

   Plusieurs solutions tentent de répondre à certains des problèmes énumérés ci-dessus (xFS [1], GFS [2] ...). Ces diverses techniques, souvent complexes à mettre en oeuvre, sont construites sur des architectures matérielles dédiées. Une solution plus conviviale et applicable à un très grand nombre de structures ( NFSp [3]), est développée depuis un peu plus d'un an au sein du laboratoire ID-IMAG. Nous nous sommes appuyés sur ce modèle, dans le cadre du DEA, afin d'étudier les limites et les performances de la distribution et de la duplication des serveurs au sein des grappes.


Références :

1 Serveless Network File Systems
Thomas E. Anderson, Michael D. Dhalin, Jeanna M. Neefe, David A. Patterson, Drew S. Roselli et Randolph Y. Wang
Computer Science Division - Université de Californie à Berkeley
2 Implementing Journaling in a Linux Shared Disk File System
Kenneth W. Preslan, Andrew Barry, Jonathan Brassow, Russel Cattelan, Adam Manthei, Erling Nygaard, Seth Van Oort, David Teigland, Mike Tilstar et Matthew O'Keefe
Proceddings of the eighth NASA Goddard Conference on Mass Storage Systems and Technologies in cooperation with the seventeenth IEEE Symposium on Mass Storage Systems
3 Serveur NFS distirbué pour les grappes de PCs
Pierre Lombard et Yves Denneulin
RENPAR'14/ASF/SYMPA - avril 2002
logo ID
loupeChercher logo_info.gif Pratique enveloppe Ecrire à l´administrateur

date mise à jour: 2 février 2004