Système de fichiers
Cet article ne cite pas suffisamment ses sources ().
Si vous disposez d'ouvrages ou d'articles de référence ou si vous connaissez des sites web de qualité traitant du thème abordé ici, merci de compléter l'article en donnant les références utiles à sa vérifiabilité et en les liant à la section « Notes et références ».
En pratique : Quelles sources sont attendues ? Comment ajouter mes sources ?
Le terme système de fichiers (abrégé « FS » pour File System[1], parfois filesystem en anglais) désigne de façon ambigüe :
- soit l'organisation hiérarchique des fichiers au sein d'un système d'exploitation (on parle par exemple du file system d'une machine unix organisé à partir de sa racine (/) )
- soit l'organisation des fichiers au sein d'un volume physique ou logique, qui peut être de différents types (par exemple NTFS, FAT, FAT32, ext2fs, ext3fs, ext4fs, zfs, btrfs, etc.), et qui a également une racine mais peut en avoir plusieurs,
- soit parce que le système de fichiers permet de prendre des instantanés (snapshots).
- soit parce que le système de fichiers (par exemple: zfs) permet l'existence de volumes virtuels (datasets sous zfs), qui partagent un même espace physique, mais peuvent être montés à des endroits différents d'une même hiérarchie de fichiers, ce qui permet la dé-duplication entre des volumes différents et a l'avantage de ne pas imposer à chaque volume virtuel de réserver un espace fixe difficile à modifier après coup.
De façon générale, un système de fichiers ou système de gestion de fichiers (SGF) est une façon de stocker les informations et de les organiser dans des fichiers sur ce que l'on appelle, en génie logiciel, des mémoires secondaires[2] (pour le matériel informatique, il s'agit de mémoire de masse comme un disque dur, un disque SSD, un CD-ROM, une clé USB, une disquette, etc.). Une telle gestion des fichiers permet de traiter, de conserver des quantités importantes de données ainsi que de les partager entre plusieurs programmes informatiques. Il offre à l'utilisateur une vue abstraite sur ses données et permet de les localiser à partir d'un chemin d'accès.
Il existe d'autres façons d'organiser les données, par exemple les bases de données (notamment base de données relationnelle) et les fichiers indexés.
Histoire
[modifier | modifier le code]
La carte perforée a progressivement disparu à partir de 1970 lorsque sont apparues les unités d'entrée-sortie à bande magnétique et à disquettes souples de format « 8 pouces » et des mémoires de masse plus performantes.
En 1964, le système DECtape de la société DEC permet d'enregistrer les données sur bandes magnétiques plutôt que sur cartes perforées.
En 1968, GEORGE 3 était doté d'un magasin de fichier (file store) enregistrant les fichiers dans une arborescence dans l'idée de Multics. Chaque utilisateur du système disposait d'un dossier utilisateur (home) avec autant de sous-dossiers que nécessaire. Les dossiers utilisateurs pouvaient être accédés directement ou à travers un chemin, comme : :MASTER.USERS.COMPSCI,JOHN. Un système d'Access control lists était utilisé pour la sécurité permettant de configurer l'accès par utilisateur et par groupe. Le système de fichier était organisé sur deux niveaux : l'un sur disque, et l'autre sur bande magnétique.
En 1972, ODS-1 est un système de fichier à plat (utilisé par RSX-11 OS). Il sera remplacé par la suite par ODS-2 et ODS-5.
En 1974, le système de fichier CP/M apparaît. Ce système d'exploitation, enregistre les fichiers sur disquettes suivant une organisation logique spécifique (qui n'a pas été reprise par MS-DOS), et peut remplir les disquettes jusqu'à ce qu'elles soient complètement remplies.
CP/M peut aussi gérer des disques durs (en réalité, comme le BIOS est « ouvert » et décrit clairement dans la documentation que Digital Research fournissait avec certains de ses logiciels, il est donc possible d'adapter tout système particulier CP/M à toute mémoire de masse disponible - et aux périphériques dont on dispose).
Chaque fichier a un nom et une extension. Plus précisément, la syntaxe est : <nom du fichier (8 octets maximum)>.<extension (3 octets maximum)>.
En 1978 apparaît le premier système de fichier d'Apple.
En 1980, le système FAT12 apparaît. Le système FAT16 en 1984.
Le BIOS parameter block (BPB) est introduit avec le PC DOS 2.0 . Cette version introduit également les bits attributs lecture seule, archive, étiquette de volume, et dossier pour une hiérarchisation des dossiers.
En 1988, ISO 9660 (une norme de l'ISO) définit le système de fichiers utilisé sur les CD-ROM.
En 1993, apparaît le système NTFS Version 1.0, utilisé par Windows.
En 1994 et 1995, les systèmes de fichiers pour CD-ROMs sont complétés : Rock Ridge et Joliet.
Généralités
[modifier | modifier le code]
Le volume des données traitées par les applications informatiques atteint couramment plusieurs centaines de gigaoctets et va jusqu'à plusieurs téraoctets pour certaines applications industrielles. De tels volumes de données ne peuvent pas être stockées dans la mémoire centrale. De plus, un stockage persistant à long terme, permettant de sauvegarder les données traitées ou à traiter pour une utilisation future, est également nécessaire. Le principe employé pour répondre à ce problème consiste à stocker ces données dans des mémoires secondaires sous forme de fichiers, c'est-à-dire de suites de blocs (la plus petite unité que le périphérique de stockage est capable de gérer). Le contenu de ces blocs, simple suite de données binaires, peut être interprété selon le format de fichier comme des caractères, des nombres entiers ou flottants, des codes d'opérations machines, des adresses mémoires, etc. L’échange entre les deux types de mémoire se fait ensuite par transfert de blocs.
L'objectif du système de fichiers est de permettre l'accès au contenu des fichiers stockés (l'ouverture du fichier, son enregistrement sa copie ou son déplacement dans un second emplacement, ou sa suppression) à partir de leur chemin d'accès, formé d'un nom précédé d'une liste de répertoires imbriqués.
Représentation pour l'utilisateur
[modifier | modifier le code]Pour l'utilisateur, un système de fichiers est vu comme une arborescence : les fichiers sont regroupés dans des répertoires (concept utilisé par la plupart des systèmes d’exploitation). Ces répertoires contiennent soit des fichiers, soit récursivement d'autres répertoires. Il y a donc un répertoire racine et des sous-répertoires. Une telle organisation génère une hiérarchie de répertoires et de fichiers organisés en arbre.
Principe de stockage
[modifier | modifier le code]Différentes méthodes permettent d'associer un nom de fichier à son contenu. Dans le cas du système de fichiers FAT, ancien système de fichiers de MS-DOS et de Windows encore largement utilisé sur les supports amovibles comme les clés USB, chaque répertoire contient une table associant les noms de fichiers à leur taille et un index pointant vers la table d'allocation de fichiers, une zone réservée du disque indiquant pour chaque bloc de données l'index du bloc suivant du même fichier.
Dans le cas des systèmes de fichier d'Unix (ou de Linux/Minix), les fichiers et les répertoires sont identifiés par un numéro unique, le numéro d'inode. Ce numéro permet d'accéder à une structure de données (inode) regroupant toutes les informations sur un fichier à l'exception du nom, notamment la protection d'accès en lecture, en écriture ou des listes de dates, ainsi que le moyen d'en retrouver le contenu. Le nom est stocké dans le répertoire associé à un numéro d'inode. Cette organisation présente l'avantage qu'un fichier unique sur disque peut être connu du système sous plusieurs noms.
L'organisation du système de fichiers NTFS est encore plus complexe, fonctionnant un peu à la façon d'une base de données.
Nom de fichier
[modifier | modifier le code]Le nom d'un fichier est une chaîne de caractères, souvent de taille limitée. Aujourd'hui, quasiment l'ensemble des caractères du répertoire Unicode est généralement utilisable, mais certains caractères spécifiques ayant un sens pour le système d'exploitation peuvent être interdits ou déconseillés. C'est le cas par exemple pour les caractères « : », « / » ou « \ » sous Windows.
Les systèmes de fichier Unix utilisent des noms de fichiers basés sur une suite d'octets. Les couches basses des logiciels (noyau, systèmes de fichier) manipulent les noms de fichiers sans connaître le jeu de caractère utilisé. Au niveau utilisateur, le jeu de caractère utilisé n'est généralement pas fourni par le système de fichiers, mais dépendant des paramètres régionaux de l'utilisateur. Dans un contexte où l'interopérabilité à un niveau mondial est souhaitée, une compatibilité Unicode est désirée et alors, l'UTF-8 est de plus en plus utilisé notamment dans les distributions Linux. Les systèmes plus anciens utilisaient des systèmes de codage régionaux pouvant altérer les noms de fichiers lorsque des utilisateurs ont des paramètres régionaux différents. Dans les systèmes modernes, l'utilisation de noms de fichiers nommés autrement qu'en Unicode est évité afin de réduire les problèmes d'interopérabilité avec les systèmes unicode.
NTFS, Virtual FAT et Joliet, ReFS utilisent le jeu de caractères UTF-16 pour les noms de fichiers.
Sous Windows et dans les environnements graphiques, le nom d'un fichier possède en général un suffixe (extension) séparé par un point qui est fonction du contenu du fichier : .txt pour du texte par exemple. De cette extension va dépendre le choix des applications prenant en charge ce fichier. Toutefois, sous Linux/Unix, dans les systèmes en ligne de commande et dans les langages de programmation, l'extension fait simplement partie du nom de fichier, son format est détecté par le type MIME inscrit de façon transparente dans l'en-tête des fichiers.
Chaque fichier est décrit par des métadonnées (conservées dans l'inode sous Unix), alors que le contenu du fichier est écrit dans un ou plusieurs blocs du support de stockage, selon la taille du fichier.
Les métadonnées les plus courantes sous UNIX sont :
- droits d'accès en lecture, écriture et exécution selon l'utilisateur, le groupe, ou les autres ;
- dates de dernier accès, de modification des métadonnées (inode), de modification des données (block)[8] ;
- propriétaire et groupe propriétaire du fichier ;
- taille du fichier ;
- nombre de noms de fichiers (liens) pointant vers l'inode ;
- nombre de blocs utilisés par le fichier[9] ;
- type de fichier : fichier simple, lien symbolique, répertoire, périphérique, etc.
Sur la plupart des systèmes Unix, la commande stat permet d'afficher l'intégralité du contenu de l'inode.
Fonctions du SGF
[modifier | modifier le code]Le système de gestion des fichiers assure plusieurs fonctions :
- Manipulation des fichiers : des opérations sont définies pour permettre la manipulation des fichiers par les programmes d’application, à savoir : créer/détruire des fichiers, insérer, supprimer et modifier un article dans un fichier.
- Allocation de la place sur mémoires secondaires : les fichiers étant de taille différente et cette taille pouvant être dynamique, le SGF alloue à chaque fichier un nombre variable de granules de mémoire secondaire de taille fixe (blocs).
- Localisation des fichiers : il est nécessaire de pouvoir identifier et retrouver les données ; pour cela, chaque fichier possède un ensemble d’informations descriptives (nom, adresse…) regroupées dans un inode.
- Sécurité et contrôle des fichiers : le SGF permet le partage des fichiers par différents programmes d’applications tout en assurant la sécurité et la confidentialité des données. En effet, un nom et une clé de protection sont associés à chaque fichier afin de le protéger contre tout accès non autorisé ou mal intentionné lors du partage des fichiers. Le SGF se doit aussi de garantir la conservation des fichiers en cas de panne du matériel ou du logiciel.
- le SGF assure le bon fonctionnement du fichier.
Organisation des fichiers
[modifier | modifier le code]L'organisation physique sous-jacente du médium utilisé (blocs, linéaire) et les mécanismes d'entrée/sortie de bas-niveau sont masqués. L'utilisateur peut donc organiser ses données permanentes en les distribuant dans différents fichiers. Le contenu des fichiers est déterminé par leur format, qui dépend de l'application utilisée.
En plus de cette organisation abstraite, les systèmes de fichiers peuvent inclure la compression ou le chiffrement automatique des données, une gestion plus ou moins fine des droits d'accès aux fichiers, et une journalisation des écritures (pour la robustesse, en cas de défaillance du système). De plus, certains systèmes de fichiers peuvent s'étendre sur un réseau entier, comme NFS. Certains de ces systèmes de fichiers en réseau peuvent être distribués ou répartis, comme PVFS2.
Systèmes de fichiers et systèmes d'exploitation associés ou compatibles
[modifier | modifier le code]Le choix du système de gestion des fichiers se fait principalement en fonction du système d’exploitation. Généralement, les systèmes d’exploitation les plus récents supportent un grand nombre de systèmes de fichiers.
MS-DOS (et compatibles) et les premières versions de Windows 95 utilisaient les systèmes de fichiers FAT16 et FAT12 (pour les supports de moins de 16 Mio). À partir de Windows 95 OSR2, le choix entre les systèmes de fichiers a commencé à s'élargir. FAT16 et FAT32 pouvaient tous les deux être utilisés, et à partir d'une certaine taille de partition, le choix du système FAT32 était alors plus judicieux.
Sous les premières versions de Windows NT (NT3.x et NT4), il y a le choix entre le système FAT16 et NTFS. Ce système d'exploitation ne supporte pas le FAT32. Généralement, le système NTFS est conseillé, car il procure une sécurité plus grande ainsi que des performances accrues par rapport au FAT. Contrairement aux précédentes versions de Windows NT, Windows NT5 (Windows 2000) accepte des partitions de type FAT16, FAT32 et NTFS. Ainsi, le système de fichiers le plus récent (NTFS 5) est conseillé puisqu’il offre de plus nombreuses fonctionnalités que les systèmes FAT.
Le SP1 de Vista propose de formater en exFAT qui est une grosse évolution de la FAT, proposant une meilleure fiabilité, une « vraie » gestion des noms longs, et l'ACL. Windows CE 6 (le futur Windows Mobile 7) gère aussi ce nouveau FS. Le but de Microsoft est de remplacer la FAT, principalement utilisée sur les supports amovibles comme les cartes mémoires.
Le monde des Unix (Unix, Linux, BSD, Mac OS X) supporte un très grand nombre de systèmes de fichiers. Cela est dû au fait que malgré leur nombre, les systèmes supportés suivent généralement des standards et notamment POSIX.
Non journalisés
[modifier | modifier le code]- ext et ext2 : Extented FS version 2 (Linux, BSD, Windows via un pilote tiers)
- exFAT : Extended File Allocation Table (nouveau système de fichiers proposé par Microsoft pour remplacer la FAT sur les supports amovibles)
- FAT : File Allocation Table (DOS/Windows, Linux, BSD, OS/2, Mac OS X). Se décompose en plusieurs catégories :
- FFS : Fast File System (BSD, Linux expérimental)
- HFS : Hierarchical File System (Mac OS, Mac OS X, Linux)
- HPFS : High Performance FileSystem (OS/2, Linux)
- minix fs (minix, Linux)
- S5 (UNIX System V, Linux)
- Unix File System : (BSD, Linux en lecture seule)
Journalisés
[modifier | modifier le code]Les systèmes de fichiers journalisés enregistrent les modifications dans un journal avant de les effectuer sur les fichiers eux-mêmes. Ce mécanisme apporte une plus grande fiabilité, en permettant une récupération des modifications "en cours" en cas d'arrêt intempestif (coupure de courant, plantage système, débranchement de disque externe…).
- BeFS (BeOS, Haiku, Linux en lecture seule et expérimental)
- ext3 : Extented FS version 3 - notamment pour l'ajout de la journalisation (Linux, BSD)
- ext4 : Extented FS version 4 - notamment pour une capacité de 1 exaoctet et les Extents (Linux >=2.6.28)
- HFS+ (Mac OS X, Linux)
- JFS ou JFFS (AIX, OS/2, Linux)
- JFS2 ou JFFS2 AIX5
- LFS : (Linux)
- NSS : Novell Storage Services (Netware et Suse Linux)
- NTFS : New Technology FileSystem (Windows NT/2000/XP/Vista/7/8/10, Linux et Mac OS X (écriture disponible grâce au pilote NTFS-3G))
- ReiserFS (Linux, BSD en lecture seule)
- Reiser4 (Linux expérimental)
- Spufs : Synergistic processing unit filesystem
- UFS+ : Unix FS + journal (BSD, Linux en lecture seule)
- XFS (Irix, Linux, BSD en lecture seule)
à Snapshot
[modifier | modifier le code]Les systèmes de fichiers à snapshot, ou, en français, instantanés, offrent la possibilité d'enregistrer l'état du système de fichiers à un instant donné.
- APFS : Apple File System (macOS, iOS, tvOS)
- Btrfs : BetterFS (Linux)
- ZFS : Zettabyte FS (Solaris10, OpenSolaris, FreeBSD 7, Mac OS X en lecture seule, Linux via FUSE)
- HAMMER : (DragonFly BSD datant de 2008)
- ACFS : ASM Cluster FS (Linux AIX Solaris Windows) développé par Oracle
Réseau (NAS : network-attached system en anglais)
[modifier | modifier le code]- AFS Andrew File System : (AIX, Linux, Solaris, Windows, Mac OS X, ...)
- CodaFS (Linux)
- NFS (tous les UNIX, Linux, Mac OS X, IRIX) (Windows pour la 4)
- NCP (Novell NetWare, Linux en client seul)
- SSHFS (Linux via FUSE)
- SMB ou Server Message Block (Windows) (Linux, BSD et Mac OS X via Samba)
- CIFS (Évolution de SMB, géré par Samba ainsi que par Windows 2000 et XP)
- Tahoe-LAFS[10] (libre, distribué, chiffré et avec tolérance aux pannes, tous les UNIX, Linux, Mac OS X, Windows)
- GFS2, Global file system : Linux
- GPFS, General Parallel File System : Linux, AIX, Windows
- GlusterFS : Linux, UNIX
- Lustre, Compression de Linux et de Cluster : Linux
- OCFS2, développé par Oracle : Linux
- ACFS : ASM Cluster FS développé par Oracle : (Linux, AIX, Solaris, Windows)
- PVFS2, Parallel Virtual FileSystem version 2 : Linux, UNIX
Spécialisés
[modifier | modifier le code]- CFS Cryptographic File System : FS chiffré (BSD, Linux)
- cramfs : FS compressé (Linux en lecture seule)
- SquashFS : système de fichiers compressé en lecture seule (Linux)
- EFS Encrypting File System : FS chiffré au-dessus de NTFS (Windows[11])
- ISO 9660 : en lecture seule sur tous les systèmes lisant les CDROM/DVDROM de données
- JFFS et JFFS2 : FS pour support physique sans block, typiquement des cartes flash. Il est compressé et journalisé (Linux)
- UBIFS : FS journalisé pour support physique sans block, typiquement des cartes flash (Linux)
- F2FS (Flash-Friendly File System) : FS Open Source développé par Samsung et intégré au noyau Linux il est destiné aux supports de stockage de type flash.
- QNX4fs : FS utilisé pour le temps réel (QNX, Linux en lecture seule)
- UDF : le format de disque universel (système de fichiers des DVD-ROM et des disques optiques réinscriptibles tels les CD-RW, DVD±RW, etc. Version Microsoft est Système de fichiers dynamique)
- VMFS : FS destiné à la virtualisation (VMware)
Temporaires
[modifier | modifier le code]- ramfs, le système de fichiers temporaire en mémoire RAM le plus simple et efficace[réf. nécessaire] qui soit, basé sur la gestion du cache du noyau Linux
- tmpfs, le nom générique d'un système de fichiers temporaire, aussi utilisé pour ses implémentations (distinctes) pour Linux, dérivée de ramfs et à partir du noyau Linux 2.6.x, Solaris, NetBSD ou d'autres systèmes d'exploitation
Méta systèmes de fichiers
[modifier | modifier le code]- unionfs, une implémentation d’union mount dans le noyau Linux, consistant à fusionner différents systèmes de fichiers en un unique point de montage
- aufs, une autre implémentation de unionfs
Pseudo systèmes de fichiers
[modifier | modifier le code]Ces systèmes de fichiers n'ont pas pour but de permettre l'accès à des fichiers réels. Ils présentent en fait, sous l'apparence d'une hiérarchie classique de fichiers et de répertoires, des informations de nature variées (sur l'état de l'ordinateur, des périphériques, ou permettant l'accès à des bases de données). Il s'agit donc d'interfaces particulières pour certains logiciels, généralement le système d'exploitation.
- Devfs, Device file system (linux 2.4)
- udev remplace Devfs (linux 2.6)
- Procfs, Process Filesystem (systèmes de type UNIX)
- Sysfs, permettant d'accéder aux informations sur le matériel et de configurer certaines fonctionnalités du noyau Linux 2.6.
- CDfs : système de fichiers virtuel pour Linux qui permet d'accéder aux données et aux pistes audio d'un disque compact.
- ZODB: système de fichiers du serveur zope
À classer…
[modifier | modifier le code]- ODS (VMS, OpenVMS)
- ADFS : Acorn Disc Filing System (RiscOS, Linux expérimental)
- AFFS : fichiers rapides d'Amiga
- CBMFS : Le système de fichiers pour Commodore 1581/1541
- DTFS : DeskTop File System (UNIX)
- HDFS : Hadoop File system
- MFS (Macintosh)
- NWFS : système de fichiers Novell NetWare
- SFS : Secure file system
- OpenVMS : système de fichiers Spiralog
- uc/FS : système de fichiers pour OS uCOS//II www.micrium.com
- Veritas File System : système de fichiers développé par Veritas
- WBFS (Wii Backup File System): Permet le stockage des backups de DVD pour Wii sur un disque dur
Notes et références
[modifier | modifier le code]- (en)« FS—file system », sur ibm.com, IBM (consulté le ).
- « Le dictionnaire des développeurs : Définition de mémoire secondaire », sur developpez.com, Developpez.com (consulté le ).
- IBM introduced JFS with the initial release of AIX Version 3.1 in 1990. This file system now called JFS1. The new JFS, ported from OS/2 to AIX and Linux, was first shipped in OS/2 Warp Server for e-Business in 1999. It was released as JFS2 on AIX 5L.
- through OEM agreement.
- Tru64 Unix managers, ORNL (lire en ligne), « Polycenter File System — HELP ».
- Microsoft first introduced FAT32 in Windows 95 OSR2 (OEM Service Release 2) and then later in Windows 98. NT-based Windows did not have any support for FAT32 up to Windows NT4; Windows 2000 was the first NT-based Windows OS that received the ability to work with it.
- Specifications for the Reliance file systems are available here [1].
- et donc de l'inode car la modification des données implique le changement de la date de modification des données dans l'inode et donc implique un changement de l'inode elle-même !
- différent de la taille du fichier car les blocs sont de taille fixe, ainsi un fichier de 5 Kio sur un système utilisant des blocs de 4 Kio prendra 2 blocs complets. Pour les fichiers de grande taille, cela se complique encore car les premiers blocs servent à l'adressage des suivants.
- « Tahoe-LAFS », sur allmydata.org (consulté le ).
- https://technet.microsoft.com/fr-fr/library/cc721923%28v=ws.10%29.aspx.
Voir aussi
[modifier | modifier le code]- Répertoire
- Système de fichiers virtuel
- Gestion électronique des documents (GED)
- Point de montage
- Gestionnaire de fichiers
- Liste des systèmes de fichiers
Liens externes
[modifier | modifier le code]- (fr) Description de tous les systèmes de fichiers
- (en) From BFS to ZFS: past, present, and future of file systems, par Jeremy Reimer (ars technica), .
- (fr) Les systèmes de fichiers pour disques SSD (LINUXFR.ORG), par Patrick Guignot, le
- Un exemple de SGF virtuel
