Sistema de archivos Moose
Sistema de archivos Moose
| Desarrollado por | Tecnología central Sp. Z oo |
|---|---|
| Primera versión | 30 de mayo de 2008 (v. 1.5.0) |
| Última versión | 3.0.115-1 (10 de octubre de 2020) |
| Depositar | github.com/moosefs/moosefs |
| Sistema de explotación | Linux |
| Medio ambiente | Linux , FreeBSD , NetBSD , macOS , Solaris , OpenSolaris |
| Tipo | Sistema de archivos distribuido |
| Licencia | Licencia pública general GNU v2 |
| Sitio web | moosefs.com |
Moose File System (MooseFS) es un sistema de archivos distribuido desarrollado por Gemius SA. El desarrollador principal es Jakub Kruszona-Zawadzki. MooseFS tiene como objetivo ser tolerante a fallas , redimensionable, compatible con POSIX y genérico. El código anteriormente propietario se publicó y se puso a disposición del público en5 de mayo de 2008.
Operación
MooseFS sigue en gran medida los mismos conceptos que Google File System , Lustre o Ceph . El sistema de archivos se compone de tres elementos:
- Servidor de metadatos (MDS): administra la distribución, el acceso y el espacio de nombres de los archivos. La versión actual (2.0+) de MooseFS admite la presencia de múltiples MDS. Los clientes solo recurren a MDS para recuperar o actualizar el diseño y los atributos de un archivo; los datos se transfieren directamente entre los clientes y los servidores "fragmentados". El servidor de metadatos es un demonio de espacio de usuario. Los metadatos se guardan en la memoria y se almacenan de manera "perezosa".
- Servidor Metalogger: que periódicamente recupera metadatos del MDS y los almacena como respaldo. Existe desde la versión 1.6.5 y su funcionamiento es opcional.
- Chunk Server (CSS): almacena datos y, opcionalmente, los replica. Pueden ser grandes, aunque se desconoce el límite de escalamiento de carga. El clúster más grande conocido está formado por 160 servidores. El servidor de fragmentos también es un demonio de espacio de usuario, que depende del sistema de archivos local para administrar el almacenamiento de datos.
- Por último, los clientes, que recurren a MDS y CSS. Los clientes de MooseFS montan el sistema de archivos en el espacio de usuario mediante FUSE .
Características
Para proporcionar alta disponibilidad y buen rendimiento, MooseFS ofrece las siguientes características:
- Tolerancia a fallas : MooseFS utiliza la replicación . Los datos se replican entre los servidores de fragmentos. La tasa de replicación (N) se define por archivo o directorio. Si fallan (N-1) réplicas, los datos permanecen accesibles. Actualmente, MooseFS no proporciona otros métodos para proporcionar tolerancia a fallas , como la redundancia a través de la red RAID . Por lo tanto, la tolerancia a fallas requiere mucho espacio para archivos muy grandes: tamaño de archivo N * en lugar de tamaño de archivo + (tamaño de banda N *), como sería el caso de RAID 4 , RAID 5 o RAID 6 .
- División de datos: los archivos grandes se dividen en fragmentos, de hasta 64 megabytes de tamaño, que se pueden almacenar en diferentes servidores de fragmentos para lograr un mayor ancho de banda agregado.
- Equilibrio de carga : MooseFS intenta utilizar los recursos de almacenamiento por igual. Si el volumen de MooseFS está lleno en un 40%, el algoritmo actual intentará llenar cada espacio de almacenamiento en cada servidor de fragmentos en un 40%.
- Seguridad : además de los permisos POSIX clásicos, MooseFS ofrece desde la versión 1.6 un sistema de autenticación simple, similar al de NFS: autenticación / autorización .
Hardware, software y red
Al igual que otros sistemas de archivos distribuidos, los servidores MooseFS no necesitan hardware especial. Todo lo que se requiere es un sistema operativo compatible con POSIX . Se utiliza TCP / IP para conectar las máquinas.
Notas y referencias
- (en) " Acerca de: ventajas y características técnicas " en MooseFS (consultado el 30 de julio de 2020 ) .
- "Fecha del primer lanzamiento público: 2008-05-30" https://github.com/moosefs/moosefs/blob/master/README.md
- “MooseFS 1.5 (30 de mayo de 2008)” https://github.com/moosefs/moosefs/blob/master/NEWS
- " Soporte - documentación, estado y mejores prácticas - MooseFS "
- " moosefs / NEWS en master · moosefs / moosefs "
- " Lanzamientos · moosefs / moosefs "
- [1] , Quién usa MooseFS
Ver también
Artículos relacionados
- Sistema de archivos distribuido
- Ceph
- GlusterFS
- Sistema de archivos de Google
- Candelabro
- (Inglés) Lista de archivos del sistema (en)