HDFS Hadoop Distributed File System
Mer info
- Ägare
- Apache Software Foundation
- Typ
- Distribuerat filsystem
- Licens
- Apache-2.0
Hadoops distribuerade filsystem — stora block, trefaldig replikering, byggt för genomströmning snarare än latens.
Öppen implementation av Google File System. En NameNode håller all metadata i minnet, DataNodes lagrar själva blocken (128 MB som standard). Filer skrivs en gång och läses många; det finns ingen slumpvis skrivning.
Designidén var att flytta beräkningen till datan istället för tvärtom, eftersom nätverket var flaskhalsen. Molnet vände på den premissen — S3 med separerad beräkning och lagring har till stor del ersatt HDFS för nya system.