Hadoop Distributed File System - HDFS

Описание

Распределенная файловая система для хранения больших файлов с репликацией и отказоустойчивостью. Файл разделяется на блоки (все блоки равной длинны, кроме последнего), а блоки распределяются уже между узлами кластера. Так же блоки могут быть размещены в нескольких узлах одновременно. Размер блока и коэффициент репликации (количество узлов, на которых должен быть размещён каждый блок) определяются в настройках на уровне файла. Файлы в HDFS может быть записан один раз и только одним процессом. Модификация файла запрещена. Организация файлов в пространстве имён — традиционная иерархическая.