Исходное сообщение
"Первый релиз wZD 1.0.0, сервера компактного хранения мелких ..." Отправлено n80, 20-Янв-20 15:14
> Я, может, чего-то не понимаю, но что мешает использовать в таком же > режиме loop-файлы с любыми файловыми системами? Не хватает метаданных в одной > ФС - сделал ещё десять и подмонтировал их в нужные каталоги. > Для мелких файлов - reiserfs с tail-packing, для крупных xfs и так далее. Для некоторых задач у ФС слишком большие (по сравнению с такими специализированными решениями) накладные расходы на один файл. При этом большая часть возможностей ФС может быть вообще не нужна (типа отдельных mode/uid/gid/atime/mtime/ctime/etc для каждого файла), но нельзя просто взять их и отключить. Не говоря уж про то, как «больно» на ФС удалять/обновлять много мелких файлов. Соответственно, если можно читать с дисков сразу содержимое файлов и не тратить память ядра (и пропускную способность дисков) на чтение inode, не говоря уж про время на системные вызовы для открытия очередного запрошенного файла, то на том же железе можно хранить куда больше файлов и в единицу времени обрабатывать куда больше запросов. Так в своё время мордокнига (facebook) и пришла к своему haystack, но т.к. в публичный доступ была выложена только статья, но не сама БД, у других контор с похожими нуждами начали возникать свои реализации.