The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD, opennews (??), 07-Янв-21, (0) [смотреть все]

Сообщения [Сортировка по времени | RSS]


16. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +4 +/
Сообщение от анон (?), 07-Янв-21, 14:10 
снапшоты которые не уменьшаю производительность (в отличии от lvm2) и их можно передавать икрементально (только изменённые данные) по ssh (для обновления бэкапа), програмный raid (отказоустойчивость) который можно воткнуть в другой комп без проблем, сжатие файлов в самой системе.
Ответить | Правка | Наверх | Cообщить модератору

21. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  –2 +/
Сообщение от Аноним (15), 07-Янв-21, 15:10 
А вот прям на домашнем компуктере обоснованно?
Ответить | Правка | Наверх | Cообщить модератору

27. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +6 +/
Сообщение от OpenEcho (?), 07-Янв-21, 16:08 
А на домашнем компютере не хранятся налоговые отчеты, фотки и видео семьи,которые будет досадно потерять ???
Если нет, то вам даже fat32 подойдет
Ответить | Правка | Наверх | Cообщить модератору

29. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (15), 07-Янв-21, 16:16 
Налогов, семьи, фоток нет. Никого из перечисленных потерять будет не досадно.
Ответить | Правка | Наверх | Cообщить модератору

33. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +4 +/
Сообщение от OpenEcho (?), 07-Янв-21, 17:14 
> Налогов, семьи, фоток нет. Никого из перечисленных потерять будет не досадно.

В таком случае проще держать bootable флешку с read-only swicth-em - и безопасно и нет зависимости от компов

Ответить | Правка | Наверх | Cообщить модератору

113. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 09-Янв-21, 18:47 
> Налогов, семьи, фоток нет. Никого из перечисленных потерять будет не досадно.

Есть еще фича: если при обновлении системы что-то пошло не так, есть довольно большая разница: откатить в вид как было за 2 минуты или полдня систему восстанавливать/переустанавливать.

Но на Linux для rootfs лучше btrfs взять. К тому же он умеет дублировать метаданные даже на 1 носителе, что очень понижает риск его кончины от мелких случайностей. А чексуммы намекнут о проблемах с железом, если повезет то до того как это превратится в большую проблему.

В btrfs еще можно reflinks делать. Когда 2 файла ссылаются на одинаковые блоки изначально. Так что вон тот образ диска виртуалки на 20 гиг можно "скопировать" моментально а CoW прозрачно обыграет отличия между виртуалками, при том храниться будет только шаблон и отличия от него, а не два полных 20-гиговых диска. Можно и еще что-нибудь прикольное, типа хранения 2 копий даже на 1 носителе, что повышает шансы в случае облома. А сказ про RAID это здорово, но вот так можно и с единичной флешкой, с 1 разделом. А RAID из нее делать - как минимум непрактично. В общем это совсем другой уровень технологий.

Ответить | Правка | К родителю #29 | Наверх | Cообщить модератору

184. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +3 +/
Сообщение от maximnik0 (?), 10-Янв-21, 04:50 
>А чексуммы намекнут о проблемах с железом, если повезет то до того как это превратится в большую проблему.

Позавчера наткнулся опять на проблему с BTRFS.Старый жесткий,валялся лет эдак 5 ,бтрфс -бэкап информация.Обнаружил что раздел только чтение-ругаеться при монтирование на чек суммы и проблемы с fs .Ну ладно скопировал информацию,попытался чинить -фиг вам,как не ремонтируется эта fs ,так и продолжает нуждаться в "шамане".Btrfs check restore,удалил чек суммы-не фига,доходит до 70% веритификация и падает в корку программа починки,до этого на куча блоков ругаеться.(btrfsck -не потдерживаеться,в большенстве дистрибутивов ссылка на btrfs check ) Ладно еще есть один бэкап за архивированный на другом жестком-есть к файлам md5 контролька-проверил контрольные суммы,все ок.Снес тогда я раздел ,проверил жесткий на бадблоки,посмотрел смарт-не хрена нечего нет.Ну и какого хрена тогда на чексуммы и блоки фс ругаеться ?

Ответить | Правка | Наверх | Cообщить модератору

224. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  –1 +/
Сообщение от пох. (?), 12-Янв-21, 09:59 
>>А чексуммы намекнут о проблемах с железом, если повезет то до того как это превратится в большую проблему.
> Ну и какого хрена тогда на чексуммы и блоки фс
> ругаеться ?

Намекает на проблемы с железом. У тебя их не было - щас создаст на пустом месте! ;-)

Как и всегда у безумно переусложненных конструкций.

P.S. ла..то фанатикам - обратите внимание, _данные_ у него - в порядке. Шах и мат др-рам на crc всего на свете.

Ответить | Правка | Наверх | Cообщить модератору

241. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 12-Янв-21, 12:29 
> P.S. ла..то фанатикам - обратите внимание, _данные_ у него - в порядке.
> Шах и мат др-рам на crc всего на свете.

Уже обсуждал в linux.org.ru.В приватном сообщении- человек подсказал в чем дело-оказываеться существует 3 версии алгоритма чек сумм -новая и 2 старые.В ручной опции монтирование нужно указать нужную версию,кодеры забыли указать флаг в старой версии 32 бита или 64 бита (оптимизация под архитектуру),а авто монтирование ставит дефолтом -старая версия,архитектура локальной машины.Вот на чек суммы и ругаеться,а обещали флаги совместимости с потдержкой минимум 2 версии.


Ответить | Правка | Наверх | Cообщить модератору

248. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от пох. (?), 12-Янв-21, 20:00 
> В приватном сообщении- человек подсказал в чем дело-оказываеться существует 3 версии алгоритма
> чек сумм -новая и 2 старые.

Прекрасно, дай угадаю - но места указать ее явно в куче ненужного мусора в метаданных - конечно же не нашлось. У модных-молодежных оно всегда так.

Сколько там у zfs "версий" чексумм на разных алгоритмах? Штук пять, поди ?

Ответить | Правка | Наверх | Cообщить модератору

253. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 12-Янв-21, 22:41 
> Прекрасно, дай угадаю - но места указать ее явно в куче ненужного
> мусора в метаданных - конечно же не нашлось. У модных-молодежных оно
> всегда так.

Мозгов сделать предупреждение им не хватило,как и утилиту конвертации.Мозгов !Заявляеть о потдержке
2 превыдущих версий спецификаций с возможностью конвертации ,забить в как сейчас принято на совместимость и при этом так и не сделать конвертор....Это как с  wayland - поставить в упрек Х-м отсуствие версирования,сделать версирование в waylandе и .....поломать совместимость потому что оказывается как всегда понадобилось костыли включать в протокол, а заморачиваться совместимым ари сложно.

Ответить | Правка | Наверх | Cообщить модератору

254. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 12-Янв-21, 23:39 
Дай еще уточню,там именно версии контролльной суммы,не кол-во алгоритмов.Они именно формат сломали.Последняя версия стала более компакная по размеру.

Ответить | Правка | Наверх | Cообщить модератору

257. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (257), 13-Янв-21, 04:43 
> Дай еще уточню,там именно версии контролльной суммы,не кол-во алгоритмов.Они именно формат
> сломали.Последняя версия стала более компакная по размеру.

Чокаво? В btrfs on-disk формат не меняли несовместимым образом последних лет 10. Так что старый бэкап должен читаться. А поха лучше не слушать, известный эксперт по всему, одинаково крут во всем.

Ответить | Правка | К родителю #254 | Наверх | Cообщить модератору

262. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 13-Янв-21, 09:54 
> Чокаво? В btrfs on-disk формат не меняли несовместимым образом последних лет 10.
> Так что старый бэкап должен читаться. А поха лучше не слушать,
> известный эксперт по всему, одинаково крут во всем.

Хм -насколько я знаю формат raid 4-условно 7 не стабилизирован до сих пор,только в прошлом году как я читал что то в формате  методанных поменяли.Мне человек  ткнул в  чанлог за 18-19 год- я тоже думал что формат стабилизирован..
>сonvert and mkfs will try to use optimized crc32c
>use hw assisted crc32c on more arches

И ВИШЕНКА  (Mar 2019)
metadata uuid - new feature that allows fast uuid change without rewriting all metadata blocks (backward incompatible)

Ответить | Правка | К родителю #257 | Наверх | Cообщить модератору

263. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 13-Янв-21, 10:20 
Еще мне ткнули на такую вещь-
This can catch consistency problems or bitflips-проблема была пофикшена на версии ядра 5.1.х ,с какой версии была проблема не написано.
Это связано с тем что вынесли алгоритмы  контроля из драйвера бтрфс с целью унификации.
Ответить | Правка | К родителю #262 | Наверх | Cообщить модератору

284. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 16-Янв-21, 07:21 
> Это связано с тем что вынесли алгоритмы  контроля из драйвера бтрфс с целью унификации.

Это не изменило формат ФС. Только внутреннее устройство модуля. В ядре Linux есть реюзабельные алгоритмы, в том числе с аппаратным ускорением если железо умеет. Ну вот этот модуль фс тоже обучили этими функциями пользоваться. Это никак не влияет на пользователей или устройство ФС.

Ответить | Правка | К родителю #263 | Наверх | Cообщить модератору

292. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 17-Янв-21, 07:08 
>Это никак не влияет на пользователей или устройство ФС.

При условии -при переходе не запутались с ари,была проблема,пофиксили:-)

Ответить | Правка | К родителю #284 | Наверх | Cообщить модератору

283. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 16-Янв-21, 07:19 
>  методанных поменяли.Мне человек  ткнул в  чанлог за 18-19
> год- я тоже думал что формат стабилизирован..

А он и стабилизирован. Но не до состояния надгробия на кладбище, чтобы вообще ничего не улучшать и новые фичи не делать.

>>сonvert and mkfs will try to use optimized crc32c use hw assisted crc32c on more arches

Это оптимизация скорости. Как это на формат чего-либо влияет? То что модуль ФС и утилсы не будут считать crc32 сам а спихнет ее железку коли она так умеет - на формат данных на диске никак не влияет.

> И ВИШЕНКА  (Mar 2019)
> metadata uuid - new feature that allows fast uuid change without rewriting
> all metadata blocks (backward incompatible)

1) Это не влияет на чтение старых бэкапов. Старое ядро обломается смонтировать ФС с неизвестной ему фичой, но не наоборот. Идея класть бэкап на фс с новой фичой и читать его старым ядром вообще достаточно интересная. Но лучше читать все же новым ядром, как по мне. Вообще с точки зрения багфиксов.
2) Ума не приложу зачем на диске с бэкапами менять UUID
3) И сие вообще трогать стоит только понимая зачем вы это делаете. На системном диске это ведет к немедленному unbootable зачастую. А потому что boot будет старый uuid искать. А его - опа - нету. И монтирование - аналогично. Т.е. это еще в 2 местах конфигурации надо синхронно патчить. Иначе вы получите интересный сюрприз. И наверное если вас туда занесло, вы RTFMнете. Иначе вас ждет много приколов...

Ответить | Правка | К родителю #262 | Наверх | Cообщить модератору

293. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 17-Янв-21, 07:38 
>Старое ядро обломается смонтировать ФС с неизвестной ему фичой, но не наоборот. Идея класть бэкап >на фс с новой фичой и читать его старым ядром вообще достаточно интересная. Но лучше читать все же >новым ядром, как по мне. Вообще с точки зрения багфиксов

Читайте внимательно- диск лежал нетронутым 5 лет.Пытался на него кое что записать,скопировать старые бэкапы- обнаружил режим чтение,ядро ругаеться на чек-суммы и блоки ,типо ошибки.Проверил с другого архива-контрольные суммы и размер все в порядке,файлы проверил нормальные.Сам старый жесткий тоже в порядке,нормально записывает,ошибок нет-но починить фс мне не удалось,даже снес контрольные суммы,верификация 71-74 % и падает программа проверки.Проверил железо -2 часа тестов процессор и память ,по аварийке через 108 минут сработало отключение ноутбука из-за перегрева,но глюков не было.Не знаю что и думать -у меня еще 2 жестких с бэкапами  такого же возраста если не старше,но на них данные пополнялись,проблем нет.


Ответить | Правка | К родителю #283 | Наверх | Cообщить модератору

285. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 16-Янв-21, 07:24 
> Прекрасно, дай угадаю - но места указать ее явно в куче ненужного
> мусора в метаданных - конечно же не нашлось.

Как обычно - пох не угадал. Так что там еще blake2, sha256 и xxhash сделали. И да, старые кернелы и бутлоадеры ессно не знают как это считать. Впрочем половина бутлоадеров на чексумы тупо кладет.

А вот с zstd я разок выкусил, когда grub мне и сказал - ухтыблин, а я не знаю чем распаковать твой kernel! Ну, пришлось и его заапдейтить, временно рекоспреснув kernel в более привычный ему zlib.

Ответить | Правка | К родителю #248 | Наверх | Cообщить модератору

256. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (257), 13-Янв-21, 04:42 
> Намекает на проблемы с железом. У тебя их не было - щас
> создаст на пустом месте! ;-)

Железо или выдерживает пиковые нагрузки, или изредка подсирает глюками. На любой ФС.

> P.S. ла..то фанатикам - обратите внимание, _данные_ у него - в порядке.
> Шах и мат др-рам на crc всего на свете.

А вот это, кстати, вполне похоже на битый RAM или проц.

1) Считали SCRUB, железо прогрелось, стало глюкать, вот тебе csum error
2) Железка остыла, все дела.
3) За один md5sum оно не успело прогреться как scrub

И конечно в его сыпучем железе виноват btrfs. А, ну да, EXT4 молчал бы в тряпочку, а то что раз в год md5sum все же не верный или чота бэкап не распаковывается... вот за это я и люблю btrfs, с ним намного понятнее гадит мне железо или нет :)

Ответить | Правка | К родителю #224 | Наверх | Cообщить модератору

265. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 13-Янв-21, 10:34 
1) Считали SCRUB, железо прогрелось, стало глюкать, вот тебе csum error

А данные с Божью благодатью записались с Сжатием нормально.Ух ты,пойду тогда все железо освещать .(шутка на грани фола-не обижайтесь верующие,простите атеиста.)
Вы не смотрели в монитор -что происходит при записи на многоядерной машинке-чтобы избежать перегрева (по крайне мере так у АМД) задачи постоянно скачут по ядрам.Остается память -ну не знаю,сомнительно.

Ответить | Правка | Наверх | Cообщить модератору

282. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 16-Янв-21, 07:11 
> А данные с Божью благодатью записались с Сжатием нормально.

Вот это без гарантий. Но - да, знаете, обычно SCRUB греет систему сильнее "обычных" ситуаций. Поэтому заодно он подрабатывает RAM/CPU test'ом. Получше "выделенных" ram test'ов.

Хинт: попробуйте 10 раз большой ZIP распаковать. Желательно в /dev/null или типа того. Если CRC error иногда лезут - 100% оно, это железо прогревается и дурить начинает.

> Ух ты,пойду тогда все железо освещать .

Освещать? В прессе чтоли? :P

> Вы не смотрели в монитор -что происходит при записи на многоядерной машинке-чтобы
> избежать перегрева (по крайне мере так у АМД) задачи постоянно скачут
> по ядрам.Остается память -ну не знаю,сомнительно.

Я много во что смотрю. И вероятно в инструменты поинтереснее ваших порой. Однако кроме смотрения еще надо понимать что видишь. Мое понимание говорит мне что вон то похоже на нестабильное железо.

Ответить | Правка | Наверх | Cообщить модератору

295. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 17-Янв-21, 07:53 
>Хинт: попробуйте 10 раз большой ZIP распаковать. Желательно в /dev/null или типа того. Если CRC >error иногда лезут - 100% оно, это железо прогревается и дурить начинает.

Уже чем можно и нельзя протестировал,ошибок нет.Единственное срабатывает защита про перегреву приблизительно через 2 часа,отрубает ноутбук.

Ответить | Правка | Наверх | Cообщить модератору

255. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (257), 13-Янв-21, 04:38 
> Позавчера наткнулся опять на проблему с BTRFS.Старый жесткий,валялся лет эдак 5 ,бтрфс
> -бэкап информация.Обнаружил что раздел только чтение-ругаеться при монтирование на чек
> суммы и проблемы с fs .Ну ладно скопировал информацию,попытался чинить -фиг
> вам,как не ремонтируется эта fs ,так и продолжает нуждаться в "шамане".

Я бы сказал что диск посыпался, но...

> нечего нет.Ну и какого хрена тогда на чексуммы и блоки фс ругаеться ?

Может у тебя RAM или CPU под нагрузкой дурят?! Очень уж похоже на сбойное железо. Но, конечно, прикольнее как на EXT4 - молчок в тряпочку, с неспешным засиранием файлов. Так чтоли? Если csum error лезет, с этим надо разбираться. И нет, это не баг ФС, это ее фича - хайлайтит ваше гамнецо в железе.

Ответить | Правка | К родителю #184 | Наверх | Cообщить модератору

266. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 13-Янв-21, 21:00 
>Очень уж похоже на сбойное железо.

А данные с сжатием записались нормально-чудеса и только.Вот меня ткнули носом что BTRFS которая как 5 лет считается устоявшимся формат (кроме раид )-до сих пор пилеться.
(Mar 2019)
metadata uuid - new feature that allows fast uuid change without rewriting all metadata blocks (backward incompatible) .18-19 год :
>сonvert and mkfs will try to use optimized crc32c
>use hw assisted crc32c on more arches

Это трекер за 18-19 год мне прислали ,ткнули.А сколько фишек помимо контрольной суммы внедрили-до фига,т.к что не фига оказывается у бтрфс стабильный  формат,до сих пор появляться ломающие совместимость обновления.

Ответить | Правка | Наверх | Cообщить модератору

281. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 16-Янв-21, 07:07 
> BTRFS которая как 5 лет считается устоявшимся формат (кроме раид )-до сих пор пилеться.

Если софт вообще совсем не пилится - он, очевидно, сдох.

> metadata uuid - new feature that allows fast uuid change without rewriting
> all metadata blocks (backward incompatible) .18-19 год :

Это иллюстрация по теме "смотрю в книгу, вижу фигу"? Это фича для быстрой смены UUID фс, если ждать перемаркирования всех экстентов новым UUID западло (на большом стораже это может занять порядком времени). И да, старые кернелы сие не поймут - потому что не было им известно. Но это довольно мелкое изменение правил игры, без изменений формата как такового. Просто старые ядра посчитают ситуацию невалидной, они не знали что так можно было.

Для начала UUID фс вообще меняют ... скажем так, сильно некоторые люди, в специальных ситуациях. И это обычно интеграторы, системные инженеры и тому подобные, делающие образа VM или девайсов. Для смертного это деяние для начала чревато *немедленным UNBOOTABLE*, если вы не понимаете зачем это. Так что обычно это если и трогает кто, то они знают что и зачем делают. И RTFM наверное сделают. Во всяком случае для интегратора будет странно юзануть новый фич в FS tools но не зающать кернел ему под стать.

>>сonvert and mkfs will try to use optimized crc32c use hw assisted crc32c on more arches
> Это трекер за 18-19 год мне прислали ,ткнули.А сколько фишек помимо контрольной
> суммы внедрили-до фига,т.к что не фига оказывается у бтрфс стабильный  
> формат,до сих пор появляться ломающие совместимость обновления.

Вы совсем упали с дуба? Это вообще не изменение формата ФС. Просто научили тулсы юзать хардварное ускорение счета CRC32 если оно в системе есть. Представляете себе, CRC32 можно самому в софте посчитать, а можно отдать вон той железке на вход данные, а на выход она CRC32 отгрузит. Это полностью прозрачно с точки зрения совместимости и всего лишь оптимизация скорости на железках которые так умеют.

Ответить | Правка | Наверх | Cообщить модератору

294. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от maximnik0 (?), 17-Янв-21, 07:46 
> Это полностью прозрачно с точки зрения совместимости и всего
> лишь оптимизация скорости на железках которые так умеют.

Теоретически,умудряются и здесь глюки словить .Не помню в каком выпуске ядра при оптимизациях чтоб на аппаратном контролере просчитывать crc32 народ инверсионную ошибку допустил,поправили быстро ,но кое-кто влетел.


Ответить | Правка | Наверх | Cообщить модератору

111. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Ананимас008 (?), 09-Янв-21, 17:51 
Человеческое сжатие, а не как в убогом нтфс лишь с кластером на 4к и убогим зипом.

Возможность быстро прибить кучу бесполезных торентов с котиками или проном. Хоть млрд файлов там, пока твой этот шиндовс будет подсчитывать сколько и чего там удалять.

"ленивый бекап" снапшотами, так что очередной скаченный тобой вирусец с торрентов для игрушек не зашифровал фотки твоих котиков.

Ответить | Правка | К родителю #21 | Наверх | Cообщить модератору

114. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 09-Янв-21, 18:51 
> 4к и убогим зипом.

Вообще-то там NTLZ, чтоли. Хоть он и ни о чем, жмет даже похуже LZ4 и LZO, а распаковывается медленнее. Единственное достоинство - MS это смог накодить в свои лохматые 90е. А потом совместимость...

> "ленивый бекап" снапшотами, так что очередной скаченный тобой вирусец с торрентов для
> игрушек не зашифровал фотки твоих котиков.

Может и не помочь если вырусец диск лобовым доступом покорежит. Впрочем откуда вырусец в *никсах? А в винде zfs вроде и нет толком. Наверное fuse версия даже работает - но тогда виндузоиды ощутят себя как линуксоиды с нтфсом в фузе, который в проц упирается а не в диск.

Ответить | Правка | Наверх | Cообщить модератору

122. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Ананимас008 (?), 09-Янв-21, 19:17 
>Впрочем откуда вырусец в *никсах?

Wine же :)

Ответить | Правка | Наверх | Cообщить модератору

227. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  –1 +/
Сообщение от пох. (?), 12-Янв-21, 10:16 
> как линуксоиды с нтфсом в фузе, который в проц упирается а
> не в диск.

Сказания впопеннета, том восемьсотписятшестой.

Он не упирается в проц.
Внезапно.
Измеризмы на 32битном arm вообще не нашли существенной разницы между fuse и in-kernel реализацией.
Сказание пошло из времен, когда упирался не в проц, а в линуксопроблему (создававшую ненужную нагрузку на проц там, где ее быть не должно).

fuse - ее правильный сумасшедший проектировал, еще в забытые годы хороших программистов и хороших программ. Повторить это вы неспособны, а испортить - скорее всего, да, сможете.

Ответить | Правка | К родителю #114 | Наверх | Cообщить модератору

258. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 13-Янв-21, 04:53 
> Он не упирается в проц.

У top бывают другие идеи на этот счет. Если на быстром диске ядро в полку - это чего?! Может, если ты на зион ноутбучный винч 5400 приделаешь, тогда не упрется наверное.

> Измеризмы на 32битном arm вообще не нашли существенной разницы между fuse и
> in-kernel реализацией.

А это еще зависит от характера доступов. В энных случаях оно в разы медленее. Особенно бесит народ на малохольных роутерах с хилым мипсом, где оно актуально для подхватывания флех в юсб и раздачи их по сети.

> Сказание пошло из времен, когда упирался не в проц, а в линуксопроблему
> (создававшую ненужную нагрузку на проц там, где ее быть не должно).

Не, вот пардон, жрет проц именно фьюз а не линуксное ядро.

> fuse - ее правильный сумасшедший проектировал, еще в забытые годы хороших программистов
> и хороших программ. Повторить это вы неспособны, а испортить - скорее всего, да, сможете.

Чудес не бывает, при нагрузке оно делает дохреналион переключений контекстов в секунду. Что естественно все здорово нагибает. В новых версиях, кстати, это вроде несколько улучшили, так что насчет испортить - вроде бы ровно наоборот все. Впрочем, это пох, у него и синус двух достигает, но к сожалению не тогда когда это позарез надо, а тогда когда это очень некстати.

Ответить | Правка | Наверх | Cообщить модератору

261. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от пох. (?), 13-Янв-21, 09:13 
> У top бывают другие идеи на этот счет. Если на быстром диске ядро в полку - это чего?!

А я знай?
Может, к корявому софту, может к кривому железу, может к неэффективности самой фс под задачу. А может кто-то и big_writes включить забыл (но это надо еще суметь).

Тут некоторые, не будем показывать пальцем, граждане - ceph используют для своей массовой  виртуализации. И, похоже, не считают что переплачивают за процессорные мощности, хотя контора ни разу не благотворительное заведение. Наверное, просто не знают, что у них есть прекрасный, параллельный, in-kernel nfs. Или знают ;-)

> Чудес не бывает, при нагрузке оно делает дохреналион переключений контекстов в секунду.

Повторяю: я, в отличие от некоторых - _тестировал_. Причем на железе, которое сейчас даже в телефоны стесняются ставить.
Разница (для моей задачи, это ни разу не usb2 флэшка в твоем мипсе, где я и искал бы корни проблем) - на уровне с трудом различимом приборами.

Я расстроился, потому что потратил довольно много времени, чтобы эту херню вообще запустить у себя, и ожидал чудес, а "3g" и так просто работала из коробки. И нет, она не использует fuse3.

С которой я ковыряюсь отдельно, и пока тоже что-то щастья не обнаружил (в смысле не нашел конфигурации, способной что-то отдавать с такой скоростью, чтобы вообще заметить разницу - и это в целом неудивительно, все улучшизмы там в userspace, а значит - сомнительные. Говорю же - ту - правильный сумасшедший цыган писал. Сейчас таких не делают.)

P.S. и еще один ньюанс - не забываем выключать kpti и прочую чушь. Вероятно - лучше всего путем установки ядра версии 3.0.последней или рядом что-то. Поскольку оно по настоящему не выключается.
Но это актуально только для amd64 архитектуры.

Ответить | Правка | Наверх | Cообщить модератору

271. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (271), 15-Янв-21, 19:37 
> Может, к корявому софту, может к кривому железу, может к неэффективности самой
> фс под задачу. А может кто-то и big_writes включить забыл (но это надо еще суметь).

Вот буду еще железо и задачи под всякий шит из 90х подбирать! Ты в своем уме? Почему-то замена на фс в ядре немедленно разгоняет все, иногда - в разы.

> Тут некоторые, не будем показывать пальцем, граждане - ceph используют для своей
> массовой  виртуализации. И, похоже, не считают что переплачивают за процессорные
> мощности, хотя контора ни разу не благотворительное заведение. Наверное, просто не
> знают, что у них есть прекрасный, параллельный, in-kernel nfs. Или знают ;-)

Вебмакаки вообще на питоне програмят. Потом раза по три переписывают, если вдруг этот кусок крапа еще и взлетает каким-то чудом. И чего?

> Повторяю: я, в отличие от некоторых - _тестировал_. Причем на железе, которое
> сейчас даже в телефоны стесняются ставить.

Я тоже тестировал, на довольно разном железе, от роутеров до десктопа который и сейчас недурно смотрится на фоне многих других железок. И после этого последние тома ntfs'а и были поперты цаными тряпками.

> Разница (для моей задачи, это ни разу не usb2 флэшка в твоем
> мипсе, где я и искал бы корни проблем) - на уровне с трудом различимом приборами.

На мипсе с флешкой замена этого недоразумения на EXT* почему-то здорово разгоняет все. И вот как-то корень проблемы на EXT* не распостраняется. Черт, да там даже btrfs шевелится, и этот взамен оверхеда хотя-бы имеет что предложить. Ну там несколько накопителей по разным usb, например, так даже быстрее :D

> С которой я ковыряюсь отдельно, и пока тоже что-то щастья не обнаружил
> (в смысле не нашел конфигурации, способной что-то отдавать с такой скоростью,
> чтобы вообще заметить разницу - и это в целом неудивительно,

У тебя видимо напрочь отбитое файлопомойками и мегаэнтерпрайзом мышление, когда переросточный проц, все io-limited, задач нет (файлопомойка же), сервируем 1 терабайтный файл - и там конечно любая фигня работает примерно одинаково, со скоростью io. Но таким тестам грош цена в базарный день, они свойства железа тестируют, проскипав нюансы софта.

> чушь. Вероятно - лучше всего путем установки ядра версии 3.0.последней или
> рядом что-то. Поскольку оно по настоящему не выключается.
> Но это актуально только для amd64 архитектуры.

Я в принципе не собираюсь использовать ядра подобных версий. Даже на роутерах, не говоря уж про воркстэйшн и ноуты. А ты в своем праве пользоваться хоть win95!

Да, кстати, как там твои файлопомойки на нтфс поживают? А то последние пару месяцев маздаю решительно везет на приколы с именно нтфс. То диски рушит fsck (у Рейзера научились?), то вон рядом непривилигерованый юзер систему может урыть - https://habr.com/ru/news/t/537328/ и вокруг.

Ответить | Правка | Наверх | Cообщить модератору

272. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от пох. (?), 15-Янв-21, 20:09 
> У тебя видимо напрочь отбитое файлопомойками и мегаэнтерпрайзом мышление

у тебя его похоже нет вообще, так что даже с пониманием печатного текста проблемы.
Я уже несколько раз повторил, на какой херне я тестировал.

> Но таким тестам грош цена в базарный день, они свойства железа тестируют, проскипав нюансы
> софта.

они тестируют то, что нужно было мне. Никаких причудливых ньюансов у используемого мной софта нет.

Потестировали, убедились, что возня с ручным бэкпортированием in-kernel модуля не стоит сэкономленных пяти процентов производительности и полупроцента загрузки единственного ядра из восьми.
Наверное, если бы я не в основном читал громадные файлы, а писал миллион файлов по килобайту параллельно - разница бы была более существенной. Но у меня нет такой задачи, негде взять миллион.

> Я в принципе не собираюсь использовать ядра подобных версий.

Недостаточно теплое, не липнет? Ну, оок.

Каковы принципы, таков и инженер.

> Да, кстати, как там твои файлопомойки на нтфс поживают?

хорошо поживают. Только опять надо новые 18 терабайт заводить, старые сожраты.

> А то последние пару месяцев маздаю решительно везет на приколы с именно нтфс.

ты б-жественную десяточку home от серверных версий тоже отличать не умеешь? Эксперт по ntfs.
Да и a) не рушит, чинит - только запустить его немного сложно после неудачного обновления - я запущу, не ссы
b) "самое ценное - в комментах". Там вообще ничего не повреждается кроме мнения винды о том что диск нуждается в срочной проверке. Ну и пусть его при себе держит.
Ну и отдельный привет - хранилки не апгрейдят. Ни виндовые, ни линуксные, ни bsdшные.

Только если уж совсем край.

Ответить | Правка | Наверх | Cообщить модератору

279. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (279), 16-Янв-21, 05:34 
> у тебя его похоже нет вообще, так что даже с пониманием печатного текста проблемы.

Ну, раз я еще не помер с голода, наверное какое-то все же есть.

> Я уже несколько раз повторил, на какой херне я тестировал.

Урл?

> они тестируют то, что нужно было мне. Никаких причудливых ньюансов у используемого мной софта нет.

У тебя переклин на энтерпрайзных файлопомойках, с потерей понимания что у людей бывают другие задачи.

> сэкономленных пяти процентов производительности и полупроцента загрузки единственного ядра из восьми.

Это про ZFS? Или что вы там *бэкпортируете* из *кернела*?

> Но у меня нет такой задачи, негде взять миллион.

Зато меня вот например интересует такая банальщина как скорость раскатки на фс Linux Kernel. И не только на мега конфигах но и на десктопе и ноуте. Миллиона там правда нет, но 75К - пожалуйста.

>> Я в принципе не собираюсь использовать ядра подобных версий.
> Недостаточно теплое, не липнет? Ну, оок.

1) Я еще и юзаю некоторые фичи оттуда, от btrfs до wireguard'а. Просто потому что люблю безгеморные технологии.
2) Некоторое мое железо требует более свежих ядер. Например amdgpu.
3) Этот антик врядли сильно секурный, а юзать софт с пачкой known vuln мне "религия не позволяет"
4) Я нахожу девов из mainline конструктивными и приятными в взаимодействии. Они помогут мне замахать любую фигню на которую я наступлю. Но 3.х их уже давно не интересует.

> Каковы принципы, таков и инженер.

Однозначно. Я не арч-некромансер. И принципиально вбивать датчики кверхногами, даже если туго идет я не буду. Облом, да?

> хорошо поживают. Только опять надо новые 18 терабайт заводить, старые сожраты.

Да удачи. В btrfs такое просто. Доткнул винч(и) и вот тебе +n места. И да, я надеюсь твои сказки про не маунтится не были про 3.что-то? :)

> ты б-жественную десяточку home от серверных версий тоже отличать не умеешь? Эксперт по ntfs.

Дык там кернель поди один и тот же. Во всяком случае в 2003/2008 проблемы были 1 в 1 с домашними версиями. Делать Принципиально Иной кернел с принципиально другим ntfs.sys видите ли всем сильно впадлу. А что, индусы к десятке таки стали неленивые?

> Да и a) не рушит, чинит - только запустить его немного сложно
> после неудачного обновления - я запущу, не ссы

Не обязано быть сложно. Скадем если btrfs progs в initrd есть, убить все настолько чтобы даже он не работал - ну даже не знаю, ты наверное и так сможешь, конечно.

> b) "самое ценное - в комментах". Там вообще ничего не повреждается кроме
> мнения винды о том что диск нуждается в срочной проверке.

А также иногда слетает MFT, сообщение про проблему по кольцу при каждом ребуте и вообще нельзя загрузиться и тому подобные приколы. Там старичку фиксов штуки три досталось, один другого стебнее.

> Ну и отдельный привет - хранилки не апгрейдят. Ни виндовые, ни линуксные, ни bsdшные.

Да оно круто как бы, но мир на хранилках не заканчивается.

Ответить | Правка | Наверх | Cообщить модератору

291. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от пох. (?), 16-Янв-21, 11:05 
> Ну, раз я еще не помер с голода, наверное какое-то все же есть.

Ты не поверишь, сколько совсем не помирает с голода, не умея толком прочитать написанное.
Но мы тут не на совете инвесторов, тут это не ценится.

Дальше - все вопросы ровно из неумения читать и пользоваться инструментом под рукой. Ищи, читай написанное, а не свои выдумки, еще раз перечитывай если не дошло с первой попытки. Извини, мне неинтересно. До встречи на совещании инвесторов.

Ответить | Правка | Наверх | Cообщить модератору

37. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +1 +/
Сообщение от Аноним (37), 07-Янв-21, 17:47 
Еще любителям экспериментов можно линукс, фрибсд и опенсолярисовские форки ставить на один диск, сделать просто несколько отдельных датасетов для рутовой фс каждой и все, даже не придется думать кому сколько отдать - свободное пространство будет общим.
Ответить | Правка | К родителю #16 | Наверх | Cообщить модератору

78. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (78), 08-Янв-21, 05:31 
И вот как Openindiana, FreeBSD, Linux на одном HDD сделать?
Ответить | Правка | Наверх | Cообщить модератору

71. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Егор (??), 07-Янв-21, 23:32 
Пусть уж лучше уменьшается при создании снапшота, чем будет уменьшена с самого начала работы постоянно включенным COW.
Ответить | Правка | К родителю #16 | Наверх | Cообщить модератору

115. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 09-Янв-21, 18:57 
> Пусть уж лучше уменьшается при создании снапшота, чем будет уменьшена с самого
> начала работы постоянно включенным COW.

CoW сам по себе производительность не уменьшает. Наоборот - он почти аналог полного журнала при единичной записи, как без журнала совсем. Однако поскольку вся ФС превращается в подобие журнала, есть всякие нюансы. Поэтому кто кого - очень зависит от характера нагрузки. БД какая-нибудь с множеством мелких записей конечно дико зафрагментируется, а огромная кипа метаданных будет и тормозить и место сожрет. Но это лишь один из случаев. В btrfs по этому поводу cow сделали отключаемым.

Ответить | Правка | Наверх | Cообщить модератору

226. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Онаним (?), 12-Янв-21, 10:15 
На ротационных носителях - уменьшает потому, что CoW - это априори безумная фрагментация.
И в целом уменьшает, потому что фигова туча метаданных нужна для его поддержки.
Ответить | Правка | Наверх | Cообщить модератору

259. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (-), 13-Янв-21, 05:38 
> На ротационных носителях - уменьшает потому, что CoW - это априори безумная фрагментация.

Вообще совсем ниоткуда не следует. Если например прога одним куском весь файл переписывает - разницы вообще не будет во многих случаях.

И это зажурналить по честному на обычной ФС - так его надо 2 раза писать, сперва в журнал, потом в основную область. И тут разглагольствования о скорости или надежности идут лесом - выбирайте уж одно из двух. Крутой выбор! А тут все и сразу. Хоть и ценой немного странных свойств.

> И в целом уменьшает, потому что фигова туча метаданных нужна для его поддержки.

Опять же - зависит от паттернов доступа. Показать как в обычной ФС сделать это же самое? А блин торент без преалокации скачайте. XFS какой будет потом 5 минут один дивидюк удалять, чего бы это он?

Ответить | Правка | Наверх | Cообщить модератору

264. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Онаним (?), 13-Янв-21, 10:24 
> Вообще совсем ниоткуда не следует. Если например прога одним куском весь файл переписывает
> А блин торент без преалокации скачайте

Вот как раз на CoW будет задница хоть с преаллокацией, хоть без. На обычной FS можно ещё как-то уйти от этой задницы преаллокацией.

Ответить | Правка | Наверх | Cообщить модератору

280. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Аноним (280), 16-Янв-21, 06:53 
> Вот как раз на CoW будет задница хоть с преаллокацией, хоть без.

Откуда? В идеале оба оформляют 1 экстент и метаданные указывающие на него.

> На обычной FS можно ещё как-то уйти от этой задницы преаллокацией.

А чем обычная FS и CoW в этом аспекте отличаются? В упомянутой ситуации они могут сделать примерно одно и то же, лишь бы регион более-менее непрерывного свободного места был. И если мы об этом, у btrfs есть какой никакой дефраг. У ext4 тоже в принципе есть, с неких пор. А у zfs ... ну тут был iZEN. И известен он тем что офигенный 3-дисковый пул собрал. С аж 18 мегами в секунду на чтение. Странно что нам в этом не нравится, да? Даже учитыая ноутбучность его винчей. И таки нет, вот на zfs он походу ничего с фрагментацией своими торентами уже не сделает, это да, только разобрать к хренам и заново пересобрать.

Ответить | Правка | Наверх | Cообщить модератору

290. "Выпуск OpenZFS 2.0.1, реализации ZFS для Linux и FreeBSD"  +/
Сообщение от Онаним (?), 16-Янв-21, 09:54 
>> Вот как раз на CoW будет задница хоть с преаллокацией, хоть без.
> Откуда? В идеале оба оформляют 1 экстент и метаданные указывающие на него.

Вот только при рандомной записи в тот экстент CoW-based данные раскладывают, увы, не туда, где они должны быть, а просто так, линеечкой. Да, сама запись при этом даже быстрее будет - линейно же, прекрасно. А потом мы пытаемся это читать, и хр-хр-хр др-др-др головы бегают туда-сюда по 100500 раз. К сожалению, медицинский факт. У SSD этой проблемы нет, но SSD и CoW как собаке пятая нога, там свой левелинг внутри :D

Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру