The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..., opennews (ok), 11-Янв-11, (0) [смотреть все]

Сообщения [Сортировка по времени | RSS]


52. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  –2 +/
Сообщение от Анон (?), 12-Янв-11, 15:03 
>> Нет, ну разве не маразм - они для теста zfs берут bsd..
>> В то время как в бенчмарках этот специфический порт zfs проигрывает
>> по скорости оригинальному zfs весьма и весьма.
> Тем не менее, общие свойства ФС из их бенчей - понятны. В
> смысле, у них есть и бенчи где был опенсолярис. Думаете, там
> ZFS выступал принципиально иначе? А фиг, сильные и слабые стороны были
> в том же духе. PostMark он там точно так же с
> треском слил, например. И?

А ты сам-то, дорогой, устриц кушал? В смысле - боевые системы на ZFS гонял, не? Тогда послушай тех, кто их ел.

Бенчи - они вообще нихрена не показатель. Есть реальный перфоманс на реальных системах и задачах. И вот лично мне - он актуальней любых тестов в чьем бы то ни было исполнении.

У меня после перевода на ZFS боевого сервера в два раза уменьшился отклик. А у вас?

Ответить | Правка | Наверх | Cообщить модератору

53. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  +/
Сообщение от ананим (?), 12-Янв-11, 15:08 
ты своими устрицами уже весь форум загадил.
зыж
в общем - где? когда? какая нагрузка? что за организация? что ты подразумевашь под откликом? методика тестирования? и пр. - иначе в сад.
Ответить | Правка | Наверх | Cообщить модератору

54. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  +1 +/
Сообщение от Stax (ok), 12-Янв-11, 19:49 
Представь себе, да. Работал с разными солярками и поднимал решения на zfs. Везде были одни преимущества и увеличения скорости. Хотя особенностей своих куча, и далеко не выходит любую железку, которая работала в других условиях перевести на солярку с zfs, даже если с точки зрения приложений это возможно - чтобы zfs работала как надо, к ней нужно подходить правильно.

zfs имеет массу преимуществ по возможностям и производительности в частности, при переводе задач на виртуализированные серверы с zfs-решением в качестве SAN, или при переходе от групп виртуалок, использующих локальные диски к централизованному хранению. Так же zfs прекрасно работает в NAS-сервере организаций, как для решений "офисная файлопомойка" так и для решений бэкапа. Только в зависимости от нагрузки нужно правильно выбирать и настраивать железо, а не думать, что если взять сервкак с пачкой sata и взгромоздить нексенту и расшарить zfs, то настанет рулез. Если нужно гонять на zfs БД, то все еще сложнее.

А говорить "в два раза отклик" вообще ни о чем. По сравнению с чем? В какой задаче? zfs на какой ОС? SAN, NAS или локальная?

Ответить | Правка | К родителю #52 | Наверх | Cообщить модератору

55. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  –1 +/
Сообщение от Анон (?), 13-Янв-11, 07:48 
>[оверквотинг удален]
> переходе от групп виртуалок, использующих локальные диски к централизованному хранению.
> Так же zfs прекрасно работает в NAS-сервере организаций, как для решений
> "офисная файлопомойка" так и для решений бэкапа. Только в зависимости от
> нагрузки нужно правильно выбирать и настраивать железо, а не думать, что
> если взять сервкак с пачкой sata и взгромоздить нексенту и расшарить
> zfs, то настанет рулез. Если нужно гонять на zfs БД, то
> все еще сложнее.
> А говорить "в два раза отклик" вообще ни о чем. По сравнению
> с чем? В какой задаче? zfs на какой ОС? SAN, NAS
> или локальная?

По сравнению с UFS под Oracle 10 g R2, локальная, система с вебфронтом на основе БД, Солярис 10 10/09.


Ответить | Правка | Наверх | Cообщить модератору

58. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  +/
Сообщение от iZEN (ok), 13-Янв-11, 10:25 
>> А говорить "в два раза отклик" вообще ни о чем. По сравнению
>> с чем? В какой задаче? zfs на какой ОС? SAN, NAS
>> или локальная?
> По сравнению с UFS под Oracle 10 g R2, локальная, система с
> вебфронтом на основе БД, Солярис 10 10/09.

А, ну да, вы не пробовали UFS2. по сравнению с ней UFS1 действительно тормоз.

Кстати, на десктопе UFS2 опережает по скорости записи и отклику ZFS примерно на 10-15%.


Ответить | Правка | Наверх | Cообщить модератору

56. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  –1 +/
Сообщение от Анон (?), 13-Янв-11, 07:56 
>[оверквотинг удален]
> подходить правильно.
> zfs имеет массу преимуществ по возможностям и производительности в частности, при переводе
> задач на виртуализированные серверы с zfs-решением в качестве SAN, или при
> переходе от групп виртуалок, использующих локальные диски к централизованному хранению.
> Так же zfs прекрасно работает в NAS-сервере организаций, как для решений
> "офисная файлопомойка" так и для решений бэкапа. Только в зависимости от
> нагрузки нужно правильно выбирать и настраивать железо, а не думать, что
> если взять сервкак с пачкой sata и взгромоздить нексенту и расшарить
> zfs, то настанет рулез. Если нужно гонять на zfs БД, то
> все еще сложнее.

Сложнее для кого? Достаточно рекомендации выполнить вот эти:
http://www.solarisinternals.com/wiki/index.php/ZFS_for_Datab...
Что до Оракла, то там есть свой мануал с рекомендациями. Которым достаточно скрупулезно последовать. Нашли блин проблему для грамотного DBA...

Ответить | Правка | К родителю #54 | Наверх | Cообщить модератору

59. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  +/
Сообщение от Sergeyemail (??), 13-Янв-11, 14:30 
> А ты сам-то, дорогой, устриц кушал? В смысле - боевые системы на
> ZFS гонял, не? Тогда послушай тех, кто их ел.

Покажите, пожалуйста, хоть одну крупную инсталляцию ZFS. Не в специализированных железках типа OpenStorage и не местечковых конторках а-ля Horh&Hoof Ink. с 3 серверами и десятком пользователей.

Ответить | Правка | К родителю #52 | Наверх | Cообщить модератору

63. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  +/
Сообщение от User294 (ok), 17-Янв-11, 10:49 
> А ты сам-то, дорогой, устриц кушал? В смысле - боевые системы на
> ZFS гонял, не? Тогда послушай тех, кто их ел.

Сильно не гонял, только слегка видел. Как-то не хоется возиться с ос где оно есть в продакшновом состоянии, уж извините. И чего вас слушать то? Вы готовы сказать что-то дельное и интересное? Гнутье пальцев и бряцание причандалами - неинтересно. Бенчмарки дают хотя-бы пищу для размышлений. Они не истина в последней инстанции и вообще показывают лишь соотношение сил на конкретном хардваре, в конкретных нагрузках. При этом совсем не исключено что изменение хардвара или нагрузок может поставить все с ног на голову. И тем не менее, даже это позволяет понять у кого какие особенности, сильные и слабые места у кого есть. Не всегда точно и объективно. Но это все-таки лучше чем совсем никак.

> Бенчи - они вообще нихрена не показатель.

Бенчи всего лишь могут показать сильные и слабые стороны той или иной ФС, с чем она справляется лучше а с чем хуже при энных условиях. В лучшем случае может получиться понять сильные и слабые стороны тех или иных инженерных решений при испытании конструкции уже на практике.

> Есть реальный перфоманс на реальных системах и задачах.

Спасибо, Кэп! Что бы я без вас делал? Кстати, бенчмарки меряют некий перфоманс на неких задачах. Возможно даже для кого-то эти задачи будут реальными. Вы об этом не думали? Да, бенчмарки не гарантируют вам что вы увидите точно такие же соотношения на ВАШЕМ железе и задачах, если вы об этом. И чего? :)

> И вот лично мне - он актуальней любых тестов в чьем бы то ни было исполнении.

А ответите на один интересный вопрос, сэр? Если совсем проигнорировать все бенчмарки, то откуда брать информацию о сильных и слабых сторонах дизайнов разныз файловых систем? Ну не из маркетоидного же бреда, правда? :)

> У меня после перевода на ZFS боевого сервера

(отбирая у прошлого оратора фуражку).Поработаю ка и я Кэпом, чтоли? :)
1. Кэп намекает, что сервера бывают РАЗНЫЕ. С чертовски разными задачами. Разными конфигурациями, разным соотношением мощности различных компонентов и прочая. И то что хорошо для сервера грузящего "исошники" бочками - не обязательно хорошо для серверов БД или почтовиков, например.
2. Кэп намекает что вы забыли уточнить что на что вы заменили, для начала.
3. Кэп намекает что вы не предоставили никаких бенчмарков и сравнить столько же ФС сколько сравнил фороникс.

Кэп считает что ваших данных недостаточно для того чтобы сделать далеко идущие выводы или сравнить разные файловые системы, не говоря уж о понимании свойств.

> в два раза уменьшился отклик.

Невольно вспомнился анекдот, позволю себе префразировать:
- ZFS лучше чем остальные!
- Чем?!
- Чем остальные!

> А у вас?

Да, да, знаем. "На 30% больше свежести" (c) реклама :))). Только вот ТЕХНИЧЕСКИХ аргументов, достаточных для понимания того что и как - я у вас не вижу. У вас с телерекламерами есть кое что общее. Вы, как и они, не указали как вы получили ваши "в 2 раза" с достаточной детализацией, чтобы можно было хотя-бы грубо понять что произошло и почему оно - вот так. Совсем как рекламеры с их "на 30% больше свежести" не указывают как именно они там замеряли свои проценты свежести :). Не хочу ничего сказать, но при таком подходе - даже чудикам из фороникса доверия в разы больше. Они по крайней мере описывают что и как мерялось. Хоть я и не понимаю некоторые их бенчмарки или нахожу некоторые их бенчмарки странными (например, похоже что их бенчмарки подыгрывают ФС со включенным сжатием, при том реальные данные скорее всего будут подыгрывать несколько меньше бенчмарковых).

Ответить | Правка | К родителю #52 | Наверх | Cообщить модератору

72. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  +/
Сообщение от Аноним (-), 18-Янв-11, 16:54 
>[оверквотинг удален]
> Сильно не гонял, только слегка видел. Как-то не хоется возиться с ос
> где оно есть в продакшновом состоянии, уж извините. И чего вас
> слушать то? Вы готовы сказать что-то дельное и интересное? Гнутье пальцев
> и бряцание причандалами - неинтересно. Бенчмарки дают хотя-бы пищу для размышлений.
> Они не истина в последней инстанции и вообще показывают лишь соотношение
> сил на конкретном хардваре, в конкретных нагрузках. При этом совсем не
> исключено что изменение хардвара или нагрузок может поставить все с ног
> на голову. И тем не менее, даже это позволяет понять у
> кого какие особенности, сильные и слабые места у кого есть. Не
> всегда точно и объективно. Но это все-таки лучше чем совсем никак.

Я объясню, почему я на абстрактные бенчи класть хотел. Однажды в моей практике стоял ребром выбор платформы. Либо АМД с Оптероном, либо UltraSPARC. Была реальная задача, взятая клоном с боевого сервера. Была поставлена на Ниагару, были сделаны все тюнинги - рекомендованные двумя основными вендорами + собственный немаленький опыт профессионального тюнинга. И Ниагара, хваленая и прославленная, слила по тяжелой, всухую, в идентичных условиях, АМД. Всухую - это значит, что разбег по скорости отклика на основном функционале был более, чем в четыре раза.

Опаньки?

>[оверквотинг удален]
> ФС, с чем она справляется лучше а с чем хуже при
> энных условиях. В лучшем случае может получиться понять сильные и слабые
> стороны тех или иных инженерных решений при испытании конструкции уже на
> практике.
>> Есть реальный перфоманс на реальных системах и задачах.
> Спасибо, Кэп! Что бы я без вас делал? Кстати, бенчмарки меряют некий
> перфоманс на неких задачах. Возможно даже для кого-то эти задачи будут
> реальными. Вы об этом не думали? Да, бенчмарки не гарантируют вам
> что вы увидите точно такие же соотношения на ВАШЕМ железе и
> задачах, если вы об этом. И чего? :)

И ничего. Сам на все ответил. И зачем они тогда?

>> И вот лично мне - он актуальней любых тестов в чьем бы то ни было исполнении.
> А ответите на один интересный вопрос, сэр? Если совсем проигнорировать все бенчмарки,
> то откуда брать информацию о сильных и слабых сторонах дизайнов разныз
> файловых систем? Ну не из маркетоидного же бреда, правда? :)

Лично я - когда вопрос стоит таким образом - беру и разворачиваю демо-сцену. Загоняю туда реальную систему и гоняю ее до умопомрачения. Личные тесты. Ничего большего. И все вижу сразу, что где и почем.

>> У меня после перевода на ZFS боевого сервера
> (отбирая у прошлого оратора фуражку).Поработаю ка и я Кэпом, чтоли? :)
> 1. Кэп намекает, что сервера бывают РАЗНЫЕ. С чертовски разными задачами. Разными
> конфигурациями, разным соотношением мощности различных компонентов и прочая. И то что
> хорошо для сервера грузящего "исошники" бочками - не обязательно хорошо для
> серверов БД или почтовиков, например.
> 2. Кэп намекает что вы забыли уточнить что на что вы заменили,
> для начала.
> 3. Кэп намекает что вы не предоставили никаких бенчмарков и сравнить столько
> же ФС сколько сравнил фороникс.

Я не занимаюсь бенчмарками. Для меня - и моего прямого руководства - результаты, полученные лично мной на моих серверах и моих задачах - единственный критерий принятия решения. Сравнивать десятки ФС - не моя работа. Моя работа - выжимать из моей платформы максимум. Моя платформа - исторически и по объективным показателям - Солярис на ZFS. В течение последних 14 лет. Еще вопросы?

> Кэп считает что ваших данных недостаточно для того чтобы сделать далеко идущие
> выводы или сравнить разные файловые системы, не говоря уж о понимании
> свойств.

О том, как лично я и мои ЛПР делаем выводы - читай выше.
О понимании помолчим. Я знаю ZFS изнутри. На уровне сорцов. А вы?

>> в два раза уменьшился отклик.
> Невольно вспомнился анекдот, позволю себе префразировать:
> - ZFS лучше чем остальные!
> - Чем?!
> - Чем остальные!

Истинно так. При хорошей прокладке между консолью и креслом.

>[оверквотинг удален]
> "в 2 раза" с достаточной детализацией, чтобы можно было хотя-бы грубо
> понять что произошло и почему оно - вот так. Совсем как
> рекламеры с их "на 30% больше свежести" не указывают как именно
> они там замеряли свои проценты свежести :). Не хочу ничего сказать,
> но при таком подходе - даже чудикам из фороникса доверия в
> разы больше. Они по крайней мере описывают что и как мерялось.
> Хоть я и не понимаю некоторые их бенчмарки или нахожу некоторые
> их бенчмарки странными (например, похоже что их бенчмарки подыгрывают ФС со
> включенным сжатием, при том реальные данные скорее всего будут подыгрывать несколько
> меньше бенчмарковых).

Учебный класс по администрированию ZFS находится не здесь. Научить, как готовить кошек - могу только за деньги. :)

Ответить | Правка | Наверх | Cообщить модератору

78. "Релиз ФС Hammer 5. Сравнение производительности Hammer, ZFS,..."  +/
Сообщение от User294 (ok), 20-Янв-11, 18:01 
> Я объясню, почему я на абстрактные бенчи класть хотел.

Кладите наздоровье. А я все-таки предпочитаю смотреть что на них есть для понимания свойств и проблем различных дизайнов ФС и прочая.

> значит, что разбег по скорости отклика на основном функционале был более,
> чем в четыре раза.

Я рад за вас.

> Опаньки?

Что - опаньки? Нормальный специалист, зная задачу, ее типовые операции и сильные и слабые стороны железа и технологий, по хорошему имхо должен бы быть в состоянии прикинуть что приблизительно будет БЕЗ вбубухивания денег в реальное железо для постановки натурных экспериментов и слегка до этого.  

>> что вы увидите точно такие же соотношения на ВАШЕМ железе и
>> задачах, если вы об этом. И чего? :)
> И ничего. Сам на все ответил. И зачем они тогда?

Ну, для лично меня они полезны тем что позволяют составить впечатление о свойствах тех или иных ФС и их соотношениях в неких условиях. Потенциально понимая сильные и слабые стороны той или иной ФС. При этом можно как минимум грубо прикинуть что будет себя вести лучше а что хуже на той или иной задаче.

> Лично я - когда вопрос стоит таким образом - беру и разворачиваю демо-сцену.

Это, разумеется, наиболее реалистично, но как бы денег стоит и времени требует. Кроме того - хорошо бы понимать чего разворачивать, и что будет оптимально для той или иной задачи. Бенчи в этом плане позовляют заиметь некое представление о том какие вообще слабые и сильные стороны есть у разных ФС. Например, XFS хорошо работает с большими файлами но не особо хорошо с мелкими. Это не слишком меняется по конфигурациям (хотя и меняется по версиям ядра - в новых версиях ядра сие подтянули, но все-таки).

> Загоняю туда реальную систему и гоняю ее до умопомрачения. Личные
> тесты. Ничего большего. И все вижу сразу, что где и почем.

До умопомрачения? Спасибо. А я предпочитаю сперва прикинуть хотя-бы в какую сторону стоит идти. Мне нравится понимать что, как и почему происходит, и почему это происходит именно так. Я не собираюсь быть тупой исполнительной обезьяной.

> Я не занимаюсь бенчмарками. Для меня - и моего прямого руководства -
> результаты, полученные лично мной на моих серверах и моих задачах -
> единственный критерий принятия решения.

Ага, все у вас просто что писец. Взять тот же ваш пример с амд и ниагарой. Представим себе что повезло чуть меньше. И у нас ЕЩЕ НЕТ ни сервака на ниагаре, ни сервака на амд. А решение принять надо, и надо что-то купить, чтобы было. Хорошо бы не промазать с выбором, разумеется. Вы бы как поступили в такой ситуации? oO

> Сравнивать десятки ФС - не моя работа.

Тогда как вы узнаете что ваше решение - хорошее? Узнать об этом можно только сравнив с другими.

> Моя работа - выжимать из моей платформы максимум. Моя платформа -
> исторически и по объективным показателям - Солярис на ZFS. В течение
> последних 14 лет. Еще вопросы?

Нет, вопросов больше не имею. Спасибо что подтвердили подозрения. Видимо вы уперты рогом в солярис и ZFS, а потому в принципе не способны представить себе такую вещь как сравнение разных ФС. Поэтому даже если другая файловая система сможет вдвое лучше, вы на это плюнете и будете юзать солярис и ZFS, даже если вашему шефу и придется распереться на вдвое большее количество серверов, вбухав на вас в 2 раза больше денег. Поэтому все что вы можете - это вопить о том как солярис и ZFS круты. Другого то вы все-равно видимо не умеете, бенчмарков не проводили, ну и все такое. Я допускаю что вы научились тюнить вашу систему (чтобы за 14 лет этому не научиться - надо быть совсем уж деревянным). Однако у любого инструмента есть сильные и слабые стороны. И если инструмент в чем-то не силен, совсем не факт что тюнингом это исправится. Я теперь понимаю ваш бухтеж про бенчи. Ведь они наглядно демонстрируют что для некоторых ворклоадов ZFS совсем не подарок. Скорее всего вы попросту избегаете такие задачи, или решаете их неоптимально. Бывает :)

> О том, как лично я и мои ЛПР делаем выводы - читай выше.
> О понимании помолчим. Я знаю ZFS изнутри. На уровне сорцов. А вы?

Вы скорее всего знаете его лучше меня. С чем я вас и поздравляю. Я всего лишь вкуривал (ну, пытался) в базовые структуры оного и т.п. чисто из интереса. Чтобы понять что оно из себя представляет в общих чертах. Немного посмотреть на сорсы пришлось, но не более того. Вы в вашем праве считать данный дизайн панацеей и пхать в каждую дырку. Все равно вам больше пихать толком нечего. Ну не UFS же ископаемый, так? Это не по сравнению с ним ли у вас там латентность в разы упала? Похвастайтесь уж? А для меня это всего лишь еще один дизайнов ФС, я не собираюсь его рассматривать как The One and The only, единственно правильный и панацею на все про все. Потому что я отлично усвоил что панацеи не бывает, а у любого дизайна ФС можно найти слабое место на котором какая-то иная ФС его прилично обойдет. В силу того что ее особенности устройства дисковых структур и прочая - лучше легли на конкретную задачу, например.  

>> - ZFS лучше чем остальные!
>> - Чем?!
>> - Чем остальные!
> Истинно так. При хорошей прокладке между консолью и креслом.

Угу, конечно. Вас послушать так это прямо грааль какой-то. Заруливает всех в хлам на любых ворклоадах и на любом железе, невзирая на то что батлнеки разные, структуры разные и прочая.

Правда вот я вижу одно упущеньице: а СРАВНИВАЛОСЬ то с чем? Ведь все познается в сравнении. Судя по всему - ни с чем особо. В лучшем случае поди с каким-то ископаемым хламом типа UFS. Подтверждаете мои подозрения на этот счет? А то я грешным делом подозреваю что вы рассказали о улучшении латентности vs что-то такое, т.е. ископаемое и не развиваемое напрочь. Форониксы же сравнивают всей кучей. Не делая из ZFS фетиш. Да, не идеально. Да, не тюня все и вся. И все-таки даже их бенчмарки позволяют заиметь некое представление о свойствах ФС и их соотношениях. То что вам это знание бесполезно т.к. вы уперты рогом в соляру и выбирать вам тупо не из чего - так это не мои проблемы. А я вот с интересом посмотрю кто как в дефолтовой конфиге соотнсится. Если ФС типа А лучше ФС типа Б в 10 раз под некоей нагрузкой, логично пытаться выжать что-то из ФС типа А, потому что этот путь выглядит явно перспективнее и скорее всего позволит или поиметь меньше геморроя или получить заведомо более хороший результат.

>> включенным сжатием, при том реальные данные скорее всего будут подыгрывать несколько
>> меньше бенчмарковых).
> Учебный класс по администрированию ZFS находится не здесь.

Так мне и не нужны ваши классы. А нафига? Копаться в древнем *никсе с кучей фирменных проблем и жлобским вендором - ваше право как старого зубра со стажем, который нашел свю гавань и уже не может или не хочет ничего нового знать, но еще не просрал старые умения. А мне такое "счастье" никуда не уперлось. Потому что у меня какие-то более другие понятия о этом самом счастье. И мне не светит перспектива заложиться на одну жлобскую контору. Уже назакладывался раньше, так что второй раз на те же грабли - ни за что на свете.

> Научить, как готовить кошек - могу только за деньги. :)

Боюсь, не будет мне интересно ваше обучение. Я поучусь готовке кошек сам, или у других, и это будут кошки более других пород. Так что не получится у вас подзаработать. Максимум что вам светит - немного мне вправить мозг, если мое понимание устройства ZFS слишком кривое. К сожалению оплату за это обещать не могу, только fun от макания меня в мои оплошности как масксимум. Но идеальное знание ZFS мне в принципе и не требуется. Скорее, я хочу просто понимать какие в природе бывают дизайны ФС и какие кто инженерные решения применяет в ФС, чем они хороши и плохи. Этакий научный интерес, чисто для души. Упражнение для мозгов чтобы они не ржавели, чтоли.

Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру