The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы
правила/FAQ
поиск
регистрация
вход
слежка
RSS


Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Открыт код HDDSuperClone, программы для копирования информации с неисправных жестких дисков, opennews (??), 22-Авг-22, (0) [смотреть все]

Сообщения [Сортировка по времени | RSS]


5. "Открыт код HDDSuperClone, программы для копирования информац..."  –1 +/–
Сообщение от Аноним (5), 22-Авг-22, 10:03 
чем это лучше dd?
Ответить | Правка | Наверх | Cообщить модератору

7. "Открыт код HDDSuperClone, программы для копирования информац..."  +2 +/–
Сообщение от Аноним (4), 22-Авг-22, 10:05 
Основная фишка таких прог - быстро большими блоками копировать то, что еще копируется, а потом медленно маленькими блоками по 100500 попыток пытаться выжать то, что больше не копируется. Иногда помогает.
Ответить | Правка | Наверх | Cообщить модератору

95. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (-), 22-Авг-22, 17:30 
> Основная фишка таких прог - быстро большими блоками копировать то, что еще
> копируется, а потом медленно маленькими блоками по 100500 попыток пытаться выжать
> то, что больше не копируется. Иногда помогает.

Это не просто иногда помогает, но и спасает винч от полной кончины в процессе. Если там скажем запил - лучше уйти из нечитающейся зоны по бырому, иначе пыль от запила раскидается дальше, станет сильно хуже, в какой-то момент винч решит что этот мир для него слишком жесток и в лучшем случае отвалится в какой-нибудь safe mode который вообще обычным софтом из линуха не больно уже почитаешь.

Ответить | Правка | Наверх | Cообщить модератору

209. "Открыт код HDDSuperClone, программы для копирования информац..."  +1 +/–
Сообщение от Аноним (209), 23-Авг-22, 08:48 
Знаете, что еще помогает? Бэкапы.
Ответить | Правка | К родителю #7 | Наверх | Cообщить модератору

221. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (221), 23-Авг-22, 11:02 
Люди делятся на тех, кто ещё не делает бэкапы, и кто уже делает.
Ответить | Правка | Наверх | Cообщить модератору

237. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Иисус (?), 23-Авг-22, 15:57 
На тех, кто ещё не тестирует бекапы, и кто тестирует. А на ноль делить нельзя.
Ответить | Правка | Наверх | Cообщить модератору

10. "Открыт код HDDSuperClone, программы для копирования информац..."  +2 +/–
Сообщение от Аноним (10), 22-Авг-22, 10:13 
Если dd наткнется на сбойный сектор, прекратит чтение. Ddrescue и сабж пропустит сбойный сектор и продолжит дальше. Затем вернётся и потихоньку начнет пытаться прочитать как можно больше из сбойного места.
Ответить | Правка | К родителю #5 | Наверх | Cообщить модератору

15. "Открыт код HDDSuperClone, программы для копирования информац..."  +5 +/–
Сообщение от Nikolai (??), 22-Авг-22, 10:33 
не вводите людей в заблуждение, у dd есть опции работы со сбойными секторами, такие как noerror например
Ответить | Правка | Наверх | Cообщить модератору

18. "Открыт код HDDSuperClone, программы для копирования информац..."  +1 +/–
Сообщение от Прохожий (??), 22-Авг-22, 10:47 
noerror действует несколько иначе - он просто игнорирует ошибки и продолжает копировтаь дальше, не пытаясь перечитывать сбойные данные, а здесь они именно перечитываются снова и снова в попытках прочитать их.
Ответить | Правка | Наверх | Cообщить модератору

23. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Nikolai (??), 22-Авг-22, 11:23 
> noerror действует несколько иначе - он просто игнорирует ошибки и продолжает копировтаь
> дальше, не пытаясь перечитывать сбойные данные, а здесь они именно перечитываются
> снова и снова в попытках прочитать их.

перечитал предыдущее сообщение еще раз, спасибо )
интересно, надо будет почитать поподробнее про прогу

Ответить | Правка | Наверх | Cообщить модератору

96. "Открыт код HDDSuperClone, программы для копирования информац..."  +2 +/–
Сообщение от Аноним (96), 22-Авг-22, 17:34 
> не вводите людей в заблуждение, у dd есть опции работы со сбойными
> секторами, такие как noerror например

У него нет продвинутой логики чтения как у ddrescue/myrescue/whdd/сабжа, когда при ошибке чтения при начальном вычитывании скипается достаточно большой блок, чтобы уйти из поврежденной зоны, сперва отстроив более-менее образ в первом приближении, а потом - "как пойдет".

И еще они ведут read log или bitmap того что прочлось, так что при прерывании операции или уточняющем проходе могут соваться только в то что не прочитано. Обычный dd такими вещами не парится, а при вычитывании нескольких терабайтов с механики это очень даже аргумент.

С обычным софтом вообще может так выйти что винч помрет на середине процесса от чрезмерной долбежки в порушеный сегмент - при этом еще половины образа в хвосте не было совсем и продолбано очень много. Вон те стратегии чтения минимизируют шанс таких сюрпризов.

Ответить | Правка | К родителю #15 | Наверх | Cообщить модератору

191. "Открыт код HDDSuperClone, программы для копирования информац..."  –3 +/–
Сообщение от Аноним (187), 23-Авг-22, 06:52 
>а при вычитывании нескольких терабайтов с механики это очень даже аргумент.

Несколько терабайт с механики без аппаратного рейда - это из области садомазомеханики.
Новое слово в технопсихопаталогии. Сами себе устраиваете техноболь.
Уж не обессудьте :)

Ответить | Правка | Наверх | Cообщить модератору

214. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (17), 23-Авг-22, 09:39 
Успокойся уже, аппаратный рейд это тот же самый софтовый но на отдельном процессоре.
Собрал ты например пачку дисков на одном компьютере в raidz2 и расшарил с другим через iscsi - это софтовый рейд или аппаратный? Для первого - софтовый, для второго - аппаратный. Как видишь, все дело в точке зрения, а суть осталась одна и та же. И не забывай страшилку что грохнувшийся аппаратный контроллер может потянуть за собой весь рейд (на другом может не поднятся).
Ответить | Правка | Наверх | Cообщить модератору

225. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (-), 23-Авг-22, 11:29 
> Несколько терабайт с механики без аппаратного рейда - это из области садомазомеханики.

Ну, елки, купи уже всем хомячкам планеты по крутому RAID контроллеру и успокойся. Без этого твой совет вообще совсем никак не отменит полезность программ типа сабжа.

Ответить | Правка | К родителю #191 | Наверх | Cообщить модератору

13. "Открыт код HDDSuperClone, программы для копирования информац..."  +2 +/–
Сообщение от Аноним (13), 22-Авг-22, 10:21 
Совет от бывалых. Никогда не бекаптесь при помощи dd.
Ответить | Правка | К родителю #5 | Наверх | Cообщить модератору

24. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (24), 22-Авг-22, 11:24 
делал бекапы на живую без снапшотов, а виноват dd? :)
Ответить | Правка | Наверх | Cообщить модератору

26. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (26), 22-Авг-22, 11:25 
Виноват тот кто делает бекапы через dd, любой.
Ответить | Правка | Наверх | Cообщить модератору

29. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от keydon (ok), 22-Авг-22, 11:39 
Всю жизнь бекапились и ничего. Но долго.
Ответить | Правка | К родителю #13 | Наверх | Cообщить модератору

42. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (26), 22-Авг-22, 12:55 
Всю жизнь бекапился и ни разу не разбекапливался!
Ответить | Правка | Наверх | Cообщить модератору

114. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Neon (??), 22-Авг-22, 20:37 
А вот по закону подлости стоит один раз не забекапиться.))) Вот тут то и придет песец.)))
Ответить | Правка | Наверх | Cообщить модератору

36. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (36), 22-Авг-22, 12:19 
ща бы tar прямо под ext4 написать
Ответить | Правка | К родителю #13 | Наверх | Cообщить модератору

38. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от YetAnotherOnanym (ok), 22-Авг-22, 12:41 
Ну почему же? Всё остановить, отмонтировать, слить имидж по dd, потом примонтировать обратно и всё запустить. Хотя сам я так не делаю.
Ответить | Правка | К родителю #13 | Наверх | Cообщить модератору

48. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (12), 22-Авг-22, 13:23 
Если dd отвалится в процессе, это будет ммм как минимум весьма неприятно. Для дампов удобнее и безопаснее всего использовать исключительно GNU ddrescue. Правда, этот вариант только для восстановления данных, при использовании отмонтировать и ждать пока данные скопируются не вариант, да и бэкапы разделов/дисков вещь весьма специфическая в любом случае.
Ответить | Правка | Наверх | Cообщить модератору

43. "Открыт код HDDSuperClone, программы для копирования информац..."  +2 +/–
Сообщение от Аноним (17), 22-Авг-22, 12:56 
аноним выше ничего не писал про бэкап:
> чем это лучше dd?
> Совет от бывалых. Никогда не бекаптесь при помощи dd.

а тут бывалый сам написал про бэкап, сам это поругал, и сам себя похвалил за то что поругал бэкап при помощи dd который сам и предложил.

ну, молодец, что.

напиши еще в clonezilla, а то они dd используют для некоторых разделов (криптованных там, служебных для винды, zfs и прочих разных непонятных разделов)

Ответить | Правка | К родителю #13 | Наверх | Cообщить модератору

93. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (93), 22-Авг-22, 17:26 
Клонирование != бэкап.
Ответить | Правка | Наверх | Cообщить модератору

99. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (198), 22-Авг-22, 17:43 
Сохранение образа диска != клонирование. Для этого надо образ диска развернуть на другой диск. Либо на тот же самый, что эквивалентно накатыванию бэкапа.
Ответить | Правка | Наверх | Cообщить модератору

109. "Открыт код HDDSuperClone, программы для копирования информац..."  –1 +/–
Сообщение от Аноним (93), 22-Авг-22, 20:10 
Как скажешь. Сути не меняет: образ диска — плохой бэкап.
Ответить | Правка | Наверх | Cообщить модератору

110. "Открыт код HDDSuperClone, программы для копирования информац..."  +1 +/–
Сообщение от Аноним (110), 22-Авг-22, 20:27 
образ диска - бэкап всей системы. ты тут уже все ветки за***ал с потрясающей по своей грандиозностью мыслью что бэкапить можно только отдельные файлы. прикинь - нет. делать бэкапы всей системы целиком имеет свой смысл и назначение.
Ответить | Правка | Наверх | Cообщить модератору

117. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (93), 22-Авг-22, 20:39 
> ты тут уже все ветки

Ты меня с кем-то путаешь.

> делать бэкапы всей системы целиком имеет свой смысл и назначение.

Возможно. Но я лет пятнадцать как отошёл от конфигурации серверов вручную. Они у меня сразу загружаются настроенные, даже после cat /dev/zero > /dev/sda, так что бэкапить всё целиком для меня бессмысленное занятие. А на локалхосте и rsync отлично справится.

Ответить | Правка | Наверх | Cообщить модератору

65. "Открыт код HDDSuperClone, программы для копирования информац..."  +1 +/–
Сообщение от Neandertalets (ok), 22-Авг-22, 14:14 
Снимаю dd периодически образ с системного диска, флешек. Иногда накатываю обратно или делаю клоны.
Проблем не помню.
Ну а бэкап файлов да, надо делать другими инструментами.
Ответить | Правка | К родителю #13 | Наверх | Cообщить модератору

98. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (96), 22-Авг-22, 17:38 
> Снимаю dd периодически образ с системного диска, флешек.

Маленький нюанс в том что он должен быть отмонтирован - или readonly. В противном случае ФС может быть не консистентной "от слова вообще". Операционка может поменять блоки ФС по ходу дела. Если этот момент понимать, ноу проблем. Но даже понимая можно прошляпить RW mount и нехило налететь. Особенно на системном диске.

Ответить | Правка | Наверх | Cообщить модератору

100. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Neandertalets (ok), 22-Авг-22, 17:44 
>> Снимаю dd периодически образ с системного диска, флешек.
> Маленький нюанс в том что он должен быть отмонтирован - или readonly.
> В противном случае ФС может быть не консистентной "от слова вообще".
> Операционка может поменять блоки ФС по ходу дела. Если этот момент
> понимать, ноу проблем. Но даже понимая можно прошляпить RW mount и
> нехило налететь. Особенно на системном диске.

Ну это понятно. Я уж про что-то совсем странное стал думать.
А так да: флешки отмонтированные бэкаплю, и системный диск - загрузившись с ливцд.
Спасибо волшебному IODD! :-D

Ответить | Правка | Наверх | Cообщить модератору

141. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (-), 22-Авг-22, 22:33 
> А так да: флешки отмонтированные бэкаплю, и системный диск -
> загрузившись с ливцд.

Это какой-то реально неандертальский способ бэкапа, требующий вырубить работаюшую систему и получить неюзабельный на довольно ощутимое время компьютер, что вызывает определенные вопросы насчет практичности этого метода.

> Спасибо волшебному IODD! :-D

Без понятия что это если честно.

Ответить | Правка | Наверх | Cообщить модератору

143. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Neandertalets (ok), 22-Авг-22, 22:46 
>> А так да: флешки отмонтированные бэкаплю, и системный диск - загрузившись с ливцд.
> Это какой-то реально неандертальский способ бэкапа, требующий вырубить работаюшую систему
> и получить неюзабельный на довольно ощутимое время компьютер, что вызывает определенные
> вопросы насчет практичности этого метода.

Ну не серверы же бекапятся, а вот содрать с ноута, например, систему, когда ноут надо отдать в сервис. И что такого в неюзабельности некоторое время домашней машины - не знаю.
Для серверов свой софт, не переживай. Но дд тоже полезен.

Ответить | Правка | Наверх | Cообщить модератору

152. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (215), 22-Авг-22, 23:20 
> Ну не серверы же бекапятся, а вот содрать с ноута, например, систему,
> когда ноут надо отдать в сервис.

Если в сервис - ну ок, еще может быть. Хотя можно и просто винч при этом вытащить, имхо. Но мне вот в сервис ни разу не требовалось, а для других случаев практичность этого метода бэкапа системного диска...

> И что такого в неюзабельности некоторое время домашней машины - не знаю.

Ну как, я обычно не запускаю компьютеры чтобы туповейтить на них. Я ими пользуюсь и туповэйтинг меня напрягает. А если я компом совсем не пользуюсь, зачем я врубил это вообще?

> Для серверов свой софт, не переживай. Но дд тоже полезен.

dd конечно полезен, но имеет и свои лимиты. И вот именно средство, именно бэкапа, особенно системного диска он все же весьма условно. Он средство создания или записи образа дисков, а также инструмент для их компоновки. Ну там бутсектор в уже готовый образ с ФС и разделами им подпихнуть - нормально. Но вот средство бэкапа он довольно условное.

Ответить | Правка | Наверх | Cообщить модератору

116. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Neon (??), 22-Авг-22, 20:38 
dd медленно работает, для создание образов есть более быстрые специализированные проги
Ответить | Правка | К родителю #65 | Наверх | Cообщить модератору

119. "Открыт код HDDSuperClone, программы для копирования информац..."  +1 +/–
Сообщение от Neandertalets (ok), 22-Авг-22, 20:46 
> dd медленно работает, для создание образов есть более быстрые специализированные проги

С 128 Гб ССД образ снимается минут 11-12.
Сразу его сжимать pigz -8 -p8 > image.gz

Ответить | Правка | Наверх | Cообщить модератору

247. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (-), 29-Авг-22, 22:16 
> С 128 Гб ССД образ снимается минут 11-12.
> Сразу его сжимать pigz -8 -p8 > image.gz

Никогда не копировал винч на несколько терабайт? Там вероятность поймать на таких площадх парочку бэдов, на видавшем виды девайсе, заметно отличная от ноля. И мне потом чего, все терабайты с неспешного винча заново читать? Да ладно?! А вон те софтины с логами или битмапами чтения и скипанут проблемное, и при новой попытке будут ломиться только в то что по факту не прочлось. Так что шансы снять образ взятого наобум винча в приемлимом виде сильно повышается.

Ответить | Правка | Наверх | Cообщить модератору

248. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Neandertalets (ok), 29-Авг-22, 22:42 
>> С 128 Гб ССД образ снимается минут 11-12.
>> Сразу его сжимать pigz -8 -p8 > image.gz
> Никогда не копировал винч на несколько терабайт? Там вероятность поймать на таких
> площадх парочку бэдов, на видавшем виды девайсе, заметно отличная от ноля.
> И мне потом чего, все терабайты с неспешного винча заново читать?
> Да ладно?! А вон те софтины с логами или битмапами чтения
> и скипанут проблемное, и при новой попытке будут ломиться только в
> то что по факту не прочлось. Так что шансы снять образ
> взятого наобум винча в приемлимом виде сильно повышается.

А кто предлагал снимать dd-хой с продуктивных серверов? Где я писал, что надо ДД для всего использовать? O_o     Предлагаю всё таки читать написанное внимательней.
https://www.opennet.ru/openforum/vsluhforumID3/128250.html#143

Я про личное применение писал, для ноута или основного компа. ДОМА. Я стараюсь держать системные диски 128 Гб, т.к. Линю этого - с запасом, а размер образа системы будет небольшим и только с необходимым.
С системного диска я снимаю иногда именно так. А для остального у меня есть rsync и 12 ТБ дисков в зеркале под TrueNAS и ZFS, подключённые по оптике (FC).
Опять же: это дома. На работе есть разные системы бэкапирования и там dd нет и  не предлагал их там использовать. Хотя на работе под TrueNAS я делал снимки и передавал на другой ТруНАС эти ЗВС-снимки. Отлично всё работает (для своего применения).

Ответить | Правка | Наверх | Cообщить модератору

124. "Открыт код HDDSuperClone, программы для копирования информац..."  +1 +/–
Сообщение от Аноним (110), 22-Авг-22, 21:16 
Зависит от заполненности. Если диск забит почти под завязку то нет никакого резона не пользоваться dd. Если же он скорее почти пустой, то dd явно не лучший вариант.
Ответить | Правка | К родителю #116 | Наверх | Cообщить модератору

142. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (-), 22-Авг-22, 22:37 
> Зависит от заполненности. Если диск забит почти под завязку то нет никакого
> резона не пользоваться dd. Если же он скорее почти пустой, то
> dd явно не лучший вариант.

Основная проблема с ним - он ОК только на "оффлайн" стораже, куда не производятся записи. Поскольку ОС никак не арбитрирует этот доступ на тему логической корректности. Например, совпадения данных и метаданных ФС. Если оно не размонтировано, может так выйти что пока там шел бэкап (это занимает энное время) ФС уже изменилась, и то что в уже прочитаном - не то же что теперь в этом месте на диске, данные и метаданные в бэкапе рассинзронизируются и это уже труха. А размонтировать то что хотелось сбэкапать - делает это недоступным надолго. Не очень удобно.

У пофайлового то доступа арбитраж корректности между программами кернел делает. А вон там - извините.

Ответить | Правка | Наверх | Cообщить модератору

249. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Neandertalets (ok), 29-Авг-22, 22:47 
> Зависит от заполненности. Если диск забит почти под завязку то нет никакого
> резона не пользоваться dd. Если же он скорее почти пустой, то
> dd явно не лучший вариант.

Он тоже подходит, только перед эти надо "занулить" им же свободное пространство:
dd if=/dev/zero of=./ZEROFILE ; rm -f ./ZEROFILE
И потом уже снимать образ (со сжатием).

Но, как уже написали, применять его (дд) надо только на дисках, на которые не производятся операции записи.

Ответить | Правка | К родителю #124 | Наверх | Cообщить модератору

253. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (-), 01-Сен-22, 05:04 
> dd if=/dev/zero of=./ZEROFILE ; rm -f ./ZEROFILE
> И потом уже снимать образ (со сжатием).

Рекомендую при случае попробовать чудный совет на SATA винче терабайтов на 5 и рассказать как вам оно. Особенно много кайфа если там где-то на 72% бэд при чтении еще всрется. При такой плотности и объеме шансы на это несколько отлично от ноля, особенно если диск уже видал виды :)

Ответить | Правка | Наверх | Cообщить модератору

254. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Neandertalets (ok), 01-Сен-22, 08:25 
>> dd if=/dev/zero of=./ZEROFILE ; rm -f ./ZEROFILE
>> И потом уже снимать образ (со сжатием).
> Рекомендую при случае попробовать чудный совет на SATA винче терабайтов на 5
> и рассказать как вам оно. Особенно много кайфа если там где-то на 72% бэд при
> чтении еще всрется. При такой плотности и объеме шансы на это несколько
> отлично от ноля, особенно если диск уже видал виды :)

Буду грубым: ещё один неадекват.
Я написал (и не раз), для чего использую dd и что использую для копирования с других накопителей. Если просто не хочется читать - это твои проблемы. И не надо их переносить на других.

Ответить | Правка | Наверх | Cообщить модератору

212. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (210), 23-Авг-22, 09:07 
Размер блока попробуйте увеличить по сравнению с дефолтом.
Ответить | Правка | К родителю #116 | Наверх | Cообщить модератору

77. "Открыт код HDDSuperClone, программы для копирования информац..."  +/–
Сообщение от Аноним (77), 22-Авг-22, 15:43 
Диски Гнома чем копируют?
Ответить | Правка | К родителю #13 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей 		Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру