The OpenNET Project / Index page

[ новости /+++ | форум | wiki | теги | ]



"Проект AlmaLinux представил новую сборочную систему ALBS"
Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Изначальное сообщение [ Отслеживать ]

"Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от opennews (?), 21-Июн-22, 17:03 
Разработчики дистрибутива AlmaLinux, развивающего похожий на CentOS бесплатный клон Red Hat Enterprise Linux, представили новую сборочную систему ALBS (AlmaLinux Build System), которая уже использована при формировании выпусков AlmaLinux 8.6 и 9.0, подготовленных для архитектур x86_64, Aarch64, PowerPC ppc64le и s390x. Кроме сборки дистрибутива ALBS также используется для генерации и публикации корректирующих обновлений (errata), и заверения пакетов цифровой подписью. Код сборочной системы написан на языке Python и...

Подробнее: https://www.opennet.ru/opennews/art.shtml?num=57384

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения [Сортировка по времени | RSS]


1. "Проект AlmaLinux представил новую сборочную систему ALBS"  +3 +/
Сообщение от Иван Ворстаненко (?), 21-Июн-22, 17:03 
Чем не угодил Open Build Service, имеющий возможность собирать для львиной доли дистров пакеты - не понятно.
А хотя, если "всё своё хотим" - тогда оправдано. Ну, тогда сделайте только для своего продукта - зачем копировать и так хорошо работающие рещшения?
Ответить | Правка | Наверх | Cообщить модератору

2. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от лютый жабби___ (?), 21-Июн-22, 17:16 
>Чем не угодил

Лень узнавать почему альмы так быстро рожают релизы, особенно 9ку. Но возможно их цапцарапалка самая быстрая )

Ответить | Правка | Наверх | Cообщить модератору

3. "Проект AlmaLinux представил новую сборочную систему ALBS"  +1 +/
Сообщение от Онаним (?), 21-Июн-22, 17:32 
Там не сборочка одного проектика.
Там многоитерационная сборка, которая посерёдке легко может фейлиться до следующего цикла.
Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору

4. "Проект AlmaLinux представил новую сборочную систему ALBS"  +1 +/
Сообщение от Онаним (?), 21-Июн-22, 17:33 
При этом собранные пакеты подставляются в саму сборочную систему для следующего цикла сборки.
Ответить | Правка | Наверх | Cообщить модератору

5. "Проект AlmaLinux представил новую сборочную систему ALBS"  +2 +/
Сообщение от Аноним (5), 21-Июн-22, 17:48 
Что-то это как-то фу. Когда пакеты циклически зависят друг от друга, в итоге из-за одного битого пакета окажется битым другой совершенно никак к нему не относящийся. Я думаю, многие, кто игрался с флагами на генте, через это проходили. Сборка должна быть с нуля, чистой и воспроизводимой. А то слишком часты ситуации, когда что-то внезапно фейлится, и пойди нади там, из-за чего.
Ответить | Правка | Наверх | Cообщить модератору

6. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Аноним (6), 21-Июн-22, 18:20 
> из-за одного битого пакета окажется битым другой совершенно никак к нему не относящийся

Это как?

Ответить | Правка | Наверх | Cообщить модератору

10. "Проект AlmaLinux представил новую сборочную систему ALBS"  +1 +/
Сообщение от Аноним (5), 21-Июн-22, 18:27 
>> из-за одного битого пакета окажется битым другой совершенно никак к нему не относящийся
> Это как?

Бывает такое дело, в итоге часть пакетов работают с либой, а часть выдаёт самые разные ошибки, никогда не догадаешься. При этом, это какая-то зависимость зависимости использованного в коде проекта. Ещё очень часто у тебя что-то скомпилировалось нормально, ты пробуешь пересобрать всё дерево зависимостей этого пакета, и всё в итоге рассыпается, а этот пакет вообще больше не компилируется. Надо пересобрать вообще весь мир с отключением оптимизаций, и тогда, может быть, соберётся, или отвалится ещё что-нибудь и ты найдёшь, в чём причина. Хотя всё работало и никаких проблем не было. Поэтому полная пересборка всего при обновлении имеет некоторый смысл, чтобы такие вещи сразу обнаруживались.

Ответить | Правка | Наверх | Cообщить модератору

36. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Анончик (?), 24-Июн-22, 19:56 
За 3 года что Гента была локалхостом не наблюдал того о чем вы говорите
Ответить | Правка | Наверх | Cообщить модератору

37. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Аноним (5), 24-Июн-22, 20:09 
Это надо уметь. Для быстрого эффекта могу порекомендовать собрать мир с lto (no-fat-lto-objects тоже) и graphite. Скорее всего даже не соберётся половина, но с одним из прошлых релизов gcc соберётся. А ещё там libc или libz или libreadline сдохнут, удачи в экспериментах, в общем.
Ответить | Правка | Наверх | Cообщить модератору

38. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от n00by (ok), 25-Июн-22, 06:29 
Собираю с lto (и с -fno-fat-lto-objects) со времён, когда требовалась создавать ссылку вида
/usr/x86_64-pc-linux-gnu/binutils-bin/lib/bfd-plugins/liblto_plugin.so.0.0.0 -> /usr/libexec/gcc/x86_64-pc-linux-gnu/7.3.0/liblto_plugin.so.0.0.0

zlib и readline собрана с lto, судя по отсутствию в списке исключений.

Бывали проблемы линковки с библиотеками, собранными с lto, это да (причины понятны - нужные клиентам символы "оптимизируются" из экспорта).

Что бы что-то не работало, пока единственная подтверждённая проблема: https://bugs.gentoo.org/802027#c10
Есть ещё какие-то?

Ответить | Правка | Наверх | Cообщить модератору

39. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Аноним (5), 25-Июн-22, 20:14 
Одного LTO мало, но и с ним каждое обновление компилятора новые приключения. Я отказался от общесистемного lto несколько лет назад. Слишком, слишком много возни. Если есть время и собралось сейчас, не значит, что будет собираться через неделю или месяц. Причём, отвалится тот пакет, с которым никогда таких проблем не было (стараниями разрабов). Какой-нибудь perl или awk, внезапно.

Да вот кстати голдом тоже перестало всё собираться, даже ядро (разрабы отказались, у меня не было с ним проблем). Но это отдельная тема. Другой квест. Отказ от голда в конечном счёте не избавил от проблем и только добавил новых. Зависит ещё от разрабов, есть много странного или вовсе некорректного кода, который случайно работает (в основном легаси), а различные оптимизации обнаруживают эти проблемы.

Ответить | Правка | Наверх | Cообщить модератору

40. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от n00by (ok), 26-Июн-22, 08:51 
Что помимо LTO надо? graphite включено. Может быть дело в том, что начал собирать давно и список исключений с тех пор не очень то и чистил. Или просто некоторые приключения (пересобрать зависимость) не запоминаю, поскольку решаются тривиально "на автомате".

С ядром, да, похоже были проблемы:

# cat /etc/portage/patches/sys-kernel/linux-custom/force-ld-bfd.patch
--- linux/Makefile.orig    2019-06-08 15:00:00.333726512 +1000
+++ linux/Makefile    2019-06-08 15:00:02.933725595 +1000
@@ -393,7 +393,7 @@

else
CC        = $(CROSS_COMPILE)gcc
-LD        = $(CROSS_COMPILE)ld
+LD        = $(CROSS_COMPILE)ld.bfd
AR        = $(CROSS_COMPILE)ar
NM        = $(CROSS_COMPILE)nm
OBJCOPY    = $(CROSS_COMPILE)objcopy

Ответить | Правка | Наверх | Cообщить модератору

41. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Аноним (5), 26-Июн-22, 23:46 
Теперь надо собрать мир с графитом и lto, ну там -floop-block -fgraphite-identity -floop-strip-mine -ftree-loop-linear -floop-interchange, Есть ещё -floop-nest-optimize например, он ломал openssl crypto/asn1 (если верить комментарию).

Я сейчас использую system-wide: -fno-semantic-interposition -fno-plt -fipa-matrix-reorg -fipa-pta, были проблемы, но не сейчас. С no-semantic-interposition glibc после недавнего переезда на libxcrypt сдохла после установки, особенное удовольствие доставил факт того, что пакетный менеджер никак не может даунгрейднуть бинарный пакет glibc из кеша из-за изменившихся зависимостей и системная glibc просто поломана. И с no-plt, по-моему, что-то с вайном 32-битным было, ему надо включать отдельно. Любому пакету где lazy binding. Так -z,relro,-z,now, да.

Ответить | Правка | Наверх | Cообщить модератору

42. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Аноним (5), 26-Июн-22, 23:49 
Что с dev-libs/ncnn я так и не понял, собирается только с arch=core2, какие-то косяки с ассемблером емнип. Всё остальное сейчас в порядке.
Ответить | Правка | Наверх | Cообщить модератору

43. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от n00by (ok), 27-Июн-22, 11:26 
> особенное удовольствие доставил факт того,
> что пакетный менеджер никак не может даунгрейднуть бинарный пакет glibc из
> кеша из-за изменившихся зависимостей и системная glibc просто поломана.

А это вообще отдельная тема. Очередная победа идеологии над здравым смыслом. Зато место сэкономили. =) Если с apt-get решение возможно, но никто не озадачился, то с emerge и python-ом не очень понятно что делать.

Ответить | Правка | Наверх | Cообщить модератору

7. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Онаним (?), 21-Июн-22, 18:23 
Воспроизводимой она может стать только после того раза, как все пакеты собраны циклически первый раз.
Потому что на минуточку, у конкретно этой сборки НЕТ базовой системы, она бутстрапится сама в себя.
Ответить | Правка | К родителю #5 | Наверх | Cообщить модератору

8. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Онаним (?), 21-Июн-22, 18:25 
(но по факту после 1 итерации она ещё не воспроизводима, и воспроизводимость появляется после нескольких итераций)
Ответить | Правка | Наверх | Cообщить модератору

11. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от пох. (?), 21-Июн-22, 18:34 
Собственно, если этого не делать - пупсики не смогут пересобрать у себя пакетик, поправив один байт.

Потому что у них альмалинукс, а не сборочная ферма специально под задачу собирания одного пакетика.

Ответить | Правка | К родителю #7 | Наверх | Cообщить модератору

13. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Онаним (?), 21-Июн-22, 18:42 
Ну, не. После того, как воспроизводимость достигнута, сборка ведёт себя как нормальная сборочная система, позволяя собирать и по 1 пакету. Проблема в том, что редхат при больших апдейтах так же циклически заново перебирает фигову тучу таковых.
Ответить | Правка | Наверх | Cообщить модератору

14. "Проект AlmaLinux представил новую сборочную систему ALBS"  –1 +/
Сообщение от Онаним (?), 21-Июн-22, 18:43 
То есть это не совсем такая вот разовая операция. Собрали циклически 8.0 - дальше апдейты собираются по полтора пакета. Появился в сырцах 8.1 - придётся опять циклически перебрать все зависимости, чтобы добиться воспроизводимости. И снова сидим, собирая по штучке+зависимости до 8.2. 8.3. 8.4. x.y.
Ответить | Правка | Наверх | Cообщить модератору

16. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от пох. (?), 21-Июн-22, 18:53 
Ну да, говорю же - оно иначе не пересоберется на обычной системе, а традиционные дистрибутивы все еще старательно блюдут этот завет (давно уже, в общем-то, потерявший смысл - ну кто сегодня что-то еще пересобирает, это не девляпоугодно).
(если пытаться собирать на обычной не поставив все апдейты всего - то тоже может не собраться, из-за stable nonsense)

Ответить | Правка | К родителю #13 | Наверх | Cообщить модератору

9. "Проект AlmaLinux представил новую сборочную систему ALBS"  +1 +/
Сообщение от Онаним (?), 21-Июн-22, 18:26 
Если чуть попроще - сборка и есть сборочная система :D Поэтому "классика" тут не заходит однозначно.
Ответить | Правка | К родителю #5 | Наверх | Cообщить модератору

15. "Проект AlmaLinux представил новую сборочную систему ALBS"  +1 +/
Сообщение от r0g3r (ok), 21-Июн-22, 18:49 
Тем, что этот монстр абсолютно unmantainable. Найти в чём проблема там не представляется возможным, если что-то там случится. Там практически отсутствуют дебаг-логи, куча компонентов там — портянки на баше вызывающие перл, а затем снова ныряющие в портянки на баше. А если дебаг логи там и есть, то их информативность оставляет желать сильно лучшего. Починить в случае сбоя это всё очень сложно. Плюс, компоненты имеют привычку вставать там колом на ровном месте. И ты понимаешь, что что-то встало только тогда, у тебя, например, перестаёт сборка публиковаться, например. Или воркеры почему-то молчат. Но в логах при этом полнейшая тишина. Догадаться что отвалилось — только наугад.
И всё это очень плохочитаемое внутри. И что самое поганое, в реальности он нормально работает только на openSUSE. Поставить его на другой дистрибутив ОЧЕНЬ нетривиальная задача. Плюс, если нужно сборочный контейнер кастомизировать (например, добавить для сборки пакетов какие-то опции, то ты охренеешь искать, где это на самом деле вызывается).

Я перечислил далеко не полный список проблем с этой штукой. В общем, любви к этой штуковине не понимаю абсолютно.

Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору

26. "Проект AlmaLinux представил новую сборочную систему ALBS"  –3 +/
Сообщение от ДаНуНафиг (?), 21-Июн-22, 19:45 
Это из собственный велосипед, который они катят с 2012 года. Понятно, что им проще сидеть на нем и дальше.
Ответить | Правка | К родителю #1 | Наверх | Cообщить модератору

12. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Бывалый смузихлёб (?), 21-Июн-22, 18:40 
> предоставляются средства для автоматизации замены брендов

Отличная сборочная система для создания исключительно своих, оригинальных пакетов

Ответить | Правка | Наверх | Cообщить модератору

18. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Анонимленьлогиниться (?), 21-Июн-22, 19:12 
Так а чем koji не устроил, зачем нужно было переизобретать?
Ответить | Правка | Наверх | Cообщить модератору

25. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Sergey (??), 21-Июн-22, 19:39 
Вот я тоже не понял. Вроде всегдв им собирали.
Ответить | Правка | Наверх | Cообщить модератору

27. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Annno (?), 21-Июн-22, 20:15 
всем страдать, что тут сказать

его (дистр) где то кроме одного из "местных" клауд провайдеров используют?

Ответить | Правка | Наверх | Cообщить модератору

30. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Аноним (30), 22-Июн-22, 07:14 
На его основе собирается Docker-контейнер manylinux для сборки нативных python wheels: https://github.com/pypa/manylinux
Ответить | Правка | Наверх | Cообщить модератору

32. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от n00by (ok), 22-Июн-22, 08:39 
Свои инструменты создают не ради самих инструментов, а что бы вырастить команду специалистов, способных адаптировать инструменты под задачи и решать возникающие проблемы. В том числе и в будущем. Кто это не понимает, тот аутсорсит "полностью автономную" Automatic Build Farm, кидает субподрядчиков, а потом джва года смотрит на ошибку 500 сервера и ничего не может с ней поделать.
Ответить | Правка | Наверх | Cообщить модератору

33. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Аноним (33), 22-Июн-22, 11:40 
Ноль документации. Для кого представили не понятно.
Ответить | Правка | Наверх | Cообщить модератору

34. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от Ztp (?), 22-Июн-22, 16:21 
Это та самая система что не может корректно запаковать rpm ?

https://almalinux.discourse.group/t/alma-linux-9-error-insta...

Ответить | Правка | Наверх | Cообщить модератору

35. "Проект AlmaLinux представил новую сборочную систему ALBS"  +/
Сообщение от sagittarius (ok), 22-Июн-22, 20:08 
Битый диск, проблемы с памятью как вариант. Тем более человек ниже написал, что установил данный пакет без ошибок.
Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру