Jenkins: оптимизируя динамический пайплайн → распределённая сборка компонентов ОС

В процессе улучшения подходов к менеджменту зависимостей компонентов нашей Операционной Системы появилась необходимость перейти от монолитной статической сборочной системы на основе CI/CD инструментов к динамическому распределённому подходу с порождением сотен и тысяч автономных задач. Как выяснилось в процессе, это не самый радужный сценарий использования систем автоматизации, но вполне достижимый. В результате был спроектирован и внедрён динамический сборочный конвейер на базе Jenkins, масштабируемый как горизонтально, так и вертикально. В статье расскажем как он устроен, решение каких проблем потребовало адресной оптимизации по скорости выполнения, и какие подводные камни повсплывали. Также частично раскроем информацию о том, как мы выполняем распределённую сборку дистрибутивов. Ожидается много текста и примеров кода.

https://habr.com/ru/companies/swd_es/articles/784396/

#операционные_системы #встраиваемые_системы #зосрв #зосрв_«нейтрино» #программирование #Jenkins #Python #Groovy #Java #оптимизация #проклятые_рудники