Как создать программно-определяемое хранилище в SpaceVM

Привет, Хабр! Меня зовут Даниил Киселёв, я специалист по техническому сопровождению Space. В этой статье я на практическом примере покажу, как в SpaceVM собрать программно-определяемое кластерное хранилище. Рассмотрим типовую конфигурацию, учитывая, что в реальном продакшене параметры и архитектурные решения могут отличаться. Бизнес ожидает от СХД простых характеристик — чтобы данные были доступны всегда, а сбои и обслуживание не останавливали работу виртуальных машин и сервисов. Именно поэтому программно-определяемые хранилища становятся распространенным инструментом. На примере SpaceVM разбираем, как за считанные минуты собрать отказоустойчивое кластерное SDS, которое решает сразу несколько ключевых задач: снижает стоимость владения и обеспечивает стабильную работу в реальных условиях эксплуатации. Вопрос о том, зачем вообще нужны программно-определяемые хранилища не лишен смысла. Объемы данных, которые приходится хранить бизнесам, постоянно растут, емкость хранилищ приходится постоянно наращивать, а многим компаниям приходится, к тому же, еще и обеспечивать соответствие требованиям регуляторов. Но стоимость аппаратных СХД и объем инвестиций в них перевешивают – и компании задумываются о переходе на SDS. Они не только дешевле в принципе – экономия становится еще заметнее, если приходится иметь дело с неструктурированными данными. Есть и другие преимущества: можно абстрагироваться от аппаратной платформы и успешно побороть пресловутый vendor-lock. (это особенно важно в России), компании куда проще обеспечить независимость от вендорских санкций.

https://habr.com/ru/companies/spacevm/articles/995776/

#sds #glusterfs #виртуализация #хранение_данных #инфраструктура

In this guide, I will try to explain how to set up a Docker Swarm system that is completely highly available

https://hostlab.tech/blog/docker-swarm-ha-gluster

#docker #dockerswarm #keepalived #nginx #linux #ubuntu #portainer #gluster #glusterfs #tutorial #opensource #highavailability

Woke up early again with a smidge of acid reflux. In the process of getting water, both dogs swarmed me so I can't stretch my legs or lie down again. This is my life now.

Yesterday ended up being a "fuck everything" day so no writing group, no Leicmin, and no chores.

Today, my goal are to migrate another couple of terabytes from SeaweedFS to GlusterFS, start ripping a fresh copy of Kids in the Hall and Supernatural the day after I deleted them to make the move easier because we haven't watched either show in years (we hate S15 of Supernatural) but then Partner had the sudden craving to watch out of the blue (more evidence that telepathy exists between us).

In Leicmin, I went through the TypeID crates in hope to find one that "just works" to avoid learning Rust macros but none support my need of sqlx and JSON serialization so... I have to learn Rust meta coding.if I want to avoid a lot of boilerplate (I'm up to thirteen typesafe identifiers).

My initial exploration of macros isn't going well, I haven't found the connection of what I want (an attribute on a call) to where I need to go (a bunch of impl blocks and common functions).

At work, I'm now interacting with a second team of fourteen developers in India, so my personal coding time is now reduced to "while other people are speaking during meetings" and a two hour block at the end of the day.

I also had to show our team how to use C# extensions to avoid copy pasting the same block of code twelve times.

Which led nicely into my meeting with the India recruiters for the third team of "about six" developers and what I'm looking for (the ability to pay attention to details with a bonus of understanding features of a language that has been out for two decades).

So it's going to be a "hard" puzzle day.

It would be awesome I could move from the bed or lie down. :D

#SeaweedFS #GlusterFS #Rust

After experiments at home it is now time to introduce #terramaster Debian-based bricks at work within our #glusterfs storage to start migrations to new storage appliances. Here we go, the first 200TB of brick is served to tuneup and healing...

https://lovergine.com/installing-debian-on-a-usb-stick-for-a-terramaster-nas.html

Несмотря на всю мою симпатию к #glusterfs и опыт, в моём случае она не выдерживает проверку геораспределением и небольшой, но постоянной нагрузкой. Уже были пара вопросов с небыстрым обновлением файлов, а сегодня словил один файл, который даже удалить нельзя, если не размонтировать volume.

Многостраничный тюнинг не спасает ситуацию и есть шанс, что для небольшого кластерка буду искать что-то другое, но более устойчивое. :)