Нет, мы не подмосковная фабрика диафильмов, мы алготрейдеры

Мы делаем больше всех объёмов на бирже, но нас так мало физически и давайте ценить это. И поэтому: Мы устраиваем мероприятие и приглашаем стать участниками Алгоуикенда : «Алговыходные: Тьюринг — алгоритмы, взламывающие паттерны рыночного хаоса»

https://habr.com/ru/articles/909046/

#биржевой_арбитраж #алготрейдинг #алгоритмы #мероприятие #конференция #шашлыки #вино #платформа #криптовалюта #московская_биржа

Нет, мы не подмосковная фабрика диафильмов, мы алготрейдеры

Мы делаем больше всех объёмов на бирже, но нас так мало физически и давайте ценить это. И поэтому: Мы устраиваем мероприятие и приглашаем стать участниками Алгоуикенда : «Алговыходные: Тьюринг —...

Хабр

Секреты Spark в Arenadata Hadoop: как мы ускорили построение витрин для задач ML

Привет, Хабр! Я Дмитрий Жихарев, CPO Платформы искусственного интеллекта RAISA в Лаборатории ИИ РСХБ-Интех. В этой статье я и архитектор нашей платформы Александр Рындин @aryndin9999 расскажем о том, как мы построили взаимодействие Платформы ИИ и Озера данных для работы с витринами данных моделей машинного обучения с использованием Spark.

https://habr.com/ru/companies/rshb/articles/904072/

#spark #arenadata #hadoop #datalake #витрина_данных #ai #платформа #livy

Секреты Spark в Arenadata Hadoop: как мы ускорили построение витрин для задач ML

Привет, Хабр! Я Дмитрий Жихарев, CPO Платформы искусственного интеллекта RAISA в Лаборатории ИИ РСХБ-Интех. В этой статье я и архитектор нашей платформы Александр Рындин @aryndin9999 расскажем о том,...

Хабр

Как сделать централизованное логирование и крепко спать по ночам

Мы начинали с обычного ELK-стека, логи приходили на logstash, записывались в Elasticsearch, а пользователи смотрели их в Kibana. Потом в эту схему добавилась Kafka, так как мы понимали, что на пиках нагрузок не успеваем записать все логи в Elasticsearch. Всё это располагалось в одном ЦОДе, а в Kafka была единая очередь. В результате горизонтального масштабирования Elasticsearch разросся до 30+ нод. Данная схема справлялась с нагрузкой в 100 тысяч документов в секунду. Как вы понимаете, эта схема нас устраивала только до определённого периода. В какой-то момент нагрузка начала расти как на дрожжах. Привет, Хабр! На связи Филипп Бочаров, руководитель платформы наблюдаемости и мониторинга для более 400 продуктов экосистемы МТС, и Юлия Тальцкова, ведущий инженер сервиса логирования и кластеров Open Search с более 400 терабайтами логов клиентов. Этот материал написан на основе нашего доклада для конференции Highload++ Расскажем, как нам удалось переписать критичный и высоконагруженный сервис логирования, перестать просыпаться от ночных звонков и даже иногда уходить в отпуск.

https://habr.com/ru/companies/oleg-bunin/articles/902932/

#логирование #opensearch #геораспределенность #наблюдаемость #observability #logging #платформа #highload #архитектура #мониторинг

Как сделать централизованное логирование и крепко спать по ночам

Привет, Хабр! На связи Филипп Бочаров, руководитель платформы наблюдаемости и мониторинга для более 400 продуктов экосистемы МТС, и Юлия Тальцкова, ведущий инженер сервиса логирования и кластеров Open...

Хабр

Team Topologies: Инструкция по выживанию для платформ, которые перестали масштабироваться

Представьте, что ваша компания — это город. Сначала это посёлок с одной улицей, где все знают друг друга и работают сообща. Но когда посёлок превращается в мегаполис, старые правила перестают работать: дороги забиты, свет отключается, а жители бунтуют. То же происходит с IT-платформами: на старте монолит кажется простым решением, но с ростом он душит развитие. Team Topologies предлагает альтернативу — превратить платформу в сеть «умных посёлков», где каждый сервис развивается автономно, но по общим правилам. В статье разберём базу как это работает и посмотрим на примере реальной компаний.

https://habr.com/ru/articles/899672/

#Платформа #Team_Topologies #Заметки_теоретика #Платформенная_инженерия #Платформенные_стримы #Платформенные_команды

Team Topologies: Инструкция по выживанию для платформ, которые перестали масштабироваться

Привет, Хабр! Представьте, что ваша компания — это город. Сначала это посёлок с одной улицей, где все знают друг друга и работают сообща. Но когда посёлок превращается в мегаполис, старые правила...

Хабр

Заметки теоретика. Платформенная инженерия: Как выбрать тип платформы для вашей компании?

Вы задумали создать платформу, но не знаете, с чего начать? Сегодня «платформой» называют всё — от облачных сервисов до экосистем вроде Apple. Но чтобы не потратить годы и миллионы впустую, важно выбрать тип, который решит ваши задачи, а не будет данью моде. Как не запутаться? Давайте разберёмся.

https://habr.com/ru/articles/894746/

#Платформенная_инженерия #Типы_платформ #Заметки_теоретика #Платформа

Заметки теоретика. Платформенная инженерия: Как выбрать тип платформы для вашей компании?

Вы задумали создать платформу, но не знаете, с чего начать? Сегодня «платформой» называют всё — от облачных сервисов до экосистем вроде Apple. Но чтобы не потратить годы и миллионы впустую, важно...

Хабр
Залетел в тренды через 20 лет после премьеры: хит Бумбокса возглавил чарт на Apple Music

Песня увидела свет еще в 2006 году, но настоящую славу получила только сейчас.

УНИАН

Заметки теоретика. Платформенная инженерия: ваш цифровой конструктор Lego

Или почему все хотят стать «платформой», даже если не знают, как это работает Вы замечали, что сегодня все компании — от гигантов типа Netflix до маленького стартапа по записи калорий и БЖУ — вдруг стали «платформами»? Это не просто хайп. Платформенная инженерия — как кислород для цифрового бизнеса: незаметно, но критично. Но что это такое, и почему без нее теперь как без рук? Давайте разбираться без заумных терминов. Если коротко, то платформенная инженерия - это когда решив, что у вас есть гениальная идея, которая нанесёт непоправимую пользу компании, вы занимаетесь только ею, а не погибаете на этапе логирования, мониторинга, авторизации пользователей и прочих функций, который часто ctrl+c ctrl+v из проекта куда у вас есть доступ. Если чуть дольше, то...

https://habr.com/ru/articles/889464/

#Платформенная_инженерия #Платформа #Заметки_теоретика

Заметки теоретика. Платформенная инженерия: ваш цифровой конструктор Lego

Или почему все хотят стать «платформой», даже если не знают, как это работает Вы замечали, что сегодня все компании — от гигантов типа Netflix до маленького стартапа по записи калорий и БЖУ — вдруг...

Хабр
Б Мяч – праздничные прямоугольники!

  Это аркадная игра, очень сильно ретро. Про мяч и прямоугольники. Которые еще и разноцветные. И ты, как бы, стреляешь по ним. И получаешь з...

Побил рекорд Apple TV+: сериал "Разделение" стал самым популярным в истории платформы

Второй сезон картины превзошел ожидания зрителей и установил новые рекорды платформы.

УНИАН

Эксплуатация Stateful-приложений в Kubernetes на примере баз данных в Авито

Привет! Меня зовут Игорь Конев, я — старший инженер команды DBaaS в Авито . В этой статье я рассказываю о нашем подходе к работе Stateful-приложений в k8s на примере DBaaS и о том, как удалось автоматизировать жизненный цикл баз данных у нас в Авито. Статья будет полезна новичкам, которые не работали в Kubernetes, не сталкивались с менеджментом Stateful-приложений или хотели бы массово разворачивать базы данных в Kubernetes.

https://habr.com/ru/companies/avito/articles/881728/

#kubernetes #базы_данных #data_bases #stateful #платформа #dbaas #persistentvolume #persistentvolumeclaim #csi

Эксплуатация Stateful-приложений в Kubernetes на примере баз данных в Авито

Привет! Меня зовут Игорь Конев, я — старший инженер команды DBaaS в Авито . В IT-сообществе сложилось мнение, что базы в Kubernetes (k8s) — сложные, ненадёжные и их неудобно поддерживать. Но я считаю,...

Хабр