Spring brings warmer days and more outdoor activity. Mesh Tarps (https://zurl.co/PoGP3 ) provide shade while allowing airflow, helping reduce heat buildup while keeping spaces covered and comfortable. A practical solution for patios, fencing, and outdoor work areas during the season.

#TarpsNow #MeshTarps #OutdoorShade #SpringSeason #Airflow

✨ #AI in #BI is like a self-driving car: that still needs you at the wheel.

Maxime Beauchemin, creator of Apache #Superset and Apache #Airflow, explains why #analytics aren't ready to go full autopilot and how we can embrace smart assistance instead. Because 90% isn’t good enough.

🎥 Watch now! https://abracadata.space/sessions/2025/ai-in-bi/

Как мы мигрировали с Zeppelin и что из этого вышло. Часть 1. Рассылки

Для задач аналитики Zeppelin - это чуть ли не находка. Он может в одной книжке исполнять код на любом языке (был бы интерпретатор), выводить его в виде красивых табличек, графиков и в любом другом виде, который удобен. И на Хабре есть много статей , посвященных плюсом данного решения для задач аналитики. В результате в аналитический отдел ТКБ Инвестмент Партнерс данный инструмент проник достаточно глубоко: на нем писались аналитические отчеты для разных отделов, расчетные таблицы, которые затем отсылались в дашборды, также данными книжками могли пользоваться все, кто знал какие-либо языки программирования. И мы попали в зависимость от него. Панацея, которая должна была стать легким решением для (почти) любой задачи превратилась в наше проклятие. Из-за проблем с данной системой на нас приходило по 5-7 тикеров в неделю, а также потерей доверия к нашим сервисам. Как мы с этим справились?

https://habr.com/ru/articles/988386/

#airflow #zeppelin #миграция #рассылки #devops

Как мы разгрузили базу данных в проде и не сломали систему

Наверное, всем знакома ситуация, когда собираешь красивый отчет в BI-системе, пользуешься им полгода, а потом он с каждым днем тормозит все сильнее? Графики обновляются дольше обычного, таблицы медленно грузятся. А все потому, что BI работает на одной базе на пределе своих возможностей из-за перегруженности. Пример классической схемы, с которой начинают почти все компании: BI + база данных. Пока стартапы не могут позволить себе дорогостоящее озеро данных или DWH, они устанавливают базу данных, заполняют ее и прикручивают рядом BI-систему. Вот только данные в растущей компании имеют свойство прибывать. К примеру, у стартапа в первые месяцы работы было пять заказов в день, затем 100, 1 000 и еще больше. День за днем, год за годом все данные складываются в одну базу данных, и в итоге получается тяжелая, медленная система, которой банально неудобно пользоваться. Можно увеличить мощность базы данных, но это лишь отложит проблему на время, а не решит ее. А можно снять нагрузку с базы и доверить обработку накопленных данных другим инструментам и системам хранения. В этой статье я расскажу, как решить проблему с базой данных, которая трещит по швам, с помощью облачных managed-сервисов.

https://habr.com/ru/companies/cloud_ru/articles/987934/

#хранение_данных #bi #s3 #база_данных #хранение_данных_в_облаке #trino #metastore #airflow

Hello #Fediverse! Looks like I’m an #introduction away from joining the conversation so here goes!

I lead data teams for a healthcare system in New Mexico. My healthcare path started in acute care nursing before moving into #Informatics. These days, I’m deep into #Python, #Airflow, and #LLMs. I also love #Soccer (#Football), #Sailing, and doing anything my kids let me tag along for.

Looking to connect on #HealthIT, #DataEngineering, and #DataScience or just chat about other interests.

Join our Weekend Workshop: #Apache #Airflow - Basics to Advanced

Airflow is a leading task orchestration tool, widely used in the industry. Although it's often linked with data engineering, its capabilities extend far beyond.

Dates: 14 - 15 Feb

https://prelude.tech/upcoming_workshops/14/details

Use the code GIFT25 to enjoy a 25% festive discount! Offer valid until 11 January.

💡 Apache Airflow 2025 Recap

2026 has arrived which marks a great opportunity to review and assess the changes the last year has brought to the ever evolving landscape of open source data tools.

In our new #blog post we look at Apache Airflow and how the leading open source orchestration platform has changed in the last year with the bit v3 major release.

🔗 https://www.nextlytics.com/blog/apache-airflow-updates-2025-a-deep-dive-into-features-added-after-3.0

#apacheairflow #airflow #opensource #dataengineering #datascience