Лежим в Airflow потому что на нем натянут KubrrnetesExecutor, а куберам плохо. Был бы он развернут в виртуалке, все бы замечательно работало на LocalExecutor-ах.

Таски по большей части DbtRunTestOpetator, ну может кое-где легаси пандасы небольшие остались.

И вот мы чтобы пнуть DBT Selector тянемся в кубер за подом. А кубер при авариях падает первым и поднимается последним, потому что чем сложнее система тем более она хрупкая.

Не переинжиниривайте на ровном месте, дамы и господа.

Очень очень хорошая идея держать кронтаб, который в режиме graceful degradation при недоступности куберов, аэрфлоу и других сложных сервисов, обновит хотя бы базовые отчетные витрины. Вам зачтется.

Переливки простых данных баш скриптами + последовательные dbt run.

И git pull ветки master свежий иметь.

Мотаем на ус, дни когда работает Яндекс.Дрон, даны нам для этого.

Труба (

Трейдерское

Яндекс - ЦОД в Калуге, Владимире, Ярославле, Рязани.

ВК - ЦОД на Коровинском шоссе, Медведково, Гознаке, Угрешская (этот вообще рядом со сборным пунктом военкоматов Москвы), Пахра рядом с Домодедово.

Не знаю, есть ли более безумная позиция чем шорт Яндекса и лонг ВК, но география ее диктует.

Ранее в разделе трейдерское

#трейдерское

————————————-
Архитектор Данных

Сегодня минус

Магнит, Ламода, Вкусноточка, Додо, много еще ритейла, мое КХД на 10 ТБайт и облачный рынок России.

Кое-кому выбило главного конкурента по основному продукту

Кому война, кому …

Поисковые роботы яндекса падали до нуля и сейчас работают примерно на 20% от объема

Стрим стрим стрим! (Давайте попробуем)

Присоединяйтесь на стрим по ссылке
https://vkvideo.ru/live-228742675_456239045

Вопросы и комментарии можно написать под этим постом!