Пока накапливается все больше докладов и проектов с миграцией с гринплама на ДЛХ (Скиллбокс, Лемана, ВБ и другие), ребята мужественно обновляют ГП до хотя бы Postgres-14.

Постгрес 14 это 2021 год, если что. Но у большинства все еще Greenplum v6 на основе Postgre 9.4 года так 2014-го (!)

Ох нелегкая эта работа, вытаскивать мамонта из болота. Но когда ты Аренадата, других вариантов нет.

На день Учителя

Недавно в архиве нашел фото, где два полковника стоят в почетном карауле у мемориальной доски директору их школы. На фото полковникам лет 60-70, один из них - мой дед. Потому что Учитель.

Тренеры по гимнастике моих девочек младше меня примерно вдвое, но к ним обращаешься по имени-отчеству. Потому что Учитель.

Мне в свое время повезло встретить людей, кого можно назвать Учитель (сенсей - самое уважительное обращение в Японии). Человек, который мог бы сказать толпе отбитых от гормонов малолеток перестать что-то делать, и они бы перестали. Потому что Учитель, сказал: это неправильно.

Половина преподавателей в университетах приходили к нам не потому что им платят зарплату. Зарплаты там смешные.

Пытаюсь и я когда-нибудь стать чем-то похожим. Пока правда, руками надо что-то делать, другая фаза.

Лежим в Airflow потому что на нем натянут KubrrnetesExecutor, а куберам плохо. Был бы он развернут в виртуалке, все бы замечательно работало на LocalExecutor-ах.

Таски по большей части DbtRunTestOpetator, ну может кое-где легаси пандасы небольшие остались.

И вот мы чтобы пнуть DBT Selector тянемся в кубер за подом. А кубер при авариях падает первым и поднимается последним, потому что чем сложнее система тем более она хрупкая.

Не переинжиниривайте на ровном месте, дамы и господа.

Очень очень хорошая идея держать кронтаб, который в режиме graceful degradation при недоступности куберов, аэрфлоу и других сложных сервисов, обновит хотя бы базовые отчетные витрины. Вам зачтется.

Переливки простых данных баш скриптами + последовательные dbt run.

И git pull ветки master свежий иметь.

Мотаем на ус, дни когда работает Яндекс.Дрон, даны нам для этого.

Труба (

Трейдерское

Яндекс - ЦОД в Калуге, Владимире, Ярославле, Рязани.

ВК - ЦОД на Коровинском шоссе, Медведково, Гознаке, Угрешская (этот вообще рядом со сборным пунктом военкоматов Москвы), Пахра рядом с Домодедово.

Не знаю, есть ли более безумная позиция чем шорт Яндекса и лонг ВК, но география ее диктует.

Ранее в разделе трейдерское

#трейдерское

————————————-
Архитектор Данных

Сегодня минус

Магнит, Ламода, Вкусноточка, Додо, много еще ритейла, мое КХД на 10 ТБайт и облачный рынок России.

Кое-кому выбило главного конкурента по основному продукту

Кому война, кому …

Поисковые роботы яндекса падали до нуля и сейчас работают примерно на 20% от объема

Стрим стрим стрим! (Давайте попробуем)

Присоединяйтесь на стрим по ссылке
https://vkvideo.ru/live-228742675_456239045

Вопросы и комментарии можно написать под этим постом!