31 мая буду выступать в analyticsvidhya и рассказывать про блокчейн как технологию

Давно не было вакансий, нанимаем сейчас разных SRE в blockchain.com. Описание можно прочитать здесь. Полный ремоут, есть релокация. Платим чуть больше чем фб + крипто бонус, правда стоки у нас пока неликвидные. Писать мне

Сегодня получил новую визу - Global Talent, ранее известную как Exceptional Talent. Теперь не привязан к работодателю и могу получить ILR (местный аналог грин карты) через 1.5 года, вместо 3.5

Помогли мне с этим https://immigram.io/

Сходил вчера в Гугл на UK Fintech GCP User Group, благо идти минут 6 от моего дома до их офиса на St. Pancrase.

Клиенты GCP, в том числе мы, рассказывали почему используем их облако, какие плюсы и минусы
Понравилась организация мероприятия, от зала до проработки докладов, видно что доклады подготовлены хорошо и гладко, но в тоже время интересно. Заодно пофоткался на Полароид

Больше всего понравился нетворкинг, как люди подходят и просто знакомятся/болтают и могут довольно долго так делать
Познакомился так с Head of Vip Loans в Celsius, Head of Operational Resilience в Kroo и CEO Dashly

Интересно было послушать вопросы из зала: повлияло ли ESG Гугла на выбор его облака? Что делаете чтобы помочь людям с учетом резкого роста cost of living и небывалой инфляцией в 9%

Кстати интересно, но многие бизнесы принимают этот удар на себя, по крайней мере мои стандартные траты в Waitrose за 1.5 года не изменились, да и последняя отчетность wall mart показывает что удар они взяли на себя

Результаты голосования очевидны
Будем жить без кнопки
Придется и дальше записывать видео only for fans

Помните пост про сервисы доставки?
К сожалению один из них - jiffy, приказал долго жить.

Очень жаль, мне нравились фрукты оттуда

Оказывается основатель сервиса Владимир Холязников

Первый раз мы чуть чуть пересеклись когда оба работали в Х5 и ребята из его юнита экспресс доставки попросили помочь с рекомендательными системами, но когда оказалось что нужен хэдкаунт и четкое понимание что делается и зачем, все застыло

Второй раз уже как клиент его сервиса в Лондоне

На фото я дербаню jiffy в последний день сервиса, пользуясь 50% скидкой

Правда они говорят что останутся как платформа/по для других сервисов быстрой доставки

Читаю некоторые вещи из и про Даниила Заточника в рамках чтения про русскую историю

Дальше цитата

Остро переживая состояние несчастья, Даниил формулирует собственные представления о счастье. В основу рассуждений на эту тему он, видимо, кладет общепринятые сценарии счастливой жизни. Их оказывается не так уж много, поначалу всего два:

1) служба у князя;
2) счастливая женитьба у богата тестя чти деля: а ту пеи и яжь

Чуть позже (в первой половине XIII в., в так называемом Молении) к ним добавляются еще два:

3) уход в монастырь
4) служба у боярина

Однако все они за исключением первого для Даниила суть несчастье. Собственно, едва ли не все «Слово» сводится к своеобразному объяснению, почему это так.


Казалось бы, больше 800 лет прошло, а мало что поменялось

Из забавного вспоминается обстоятельное пояснение в классическом китайском романе Речные заводи, почему монахи похотливы

И еще одна вакансия, теперь уже ко мне, желательно в Лондон, но можно удаленно
Financial Data Analyst

В вакансии написано следующее:

We are growing our Finance Operations and Data team. We are looking for a reconciliation specialist who is looking to roll up their sleeves to help build the infrastructure and processes that will support growth in a fast, yet controlled manner.

Support the development of procedures for data architecture and governance, including reconciliation, gap analysis
Identify relationships and trends of historical and real-time transactions against crypto and cash movements, between entities in Blockchain.com and external parties.
Support Management business decisions with complex data retrieval, transformation, and analysis

По факту нужно много терпения, внимательности, хороший sql, неплохой питон. В идеале джун/мидл дата инженер, который решил переключиться в аналитику или джун/мидл аналитик, который переходит в дата инженерию

По деньгам, ориентир Е3-Е4 (см #BigTechLevelsCompensation), платим мы чуть больше чем фб, но мы все еще непубличная компания

Писать мне
UPD - все, спасибо

Три совета по поводу резюме на будущее
1. Не стоит присылать doc/docx стоит присылать pdf
2. Не стоит называть файл Resume или CV - лучше называть своим именем, Valerii_Babushkin_CV.pdf
3. Не стоит отправлять на русском языке резюме в Лондон

В прошлую среду ходил на митап от Гугла совместно с thoughtworks. Последнии известны тем, что их сотрудники написали книги почти на все известные темы.

Митап был посвящен новому мега концепту - Data Mesh. Что это такое во время презентации я так и не понял, что конечно не помешало обсудить как мы это можем применять. Зато потребовал у одного Гуглера жилетку и забрал ее на следующий день. Также получил бесплатно книгу про Data Mesh от Oreily (написанную понятное дело сотрудником thoughtworks) - теперь есть чем заняться во время полета до Аргентины. Еще получил термо кружку, которых у меня таким образом стало уже пять, только успевай чай пить

Прочитаю книгу и попробую рассказать здесь что такое Data Mesh, заодно может и про Delta Lake прочитаю, все-таки 20 часов лететь

Читаю A Survey of Causal Inference Applications at Netflix

Встретил там незнакомое слово double machine learning
Решил поискать что это такое, наткнулся на статью и документацию к библиотеке

Попробуем разобрать что же это такое
Наша цель оценить каузальный эффект воздействия Т, на целевую переменную Y

Введем понятия:
Y - целевая переменная
T - флаг Treatment 1/0
X - вектор признаков

Делаем регрессию/классификацию Y на X
Делаем регрессию/классификацию T на X

Отбираем самые важные/полезные фичи (feature importance, shapley value, зануление через L1 регуляризацию - как угодно)

Теперь у наc есть Y_X- самые важные фичи для Y и T_X - самые важные фичи для T

Бьем датасет на K фолдов, допустим K= 5 (ниже условный пример)

На k_1 учим модель M_Y_X - предиктить Y, используем k_2 как валидацию. Используем фичи Y_X
На k_1 учим модель M_T_X - предиктить T, используем k_2 как валидацию. Используем фичи T_X

На k_3,4,5 применяем M_Y_X и M_T_X -> получаем предикты для Y, Y_k_3,4,5_hat. Для T получаем T_k_3,4,5_hat
Вычитаем Y_k_3,4,5_hat из истинных значений Y_k_3,4,5 и тоже самое делаем для T_k_3,4,5_hat
Получаем Y_k_3,4,5_residuals = (Y_k_3,4,5 - Y_k_3,4,5_hat), также получаем T_k_3,4,5_residuals

Теперь обучаем модель регрессии/классификации Y_k_3,4_residuals на T_k_3,4_residuals, используя 5 фолд как валидацию (можно и не использовать, просто обучить линейную/логистическую регрессию на одной фиче)

Получаем коэффициент Тета
Делаем так K раз
Усредняем Тета и получаем каузальный эффект T на Y

Чуть ниже и чуть позже разберем почему и как это работает

#ArticleReview

Я планирую записывать первую лекцию курса по System Design

Хочу вставить туда секцию с ответами на вопросы

Поэтому пожалуйста, задавайте те вопросы, на которые вы хотите получить ответ в комментариях

Data Fest 3.0 - Reliable ML

Секция Reliable ML состоится 5 июня онлайн.

Планируем провести 3 круглых стола по актуальным темам.

Тема 3: ML System Design

Компетенции в области ML System Design крайне востребованы на рынке. Однако понимание этого термина многими компаниями разное. Обсудим, что же это вообще такое ML System Design, как его структурировать и применять.

Если вы хотели бы добавить свои вопросы для обсуждения - welcome. Пишите здесь.

Эксперты:
Валерий Бабушкин, Head of Data Science, Blockchain.com, автор книги Principles of ML Design (2023)
Алексей Натекин, CEO, Data Souls, Founder, Open Data Science Community, Organizer, Data Fest
Александр Бородин, руководитель направления аналитики и моделирования в финансах и рисках, GlowByte

Эксперты-модераторы:
Дмитрий Колодезев, директор Promsoft
Ирина Голощапова, Head of Data Science, Lenta

Продолжается эпопея с получением карты Тинькофф, так как на Тинькофф Инвестиции должны пришли почти мои ETF из Альфы

Приехал мой представитель по доверенности чтобы карта была выдана, карту выдали, тут же забрали (как и положено), а мне заблокировали все доступы с Телефона и как теперь узнать, если туда что то пришло?

Позвонил в поддержку - говорят приезжайте, подавайте заявление, мы разблокируем

Вопрос, если я не подавал заявление на блокирование, а наооборот приехал активировать, почему теперь нужно снова туда ехать?

Вы как заблокировали, так и разблокируйте
Есть мысли что делать? Может быть по старой традиции надо найти кого-то работающего в Тинькофф?

UPD:
Воспользовался советом, добавил отзыв

Github GeoLift: And end-to-end solution to Measure Lift at a Geo Level от Facebook - сплошное разочарование. Только я собрался немного погрузиться в детали и понять как они его сделали, а там ничего и нет, обычно Фейсбук делает лучше

А звучало так многообещающе

What is Lift?
Lift is a scientific measurement technique which allows users to accurately understand and compare the value of their strategies. Lift, which is grounded on experimental design, is typically used to measure the true or causal effect that an ad campaign had on business metrics such as Sales, App Installs, or Leads. By estimating the incremental effect that these strategies provide, analysts are able to understand, analyze, and optimize their cross-channel strategies through data and science.

What is Geo Experimentation?
There are many ways to measure Lift and Geo Experimentation is one that has been rapidly gaining popularity. In general, Geo Experimentation refers to any test where the treatment is administered at the geo-level. In practice, this often means that ad campaigns are geo-targeted in such a way that the test regions are eligible to see ads while the control ones aren’t. Geo Experimental methods use this information to calculate the true value that this strategy had on your audience. Moreover, since they rely on aggregated data they’re privacy-safe, can work across channels, and are very robust against signal-loss.

Тинькофф наносит ответный удар

UPD мои приложения по прежнему заблокированы

Времена нынче сложные

Есть сервис в Лондоне, too good to go. Платишь Х, забираешь товара на 3Х, в противном случае эти 3Х выбрасывают

Я пару раз так попробовал в разных местах, на фото пример одного из походов. Интересно, да и идея хорошая, правильная, но для тех кто придерживается определенной диеты не подойдёт

Каждый раз выдают что-то новое, все не съешь, если все не ешь

Один раз была осечка с индийским массала чаем, где я просто купил его по стандартной цене, но перед закрытием.

Развод года

Приехал в Аргентину, пришел к успеху

Переходим к четвертому архетипу Стафф Инженеров, пожалуй наиболее редкий из них - правая рука.

В России я таких людей практически не видел, пожалуй только в Яндексе и возможно Алибаба Россия, но рекомендовал СЕО одного крупного ритейла ввести такую должность для каждого крупного руководителя. Своеобразрный Десница (Kings Hand) в игре престолов.

Правая рука является манифестацией и аватарой крупного руководителя, что требует безусловно глубокой синронизации и единения между этими сущностями.

Правая рука посещает разные встречи и митинги взамен Босса, помогая тому расчистить свое расписание. Понятное дело, проблемы которые решаются на этих встречах врядли будут исключительно техническими, а скорее представлять собой смесь из технологий, культуры, бизнеса и процессов.

В чем то здесь есть сходство с решалой, прибежал, понял корневую проблему, нашел кто это разрулит, популярно объяснил , поручил им это делать (разница с решалой) и побежал дальше

Из приятного, работаешь только над важным и нужным
Из непритяного, как только что то стало понятно и решено, бежишь в следующий огонь
#BigTechLevels