#Hadoop #Scala/Java #msk
Банк Топ-3.
Сложный проект по развитию гибридного хранилища (Hadoop, Oracle, Teradata)

Обязанности:
Разработка и проектирование потоков данных, алгоритмов загрузки и обработки данных в Hadoop с использованием Apache Spark.
Оптимизация и настройка ETL.

Требования:
Наличие опыта с экосистемой Hadoop (HDFS, Hive, Spark, Impala).
Опыт программирования на Java8 / Scala.

• Москва
• 200 000 - 300 000 Rur

Контакты:
@arinakulova

#вакансия #офис #Москва #Hadoop

Уважаемые специалисты!

Срочно нужен системный администратор Hadoop с опытом по стеку от 2лет.

компания Иннотех для ВТБ

ЗП вилка 250-350 т.р. по итогам собеседования

- Уверенное знание экосистемы HADOOP. Стэк инструментов hdfs, hive, spark, impala, oozie, MR, yarn. Настройки, диагностика, оптимизация
- Знание особенностей разработки распределенных систем, и функционировании MPP систем
- опыт в администрировании OS семейства Linux (установка, обновление, поддержка работоспособности, диагностика проблем и их решение)
- обязательное знание SQL
- умение проводить код-ревью, диагностику ошибок на скриптах/приложениях Python и/или Scala
на все подробности отвечу в ЛС: @yusta2011

#вакансия #офис #Москва #Hadoop

Уважаемые Мастера-администраторы экосистемы HADOOP!
есть отличное предложение!!!

ЗП от 250 т.р.
Москва, офис, фуллтайм

Стэк инструментов Hadoop:
hdfs, hive, spark, impala, oozie, MR, yarn.
Настройки, диагностика, оптимизация
- Знание особенностей разработки распределенных систем, и функционировании MPP систем
- опыт в администрировании OS семейства Linux (установка, обновление, поддержка работоспособности, диагностика проблем и их решение)
- обязательное знание SQL
- умение проводить код-ревью, диагностику ошибок на скриптах/приложениях Python и/или Scala
- опыт работы по направлению " от 2 лет

на все подробнoсти отвечу в ЛС: @yusta2011

#вакансия #ITArchitect #DWH #Hadoop #SQL #remote
Архитектор DWH/Data Lake
в крупную транспортно-логистическую компанию
Компания: (Контакты через агентство Smart Hiring PRO)
Формат работы: удаленный
ЗП: 350-450 т.р. по итогам собеседования

Что предстоит сделать:
-Создать платформу обработки данных на основе текущего ИТ-ландшафта
-Проектирование архитектуры хранилища, потоков данных, алгоритмов загрузки
-Проектирование ядра, витрин и механизмов доступа к данным (в т.ч. с применением BI технологий), и интеграций DWH и систем-потребителей данных
-Разработка стандартов на разработку и проектирование

Требования:
-Опыт создания архитектуры
-Знание и опыт работы ETL, CDC, Streaming ODI/Data Stage
-Опыт разработки DWH
-Знания принципов работы Oracle, MS SQL и MPP СУБД (Greenplum, Vertica)
-Опыт работы с Lambda архитектурой на (Hadoop, Kafka, Cassandra, GreenPlum/Vertica, PostgreSQL)
-Опыт управления мастер-данными (MDM) и развития качества данных (Data Quality)
-Опыт разработки архитектурной документации
Будет плюсом:
-Знание DevOps процесса и понимание, как сделать CI/CD пайплайн в обработке данных
-Понимание специфики организации данных для ML (песочницы)

Подробнее расскажу: ТГ @yusta2011
почта: yusta2011@gmail.com

#вакансия #Fulltime #офис #IT #Hadoop #postgres #DataBase

Database Administrator (DBA)

Санкт-Петербург, офис
Компания: контакты через агентство Smart Hiring Pro
ЗП от 200 т.р. по итогам собеседования
Мы в поиске Database Administrator`а в Международную продуктовую IT-компанию, разрабатывающую софт для индустрии трейдинга и инвестиций.

Нужно:
заниматься реализацией классической Lambda архитектуры в рамках бизнесовых задач, развивать Integration окружения аналитической команды и BI инфраструктуру (ключевые метрики, алерты, инфраструктура как код).

Требования:
DB: Greenplum, Postgres, Clickhouse;
MQ: Kafka;
NoSQL & Big Data: Cassandra, Hadoop;
Programming Languages: Python, Scala, Golang;
Frameworks: Flink;
Orchestration: Kubernetes;
Workflow manager: Airflow.
Английский язык

Условия:
-соблюдаем все требования ТК РФ;
-полностью белая зарплата;
-ДМС (включая стоматологию);
-оплачиваем корпоративный спортзал с личным тренером и спортивные секции (футбол, баскетбол, волейбол)
-релокационный пакет

С удовольствием расскажу подробности в лс: ТГ:@yusta2011
почта: yusta2011@gmail.com