Do It Yourself or die? Объясняем, что делать с Open Source для «импортонезависимости» на гифках из Футурамы
#БлогкомпанииРостелеком #Opensource #Софт #ITкомпании #opensource #управлениеданнымивростелеком #hadoop IV
https://habr.com/ru/post/687082/
#БлогкомпанииРостелеком #Opensource #Софт #ITкомпании #opensource #управлениеданнымивростелеком #hadoop IV
https://habr.com/ru/post/687082/
Хабр
Do It Yourself or die? Объясняем, что делать с Open Source для «импортонезависимости» на гифках из Футурамы
Религиозные противостояния GNU против Microsoft и Open Source против проприетарного ПО шли несколько десятков лет. Казалось, что интерес к этому конфликту сошел на нет: Linux так и не убил Windows, а...
Kafka как интеграционная платформа: от источников данных к потребителям и в хранилище (часть 2)
#БлогкомпанииГруппаНЛМК #Системноеадминистрирование #ITинфраструктура #BigData #kafka #hadoop #nifi IV
https://habr.com/ru/post/686778/
#БлогкомпанииГруппаНЛМК #Системноеадминистрирование #ITинфраструктура #BigData #kafka #hadoop #nifi IV
https://habr.com/ru/post/686778/
Хабр
Kafka как интеграционная платформа: от источников данных к потребителям и в хранилище (часть 2)
Привет! Продолжаю рассказ про интеграционную платформу на базе Apache Kafka и про то, как мы постарались гармонично вписать ее в непростую ИТ инфраструктуру группы НЛМК. Напомню, что в первой части...
Выгрузка HDFS FSImage в Hive для мониторинга и аналитики: руководство к действию
#БлогкомпанииX5Tech #Системноеадминистрирование #BigData #Hadoop #hadoop #мониторинг #hdfs IV
https://habr.com/ru/post/698758/
#БлогкомпанииX5Tech #Системноеадминистрирование #BigData #Hadoop #hadoop #мониторинг #hdfs IV
https://habr.com/ru/post/698758/
Хабр
Выгрузка HDFS FSImage в Hive для мониторинга и аналитики: руководство к действию
Привет, Хабр! Меня зовут Борис Мурашин, я системный архитектор развития платформы больших данных в Х5 Tech. В статье делюсь своим опытом работы с кластером Hadoop: рассказываю, как с помощью...
Как найти «слона» в песочнице на Hadoop: решаем проблему с ограничением объёма выделенной памяти
#БлогкомпанииСбер #Администрированиебазданных #BigData #Hadoop #bigdata #hadoop #администрированиебазданных IV
https://habr.com/ru/post/703608/
#БлогкомпанииСбер #Администрированиебазданных #BigData #Hadoop #bigdata #hadoop #администрированиебазданных IV
https://habr.com/ru/post/703608/
Хабр
Как найти «слона» в песочнице на Hadoop: решаем проблему с ограничением объёма выделенной памяти
И снова здравствуй, Хабр! Сегодня поговорим об актуальной для многих из нас проблеме при работе с базами данных. В ходе работы над разными проектами часто приходится создавать базу данных ...
Pyspark. Анализ больших данных, когда Pandas не достаточно
#Python #BigData #Hadoop #pandas #pyspark #bigdata #hadoop IV
https://habr.com/ru/post/708468/
#Python #BigData #Hadoop #pandas #pyspark #bigdata #hadoop IV
https://habr.com/ru/post/708468/
Хабр
Pyspark. Анализ больших данных, когда Pandas не достаточно
Pandas - одна из наиболее используемых библиотек Python с открытым исходным кодом для работы со структурированными табличными данными для анализа. Однако он не поддерживает распределенную обработку,...
MapReduce: как и зачем?
#Java #Администрированиебазданных #Hadoop #mapreduce #hadoop #shuffle #БД IV
https://habr.com/ru/post/720050/
#Java #Администрированиебазданных #Hadoop #mapreduce #hadoop #shuffle #БД IV
https://habr.com/ru/post/720050/
Хабр
MapReduce: как и зачем?
Пример задачи Хотим автоматизировать огромный фруктовый рынок. На каждое событие будем писать строчку в структурированный лог. Этот лог не является частью runtime функционирования рынка, но может...
Big Data в облаках
#БлогкомпанииGlowByte #Облачныесервисы #BigData #snowflake #databricks #greenplum #hadoop IV
https://habr.com/ru/companies/glowbyte/articles/729868/
#БлогкомпанииGlowByte #Облачныесервисы #BigData #snowflake #databricks #greenplum #hadoop IV
https://habr.com/ru/companies/glowbyte/articles/729868/
Хабр
Big Data в облаках
Всем привет! Сегодня хотим затронуть тему облачных технологий. Дмитрий Морозов, архитектор DWH в компании GlowByte, занимается хранилищами данных 6 лет, последние 2,5 года участвует в проектах,...
Проблемы приземления данных из Kafka и их решения на Apache Flink
#БлогкомпанииКонференцииОлегаБунинаОнтико #Высокаяпроизводительность #Apache #BigData #apacheflink #kafka #hadoop IV
https://habr.com/ru/companies/oleg-bunin/articles/728520/
#БлогкомпанииКонференцииОлегаБунинаОнтико #Высокаяпроизводительность #Apache #BigData #apacheflink #kafka #hadoop IV
https://habr.com/ru/companies/oleg-bunin/articles/728520/
Хабр
Проблемы приземления данных из Kafka и их решения на Apache Flink
Это история из профессионального опыта, поэтому её лучше передавать от основного действующего лица, который в ней непосредственно участвовал. Поэтому... Меня зовут Вадим Опольский и я работаю...
Мнение об интенсивах Академии Яндекса + выпускной проект
#BigData #Визуализацияданных #Интернетмаркетинг #Hadoop #Облачныесервисы #clickhouse #ЯндексАкадемия IV
https://habr.com/ru/articles/732454/
#BigData #Визуализацияданных #Интернетмаркетинг #Hadoop #Облачныесервисы #clickhouse #ЯндексАкадемия IV
https://habr.com/ru/articles/732454/
Хабр
Мнение об интенсивах Академии Яндекса + выпускной проект
Коротко о главном: Всем привет! Я выпускник данной Академии и победитель в конкурсе проектов. Я получил уникальный опыт, который будет полезен начинающим специалистам Этот обзор будет полезен тем,...
PySpark для аналитика. Как правильно просить ресурсы и как понять, сколько нужно брать
#БлогкомпанииAvitoTech #Python #BigData #apachespark #аналитикаданных #spark #hadoop IV
https://habr.com/ru/companies/avito/articles/732870/
#БлогкомпанииAvitoTech #Python #BigData #apachespark #аналитикаданных #spark #hadoop IV
https://habr.com/ru/companies/avito/articles/732870/
Хабр
PySpark для аналитика. Как правильно просить ресурсы и как понять, сколько нужно брать
Привет! Меня зовут Александр Ледовский. Я тимлид команды аналитики и DS, мы строим рекламные аукционы в Авито. Для работы с поисковыми логами мы пользуемся Apache Spark. Я расскажу о моём опыте...