Запись нашего свежего вебинара, посвященного работе с реляционной СУБД Greenplum.
На вебинаре мы подробно рассказали о том, как бороться с «раздутием» таблиц, как правильно находить, собирать и удалять накопившиеся мусорные данные, используя процедуру Vacuum (вакуумирование). В качестве вишенки на торте в конце подсветили кейс, который помог нам отшлифовать методы работы с большими данными в целом и Greenplum в частности.
Приятного просмотра!
На вебинаре мы подробно рассказали о том, как бороться с «раздутием» таблиц, как правильно находить, собирать и удалять накопившиеся мусорные данные, используя процедуру Vacuum (вакуумирование). В качестве вишенки на торте в конце подсветили кейс, который помог нам отшлифовать методы работы с большими данными в целом и Greenplum в частности.
Приятного просмотра!
ITSumma
Вебинар по управлению базами данных Greenplum
Greenplum, вакуумирование данных, DataOps, DBA, Big Data, управление большими данными, вебинар
Инфраструктурная документация помогает держать систему в порядке и позволяет четко увидеть, что происходит в вашем проекте. О том, чем она ещё полезна, читайте в наших сегодняшних карточках.
Microsoft решили не торопиться с отключением своих облачных сервисов в России.
Это значит, что есть ещё несколько дней, чтобы сделать все бэкапы и настроить работу альтернативной инфраструктуры. Мы готовы помочь вам в оперативной миграции в облака одного из наших партнеров.
VK WorkSpace: почта, диск, сервис видеоконференций, мессенджер, трекер задач, миграция почты и файлов из OneDrive и Google Drive, совместное редактирование документов.
VK Cloud: объектное хранилище, базы данных в облаке, виртуальные серверы, кластеры Kubernetes, обработка и анализ больших данных c облачной инфраструктурой на базе Apache Hadoop, Spark и Click House и др.
Яндекс 360 для бизнеса: почта, календарь, диск, мессенджер, документы, формы, рассылки и др.
Yandex Cloud: платформа данных, инфраструктура и сеть, контейнеры, инструменты разработчика, бессерверные вычисления, безопасность, ресурсы и управление, машинное обучение, другие инструменты для бизнеса.
Cloud. ru: более 80 IaaS- и PaaS-сервисов, платформа для ML-разработки полного цикла, кластеры Kubernetes, теги для маркировки облачных ресурсов, возможность создания виртуальных машин, публичные IP и др.
Подробнее о том, как оказывается услуга, читайте в презентации👉🏻https://disk.yandex.ru/i/Eu6i69oXL7DyhA
Это значит, что есть ещё несколько дней, чтобы сделать все бэкапы и настроить работу альтернативной инфраструктуры. Мы готовы помочь вам в оперативной миграции в облака одного из наших партнеров.
VK WorkSpace: почта, диск, сервис видеоконференций, мессенджер, трекер задач, миграция почты и файлов из OneDrive и Google Drive, совместное редактирование документов.
VK Cloud: объектное хранилище, базы данных в облаке, виртуальные серверы, кластеры Kubernetes, обработка и анализ больших данных c облачной инфраструктурой на базе Apache Hadoop, Spark и Click House и др.
Яндекс 360 для бизнеса: почта, календарь, диск, мессенджер, документы, формы, рассылки и др.
Yandex Cloud: платформа данных, инфраструктура и сеть, контейнеры, инструменты разработчика, бессерверные вычисления, безопасность, ресурсы и управление, машинное обучение, другие инструменты для бизнеса.
Cloud. ru: более 80 IaaS- и PaaS-сервисов, платформа для ML-разработки полного цикла, кластеры Kubernetes, теги для маркировки облачных ресурсов, возможность создания виртуальных машин, публичные IP и др.
Подробнее о том, как оказывается услуга, читайте в презентации👉🏻https://disk.yandex.ru/i/Eu6i69oXL7DyhA
Яндекс Диск
Миграция инфраструктуры в облако.pdf
Посмотреть и скачать с Яндекс Диска
Вышла новая статья в нашем блоге на Хабре
В ней мы рассуждаем про повсеместное исчезновение компьютерной грамотности. Оказывается, пока мы спасали интернет, люди перестали пользоваться компами! И теперь пресловутый «продвинутый пользователь ПК» это уже не мем, а полноценный навык, необходимый любому современному специалисту.
Что думаете на этот счет? Заходите поделиться вашим мнением в комментариях: https://habr.com/ru/companies/itsumma/articles/802913/
В ней мы рассуждаем про повсеместное исчезновение компьютерной грамотности. Оказывается, пока мы спасали интернет, люди перестали пользоваться компами! И теперь пресловутый «продвинутый пользователь ПК» это уже не мем, а полноценный навык, необходимый любому современному специалисту.
Что думаете на этот счет? Заходите поделиться вашим мнением в комментариях: https://habr.com/ru/companies/itsumma/articles/802913/
Хабр
Мы шутили над «опытными пользователями ПК», а ведь они вымирают
Пока в Лас-Вегасе проводят киберспортивные турниры по Excel, где сверхлюди уверенно соревнуются в скоростном решении абсурдно сложных рабочих задач при помощи самого универсального офисного софта,...
16 мая в 11:00 МСК приглашаем на вебинар «Spark-Greenplum Connector: философия взаимодействия».
На вебинаре мы разберем best practices по работе с распределенно-параллельными системами обмена данных. На примере нашей разработки Spark-Greenplum Connector расскажем, как создать собственное расширение для обмена данными между Apache Spark и внешними системами. И как правильно использовать специальный набор интерфейсов, которые коннектор должен реализовать для взаимодействия с ядром Spark..
🧑🏻🏫Спикер вебинара:
Алексей Пономаревский, ведущий администратор баз данных в ITSumma
В программе:
🔻 Что подтолкнуло нас к созданию своего собственного коннектора Spark к СУБД Greenplum.
🔻 С какими вызовами мы столкнулись при написании коннектора и как их решили.
🔻 Цифры и результаты: что у нас получилось в итоге.
🔻 Дальнейшие планы и перспективы разработки.
Вебинар будет интересен администраторам баз данных, DataOps-инженерам и всем специалистам, работающим с построением ETL-процессов, хранением и обработкой больших объемов данных.
Регистрация на вебинар доступна по ссылке: https://www.itsumma.ru/blog/webinars/spark-greenplum
На вебинаре мы разберем best practices по работе с распределенно-параллельными системами обмена данных. На примере нашей разработки Spark-Greenplum Connector расскажем, как создать собственное расширение для обмена данными между Apache Spark и внешними системами. И как правильно использовать специальный набор интерфейсов, которые коннектор должен реализовать для взаимодействия с ядром Spark..
🧑🏻🏫Спикер вебинара:
Алексей Пономаревский, ведущий администратор баз данных в ITSumma
В программе:
🔻 Что подтолкнуло нас к созданию своего собственного коннектора Spark к СУБД Greenplum.
🔻 С какими вызовами мы столкнулись при написании коннектора и как их решили.
🔻 Цифры и результаты: что у нас получилось в итоге.
🔻 Дальнейшие планы и перспективы разработки.
Вебинар будет интересен администраторам баз данных, DataOps-инженерам и всем специалистам, работающим с построением ETL-процессов, хранением и обработкой больших объемов данных.
Регистрация на вебинар доступна по ссылке: https://www.itsumma.ru/blog/webinars/spark-greenplum
ITSumma
Вебинар по Spark-Greenplum Connector
Best practices по работе с распределенно-параллельными системами обмена данных. На примере нашей разработки Spark-Greenplum Connector расскажем, как создать собственное расширение для обмена данными между Apache Spark и внешними системами.
Всем привет!
Мы планируем посетить Retail Day, будем рады встретиться там и пообщаться!)
«23 мая состоится ключевое мероприятие Яндекс 360 для индустрий ритейла, Ecom и FMCG Retail day!
Обсудим:
🦾Трансформацию ритейл индустрии и влияние этих изменений на ИТ-ландшафт компаний
👌🏽Какие бизнес-инструменты использовать для эффективности командной работы
👏Опыт внедрения Яндекс 360 для бизнеса и Трекер, Вики, Формы в компаниях
В качестве спикеров выступят крупные игроки индутрии: Ле Монлид, Ламода, SimpleWine, X5, Фаберлик, Invetnive group.
Мероприятие состоится в очном формате и пройдет в Императорском яхт-клубе Москвы. Подробности и регистрация по ссылке.
До встречи на мероприятии!
Retail Day Яндекс 360 для бизнеса
Встретимся офлайн, чтобы обсудить опыт миграции в новые корпоративные сервисы для коммуникаций.»
Мы планируем посетить Retail Day, будем рады встретиться там и пообщаться!)
«23 мая состоится ключевое мероприятие Яндекс 360 для индустрий ритейла, Ecom и FMCG Retail day!
Обсудим:
🦾Трансформацию ритейл индустрии и влияние этих изменений на ИТ-ландшафт компаний
👌🏽Какие бизнес-инструменты использовать для эффективности командной работы
👏Опыт внедрения Яндекс 360 для бизнеса и Трекер, Вики, Формы в компаниях
В качестве спикеров выступят крупные игроки индутрии: Ле Монлид, Ламода, SimpleWine, X5, Фаберлик, Invetnive group.
Мероприятие состоится в очном формате и пройдет в Императорском яхт-клубе Москвы. Подробности и регистрация по ссылке.
До встречи на мероприятии!
Retail Day Яндекс 360 для бизнеса
Встретимся офлайн, чтобы обсудить опыт миграции в новые корпоративные сервисы для коммуникаций.»
Retail Day Яндекс 360
Встретимся офлайн, чтобы обсудить опыт миграции в новые корпоративные сервисы для коммуникаций.
В этом кейсе мы провели 4 итерации нагрузочного тестирования и поработали с инфраструктурой клиента, чтобы увеличить порог нагрузки и стабильность сайта.
Клиентом была компания Ekonika — одна из крупнейших обувных сетей в России, которая занимается не только ритейлом, но и продажей фирменной обуви собственного бренда.
В итоге нам удалось в 18 раз увеличить пропускную способность сайта с возможностью горизонтально масштабировать вычислительные ресурсы и выдерживать ещё больше трафика.
Подробности о кейсе: https://www.itsumma.ru/projects/ekonika
Клиентом была компания Ekonika — одна из крупнейших обувных сетей в России, которая занимается не только ритейлом, но и продажей фирменной обуви собственного бренда.
В итоге нам удалось в 18 раз увеличить пропускную способность сайта с возможностью горизонтально масштабировать вычислительные ресурсы и выдерживать ещё больше трафика.
Подробности о кейсе: https://www.itsumma.ru/projects/ekonika
ITSumma
«Ekonika»: интернет-магазин
Эконика – это одна из крупнейших обувных сетей в России, занимается не только ритейлом, но и продажей фирменной обуви собственного бренда.
Наш вебинар, посвященный взаимодействию между Spark и Greenplum, прошел уже 2 недели назад. Но его запись останется с вами навечно! По крайней мере, пока не отключат всё электричество на планете.
📼Посмотреть запись можно по ссылке: https://youtu.be/zIYUKB5960w
📼Посмотреть запись можно по ссылке: https://youtu.be/zIYUKB5960w
YouTube
Spark-Greenplum Connector: философия взаимодействия
В этом видео мы разберем best practices по работе с распределенно-параллельными системами обмена данных. На примере нашей разработки Spark-Greenplum Connector расскажем, как создать собственное расширение для обмена данными между Apache Spark и внешними системами.…
ITSumma
16 мая в 11:00 МСК приглашаем на вебинар «Spark-Greenplum Connector: философия взаимодействия». На вебинаре мы разберем best practices по работе с распределенно-параллельными системами обмена данных. На примере нашей разработки Spark-Greenplum Connector…
Для тех, любит больше читать, чем смотреть, мы подготовили текстовую версию доклада Алексея Понаморевского с нашего недавнего вебинара и опубликовали ее на Хабр.
Статья будет полезна для разработчиков, решающих задачи по интеграции распределенных фреймворков обработки с реляционными БД, которые используют параллельные вычисления. Приятного чтения!👇🏻
https://habr.com/ru/companies/itsumma/articles/821377/
Статья будет полезна для разработчиков, решающих задачи по интеграции распределенных фреймворков обработки с реляционными БД, которые используют параллельные вычисления. Приятного чтения!👇🏻
https://habr.com/ru/companies/itsumma/articles/821377/
Мы уже писали о нашем видении того, как устроен мониторинг/observability
Но время идет, и системы меняются, становясь все сложнее и сложнее.
К 2024 году организация "идеального" observability большого проекта - задача, к которой можно только стремиться, но нужно на что-то ориентироваться.
Для того чтобы к чему-то стремиться, нужна стратегия.
В нашей новой статье на Хабре мы рассказываем о нашем видении "идеала" и о том, как можно разработать для себя стратегию внедрения observability и придерживаться ее:
https://habr.com/ru/companies/itsumma/articles/814195/
Но время идет, и системы меняются, становясь все сложнее и сложнее.
К 2024 году организация "идеального" observability большого проекта - задача, к которой можно только стремиться, но нужно на что-то ориентироваться.
Для того чтобы к чему-то стремиться, нужна стратегия.
В нашей новой статье на Хабре мы рассказываем о нашем видении "идеала" и о том, как можно разработать для себя стратегию внедрения observability и придерживаться ее:
https://habr.com/ru/companies/itsumma/articles/814195/
Хабр
Как построить эффективную стратегию мониторинга с высокой наблюдаемостью
Давайте сразу определимся: самым важным в разработке сейчас является производительность и надежность вашей инфраструктуры, потому что если ваш проект лагает или работает через раз, вас не спасут...