Про курево опять. Выглядит все так, как будто табачный дым ковидлу отгоняет
https://www.mk.ru/social/2020/05/04/rossiyskie-vrachi-zametili-strannost-s-koronavirusom-i-kureniem.html

Стартапы увольняют персонал со страшной силой
https://news.crunchbase.com/news/report-number-of-startup-layoffs-surpasses-20k-amid-covid-19-pandemic/

Там куча графичков, но уже понятно, что им бы всем весь прошлый год, да и лучше с самого начала экономить на ненужных расходах, тогда бы не потребовалось кровоточить персоналом сейчас.

В общем, судя по всему, мы разменяли довольно призрачную угрозу на вполне реальные опасности.


https://www.interfax.ru/world/707430

Просто никто не строил матмодели, а слепо верил курлыкающим медикам-инфекционистам. А ведь скоро нагонит волна обрушающейся экономики (по всему миру) - давно известно, что экономический кризис обязательно приводит к повышенной смертности.

Да и про матмодели тоже интересно. Оказалось (ну, просто проверили), что матмодель, согласно которой планировали карантин в Великобритании, содержит ошибки.

С другой стороны, эти хоть что то решили посчитать, а в других то странах целиком полагались на "экспертное мнение" эпидемиологов, то есть на фантазии.

​​Кстати, экономический кризис принес с собой очередную напасть - падение рождаемости. Росстат опубликовал оперативные данные по демографии за март. Казалось бы, люди сидят дома на самоизоляции, чем еще заниматься кроме как плодится и размножаться? Однако это не так. Население в очередной раз потеряло уверенность в собственном будущем, не ощущая помощь от государства, и стремительно пересматривает планы. А мы ведь только в самом начале кризиса.

Знание - сила. А ещё и большие расходы.

Изменения цен учебников по сравнению с развлекательными книгами за последние 15 лет. Американские учебники - позорный способ грабить студентов.

Пишут в @kommersant, что не оправдались прогнозы на рост преступности среди трудовых мигрантов во время карантина. Ну и хорошо.

" В России на 7,1% сократилось число уличных преступлений по итогам четырех месяцев 2020 года, сообщили в пресс-центре МВД России. Также уменьшилось и число преступлений, совершенных мигрантами.

«Количество преступлений, совершенных на улицах, площадях, в парках и скверах, уменьшилось на 7,1%. А количество преступлений среди иностранных граждан снизилось на 1,2%, в том числе по убийствам — на 2%, разбоям — на 8,1%, грабежам — на 9,4%, кражам — на 5,5%»,— сообщили в МВД."

https://www.kommersant.ru/doc/4343563

Визуализация краха авиаперевозок над Европой
https://public.flourish.studio/visualisation/2013000/

Было

Стало

Посмотрим на общую смертность в Москве

(подписаны эпидемии гриппа)

Ничего такого, что можно было бы назвать "никогда такого не было". И слава богу.

В последние годы порталы открытых данных перестали быть чем-то новым и прорывным, в основном они все основаны на нескольких решениях: CKAN, DKAN, OpenDataSoft, Dataverse и они как выполняли так и выполняют ключевую функцию доставки данных конечным пользователям. Иногда может показаться, а что же ещё может в них появиться? Так вот главное что может появиться, а новые сервисы доставки данных без порталов. Это сервисы управления пакетами данных очень похожих на системы контроля версий или системы управления пакетами ПО в Unix.

Datahub.io
Проект компании Datopian вышедшей из Open Knowledge Foundation. Основная его идея в том чтобы публиковать тщательно упакованные наборы данных в соответствии со стандартом Frictionless Data. Там не так много данных, но есть возможность публиковать свои наборы и есть возможность получать опубликованное там через API или утилиту командной строки "data". Каждый набор данных включает метаданные для интеграции их в свои системы. Ориентирован на табличные данные. Адаптирован более всего под язык Python, но есть много примеров на разных языках.

Ссылка: https://datahub.io

Data Package Manager for R (DPMR)
Система управления пакетами для языка R. Также основана на стандарте Frictionless Data, но уже заточенный под конкретный язык

Ссылка: https://github.com/christophergandrud/dpmr

Octopub
Проект Института открытых данных по автоматизации подготовки и публикации наборов данных. Довольно давно находится в стадии Beta, но продолжает развиваться. Важный акцент делают на валидации данных, как минимум на уровне форматов

Ссылка: https://octopub.io

Data Retriever
Сервис и код по подготовке наборов данных и доступа к ним для языков Python и R. В основном ориентирован на исследовательские данные.

Ссылка: https://www.data-retriever.org/

Dolt
Можно сказать Git для данных. Не даёт данным упаковки, но даёт интерфейс похожий на систему контроля версий Git для обновления данных и поддержания их в актуальном состоянии.

Ссылка: https://github.com/liquidata-inc/dolt

Data Version Control (DVC)
Система управления версиями данных ориентированная на машинное обучение. Заточено под данные относительно большого объёма, достигло версии пререлиза 1.0 и активно развивается. Значительно заточено под облачное хранение, такое как AWS S3.

Ссылка: https://dvc.org/

Sno.Earth
Заточено под геоданные и табличные данные, основной стандарт по которому работает это GeoPackage на основе которого даёт возможность работать с данными как система версионирования.

Ссылка: https://sno.earth/

Quilt
Утилита от создателей портала QuiltData, раздающем петабайтный архив данных поверх инфраструктуры AWS. Четко ориентировано на работу с данными как с кодом. Заточено под табличные данные, но возможно пригодно и для других задач.

Ссылки: https://github.com/quiltdata/quilt
—

Это всё, безусловно, не полный список. Существует множество инструментов внутри корпоративных решений, есть продукты умеющие версионировать справочники, есть много подходов к упаковке исследовательских данных и, конечно, за пределами данных, есть множество инструментов создания пакетов с контентом в архивной среде.

#data #datapackages #opensource

Из необычных карт - вариант с Новой Зеландией в центре.