Ivan Begtin
7.98K subscribers
1.81K photos
3 videos
101 files
4.52K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts ivan@begtin.tech
Download Telegram
Alphabet (ранее известный как Google) выпустили в открытый доступ проект Facets [1] по визуализации наборов данных и их характеристик. Примеры работы Facets можно посмотреть на наборе данных Quick Draw [2]. Сам проект сделан на базе библиотеки Polymer [3] и TypeScript [4], а также интегрируется в Jupyter Notebook [5], крайне популярный среди специалистов в работе с данными.

Можно обратить внимание что визуализация в Facets, в основном, ориентирована на визуализацию наборов данных для задач исследований и обучения на данных. Этот инструмент напрямую связан с инициативой PAIR [6] того же Alphabet в котором описан не только этот, но и многие другие инструменты помогающие создавать продукты с элементами искусственного интеллекта.

Ссылки:
[1] https://pair-code.github.io/facets/
[2] https://pair-code.github.io/facets/quickdraw.html
[3] https://www.polymer-project.org/
[4] https://www.typescriptlang.org/
[5] http://jupyter.org/
[6] https://ai.google/pair

#google #alphabet #visualization
Обратите внимание на проект "Our world in data" [1] в нем собрано много данных из баз всемирного банка [2], ООН [3] и многих других источников.

В то же время там используется гибридная модель - совмещения лонг-рида, инфографики и интерактивных таблиц и научной формы подачи материала.
Получается проект более похожий на укороченные научные статьи с хорошей визуализацией чем относительно привычные лонг-риды.
У интерактивных визуализаций в проекте открытый код [4].

Это один из примеров проектов который может быть источником вдохновения для тех кто хочет создать что-то свое.
Например, что-то близкое по форме подачи, но про Россию и ее регионы.

Ссылки:
[1] https://ourworldindata.org/
[2] https://data.worldbank.org
[3] http://data.un.org
[4] https://github.com/owid/owid-grapher
#opendata #visualization
Что будет если отобразить города на земле в виде "гор света" где высота горы - это интенсивность всего того света что исходит из этой точки?

Победитель конкурса Information is Beautiful 2019 [1] года
Jacob Wasilkowski сделал именно это и теперь на картах можно найти не только хорошо узнаваемые города, но и многие источники света не из столь известных мест.

С помощью интерактивной карты [2] можно сравнить города, найти неизвестные источники света (незаконные рубки, рудники, места добычи нефти и газа, неизвестные поселения), увидеть уровень заселенности любой территории.

Ссылки:
[1] https://www.informationisbeautifulawards.com/showcase/4257
[2] https://jwasilgeo.github.io/esri-experiments/earth-at-night/

#data #dataviz #visualization #earth
Для тех кто ищет вдохновения в визуализации данных, подборка примеров и инструментов:
- USAFacts [1] - большой некоммерческий проект по визуализации показателей экономики США. Создан по инициативе Стиве Баллмера, бывшего главы Майкрософт. Также наглядно визуализируют тренды по COVID-19 [2]
- DataUSA [3] - визуализация государственных данных США об экономике, занятости и образованиии с детализацией до штата, города, университета и профессии. Также визуализируют данные по COVID-19 наглядно [4]
- GapMinder [5] - наглядная визуализация, зачастую, неочевидных данных от одноимённой некоммерческой организации
- Our World In Data [6] - визуализация данных совмещённая с лонгридами и акцентами на глобальных мировых проблемах.
- Atlas of Economic Complexity [7] - атлас экономической сложности, с визуализацией импорта и экспорта стран вместе с анализом сложности их экономик и несколькими способами наглядной визуализации.
- The Pudding [8] - коллекция необычных визуализаций на необычные темы.
- Oligrapher [9] - инструмент визуализации связей и влияния между людьми от команды LittleSis [10], общественного проекта по мониторингу лоббистов в США.
- Examples of Fiscal Data Visualization [10] - большая подборка примеров визуализации данных по госфинансам (расходы, доходы, дефицит, контракты и так далее). Более 230 примеров
- Timeplots [11] - коллекция наглядных постеров "Смерть и налоги" с визуализацией бюджета США и множество других постеров с историей органов власти. К сожалению не обновляют их уже более 6 лет. Скорее всего потому что сделали фокус на интерактивную инфографику для больших межгосударственных и государственных организаций [12]


Ссылки:
[1] https://usafacts.org/
[2] https://usafacts.org/issues/coronavirus/
[3] https://datausa.io
[4] https://datausa.io/coronavirus
[5] https://www.gapminder.org/
[6] https://ourworldindata.org/
[7] https://atlas.cid.harvard.edu/
[8] https://pudding.cool/
[9] https://littlesis.org/oligrapher
[10] https://dx.doi.org/10.6084/m9.figshare.1548331.v1
[11] https://www.timeplots.com/
[12] https://www.graphicacy.com/

#dataviz #visualization
Forwarded from Open Data Armenia
Мы будем публиковать идеи для проектов на номинации конкурса и вот свежие данные только что утверждённого бюджета Еревана. Доступны в виде таблиц в PDF файле [1], таблицы можно извлечь с помощью таких инструментов как ABBYY FineReader, а для визуализации воспользоваться одним из существующих инструментов с открытым кодом или написать свой код и сделать инфографику самостоятельно.

Как выглядят визуализации бюджетов в мире?

Одна из самых известных визуализаций в мире - это Death and Taxes по бюджету США [2]. Она уже много лет служит вдохновением для тех кто хочет наглядно представить эти данные.

А вот пример, интерактивный бюджет Австралии, по нему также доступен исходный код [3]. Достаточно подготовить данные и опубликовать их с помощью уже готового кода.

Ещё примеры визуализаций с открытым кодом:
- Budget Visualization Framework [4]
- Budget Vis [5]

А также другие примеры

Специальный портал по открытости бюджета Санкт-Петербурга [6], а в Румынии бюджет свёрстан в цветовой гамме флага страны и он интерактивен [7] или же визуализация федерального бюджета США [8] с детализацией до контрактов.

Ссылки:
[1] https://www.yerevan.am/uploads/media/default/0002/30/1c00c8d6f8f9ef7f67a523d40e56c4738b56a044.pdf
[2] https://www.visualcapitalist.com/death-taxes-2015-visual-guide-tax-dollars-go/
[3] https://github.com/informeren/dataviz-budget
[4] https://github.com/goinvo/Visual-Town-Budget
[5] https://github.com/shurkhovetskyy/budget-vis
[6] https://budget.gov.spb.ru/
[7] https://openbudget.ro/buget/2023/
[8] https://www.usaspending.gov/explorer/budget_function

#opendata #visualization #budget #yerevan #dataviz
В рубрике интересных проектов на данных Data Saudi [1] портал по визуализации и понятному представлению данных по Саудовской Аравии. Похоже что делалось всё той же командой Datawheel которые делали когда-то DataUSA [2] и ряд аналогичных проектов для Бразилии, Мексики, Эстонии и Чили [3].

Наглядно выглядит всё красиво, на практике не то чтобы очень функционально. Впрочем такие проекты делают не для аналитиков, а для тех кто вставляет статистику в презентации.

Для меня все эти проекты всё ещё оставляют вопрос в том считать ли их порталами с данными или нет. Данные там есть в VIZ Builder, вполне себе скачиваются и удобнее чем в первоисточнике, но, всё же, система визуализации - это не каталог данных.

Есть над чем подумать , возможно, стоит добавить такие проекты в реестр каталогов данных который я веду и, в будущем, индексировать в Dateno.

P.S. Я, кстати, думал про не создать ли такой проект про Армению, какие то данные под это даже есть, но работа Datawheel стоит очень дорого и интересно можно ли такое сделать дешевле и своими силами

Ссылки:
[1] https://datasaudi.mep.gov.sa/en
[2] https://datausa.io
[3] https://www.datawheel.us/

#opendata #dataviz #visualization #data #saudiarabia