Ivan Begtin
7.98K subscribers
1.82K photos
3 videos
101 files
4.53K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts ivan@begtin.tech
Download Telegram
Маленький преданонс. В августе-ноябре 2018 года мы в Информационная культура и Ассоциация участников рынка данных, а конкретно я лично проводили обследование открытых интерфейсов государственных информсистем и иных информационных систем под госрегулированием на предмет раскрытия из них персональных данных пользователей.

Только на основе общедоступной информации. Результаты не были публичными, их направили в Минсвязь, Роскомнадзор, Генпрокуратуру, что-то всё ещё в работе, а многое уже исправлено.

Около половины найденного - это сведения из удостоверяющих центров, государственных и не очень. И как раз в их случае большая часть найденного уже исправлена, а остальные не исправят пока их явно не "пнешь" похоже.

Лично я долго думал что делать с найденным. Можно ли делать общедоступными результаты этого исследования? Можно ли рассказывать о путях вылова раскрытия перс. данных в информационных системах.

В итоге ту часть исследования которая касается удостоверяющих центров мы будем делать общедоступной. Это подробный анализ систем с конкретными путями воспроизведения и скриншотами по 17 УЦ в которых выявлена эта история (из примерно 50% существующих которые мы проверили).

Сейчас есть развилка:
1. Сделать это в виде собственного доклада, после перепроверки и дополнения информацией о том что было исправлено в итоге после чего рассылать пресс-релиз.
2. Поделиться с одним из крупных федеральных изданий под то что у них будет 1-2 журналиста готовых проверить то что тогда было выявлено и что исправлено и написать об этом качественный материал сославшись на Инфокультуру и Ассоциацию. Может быть даже провести это исследование повторно охватив 100% УЦ.

Если есть идеи и предложения как это лучше сделать - пишите мне на ibegtin@infoculture.ru

#openness #investigations #gis #personaldata
Будет ли заблокирован Facebook в России неизвестно, но позиция Марка Цугерберга известна точно. Отказ от хранения пользовательских данных в странах нарушающих права человека [1]
Дословно:

Secure data storage. People should expect that we won't store sensitive data in countries with weak records on human rights like privacy and freedom of expression in order to protect data from being improperly accessed.

Я лишь могу в очередной раз посетовать что борьба международных корпораций с нацрегуляторами - это борьба упырей против зомби. У рядового пользователя выбор очень невелик. Жаловаться на мегакорпорации нац регуляторами при злоупотреблении их данными или поддерживать мегакорпорации в сохранении личной приватности гражданина вдали от "загребущих лап" государства (но не от "загребущих лап" самих корпораций). Это плавание между Сциллой и Харибдой. И возможен ли новый-технократический мир без этого - это большой вопрос

А Facebook, к сожалению, похоже что будет в России заблокирован. Но, к счастью, блокировки давно уже бесполезны потому что пока приложения Facebook'а есть в магазина Apple и Google и пока российские регуляторы не имеют дистанционного контроля за мобильными устройствами граждан - это не работает.

Ссылки:
[1] https://www.facebook.com/notes/mark-zuckerberg/a-privacy-focused-vision-for-social-networking/10156700570096634/

#securestorage #privacy
Можно сравнивать Роскосмос и НАСА по бюджету, по числу запусков, но мы не услышим от российского руководства Роскосмоса главного сравнения - в социальном и научном эффекте, в доступности данных для исследователей.

НАСА публикуют открытые данные ещё до государственных инициатив по открытости государства. Интеграция НАСА в научные исследования всегда была значительно выше чем в военные, в России всегда было наоборот, Роскосмос был одним из закрытых ведомств, там не только не публиковались открытые данные, но и данные для научных исследований.

У НАСА же список, даже не баз данных, а специальных порталов для их публикации весьма велик:
- Nasa Open Data portal https://data.nasa.gov - портал открытых данных NASA
- Planetary Data System https://pds.nasa.gov каталог и база наборов данных от планетарных миссий НАСА
- EARTHDATA https://earthdata.nasa.gov портал данных о Земле
- My NASA Data https://mynasadata.larc.nasa.gov портал с данными и уроками об устройстве Земли
- NASA API https://api.nasa.gov каталог и документация к API проектов NASA
- NASA Exoplanet Archive https://exoplanetarchive.ipac.caltech.edu - архив данных о экзопланетах
- NASA NEX https://registry.opendata.aws/nasanex/ архив наборов данных об исследованиях Земли на хостинге Amazon AWS
и это неполный список.

За все эти годы Роскомос НИЧЕГО не сделал по доступности их собственных данных и того наследия что им досталось от СССР. Лично я не знаю есть ли ещё окно возможности сохранить российскую космонавтику (и её репутацию), но склоняюсь к тому что это окно закрывается.

#data #opendata #space #cosmos
Меня очень расстраивает что приходится регулярно отвлекаться от тем госинформатизации, работы с данными вообще и открытыми данными в частности, но эта история с блокировками в Рунете, к огромному моему сожалению, бьёт по всем без разбора. И когда она законная, и когда она производится конкретными операторами по требованию спецслужб.

На Хабре вышла редакционная статья [1] о том как сервис ProtonMail [2] блокируется МГТС и другими провайдерами . В принципе понимают ли сотрудники этих органов что тем самым лишь делают рекламу этим сервисам? Похоже не понимают.

Ссылки:
[1] https://habr.com/ru/company/tm/blog/443222/
[2] http://protonmail.com

#privacy
Открылся сайт Нац проекта "Цифровая экономика". Ощущения от него скорее обескураженные. Все материалы и формы в PDF'ах, в разделе "Мнения" нет никаких отличий от новостей, подписаться на обновления через RSS невозможно да и подписываться не на что потому что большая часть новостей на сайте также непрофильная.

В общем остаётся вопрос - а зачем он нужен?

Ссылки:
[1] https://digital.ac.gov.ru/

#digital
... Самой нескоординированной национальной программой Вера Чистова называет «Цифровую экономику». Это многоуровневый федеральный проект, но наряду с ним в отраслевых федеральных проектах (образование, здравоохранение и др.) также заложены существенные суммы. «70 млрд рублей предусмотрены на программное обеспечение в школах. Как это будет увязано с программой «Цифровая экономика»? Пока этой координации нет», - пояснила заместитель Председателя Счетной палаты.

В частности, нет единого мнения о необходимой скорости Интернета для учреждений социальной сферы. В Минкомсвязи обещают, что мощность потока будет превышать 10 Мбит в секунду. «А они нужны школам или не нужны? Мы сегодня не знаем. Может быть, работаем на будущее? Мы закончили проверку доступности проводного интернета в медицинских учреждениях. Не востребованы даже 10 Мбит», - резюмировала Вера Чистова. [1]
...
Ссылки:
[1] http://audit.gov.ru/press_center/news/36209
Privacy International опубликовали обновленные результаты проверки наиболее популярных приложений на предмет передачи детальной информации в Facebook при открытии и в процессе работы [1].

Приложений всего 21, но проверка их была детальной, хотя и охватывала только работу с Facebook'ом через SDK. Как выяснилось подробную информацию передавали практически все приложения. Некоторые исправили это поведение в марте и дали исследователям обратную связь, обещая исправиться.

К этому же исследованию я хочу напомнить про базу Exodus [2] в которой собраны результаты автоматического анализа практически всех приложений из Google Play с поиском и определением разрешений которые приложение затребует и какие трекеры отслеживания пользователя оно использует.

Например последняя версия приложения Яндекс.Такси [3] запрашивает 27 разрешений и содержит код 7 трекеров, приложение Госуслуги [4] требует 18 разрешений и содержит код 3 трекеров.

Другие известные и популярные приложения:
- Активный гражданин (Пр-во Москвы) [5]: 16 разрешений, 7 трекеров
- ProtonVPN - сервис доступа через VPN [6]: 5 разрешений, 1 трекер
- Яндекс Браузер [7]: 41 разрешение, 8 трекеров
- Браузер DuckDuckGo [8]: 6 разрешений, 0 трекеров
- Почта Mail.ru [9]: 37 разрешений и 15 трекеров

И так далее, проверять можно ещё долго. Обратите внимание на ProtonVPN и DuckDuckGo, они добиваются доверия пользователей именно потому что не следят за ним.

В мире подобным мониторингом приватности занимаются Privacy International в США и Exodus Privacy во Франции (с базой 50 тысяч приложений).

В России ничего подобного нет, хотя и прямо таки напрашивается. В целом ничто не ограничивает брать по топ 100 популярных приложений по категориям и строить их рейтинг слежки на основе той же Exodus Database.

Ссылки:
[1] https://privacyinternational.org/appdata
[2] https://reports.exodus-privacy.eu.org/en/
[3] https://reports.exodus-privacy.eu.org/en/reports/40896/
[4] https://reports.exodus-privacy.eu.org/en/reports/9815/
[5] https://reports.exodus-privacy.eu.org/en/reports/11464/
[6] https://reports.exodus-privacy.eu.org/en/reports/64814/
[7] https://reports.exodus-privacy.eu.org/en/reports/56151/
[8] https://reports.exodus-privacy.eu.org/en/reports/63903/
[9] https://reports.exodus-privacy.eu.org/en/reports/63870/

#privacy
Сегодня, довольно внезапно, выступал на ОТР на передаче "Отражение" про распухший госаппарат и эффективность госуправления [1]. Не хватает пока времени изложить эти же мысли подробно и письменно, поэтому пока в таком виде в передаче.

Ссылки:
[1] https://otr-online.ru/programmy/segodnya-v-rossii/ivan-begtin-god-ot-goda-chinovnikov-gossluzhashchih-stanovitsya-tolko-bolshe-nachinaya-s-nashego-pravitelstva-kotoroe-raspuhlo-do-neimovernyh-razmerov-36180.html

#government
Для тех кто работает с данными, полезная визуализация и база знаний по библиотекам на Python для работы с данными [1].

Ссылки:
[1] https://community.ibm.com/community/user/datascience/blogs/paco-nathan/2019/03/12/a-landscape-diagram-for-python-data

#python #data
Немного о рынке данных в России. Не развивать, штрафовать.
Росреестр предлагает штрафовать граждан и организации, которые перепродают сведения из государственного реестра недвижимости. Объем этого рынка в ведомстве оценивают в 2,5 млрд руб.

Подробнее на РБК: https://www.rbc.ru/economics/21/03/2019/5c935ae79a79477312f2c5b0
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
2-3 марта мы провели направление «Открытые государственные данные» на Дне открытых данных. За два дня удалось обсудить финансовые данные Москвы, открытые данные Минкультуры России и ФНС России, поговорить о проблемах качества открытых данных (на примере данных Москвы и финансовых данных), узнать об исследованиях Стрелки, качестве международных данных и читаемости российских НПА.

Для тех кто не смог посетить выступления, мы подготовили видеозаписи и презентации:

1. Видеозапись пленарной секции "Открытость государства" (А.Л. Кудрин,
председатель Счетной палаты РФ): https://youtu.be/fjQhIbF5Yqo

2. Секция "Открытые данные без Открытого правительства": видеозапись
(https://youtu.be/9UWYy2tFqRc) и презентации:

- "Опыт внедрения data-driven управления и аналитических инструментов
в деятельность государственных органов", Тимур Алейников, заместитель
директора Главного информационно-вычислительного центра Министерства
культуры РФ (https://www.dropbox.com/s/ya1yk2uede5ryz0/Data-Driven%20Management.%20Aleinikov.pdf?dl=0).

- "Практические вопросы подготовки и публикации открытых данных на
примере ФНС России", Юлия Духовнова, начальник отдела Управления
международного сотрудничества и валютного контроля ФНС России
(https://www.dropbox.com/s/gkdrx7a07yuehsl/Open%20FNS.%20Duhovnova.pdf?dl=0).

3. Секция "Качество открытых данных": видеозапись
(https://youtu.be/qkuNPSwErmk) и презентации:

- "Как повысить качество открытых данных на примере данных Москвы",
Иван Фост, руководитель направления в Аналитическом центре при
Правительстве РФ
(https://www.dropbox.com/s/6j0457kvms6drw6/Moscow%20Open%20Data.%20Fost.pdf?dl=0).

- "Проблемы качества открытых финансовых данных", Ольга Пархимович,
куратор проекта "Госзатраты" АНО "Информационная культура"
(https://www.dropbox.com/s/6rlijppumu02p65/Open%20Finance%20Data.%20Parkhimovich.pdf?dl=0).

- "От пустоты до хаоса, или как мы научились любить "открытые" данные
о городской экономике", Елена Короткова, руководитель Центра городской
экономики КБ "Стрелка"
(https://www.dropbox.com/s/8g75lqi40tarfoy/City%20Economy.%20Korotkova.pdf?dl=0).

4. Кейс "Что мы узнали о читаемости правовых актов в России?", Денис
Савельев, к.ю.н, научный сотрудник Института проблем правоприменения
при Европейском Университете в Санкт-Петербурге: видеозапись
(https://youtu.be/GU52uGnDIYk) и презентация
(https://www.dropbox.com/s/xqqqu96rzld6mwk/NPA%20Readability.%20Saveliev.pdf?dl=0).

5. Кейс "Всегда ли у соседа трава зеленее? Изучаем открытые данные
международных организаций", Алина Владимирова, научный сотрудник
Института востоковедения Российской академии наук: видеозапись
(https://youtu.be/3Yb8opt1bmQ) и презентация
(https://www.dropbox.com/s/2eim00wdqtt1kqj/Int%20Open%20Data.%20Vladimirova.pdf?dl=0).

6. Фотографии с Дня открытых данных:
https://www.facebook.com/pg/InformationCulture/photos/?tab=album&album_id=2160518444062031

7. Видеозаписи с других направлений и с Дня открытых данных 2018 года
можно посмотреть по ссылке:
https://www.youtube.com/channel/UCve6269kQEJ1LW52HXKtTng/playlists.
Пытаюсь придумать заголовок этой новости
Возбуждено уголовное дело в отношении бывшего министра открытого правительства Российской Федерации Михаила Абызова
http://sledcom.ru/news/item/1319127/
То что Михаила Абызова арестовали - это, конечно, новость в которой ничего хорошего нет. При том что у меня смешанные и, часто, негативные отзывы о деятельности "Открытого правительства", особенно в последние его годы, при этом имя Абызова всё равно стало ассоциироваться с этой деятельностью.

Факт его ареста никак Открытости государства в в России не поможет, а будет ли мешать? Да, будет. До тех пор пока связка ассоциации Абызов=Открытое правительство не изменится.
Минюст России вынес на обсуждение постановление Правительства об экспертном совете [1]. Совет полностью перезагружается и теперь состоит из коллегии в 15 человек и привлекаемых под рабочие группы экспертов.

Что сразу бросается в глаза при текущей структуре совета:
1. Не прописан никак контроль конфликта интересов
2. Есть ограничения на вхождение представителей власти, но нет ограничений для сотрудников бюджетных учреждений и иных учрежденных государством структур.
3. Де-факто это будет супер-лоббисткая структура
4. Возникает ещё и экспертная иерархия
5. К совету будет приставлена/создана специальная НКО и вся интрига в том какая именно.
6. Требования и принципы прозрачности совета отсутствуют полностью.

Ссылки:
[1] https://regulation.gov.ru/projects/List/AdvancedSearch#departments=30&npa=89727

#government #councils
На сайте национального проекта "Цифровая экономика" вышла моя заметка о том как может быть устроено управление данными [1]. Формат её краток, реально же говорить можно долго.

Вот ключевое:

Каким может быть идеальное госрегулирование?

Основу госрегулирования должна составлять концепция или стратегия развития рынка данных со стороны государства, охватывающая принципы государственного регулирования указанного рынка и роль государства в этой сфере. Концепция должна определять такие направления, как:

1) этика сбора, обработки и использования данных, относящихся к наиболее чувствительным данным для общества (в первую очередь персональных данных);

2) принципы общественного блага и четкое определение случаев его приоритета над частными интересами;

3) принципы цифровых прав граждан: доступность им данных о них самих, управление доступом к их персональным данным для частных компаний и государства.

В ситуации нарастающего сбора данных общество и бизнес оказываются в неравных условиях с владельцами баз данных, которые знают о гражданине или компании значительно больше, чем они сами знают о себе. Цифровые права обеспечивают справедливость в доступе к данным без потери коммерческого преимущества у владельца данных;

4) государственная политика развития платформ сбора, обработки и обмена данными между участниками рынка данных: от поддержки стартапов, создающих подобные платформы, до разработки стандартов публикации и обмена данными;

5) четкая регламентация доступа к данным в государственных информационных системах, в том числе в части разрешения конфликтных и спорных ситуаций.

Ссылки:
[1] https://digital.ac.gov.ru/opinions/820

#data
Столько разговоров про арест Абызова и "конец открытости" и тд. Меня просят тоже что-то об этом написать, но я уже всё написал несколько раз [1].

Конец открытости - это не Абызов, а Медведев. Именно он запустил этот процесс, отодвинулся в сторону и далее "слил" его целиком и полностью.

До того как стать министром Михаил Абызов не был замечен, ни в госуправлении, ни во внедрении практик открытости в мире, ни в поддержке НКО которые бы открытостью занимались. Он был случайным человеком для всей этой темы, назначенный волевым решением Дмитрия Медведева по, скажем так, никому неизвестным причинам на должность министра без портфеля.

За всё время существования команда Абызова не имела ни одного специалиста с опытом работы с открытостью, включала, в основном консультантов и в целом отличалась невероятной хаотичностью.

Большая часть экспертов перестали сотрудничать с ним ещё на самых начальных стадиях поскольку в отличие от мозговых центров Абызов и его команда хотели очень много бесплатной работы в обмен даже не на пиар, а нечто не поддающееся вербальному объяснению без нарушения "закона о мегаувлажнении власти".

При этом, да, к счастью или к сожалению, на какое-то время Абызов действительно обладал властным адм ресурсом и помогал НКО там где мог (или там где хотел).

А я повторю ту фразу которую постоянно повторял Абызову и на всех мероприятиях.

"Мы занимались открытостью государства до Вас, занимаемся сейчас и продолжим заниматься когда Вы прекратите ей заниматься."

Но, при этом, на тему открытости государства выделяли столь мало государственных средств, что и мои претензии сейчас не про распил, а про качество и бессистемность.Поэтому

Очень жаль многие кто сейчас гиперувлечён "цифрой" в государстве прямо сейчас и уже активно распределяют сотни миллионов забывают о жизненном цикле подобных государственных инициатив. Когда тему накачивают деньгами то она взлетает быстрее и падает жёстче.

По цифре готов спорить что в течение 1 года от хайпа переходят к критике, в том числе внутри государства, накоплением досье, ко второму году становится виден масштаб бессмысленности. С xx20го года начнутся серьёзные перетряски, а к 2024 году или в случае смены правительства до, то и "глубокое пэрэтрахание" всей повестки через целевые посадки.

Ссылки:
[1] https://begtin.tech/failed-gov/

#opengov #opendata
Я по возможности стараюсь не репостить то что отходит от технологий и приближается к политике. Но это ближе к госполитике. Да, госполитика сейчас выстраивается по модели когда государство планирует выжать из интернет-отрасли максимум.