ШТОСМ
877 subscribers
233 photos
7 videos
431 links
Мысли на тему картографических новостей и заметок. Приложение к блогу https://shtosm.ru и твитеру https://twitter.com/shtosm.

Пишите мне @ilyazver или делитесь мнением в группе @ruosm.
Download Telegram
Когда-то давно мы внимательно следили за валидатором населённых пунктов. В октябре 2011 года отметили сто тысяч деревень: вдвое больше, чем годом ранее. С тех пор мы как-то поостыли, но деревни продолжают появляться. Сегодня я, разрабатывая длинную заметку в штосм, заглянул в валидатор от fserges. А там — 150 тысяч населённых пунктов! Из 155 всего! 96,3%!

Больше всего не хватает в Центральном федеральном округе: трёх с половиной тысяч. Но при этом валидатор сообщает о 3,7 тысячах населённых пунктов, не сопоставленных с классификаторами. Так что, пожалуй, у нас есть все, просто не все правильно оформлены. Даже городских и сельских поселений (admin_level=8) уже 97,8%! Вот так незаметно мы делаем самую полную карту.
В OpenStreetMap продолжается импорт адресов неизвестными людьми из неизвестных источников. Масштабы чудовищны: сотни человек копируют Яндекс, 2ГИС, Google и ПКК и отказываются назвать заказчиков. Всё это придётся удалить — и этим поставить под угрозу Всероссийскую перепись населения 2020 года: http://shtosm.ru/all/vserossiyskaya-perepis-pod-ugrozoy/
Первого января Австралия начала двигать все координаты в своих документах на 1,8 метра. Потому что континент двигается на северо-восток по семь сантиметров в год, и за 26 лет с последнего расчёта координаты съехали достаточно, чтобы это было заметно с GPS. Остаётся логичный вопрос: сместить ли Австралию в OpenStreetMap?
Прочитал у Лены ответ на привилегированное размышление Кости Горского о профессиях, и внезапно в голове сложилось, откуда в OpenStreetMap возьмутся новые тысячи участников. Потому что вы же помните, нашей основной задачей всегда было привлекать участников. И наша современная проблема — пул технарей в целом уже исчерпан, а другим людям у нас делать нечего.

Как это ни расстроит главного крафт-маппера Фредерика Рамма, большинству новых жителей OSM будет посрать на карту. Они даже не запомнят её название и едва ли узнают о вики.

Главный и самый глубокий источник новых картографов — это те, кто использует OSM для удобства. Путешественники, оставляющие отзыв в mapsme и добавляющие соседнее кафе в приложении. Жители, вносящие на карту время работы почты, чтобы не запоминать. Успех — это когда твой сервис превратился в базовую инфраструктуру и почти никто не знает, на чём это всё работает. Никаких тегов, споров в пропозалах и войн правок: люди пришли не участвовать, а пользоваться.

А второй источник, который решит нашу вечную проблему с diversity, — это наёмные работники. Уже сейчас тысячи сотрудников Facebook, Apple, Kaart, Mapbox, Lyft и других приходят на работу и открывают JOSM или iD. На заре OSM мы подбодряли себя, что дюжина картографов-любителей заменяет одного профессионала на зарплате, а любителей у нас армия. Теперь же ситуация обратилась (снова в нашу пользу): люди на зарплате нагрянули в наш проект и рисуют эффективнее любителей.

Внезапно опытные участники оказались в меньшинстве не среди любопытных новичков, которые сделают пару ошибок и уйдут навсегда, а среди приверженных пользователей и профессиональных редакторов. Первых становится всё меньше, вторых и третьих прибывает с каждым годом. Им не важны ценности OpenStreetMap, у них свои задачи или план.

Кажется, плохо, но не совсем: именно так выправится баланс среди участников. В отличие от менеджерских позиций, за редакторские не воюют белые парни, берут всех, кто демонстрируют адекватность. Приложениями пользуются даже папы-одиночки и девочки в Иране. Деньги и удобство — универсальные ценности, которые апеллируют ко всем слоям социума. Так и победим.

Ну и как нельзя к месту наша вакансия в Минске: https://jobs.tut.by/vacancy/35693395
Хорошая новость: снимки Maxar вернулись в редакторы. Плохая: кажется, это до первого умного сотрудника организации, привыкшей к бесплатным геоданным.

http://shtosm.ru/all/maxar-uhodil-no-vernulsya-kak-obeschal/
Сейчас пытаюсь узнать, чем хорош Presto для пространственных запросов (это, если коротко, SQL-интерфейс к бигдате). Когда заметил, что у меня в разных вкладках заголовки документации разным цветом, присмотрелся — и понял ужасное.

Оказывается, есть два разных Presto: PrestoDB и PrestoSQL. Второй отпочковался примерно год назад. Они:

* называются одинаково,
* оба домена в зоне .io,
* логотипы и оформление сайтов одинаковые,
* одинаковые списки репозиториев в проектах github prestodb и prestosql,
* в обоих репах написано «the official home of Presto»,
* ОБА ПРОЕКТА АКТИВНЫЕ! 25+ (разных) коммитов в каждом на прошлой неделе,
* оба открытые и управляются фондами: Presto Foundation и Presto Software Foundation соответственно,
* участники устраивают войну правок в википедии, потому что страница Presto одна,
* разумеется, тырят коммиты друг от друга, но не все.

Разница в том, что PrestoDB поддерживают Facebook, Uber, Twitter, Alibaba и они, очевидно, чаще находят и чинят ошибки в пространственных запросах. А PrestoSQL пилят все бывшие его разработчики, ушедшие из фейсбука, поэтому его проще поставить и там лучше всё устроено внутри. Невозможный выбор для дата-инженеров, в общем. Это самое безумное противостояние открытых проектов, что я видел.
«Если кто-то сфотографирует и сделает книгу, это еще и материальный ущерб музею. Неужели мы хотим, чтобы на музеях зарабатывали случайные люди, которые часто даже не умеют правильно подписать картину?»

Удивительную и очень важную историю рассказывает историк PereslavlFoto на хабре. Петербуржская модельерка попросила стилизовать эмблему под картину 1780 года. Она в общественном достоянии: можно использовать как угодно. Но Эрмитаж, в котором картину выставляют, заявил права на неё и запретил любое использование. Президентша музея им. Пушкина, арбитражный суд и суд по интеллектуальным правам с ней согласились. Публичное достояние в России — пустой звук. Давайте сделаем музей советских военных карт.

https://habr.com/ru/post/489152/
Мейнтейнеры EasyList, списка рекламных доменов, всё ещё плохие люди, но к сожалению, их списком пользуются все блокировщики рекламы без исключения.

Два года прошло с тех пор, как они заблокировали баннер на сайте OpenStreetMap, в котором мы анонсируем конференции. Вы теперь не знаете, как выглядит логотип SotM 2020, потому что и EasyList, и Том Хьюз упёрлись рогом: одни не удаляют, другой не заменяет ключевое слово в коде страницы.

Сегодня человек в IRC посетовал, что карту смещений (которые заносят в плагине iodb) нельзя посмотреть, не отключая uBlock. Потому что те же ребята из EasyList лет восемь назад добавили в список что? Совсем мелочь, файл с уникальным названием, явно выдающим его рекламную природу. heatmap.js. Да, они блочат все heatmap.js и вообще файлы, оканчивающиеся на heatmap, по любым путям.

Люди, близкие к картам, недоумевают в их гитхабе, но мейнтейнеры терпеливо объясняют: «The filter will not be removed». Не потому, что эта строчка в запретах важна, или что они провели исследование, или что это порушит какую-то совместимость. Просто. Потому что люди, которые называют скрипт для отображения тепловой карты "heatmap", дураки и не лечатся, а вот списки easylist используют AdBlock, uOrigin и прочие. Сразу понятно, кто тут главный.

Это к тому, что поддерживать списки типа часовых поясов, языков, алфавитов или подложек для обрисовки нужно централизованно, а не каждому своё. И использовать их тоже важно: вон, в JOSM долго думали и решили забить на свой список подложек в пользу editor-layer-index. Но также важно время от времени проверять мейнтейнеров на адекватность. А то как бы ни был хорош uBlock, хочется его по умолчанию отключить. Кто знает, какие ещё сюрпризы таятся в списках EasyList.
Forwarded from Tau Ceti
я спокоен
Александр Борсук в фейсбуке передаёт с Embedded World 2020 в Нюрнберге, что mapsme встраивают в некоторые китайские автомобильные панели. Преимущество открытого кода! #успех
Сайт момента, лучше которого сегодня ничего не появится:

https://www.isitcanceledyet.com

(Я в расстройстве, что лайнап на послезавтрашний SotM Baltics под угрозой, но всё равно у нас десяток классных людей, включая Аллана Мастарда, Zkir и SviMik) (Также, nicknames are so cancelled in 2020)
Forwarded from Eduard Kazakov
Пару недель назад зарелизился новый репроцессинг популярнейшей цифровой модели рельефа SRTM, получивший название NASADEM. Всё пересчитали с новыми алгоритмами, добавили новых источников. Не качайте больше старый SRTM :)
Страница датасета: https://lpdaac.usgs.gov/products/nasadem_hgtv001/
Получать здесь: https://search.earthdata.nasa.gov/search?q=nasadem
(где найти рельеф — это всегда второй вопрос после где найти карту)
Forwarded from Схемотехника (Ilya Zverev)
Организаторы спбгеотеха молодцы, сделали лучший выбор из возможных. Позаботьтесь о своих соседях и прочих людях, не ходите на встречи и в кино, переждите пару месяцев. Самая полезная статья про вирус объяснит, почему вопрос не в том, чтобы никто не заразился (вы не избежите), а в том, чтобы растянуть процесс пандемии на несколько месяцев и разгрузить больницы: https://habr.com/ru/post/491974/
Несколько человек в чатике и вне его спрашивали, какая разница, что Osmosis уже полтора года как не поддерживается, API-то не меняется. Оказалось, что эта программа валится от любого чиха на стороне сервера, и Майкл Мигурски теперь примеряет шапку мейнтейнера, готовясь выпустить 0.47.1. Напоминаю всем, чтобы держались от osmosis подальше в новых проектах: его функции быстрее и гибче выполняют osmium и несколько сторонних скриптов.
В рассылке Фредерик распекает фейсбук за их размышления о будущем технологии за RapiD — той самой, которая помогает обклацывать дороги. Нынче фейсбук запартнёрился с микрософтом и готовится добавить домики в свой редактор. А в будущем позволить импорты других видов.

Майкл Мэрон защищает фейсбук и газлайтит Фредерика, мол, он против прогресса. Конечно, Фред против прогресса, но и Майкл забывает написать, что ему фейсбук платит за обработку сообщества.

При всё при этом нельзя не оценить, как RapiD талантливо обходит драконовские ограничения на импорт данных в OSM. Никакого разделения на проекты, никакого buy-in от местных сообществ или проверки исходных данных на правильность. Фейсбук вообще не при чём, это всё картографы сами добавили, после проверки глазами, конечно.

На этом фоне HOT запускает десятки инициатив по перекладыванию данных RapiD на карту. Делают это, как всегда, неопытные новички с минимальным контролем. Коммерческие компании направляют на RapiD сотрудников, чтобы дороги появились быстрее. Каналы, заборы и места склейки снимков продолжают массово добавляться в OSM с тегами highway. Всё это видно по десяткам заявок на SotM (который в этом году почти наверняка будет виртуальным) с обоих сторон.

Я вспоминаю свои аккуратные попытки автоматизировать большие импорты, и как сложно было проходить валидацию в квропейских сообществах. Куда проще было бы выдать гору данных и сделать редактор с кнопкой «yolo, залить от моего имени». Именно это и планирует сделать фейсбук в своём RapiD. Приветствую инициативу: может, хоть тогда вахтёры осма поймут, что бизнес нашёл способ их отодвинуть.
Forwarded from Городские данные (Andrey Karmatsky)
Помните, была такая студия Urbica — и мы проводили курс «Масштаб» — где показывали и рассказывали как визуализировать данные на карте? Так вот, мы публикуем все материалы (примеры данных, задания и скринкасты) этого курса в свободном доступе:

https://www.youtube.com/playlist?list=PLgMlm2We4Ehjo0HgCUurJcvX11P7rAg3P&fbclid=IwAR0buIKL0tunsPBpIe5ri_PijyOjwPvS21eGiFOVcfVp4M0wm_JYb80mgCg

Берегите себя и ваших близких #stayhome
Интернеты полнятся списками «если вы на карантине, почитайте это и посмотрите то». Но мы же осмеры, а что можно делать с картами в этот период? ВСЁ.

В твитере гуманитарная команда и прочие американцы приглашают общёлкать квадратные километры в HOT Tasking Manager, или просто посвайпать в MapSwipe. Обычные осмеры подскажут, что у нас ещё в Залипупинске не все домики отрисованы. И официальный бложек OSMF не переведён.

Но мы же осмеры, а зачем нужен OSM, как не заставлять выходить из дома? Напомню, что у нас не столько карантин, сколько социальная изоляция: выходить можно, главное — не приближаться к другим людям ближе чем на два метра, не трогать лицо и мыть руки с мылом 20 секунд или дольше. Садитесь, значит, на велосипед, намазываете руль клеем, чтобы не трогать лицо, и вперёд, в лес — собирать треки и грибы. +14° за окном, чего дома сидеть?

Если не повезло жить в большом городе, то выходить опаснее. Но можно: встаёте на самокат и собираете номера квартир в подъездах. Никаких магазинов и кафе: прокатились — и домой, вносить в JOSM. Самые упорные могут попробовать собрать координаты и виды деревьев и скамеек в районе. Главное — не приближайтесь к людям и мойте руки с мылом.

А дома — зачем гуманитарно помогать, когда можно открыть яндекс-панорамы и проставить, наконец, дорогам в своём городе количество полос, места для парковки и разметить движение по полосам на перекрёстках.
Прямо сейчас — и каждый день потом — идёт семинар в Zoom про геоинформационные системы. Семьдесят участников со всей страны и некоторых соседних. Спасибо Андрею Пирогову, хоть что-то полезное и интересное среди всей этой смертной вирусни.

http://gisgeo.org/news/s-1-aprelya-i-do-okonchaniya-rezhima-samoizolyaciya-gisgeo-provodit-onlajn-geomarafon-na-temu-gis-dzz-i-ih-primeneniya.html