Neural Networks | Нейронные сети
11.8K subscribers
756 photos
165 videos
170 files
9.41K links
Все о машинном обучении

По всем вопросам - @notxxx1

№ 4959169263
Download Telegram
​Как геокодировать миллион точек на Spark по-быстрому?
#BigData,

В моем предыдущем проекте перед нами встала задача провести обратное геокодирование для множества пар географических координат. Обратное геокодирование — это процедура, которая паре широта-долгота ставит в соответствие адрес или название объекта на карте, к которому принадлежит или близка заданная координатами точка. То есть, берем координаты, скажем такие: @55.7602485,37.6170409, и получаем результат либо «Россия, Центральный федеральный округ, Москва, Театральная площадь, дом такой-то», либо например «Большой театр».

Если на входе адрес или название, а на выходе координаты, то эта операция — прямое геокодирование, об этом мы, надеюсь, поговорим позже.

В качестве исходных данных у нас на входе было примерно 100 или 200 тысяч точек, которые лежали в кластере Hadoop в виде таблицы Hive. Это чтобы был понятен масштаб задачи.

В качестве инструмента обработки в конце концов был выбран Spark, хотя в процессе мы попробовали как MapReduce, так и Apache Crunch. Но это отдельная история, возможно заслуживающая своего поста.

🔗 Как геокодировать миллион точек на Spark по-быстрому?
В моем предыдущем проекте перед нами встала задача провести обратное геокодирование для множества пар географических координат. Обратное геокодирование — это про...
​Playground Prediction Competition
Don't Overfit! II
A Fistful of Samples

🔗 Don't Overfit! II
A Fistful of Samples
​Machine Learning backend митап в Funcorp

🔗 Machine Learning backend митап в Funcorp
Machine Learning backend митап в Funcorp
DeepMind StarCraft II Demonstration

🎥 DeepMind StarCraft II Demonstration
👁 475 раз 8545 сек.
Join Artosis, RottterdaM and a cast of special guests for a unique StarCraft II showcase live from DeepMind in London, in partnership with Blizzard.
Data Science от Академии яндекса
1) Чем отличаются data analyst, data engineer и data scientist
2) Карьера в data science: типичные ошибки на собеседовании
3) Дискуссия «Тренды data science»
4) От исследований к продакшену: TDD, CRISP DM, контроль версий 5) Как в YouDo машинное обучение катится в продакшен
6) Крафтим артефакты: о воспроизводимости и трекинге
7) Подходы для CV в проде: внедрить нельзя выпилить
8) Применение машинного обучения в страховании
9) Deep learning в рекомендательных системах
10) Практический RL: кнуты и пряники

🎥 074. Чем отличаются data analyst, data engineer и data scientist – Алексей Натёкин
👁 93 раз 1205 сек.
- Как войти в сообщество data science?
- О различиях data scientist, data analyst, data engineer, кто из них чем занимается?
- В чём отличия между ...


🎥 075. Карьера в data science: типичные ошибки на собеседовании – Валерий Бабушкин
👁 37 раз 1103 сек.
- Как найти работу в Data Science, если у тебя еще нет рабочего опыта?
- Стоит ли тратить время на kaggle?
- Какой путь должен пройти дата саентоло...


🎥 076. Дискуссия «Тренды data science»
👁 26 раз 3548 сек.
- Кто и как диктует моду в data science?
- Какие прикладные задачи из области machine learning на данный момент самые актуальные? Какие не получает...


🎥 077. От исследований к продакшену: TDD, CRISP DM, контроль версий – Арсений Анисимович
👁 10 раз 958 сек.
- Как организовать эффективное взаимодействие бизнеса, разработчиков и DS?
- Как версионировать данные и возможно ли это?
- Существует ли test driv...


🎥 078. Как в YouDo машинное обучение катится в продакшен – Адам Елдаров
👁 9 раз 1471 сек.
- Как деплоить, скейлить и управлять жизненным циклом ML моделей?
- Как настроить процесс дообучения и переобучения модели?
- Как выстраивать масшт...


🎥 079. Крафтим артефакты: о воспроизводимости и трекинге зависимостей – Михаил Трофимов
👁 4 раз 874 сек.
- Как организовать методологию экспериментов с данными?
- Зачем нужна воспроизводимость экспериментов и моделей?
- Как ее добиться?


* 21 октября ...


🎥 080. Kaggle подходы для CV в проде: внедрить нельзя выпилить – Арсений Кравченко vs Артур Кузин
👁 5 раз 1494 сек.
В ходе дискуссии рассмариваются сильные и слабые стороны кэгглеров с точки зрения переноса их навыков в продакшен. Также будет произведено сравнени...

🎥 081. Применение машинного обучения в страховании – Фрэнк Шихалиев
👁 8 раз 1291 сек.
Страховая отрасль всегда была достаточно консервативна, к тому же в финансовом секторе в России банки опередили страхование по развитию на десятиле...

🎥 082. Deep learning в рекомендательных системах – Андрей Зимовнов
👁 15 раз 1757 сек.
- Deep learning в рекомендательных системах
- Collaborative Filtering (CF) в большой рекомендательной системе

* 21 октября 2018 г. в московском оф...


🎥 083. Практический RL: кнуты и пряники – Сергей Колесников
👁 6 раз 1421 сек.
- Как начать изучать RL?
- Есть ли RL без DL?
- Соревнования по RL: полезно ли участвовать?
- Практика DRL в проде, есть ли какие успешные кейсы?
-...
​Interesting paper for game developers. it can be used to bug fix games just by watching user gameplay, or for example make them harder/simpler without breaking balance.
https://www.cc.gatech.edu/~riedl/pubs/ijcai17.pdf

🔗
🎥 AI: The end of deep learning?
👁 3 раз 1539 сек.
Patrick Ehlen, Chief Scientist at Loop AI Labs Cognitive Computing, explains what is the next frontier to better approximate human capacity with quantum mechanics.

Event: DIGILITY 2018
26-27 September 2018, Cologne, Germany

Speakers:
Cindy Chin, Artificial Intelligence and Machine Learning (AI + ML) program curator of the DIGILITY Conference and Expo
Patrick Ehlen, Chief Scientist at Loop AI Labs Cognitive Computing
Mathematics of Backpropagation II - How Neural Network Learns? Deep Learning

🎥 Mathematics of Backpropagation II - How Neural Network Learns? Deep Learning
👁 2 раз 1733 сек.
Check courses on - http://online.codingblocks.com [Free Trial Available]

Coding Blocks India's best Programming and software training institute offers courses like C++ and Java, Data Structures and Algorithms, Web and Android Development(Java and Kotlin), Competitive Programming, Coding Interview Preparation and Machine Learning, AI and more. Registration open for Online and Offline Coding classes.Take advantage of the professionals who have worked with bigwigs like Sony, Cyanogen, Micromax.

#CodingBlock