Forwarded from NOP::Nuances of Programming
Когда-то Стивен Хокинг говорил о сканировании человеческого мозга как о чем-то недостижимом. Сегодняшние ИИ-разработчики уверенно движутся в этом направлении. Важно только дать точное определение искусственному разуму. Это позволит найти ему лучшие сферы применения.
https://nuancesprog.ru/p/12310
@nuancesprog #статьи #ArtificialIntelligence #MachineLearning
https://nuancesprog.ru/p/12310
@nuancesprog #статьи #ArtificialIntelligence #MachineLearning
Forwarded from NOP::Nuances of Programming
Машинное обучение - широкий подраздел науки о данных. И порой новичкам крайне тяжело разобраться в нём. Подробно и понятно расскажем об основных аспектах машинного обучения и познакомимся с типами его алгоритмов.
https://nuancesprog.ru/p/10948
@nuancesprog #статьи #MachineLearning
https://nuancesprog.ru/p/10948
@nuancesprog #статьи #MachineLearning
Forwarded from NOP::Nuances of Programming
Создание информационных визуализаций - важнейший процесс, помогающий определить эффективность модели МО. Библиотека Yellowbrick, обладающая богатым функционалом, значительно упростит этот процесс.
https://nuancesprog.ru/p/15580/
@nuancesprog #MachineLearning #Visualization #Python
https://nuancesprog.ru/p/15580/
@nuancesprog #MachineLearning #Visualization #Python
Forwarded from NOP::Nuances of Programming
Что же такое машинное обучение? И почему оно так плотно связано с нашей повседневной жизнью? Отвечаем на эти и сопутствующие вопросы.
https://nuancesprog.ru/p/15653/
@nuancesprog #MachineLearning
https://nuancesprog.ru/p/15653/
@nuancesprog #MachineLearning
Forwarded from Типичный программист
This media is not supported in your browser
VIEW IN TELEGRAM
Русскоязычный ИИ-рентгенолог из бесплатных запчастей — это реально
Большинство открытых медицинских моделей говорят только по-английски. Один разработчик решил это исправить — собрал мультимодальную нейросеть из двух публично доступных моделей и запустил на бесплатных GPU Kaggle.
Архитектура — классический Vision-Language подход: Google ViT смотрит на снимок и извлекает визуальные фичи, ruGPT-3 от Сбера генерирует текст. Проблема в том, что они не умеют работать вместе из коробки. Пришлось «взломать» конфиг ruGPT-3, чтобы Hugging Face создал новые веса кросс-внимания между моделями, — именно их и обучали.
Датасет взяли американский (Indiana University Chest X-Ray), перевели 7000 медицинских заключений через Helsinki-NLP прямо на Kaggle. Обучение 15 эпох на двух T4 заняло 2.5 часа — с fp16, gradient accumulation и JS-скриптом в браузере, чтобы сессия не отвалилась по тайм-ауту. В итоге модель распознаёт «кальцифицированные гранулемы» и чистые лёгкие на русском языке. Да, немного галлюцинирует, но в целом держится.
Код открыт, живое демо на Hugging Face Spaces — можно потрогать прямо сейчас. А прочитать подробности по ссылке: https://tproger.ru/articles/frankenwtejn-v-medicine--kak-ya-skrestil-vit-i-rugpt-3--chtoby-nau
#machinelearning #python
Большинство открытых медицинских моделей говорят только по-английски. Один разработчик решил это исправить — собрал мультимодальную нейросеть из двух публично доступных моделей и запустил на бесплатных GPU Kaggle.
Архитектура — классический Vision-Language подход: Google ViT смотрит на снимок и извлекает визуальные фичи, ruGPT-3 от Сбера генерирует текст. Проблема в том, что они не умеют работать вместе из коробки. Пришлось «взломать» конфиг ruGPT-3, чтобы Hugging Face создал новые веса кросс-внимания между моделями, — именно их и обучали.
Датасет взяли американский (Indiana University Chest X-Ray), перевели 7000 медицинских заключений через Helsinki-NLP прямо на Kaggle. Обучение 15 эпох на двух T4 заняло 2.5 часа — с fp16, gradient accumulation и JS-скриптом в браузере, чтобы сессия не отвалилась по тайм-ауту. В итоге модель распознаёт «кальцифицированные гранулемы» и чистые лёгкие на русском языке. Да, немного галлюцинирует, но в целом держится.
Код открыт, живое демо на Hugging Face Spaces — можно потрогать прямо сейчас. А прочитать подробности по ссылке: https://tproger.ru/articles/frankenwtejn-v-medicine--kak-ya-skrestil-vit-i-rugpt-3--chtoby-nau
#machinelearning #python