Хабр / ML & AI
478 subscribers
5.47K links
Telegram-канал, где вы можете найти публикации из RSS-фидов тематических хабов "Машинное обучение" и "Искусственный интеллект" портала Хабр.

Данный канал не является официальным представительством платформы Хабр.

Администратор - @evilfreelancer
Download Telegram
Suno: "… если бы я так мог, ..."

Mark Shiloh, Влад - наш бывший соотечественник, более 20 лет живущий в Новой Зеландии (Окленд ), профессиональный музыкант, мульти-инструменталист с большим практическим опытом, ныне преподаватель и директор музыкальной школы... Более 30 лет назад мы вместе работали в Новосибирской консерватории. Когда в моей команде разрабатывали программу морфинга параметров синтеза для Yamaha DX7, Влад приобрел редкий и крутой SY99. Этот одаренный и энергичный парень поражал меня тем, что до мельчайших деталей штудировал толстенную инструкцию SY99 и задавал такие вопросы, которых я никогда больше не слышал ни от одного музыканта. Я бы сказал, что он, благодаря своему пытливому характеру, к профессии музыканта добавил квалификацию sound-инженера...

Сейчас мы в контакте и я, как и другим знакомым, периодически посылаю ему примеры, которые сгенерил в Suno... Две песни Влада "зацепили". У меня, честно говоря, отношение к генерациям более спокойное, особенно, когда их 50 в неделю и больше... Вот, пишет: "Сколько стоят эти твои песни?" ( Странная девушка v2.1 и Бледно-розовый оттенок v2.1 ). Я ему: "У меня нет на них прав, т.к. аккаунт Free" ... Потом, раз в неделю он писал/говорил о каких-то фишках во 2-й: "Посмотри, как здесь пропето ..., а вот здесь гитара" и т.п. Ну, на самом деле, мне не до этих нюансов - слишком много текущей работы... и я предложил ему записать наш разговор - получится что-то вроде интервью 1,2, наверное, кому-то будет интересно. Он сказал "окей" и мы созвонились 14 октября 2024 г.

Читать далее

#генерация_музыки #suno_ai #вирартек #аранжировка_музыки | @habr_ai
Нобелевские премии 2024 и искусственный интеллект. Физика: Джон Хопфилд и нейросети имени его

Всем привет, с вами снова Павел Бузин. Нобелевская неделя принесла несколько замечательных новостей, которые окажут серьезное влияние на развитие отраслей, связанных с машинным обучением и искусственным интеллектом. 

Первая новость — Нобелевская премия по физике 2024 года присуждена Джону Хопфилду (John J. Hopfield) и Джефри Хинтону (Geoffrey E. Hinton) за исследования в области нейронных сетей. 

Вторая новость — Нобелевская премия по химии 2024 года присуждена Дэвиду Бейкеру (David Baker), Демису Хассабису (Demis Hassabis) и Джону Джамперу (John M. Jumper). Оба лауреата удостоены премии за исследования белков с применением AI-технологий, а по сути — с применением нейронных сетей.

Третьей новостью можно считать то, что эти решения практически не вызывают возражений в условиях неоднократных обвинений Нобелевского комитета в предвзятости и ангажированности. Достойная работа ученых получила заслуженные высокую оценку и награду. 

Как аналитик компании-провайдера облачных и AI-технологий, который работает с нейросетями каждый день, предлагаю обратиться к первоисточникам и посмотреть на суть достижений нобелевских лауреатов по физике, а конкретно — на физическую составляющую открытий и их дальнейшее применение. Про химию поговорим чуть позже. 

Читать дальше

#нобелевка #нобелевская_премия_по_физике #нобелевская_премия_2024 #машинное_обучение #искусственный_интеллект #ai #аналитика #нейронные_сети | @habr_ai
[Перевод] Под капотом GCN

Здравствуйте! Сегодня мы погружаемся в тему графовых сверточных сетей (GCN) и ключевых принципов, стоящих за ними. Если вам интересно узнать больше, я настоятельно рекомендую перейти на статью на Habr, где вы найдёте подробный анализ и актуальные примеры применения GCN.

Введение

GCN (Graph Convolutional Networks) — это масштабируемый подход к полуконтролируемому обучению, который применяется к данным, представленным в виде графов. Если вы хотите глубже понять, как сверточные нейронные сети (CNN) адаптируются для работы с графовыми структурами, загляните в статью на Habr.

Выбор архитектуры GCN основан на принципе локализованного приближения первого порядка спектральных сверток для графов. Что это значит? Мы рассматриваем только ближайших соседей узла, а спектральная свертка позволяет извлекать информацию с помощью спектра графа. В подробностях вы сможете разобраться, прочитав статью.

Метод

Рассмотрим задачу классификации узлов в графе, где метки доступны лишь для небольшого числа узлов. Графо-ориентированное полу-контрольное обучение предлагает интересные решения для такой задачи. Чтобы лучше понять использование графовой регуляризации и как она работает в функции потерь, обращайтесь к статье.

Не упустите шанс углубиться в эту увлекательную тему и раскрыть все нюансы GCN!

Читать далее

#gcn #машинное_обучение #искусственный_интеллект #математика | @habr_ai
ИИ-система инспекции груза: преимущества, вызовы и реализация

В мире логистики и грузоперевозок огромное значение придается сохранности груза. Склады обязаны обеспечить целостность и сохранность груза во время хранения, так как любые повреждения влекут за собой потерю доверия клиентов и ощутимые штрафы. Эта проблема решается качественной инспекцией груза и ведением отчетности о его состоянии, — процесс, который можно облегчить с помощью искусственного интеллекта.

Читать далее

#ai #искусственный_интеллект #логистика #label_studio #datapipe #yolov5 #yolov8 | @habr_ai
Как мы перенесли распознавание на базе ИИ в веб и изменили  веб-банкинг? В Markswebb оценили

Привет, Хабр! Недавно аналитическое агентство Markswebb выкатило ежегодный рейтинг лучших веб-версий банковских приложений в 2024 году. Эксперты сравнили удобство и функциональность использования банковских услуг в браузере и выбрали банки с лучшими веб-приложениями по качеству клиентского опыта. Лидирующие позиции в обеих номинациях рейтинга - «Цифровой офис» (Digital Office) и «Цифровой банк для повседневных операций» (Daily Banking) - заняли наши клиенты!

Достичь крутых результатов удалось в том числе благодаря использованию систем распознавания Smart Engines. Рассказываем, как наши ИИ-решения помогли ведущим банкам поставить новые рекорды в сфере цифрового гостеприимства. 

Добро пожаловать!

#распознавание_образов #распознавание_изображений #wasm #webassembly #банк #банкинг #ии #искусственный_интеллект #омниканальность #браузеры | @habr_ai
AILink для Wolfram и плагины для ChatGPT

Я сделал небольшой клиент для Wolfram Language, который умеет вызывать OpenAI API и другие API, которые на него похожи. Сам активно пользуюсь им и хочу рассказать о том, как легко создать ассистента на основе OpenAI API и добавить в него свои собственные плагины.

Зачем я это делаю?

Во-первых, я не так часто вижу на Хабре утилитарные статьи, где рассказывается о том, как использовать нейросеть с примерами кода. И особенно мало таких статей, где речь идет про конкретные плагины.

Во-вторых, у Wolfram Language есть фантастически крутой блокнотный пользовательский интерфейс. Речь конечно же про Mathematica и про наш родной отечественный WLJS Notebook. Формат интерактивного блокнота как нельзя лучше подходит для работы с чат-ботами, LLM и нейросетями.

В-третьих, в пакете AILink есть киллер-фича WL из коробки, которая доступна всем пользователям Wolfram Language - это Cloud Evaluate. С его помощью вам не потребуется VPN для обхода блокировки по региону со стороны OpenAI. То есть AILink в Wolfram Language работает в РФ без использования прокси!

В-четвертых, я как фанат Wolfram Language просто в очередной раз хочу про него рассказать.

Читать далее

#чат_бот #чат_боты #искусственный_интеллект #chatgpt #llm #нейросети #wolfram_language #wolfram_mathematica #wolfram_alpha #ai | @habr_ai
Метрологический дефицит в бигдате: что это такое и как с ним бороться

Добрый день. Сегодня я хотел бы поговорить о том, что вроде бы очевидно и должно быть везде, но когда я читаю статьи презентации, рекламные статьи, научные статьи, выступления на отраслевых конференциях и тексты «войди в айти и стань датасатанистом», я этого не вижу.

Речь о том, что данные, попадающие в машинное обучение, ИИ, цифровых двойников и т. п., не являются тем чем кажутся. Потому что между их изначальным физическим смыслом и числовым выражением внутри модели, стоит череда преобразований.

Но в этот раз речь пойдёт не о цифровом износе и моих многолетних наблюдениях за цифровыми объектами, а об измерительных приборах и ваших многолетних наблюдениях за производственными процессами.

Читать далее

#промышленность #большие_данные #физический_смысл #измерительное_оборудование #датасатанизм | @habr_ai
Wolfram Natural Language Understanding или спасение для студентов

Wolfram — крутая штука. Сколько школьников получило из-за него пятерку, а сколько студентов зачет, не сосчитать...

Устроено все просто: плохой ученик загружает задачку и получает приятный результат с хорошей оценкой. Все задачи считаются алгоритмически.

Хоть скопируй лабораторную по физике...

Поэтому главной загадкой этого сервиса становится перевод неподготовленной информации студента в удобоваримый для алгоритмов вариант данных.

Языковая модель (NLU) — разгадка. Читать далее

#языковые_модели #nlp #машинное_обучение #искусственный_интеллект #анализ_языка #вольфрам #wolfram_mathematica #wolfram_alpha #wolfram_language #wolfram | @habr_ai
Автоэнкодеры простыми словами

Автоэнкодеры являются базовой техникой машинного обучения и искусственного интеллекта, на основе которой строятся более сложные модели, например, в диффузионных моделях, таких как Stable Diffusion. Что же такое автоэнкодер? Читать далее

#autoencoder #автоэнкодер #машинное_обучение | @habr_ai
Машинное обучение. Дайджест интересных новостей

✔️ Релиз PyTorch 2.5.

Выпуск PyTorch® 2.5 представляет новый бэкэнд CuDNN для SDPA, обеспечивающий ускорение до 75% на GPU NVIDIA H100 и новее. Оно активировано по умолчанию. 

Сокращено время холодного запуска torch.compile благодаря региональной компиляции, которая позволяет собирать  nn.Module без перекомпиляции. 

Бэкэнд TorchInductor CPP получил поддержку FP16, обертку CPP, режим AOT-Inductor и режим максимальной автонастройки. 

В режиме максимальной автонастройки для GEMM-операций используется шаблон C++ в качестве альтернативы ATen с библиотеками oneDNN и MKL.

Поддержка Intel GPU расширена и теперь включает  Intel® Data Center GPU Max Series и Intel® Client GPU. 

Релиз включает 4095 коммитов от 504 участников.

pytorch.org

✔️ Anthropic обновила политику ответственного масштабирования ИИ, чтобы обеспечить безопасность по мере его развития.

Обновленная политика включает Стандарты уровня безопасности ИИ  - набор мер безопасности, строгость которых возрастает по мере роста возможностей модели. Пороговые значения возможностей - это конкретные способности ИИ, достижение которых требует усиленных мер безопасности. 

В новой версии определены два ключевых порога: автономные исследования в области ИИ и разработка оружия массового поражения. Для эффективного внедрения политики Anthropic разработала оценку возможностей, оценку мер безопасности, процессы документирования и принятия решений и меры для внутреннего управления и получения внешних заключений.

anthropic.com

✔️ Perplexity запускает поиск по внутренней базе знаний и рабочие пространства.

Читать далее

#машинное_обучение #искусственный_интеллект #llm #python #deep_learning | @habr_ai
LLaMator: Red Teaming фреймворк для тестирования уязвимостей LLM

Привет, Хабр! В этом материале мы, команда LLaMaстеры — студенты 1 курса магистратуры ИТМО AI Talent Hub, представляем фреймворк LLaMator, победивший на хакатоне AI Product Hack в кейсе от компании Raft. Наша задача — создать инструмент для тестирования уязвимостей интеллектуальных систем, например, чат-бота для консультирования клиентов автосалона, на базе больших языковых моделей (LLM).

Читать далее

#уязвимости_llm #llm #чат_боты #red_teaming #промт_инъекции #джейлбрейкинг #framework | @habr_ai
[Перевод] Как ИИ помог спрогнозировать ураган Милтон и другие штормы

“Милтон” стал пятым ураганом в 2024 году, обрушившимся на материковую часть США. Поскольку такие циклоны стали происходить всё чаще и разрушительная их сила только растёт, метеорологи нередко стали прибегать к помощи искусственного интеллекта, дабы попытаться отследить штормы и смягчить потенциальный ущерб.

Вот уже много лет прогнозы погоды составляют с помощью сложных моделей, основанных на показателях скорости ветра, температуры, влажности и других факторов. Показатели, в свою очередь, регистрируют с помощью датчиков с самолётов, буев и спутников. Недостаток таких моделей в том, что на получение обновленного прогноза может уйти несколько часов.

Что же касается моделей машинного обучения, то их обучают на большом объёме данных об атмосфере Земли и пути движения ураганов, которые происходили раннее. Они способны выявить "шаблоны данных" и отследить динамку. ИИ-модели неоднократно предсказывали появление штормов за несколько дней до того, как те обрушивались на побережье. Сам процесс занимал всего несколько секунд.

“Метеорологи относятся к ИИ-моделированию по-разному: одни — с недоверием, другие целиком полагаются на ИИ, — замечает метеоролог из Хьюстона Мэтт Ланца. — Что касается прогнозирования ураганов, то мы обнаружили, что ИИ-модели ничем не уступают моделям, основанных на физических уравнениях. И потому их тоже нужно применять в своей практике”.

Ланца также сообщил, что различные методы прогнозирования указывали на то, что Милтон, вероятно, пройдёт между Клируотером и Сарасотой во Флориде. “ИИ-модели, — говорит Ланца, — сделали этот прогноз на 12–18 часов раньше других моделей”.

Читать далее

#ии #прогноз_погоды | @habr_ai
Анализ тональности текста: зачем он нужен и как его использовать? Объясняем за 7 минут

Как компании выявляют эмоции в тысячах отзывов и комментариев? Почему одни маркетинговые кампании становятся невероятным успехом, а другие — провалом?

Анализ тональности текста — мощный инструмент, который помогает бизнесу не только считывать эмоции клиентов, но и на практике улучшать продукт, автоматизировать поддержку и управлять репутацией. Сегодня мы подробно разберем, как анализ тональности работает в реальных кейсах, и покажем, как вы можете внедрить его для достижения своих бизнес-целей. Читать далее

#data_annotation #разметка_данных #анализ_тональности #big_data #data_science | @habr_ai
Антология матричных расширений: от популярного обзора до запуска на эмуляторе

Матричные расширения в мире технологий появились лишь в 2020 году. Даже в сравнении с относительно «молодыми» темами ИИ и квантовых вычислений это буквально «новорожденный» материал в IT-мире. И что самое интересное, матричные расширения уравняли тот разрыв в развитии, который существует между процессорными архитектурами. Свои расширения создают и Intel, и Apple, и IBM, и рабочие группы международного альянса RISC-V. 

Как это ни парадаксально, по числу матричных расширений RISC-V уже обогнала все остальные архитектуры. Сейчас для нее разработаны два кастомных расширения, а два стандартных развиваются буквально у нас на глазах. Если хотите разобраться в многообещающей для высокопроизводительных вычислений теме, изучите тексты в нашей подборке. От объяснения, что такое матричные расширения и какие они бывают, мы плавно погрузимся в спецификации разработки и протестируем матричное расширение на эмуляторе.

Читать далее

#матричные_расширения #математика #оптимизация #risc_v | @habr_ai
Как мы внедрили генеративную модель в объявления на Авто.ру. Доклад Яндекса

Фронтенд‑разработчики из Авто.ру Максим Алмаев и Дмитрий Размолодин рассказали на внутреннем митапе, как их команда запустила генерацию описаний машин в помощь тем, кто публикует объявления на сервисе. Вы узнаете, зачем разработчики лимитировали нагрузку, как победили проблему галлюцинаций и что помогло убедиться в корректной работе решения.

Переложили выступление ребят в текст для удобства читателей Хабра.

Читать далее

#нейросети #yandexgpt #искусственный_интеллект #продуктовая_разработка | @habr_ai
Что не так со статьей про ИИ-юристов от Романа Янковского?

В недавней статье Роман Янковский высказал интересные мысли о влиянии ИИ на юриспруденцию. Статья Романа под названием «Что не так с ИИ-юристами» имела как сторонников, так и несогласных.

Я решил написать ответ на статью, где постараюсь развить некоторые из поднятых Романом вопросов и пригласить юридическое и IT сообщества к обсуждению прикладной пользы LLM.

Дискуссии об ИИ часто сопровождаются антропоморфизацией, приписыванием ему человеческих качеств – от божественных (или чудесных, что обязано сделать жизнь человека лучше и счастливее) до демонических (он нас поработит). Это мешает объективной оценке его возможностей и рисков.

Вместо того, чтобы анализировать каждый конкретный тезис исходной статьи о возможностях и опасностях ИИ, предлагаю сфокусироваться на самом определении искусственного интеллекта. Существует стойкое ощущение, что определение ИИ, на которых базируются многие рассуждения – часто недостаточно верны, и обсуждение вытекающих из него тезисов может оказаться неконструктивным.

В контексте данной статьи под ИИ, а точнее, под большими языковыми моделями (LLM), мы будем понимать системы, обученные на огромном корпусе документов. Они содержат в себе знание о вероятности того следования слов друг за другом, и на основе этого могут подставлять их наиболее вероятном порядке. Это упрощенное объяснение, внутри LLM более сложная математика, но на выходе примерно так это и работает.

Следовательно, нужно обсуждать, как использовать и кого заменит именно такой инструмент в юридической сфере?

Читать далее

#искусственный_интеллект #legaltech #ии_юрист #ии #llm | @habr_ai
[Перевод] Позвонив в ресторан, можно ненароком попасть на ИИ-хостес и не догадаться об этом

Привет, на связи Юлия Рогозина, бизнес-аналитик Шерпа Роботикс.

Вас тоже достали криво настроенные торговые боты, трезвонящие и днем и ночью?

Сегодня я перевела для вас статью о том, как коммуникационные роботы оказываются вполне полезными и удобными. Хотя, многие люди все равно стремятся обойти бота и поговорить с реальным человеком. Я тоже иногда так делаю.

В конце статьи я рассуждаю о том, как привыкнуть к новому формату общения - диалогу с интеллектуальными роботами.

Читать далее

#искуственный_интеллект #голосовые_роботы #автоматизация_бизнес_процессов #роботизация_бизнес_процессов | @habr_ai
Обзор платформы Kaggle для начинающих: от состязаний до менторской программы

В IT-среде название Kaggle часто ассоциируется только с соревнованиями. Но на самом деле это полноценная социальная сеть и база данных для специалистов в сфере Data Science и ML.

Подготовили обзор, чтобы помочь новичкам разобраться в Kaggle. Разбираем, что площадка предлагает джунам и опытным специалистам, как пользоваться ее функциями и с какими задачами она может помочь.

Читать далее

#kaggle #kaggle_competition #машинное_обучение #ml #data_science #дата_сайенс #python #датасет #соревнования_по_машинному_обучению #нейросети | @habr_ai
От Павлова до ChatGPT: как LLM перевернули наше понимание мышления

Представьте себе мир, где искусственный интеллект может общаться с инопланетянами, а человеческое мышление расшифровано до мельчайших деталей. Фантастика? Не совсем. Последние достижения в области больших языковых моделей (LLM) заставляют нас пересмотреть наши представления о природе разума и коммуникации.

В этой статье мы отправимся в захватывающее путешествие от классических теорий Павлова до передовых разработок в области ИИ. Мы раскроем тайны человеческого мышления, узнаем, как работают современные языковые модели, и поразмышляем о том, сможет ли искусственный интеллект когда-нибудь по-настоящему "понимать" нас.

Готовы ли вы узнать, как LLM могут стать универсальными переводчиками не только между земными языками, но и потенциально с языками внеземных цивилизаций? Присоединяйтесь к нам в этом увлекательном исследовании на стыке нейробиологии, лингвистики и искусственного интеллекта!

Готов...

#искусственный_интеллект #большие_языковые_модели #нейронные_сети #машинное_обучение #когнитивные_науки #квалиа #эмбеддинг #сознание #мышление #теория_познания | @habr_ai