Какой показатель в основном используется для оценки качества классификатора?
Anonymous Quiz
4%
FPS
81%
Precision / Recall
11%
MTU
4%
GHz
😁6🤓5
Разбор Викторины #8: Какой показатель в основном используется для оценки качества классификатора?
💜 Спасибо всем, кто участвовал! Пора разобраться с ответами.
✅ Правильный ответ: б) Precision / Recall
🔍 Почему так?
В задачах классификации качество модели описывается целым набором показателей, построенных на основе матрицы ошибок (TP, FP, TN, FN). Precision и Recall — две базовые метрики, которые особенно важны при дисбалансе классов и разной цене ошибок.
⚪️ Precision показывает, какая доля объектов, которые модель пометила как положительные, действительно является положительными.
⚪️ Recall отражает полноту детекции. Показывает, какую долю реальных положительных объектов модель сумела обнаружить.
Эти метрики зависят от порога принятия решения и хорошо отражают поведение классификатора при изменении компромисса между ложноположительными и ложноотрицательными срабатываниями.
📌 Почему другие варианты не подходят?
➖ FPS — метрика количества кадров в секунду, но не описывает качество классификации.
➖ MTU — параметр сетевых протоколов, к оценке моделей отношения не имеет.
➖ GHz — единица измерения частоты (частота CPU, частота дискретизации и т.п.), снова про железо и сигналы.
А ваш ответ совпал с правильным? Делитесь в комментариях⬇️
Еще больше об ИИ и науке читайте в DSCS.pro
В задачах классификации качество модели описывается целым набором показателей, построенных на основе матрицы ошибок (TP, FP, TN, FN). Precision и Recall — две базовые метрики, которые особенно важны при дисбалансе классов и разной цене ошибок.
Эти метрики зависят от порога принятия решения и хорошо отражают поведение классификатора при изменении компромисса между ложноположительными и ложноотрицательными срабатываниями.
А ваш ответ совпал с правильным? Делитесь в комментариях
Еще больше об ИИ и науке читайте в DSCS.pro
Please open Telegram to view this post
VIEW IN TELEGRAM
Мы к вам с дружеским напоминанием: сегодня пятница, а значит пора читать подборку новостей из мира ИИ. Gigachat проник в Кофеманию, OpenAI выкатили GPT-5.2, а Яндекс опубликовали техрепорт Alice AI. Еще больше интересного — в свежем дайджесте!
Яндекс добавил в свой браузер ML-модель для определения неактивных вкладок и оптимизации потребления оперативной памяти
Сбер внедрил в работу филиала банка в Индии ИИ-агентов. Компания также интегрирует GigaChat в цифровые продукты и бизнес-процессы «Кофемании»
Хабр добавил в платформу ИИ-ассистента SourceCraft Code Assistant от Яндекса для объяснения кода в публикациях
В Университете ИТМО создали прототип ИИ-помощника для «Яндекс Учебника», который может выявлять глубину понимания учебного материала по информатике в диалоге со студентами
В Томском госуниверситете открыли лабораторию интеллектуальных систем для периферийных вычислений, в которой будут развивать безопасный ИИ для атомной энергетики, беспилотников и транспорта
В открытом доступе появился техрепорт собственного семейства моделей Яндекса — Alice AI
Google представила архитектуру Titans и фреймворк MIRAS, которые позволяют моделям работать быстрее и обрабатывать длинный контекст. Решения направлены на получение долговременной памяти
Научный журнал Nature внес основателя DeepSeek Ляня Вэньфэна (Liang Wenfeng) в топ-10 людей, которые оказали влияние на науку в 2025 году
Американский разработчик Pebble представил умное кольцо Index 01 для создания заметок
Французский стартап Mistral AI выпустил семейство моделей Devstral 2 для программирования, а также ИИ-ассистента Mistral Vibe CLI для автоматизации написания кода
Американский стартап Starcloud запустил на своем спутнике в космосе ИИ-модель Gemma от Google
Meta (признана экстремистской и запрещена в России) весной 2026 года может выпустить новую закрытую ИИ-модель Avocado
В OpenAI выпустили серию моделей GPT-5.2: Instant, Thinking и Pro. Они доступны в API и будут внедрены в ChatGPT
Tencent представляет GeoVista: новую открытую модель для визуальной геолокации изображений
Please open Telegram to view this post
VIEW IN TELEGRAM
9 декабря прошёл Международный научный форум «Как понять машинный разум: между кодом и культурой». Максим Абрамов и Фёдор Бушмелёв подготовили совместный доклад «Возможности ИИ уже сегодня: обзор трендов и практических кейсов».
💬 Мы наблюдаем беспрецедентный рост когнитивных возможностей систем ИИ — как в мировых проектах, так и в наших разработках. Если год назад ИИ можно было сравнивать со “школьником”, решающим базовые задачи, то сегодня его уровень ближе к аспиранту и стремится к кандидату наук. Это не просто технологический прогресс — это изменение ландшафта научной деятельности, которое мы обязаны учитывать в образовании и исследованиях, — прокомментировал Федор Витальевич.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
💬 В 2023 году была «весна» искусственного интеллекта. Казалось, что дальше всё начнёт затухать, но этого не произошло. Вот уже три года мы продолжаем движение вперёд, хотя масштабировать модели становится всё сложнее».
В ходе выступления он рассказал о революции в искусственном интеллекте, перспективах AGI, роли LLM в математике и современной науке, а также о том, как ИИ всё глубже встраивается в исследовательские практики.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
В 2025 году доля исследователей, которые используют ИИ-инструменты в своей работе, выросла с 57% до 84%. За этими цифрами – глобальные изменения в самой сути научной деятельности.
Наша коллега младший научный сотрудник лПИИ СПб ФИЦ РАН Ольга Руслановна Гавриленко побывала на Конгрессе молодых учёных и поделилась наблюдениями о том, как именно ИИ трансформирует работу исследователей сегодня.
При этом ИИ не существует отдельно от исследователя. Он не понимает контекст задачи и не ставит научные цели, в отличие от ученого.
Растёт число публикаций с формально корректными, но слабо подтверждёнными результатами. Некоторые научные журналы уже открыто говорят, что качество статей падает, а их количество зашкаливает.
ИИ может быть очень убедителен, даже если у него нет на то оснований. Поэтому сегодня важно уметь перепроверять любую информацию, которую выдает GenAI.
В науке всегда есть два измерения: реальные данные и то, как мы их объясняем.
Искусственный интеллект затрагивает оба аспекта. Он расширяет горизонты познания, ведь не привязан к конкретной области знаний, в отличие от людей. Но всё же, главные задачи: понимание, формулировка вопросов и соблюдение научной этики – остаются за человеком.
Еще больше об ИИ и науке читайте в DSCS.pro
Please open Telegram to view this post
VIEW IN TELEGRAM
Профессор MIT Джозеф Вайценбаум создал программу ELIZA — концептуальный прототип современных чат-ботов и прообраз разговорных нейронок. Модель назвали в честь Элизы Дулитл, главной героини пьесы Б. Шоу «Пигмалион».
Она имитировала диалог по сценарию психотерапевта: переспрашивала, уточняла, отражала слова собеседника. Программа была простейшей, без машинного обучения и нейросетей, но всё равно производила на людей ошеломляющий эффект. Многие пользователи искренне считали, что ELIZA понимает их.
До 2021 года специалисты считали, что исходный 420-строчный код ELIZA был утерян. Однако специалист по когнитивистике из Стэнфордского университета Джефф Шрейджер и архивариус Массачусетского технологического института Майлз Кроули нашли код среди бумаг Вейценбаума.
Команде потребовалось очистить и отладить код и создать эмулятор, который приблизился бы к тому типу компьютера, на котором чат-бот работал в 1960-х годах.
Выяснилось, что ELIZA не только работает, но и очень хорошо справляется с задачами. Как утверждает Шрейджер, модель даже превосходит современные чат-боты в умении слушать.
Еще больше об ИИ и науке читайте в DSCS.pro
Please open Telegram to view this post
VIEW IN TELEGRAM
13 декабря в Технохабе Сбера прошёл финал хакатона SpbTechRun. Более 100 студентов из шести ведущих вузов применили свои навыки анализа данных и машинного обучения для решения бизнес-кейсов.
Участникам предложили три прикладных кейса:
💬 Нельзя не отметить высокий уровень профессионализма: при 40 заявленных участниках большинство решений оказались глубоко проработанными. На хакатоне собралось сильное IT-комьюнити и отдельный повод для гордости — видеть среди победителей студентов нашей совместной образовательной программы, — подчеркнул Максим Викторович.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
Наш коллега Артём Вяткин, младший научный сотрудник лПИИ СПб ФИЦ РАН и руководитель направления по исследованию данных в Сбере, получил Свидетельство о признании Президента Сбера за достижение высоких показателей в работе и личный вклад в реализацию стратегии развития банка.
Артём Андреевич активно занимается исследованием и внедрением ИИ-подходов, которые помогают выявлять критичные ошибки на ранних этапах и напрямую влиять на улучшение качества работы LLM.
Please open Telegram to view this post
VIEW IN TELEGRAM
2025 год почти позади. Что он нам подарил? Яркие события, открытия, релизы, конференции и, конечно, новые исследования. Собрали для вас подборку самых интересных работ за 2025 год, чтобы вы ничего не пропустили
Исследователи Apple показали, что модели с цепочками рассуждений эффективны лишь на задачах средней сложности. При росте сложности их точность резко падает, а «мышление» оказывается нестабильным и неалгоритмичным — что ставит под сомнение глубину реальных reasoning-возможностей современных ИИ.
Читать
Некоторые пользователи и исследователи всерьёз задались вопросом: а появляются ли в ИИ зачатки разумности и способность «страдать». Нужна ли этика общения с ИИ и правила разработки таких систем, которые помогут не навредить?
Читать
Авторы анализируют, как эмоционально отзывчивый ИИ меняет взаимодействие человека и технологий — образование, медицину, повседневную жизнь.
Читать
ИИ упростил производство контента, но привёл к перенасыщению и «усталости от ИИ». На фоне приближения AGI компании часто оказываются не готовы по данным и инфраструктуре.
Читать
Статья наших коллег предлагает расширенную классификацию социоинженерных атак с учётом этапов, сценариев и целенаправленности воздействия. Такой подход позволяет точнее оценивать защищённость пользователей и прогнозировать успешность социоинженерных атак.
Читать
Ещё одна статья наших коллег. Исследователи из СПб ФИЦ РАН и РАНХиГС предложили альтернативный подход к рейтингованию вузов через анализ управленческих карьер выпускников. Он позволяет объективнее оценивать вклад университетов в подготовку госслужащих!
Читать
А какие исследования запомнились вам? Делитесь в комментариях
Еще больше об ИИ и науке читайте в DSCS.pro
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM