Прокачать SQLite и хранить векторы в видео: открытые инструменты для эмбеддингов
Подготовили подборку открытых инструментов для работы с векторами и эмбеддингами. Внутри — и легковесные векторные СУБД, и неожиданные подходы, например проект, который упаковывает тысячи документов в один видеофайл и режет расход памяти в десятки раз.
Что вошло в нашу подборку open-source-инструментов для векторного поиска:
— Zvec — легковесная векторная СУБД, лидер по числу запросов в секунду на бенчмарке
— Valori — векторная СУБД на чистом Python без Docker и лишних зависимостей
— Comet — хранилище на Go с гибридным поиском и фильтрацией по метаданным
— SQLite Vector — расширение, добавляющее векторный поиск прямо в SQLite
— Memvid — хранит векторы в видеофайле .mv2 и снижает расход RAM с 8 ГБ до 200 МБ
Все инструменты с примерами — в нашем материале на Хабре.
Подготовили подборку открытых инструментов для работы с векторами и эмбеддингами. Внутри — и легковесные векторные СУБД, и неожиданные подходы, например проект, который упаковывает тысячи документов в один видеофайл и режет расход памяти в десятки раз.
Что вошло в нашу подборку open-source-инструментов для векторного поиска:
— Zvec — легковесная векторная СУБД, лидер по числу запросов в секунду на бенчмарке
— Valori — векторная СУБД на чистом Python без Docker и лишних зависимостей
— Comet — хранилище на Go с гибридным поиском и фильтрацией по метаданным
— SQLite Vector — расширение, добавляющее векторный поиск прямо в SQLite
— Memvid — хранит векторы в видеофайле .mv2 и снижает расход RAM с 8 ГБ до 200 МБ
Все инструменты с примерами — в нашем материале на Хабре.
👍3
Почему успешные айтишники, бросившие ВУЗ, все-таки возвращаются за дипломом
Бросить университет ради стартапа — почти обязательный сюжет историй успеха в ИТ. Но многие предприниматели и инженеры спустя годы возвращаются, чтобы доучиться. Разобрались, зачем им диплом после состоявшейся карьеры и чем оборачивается вечный спор о пользе высшего образования.
Что выяснили про диплом, карьеру в ИТ и тех, кто все-таки решил доучиться:
— Почему даже звезды ИТ когда-то бросали учебу — и не жалели
— Сколько дает диплом в США: разница в доходах за последние 10 лет
— Что сегодня в найме ценят выше «корочки»
— Зачем успешные инженеры возвращаются в вуз спустя десятилетия
— Кто доучился в 74 года и доказал, что поздно не бывает
Истории тех, кто вернулся за дипломом, и весь спор о вышке — в нашем материале на Хабре.
Бросить университет ради стартапа — почти обязательный сюжет историй успеха в ИТ. Но многие предприниматели и инженеры спустя годы возвращаются, чтобы доучиться. Разобрались, зачем им диплом после состоявшейся карьеры и чем оборачивается вечный спор о пользе высшего образования.
Что выяснили про диплом, карьеру в ИТ и тех, кто все-таки решил доучиться:
— Почему даже звезды ИТ когда-то бросали учебу — и не жалели
— Сколько дает диплом в США: разница в доходах за последние 10 лет
— Что сегодня в найме ценят выше «корочки»
— Зачем успешные инженеры возвращаются в вуз спустя десятилетия
— Кто доучился в 74 года и доказал, что поздно не бывает
Истории тех, кто вернулся за дипломом, и весь спор о вышке — в нашем материале на Хабре.
👍3
От ИИ-«рук» до полевого компьютера для выживальщиков: открытые агентные ОС
ИИ-агенты учатся работать самостоятельно, и для них уже появляются отдельные операционные системы. Собрали несколько таких открытых проектов: ОС с автономными модулями-«руками», система для оптимизации планировщиков Linux и даже модульный полевой компьютер с офлайн-ИИ.
Что вошло в нашу подборку открытых агентных ОС и смежных проектов на их базе:
— OpenFang — агентная ОС с автономными модулями-«руками» и холодным запуском за 180 мс
— SchedCP — ИИ-слой для управления планировщиками Linux и автотюнинга нагрузки
— Lukan — агентная рабочая станция, где задачи распределяются между разными моделями
— Waycore — модульный полевой компьютер с офлайн-ИИ для навигации и выживания
Подробности по каждому проекту и ссылки на репозитории — в нашем материале на Хабре.
ИИ-агенты учатся работать самостоятельно, и для них уже появляются отдельные операционные системы. Собрали несколько таких открытых проектов: ОС с автономными модулями-«руками», система для оптимизации планировщиков Linux и даже модульный полевой компьютер с офлайн-ИИ.
Что вошло в нашу подборку открытых агентных ОС и смежных проектов на их базе:
— OpenFang — агентная ОС с автономными модулями-«руками» и холодным запуском за 180 мс
— SchedCP — ИИ-слой для управления планировщиками Linux и автотюнинга нагрузки
— Lukan — агентная рабочая станция, где задачи распределяются между разными моделями
— Waycore — модульный полевой компьютер с офлайн-ИИ для навигации и выживания
Подробности по каждому проекту и ссылки на репозитории — в нашем материале на Хабре.
👍4
«Арнест ЮниРусь» перенесла системы планирования в выделенное облако Beeline Cloud без остановки бизнеса
Производитель FMCG строит финансовое планирование и управление промо-акциями на платформе Optimacros. При нагрузке на серверы выше 90% инфраструктура прежнего провайдера переставала отвечать, а нарастить мощности он не мог.
Мы развернули отдельный контур с собственной виртуализацией на физических серверах и перенес системы без остановки бизнес-процессов. Производительность выросла, а регулярные затраты на облако снизились.
Какие цифры получили и как прошла миграция — в карточках, полный текст на сайте.
Производитель FMCG строит финансовое планирование и управление промо-акциями на платформе Optimacros. При нагрузке на серверы выше 90% инфраструктура прежнего провайдера переставала отвечать, а нарастить мощности он не мог.
Мы развернули отдельный контур с собственной виртуализацией на физических серверах и перенес системы без остановки бизнес-процессов. Производительность выросла, а регулярные затраты на облако снизились.
Какие цифры получили и как прошла миграция — в карточках, полный текст на сайте.
👍4
Косинусное сходство — не универсальная мера смысла: когда оно ошибается и что взять вместо
Косинусное сходство — самый популярный способ сравнивать векторы. Но у него есть слабые места: тексты разной длины и природы могут получить высокий показатель близости просто из-за общих тематических слов. Разобрались, какие есть альтернативы, и заодно нашли пару нескучных проектов с эмбеддингами.
Что разбираем в материале про косинусное сходство и эмбеддинги:
— Где косинусное сходство дает ложные совпадения и почему 0,82 не значит «82% похожести»
— Евклидово, манхэттенское расстояние и скалярное произведение: чем они различаются на практике
— Векторный поиск без эмбеддингов — через иерархию понятий вместо координат
— Пет-проект, который через эмбеддинги сравнил лирику Тейлор Свифт и метал-группы
Подробности про метрики и фановые проекты с векторами — в материале на Хабре.
Косинусное сходство — самый популярный способ сравнивать векторы. Но у него есть слабые места: тексты разной длины и природы могут получить высокий показатель близости просто из-за общих тематических слов. Разобрались, какие есть альтернативы, и заодно нашли пару нескучных проектов с эмбеддингами.
Что разбираем в материале про косинусное сходство и эмбеддинги:
— Где косинусное сходство дает ложные совпадения и почему 0,82 не значит «82% похожести»
— Евклидово, манхэттенское расстояние и скалярное произведение: чем они различаются на практике
— Векторный поиск без эмбеддингов — через иерархию понятий вместо координат
— Пет-проект, который через эмбеддинги сравнил лирику Тейлор Свифт и метал-группы
Подробности про метрики и фановые проекты с векторами — в материале на Хабре.
👍4
ИИ научился находить уязвимости лучше людей: что это значит для опенсорса
Нейросети уже помогают находить реальные уязвимости в открытом коде — но вместе с этим резко выросло число баг-репортов, сгенерированных ИИ и оказавшихся пустыми. Разобрались, как опенсорс-сообщество реагирует на новую гонку вооружений и почему некоторые проекты уже закрыли код.
Что разбираем в материале про безопасность опенсорса в эпоху ИИ:
— Как ИИ помог найти двадцатилетний баг в Firefox и девятилетнюю уязвимость в ядре Linux
— Почему рост баг-репортов от ИИ перегружает мейнтейнеров открытых проектов
— Зачем разработчики переводят опенсорсные проекты на коммерческую лицензию
— Почему крупные ИИ-компании наращивают инвестиции в защиту open source
Подробный разбор ситуации и примеры проектов — в материале на Хабре.
Нейросети уже помогают находить реальные уязвимости в открытом коде — но вместе с этим резко выросло число баг-репортов, сгенерированных ИИ и оказавшихся пустыми. Разобрались, как опенсорс-сообщество реагирует на новую гонку вооружений и почему некоторые проекты уже закрыли код.
Что разбираем в материале про безопасность опенсорса в эпоху ИИ:
— Как ИИ помог найти двадцатилетний баг в Firefox и девятилетнюю уязвимость в ядре Linux
— Почему рост баг-репортов от ИИ перегружает мейнтейнеров открытых проектов
— Зачем разработчики переводят опенсорсные проекты на коммерческую лицензию
— Почему крупные ИИ-компании наращивают инвестиции в защиту open source
Подробный разбор ситуации и примеры проектов — в материале на Хабре.
👍2🤔1
Свой флот ИИ-агентов: подборка открытых фреймворков для локальной работы
Локальная работа с ИИ-агентами становится все популярнее — собрали открытые фреймворки, которые помогают развернуть их у себя и написать интеллектуальных помощников с нуля. Среди них и среда с готовыми «плейбуками», и библиотека на пару строк кода без шаблонов.
Что вошло в нашу подборку открытых фреймворков для ИИ-агентов:
— Gaia — среда для локальных агентов с ускорением на чипах Ryzen AI и готовыми обучающими «плейбуками»
— Ailoy — библиотека на Rust для агентов на паре строк кода, без шаблонов и настройки YAML
— Opperator — терминальный фреймворк, который собирает агента по текстовому описанию задачи
— AutoAgents — модульная платформа с циклом «думать-действовать» и обменом по модели «издатель-подписчик»
Подробности про каждый фреймворк и ссылки на репозитории — в материале на Хабре.
Локальная работа с ИИ-агентами становится все популярнее — собрали открытые фреймворки, которые помогают развернуть их у себя и написать интеллектуальных помощников с нуля. Среди них и среда с готовыми «плейбуками», и библиотека на пару строк кода без шаблонов.
Что вошло в нашу подборку открытых фреймворков для ИИ-агентов:
— Gaia — среда для локальных агентов с ускорением на чипах Ryzen AI и готовыми обучающими «плейбуками»
— Ailoy — библиотека на Rust для агентов на паре строк кода, без шаблонов и настройки YAML
— Opperator — терминальный фреймворк, который собирает агента по текстовому описанию задачи
— AutoAgents — модульная платформа с циклом «думать-действовать» и обменом по модели «издатель-подписчик»
Подробности про каждый фреймворк и ссылки на репозитории — в материале на Хабре.
👍3
Джунов увольнять не нужно: почему ставка только на ИИ может выйти компаниям дороже
Некоторые западные компании сокращают вакансии для джунов и хвастаются тем, что тратят на токены больше, чем на зарплаты. Другие, наоборот, наращивают набор выпускников, опасаясь кадрового провала через пару лет. Разобрались, что показывают цифры по обе стороны спора и чем рискует токенмаксинг.
Разбираем в материале:
— Почему число вакансий и стажировок для джунов резко упало в США и в России
— Что такое токенмаксинг и почему компании соревнуются в трате токенов
— Чем оборачивается экономия на людях: рост переписываемого кода и инциденты
— Почему часть компаний, наоборот, увеличивает наем джунов на годы вперед
Аргументы, цифры и кейсы обеих сторон — в нашей статье на Хабре.
Некоторые западные компании сокращают вакансии для джунов и хвастаются тем, что тратят на токены больше, чем на зарплаты. Другие, наоборот, наращивают набор выпускников, опасаясь кадрового провала через пару лет. Разобрались, что показывают цифры по обе стороны спора и чем рискует токенмаксинг.
Разбираем в материале:
— Почему число вакансий и стажировок для джунов резко упало в США и в России
— Что такое токенмаксинг и почему компании соревнуются в трате токенов
— Чем оборачивается экономия на людях: рост переписываемого кода и инциденты
— Почему часть компаний, наоборот, увеличивает наем джунов на годы вперед
Аргументы, цифры и кейсы обеих сторон — в нашей статье на Хабре.
👍1👀1
Софт-скиллы против фактора автобуса: как неумение общаться уничтожает проекты быстрее, чем баги
Исследователи зафиксировали: компании из списка Fortune 500 теряют 31,5 млрд долларов в год из-за того, что сотрудники не умеют делиться знаниями. Разобрались, при чем тут «фактор автобуса», почему сеньоры не всегда передают экспертизу и что с этим делать.
Что разбираем в материале про софт-скиллы и обмен знаниями в ИТ-командах:
— Что такое «фактор автобуса» и почему его низкое значение убивает проекты
— Почему коммуникация — самый недооцениваемый навык разработчика
— Как одно и то же сообщение в рабочем чате воспринимают по-разному — и почему это опасно
— Почему сеньоры не делятся опытом — и что работает лучше сложных регламентов
Полный разбор с исследованиями и примерами — в материале на Хабре.
Исследователи зафиксировали: компании из списка Fortune 500 теряют 31,5 млрд долларов в год из-за того, что сотрудники не умеют делиться знаниями. Разобрались, при чем тут «фактор автобуса», почему сеньоры не всегда передают экспертизу и что с этим делать.
Что разбираем в материале про софт-скиллы и обмен знаниями в ИТ-командах:
— Что такое «фактор автобуса» и почему его низкое значение убивает проекты
— Почему коммуникация — самый недооцениваемый навык разработчика
— Как одно и то же сообщение в рабочем чате воспринимают по-разному — и почему это опасно
— Почему сеньоры не делятся опытом — и что работает лучше сложных регламентов
Полный разбор с исследованиями и примерами — в материале на Хабре.
👍3
Международный производитель оптической техники перешел с SAP на 1С:ERP без остановки бизнеса
Российское подразделение международного вендора работало на SAP. Требовалось перевести учет на отечественную «1С:ERP Управление предприятием 2», сохранив параллельную отчетность по РСБУ и US GAAP.
Вместе с интегратором AUXO развернули новую ERP-систему в защищенном облаке Beeline Cloud и перенесли данные из SAP — от текущих остатков до архива за три года. Бизнес-процессы не останавливались ни на день.
Как прошло внедрение и какие процессы автоматизировали — в карточках, полный текст на сайте.
Российское подразделение международного вендора работало на SAP. Требовалось перевести учет на отечественную «1С:ERP Управление предприятием 2», сохранив параллельную отчетность по РСБУ и US GAAP.
Вместе с интегратором AUXO развернули новую ERP-систему в защищенном облаке Beeline Cloud и перенесли данные из SAP — от текущих остатков до архива за три года. Бизнес-процессы не останавливались ни на день.
Как прошло внедрение и какие процессы автоматизировали — в карточках, полный текст на сайте.
👍5
Конец удаленки: почему компании возвращают сотрудников в офис — и стоит ли верить этому тренду
Найти полностью удаленную работу в ИТ сегодня в четыре раза сложнее, чем офисную. При этом разработчики готовы терять до 25% зарплаты, лишь бы не ходить в офис. Разобрались, что стоит за политикой «возвращения» и почему она может быть временной.
Что разбираем в материале про удаленку и офис в ИТ:
— На сколько процентов зарплаты разработчики готовы снизить ожидания ради дистанта
— Почему топ-менеджеры на самом деле возвращают людей в офис — данные опроса HR-директоров
— Как меняется ситуация в России: прогнозы по числу удаленщиков к концу года
— Как использовать офисные и домашние дни с максимальной пользой, если гибрид неизбежен
Подробный разбор с исследованиями и прогнозами — в материале на Хабре.
Найти полностью удаленную работу в ИТ сегодня в четыре раза сложнее, чем офисную. При этом разработчики готовы терять до 25% зарплаты, лишь бы не ходить в офис. Разобрались, что стоит за политикой «возвращения» и почему она может быть временной.
Что разбираем в материале про удаленку и офис в ИТ:
— На сколько процентов зарплаты разработчики готовы снизить ожидания ради дистанта
— Почему топ-менеджеры на самом деле возвращают людей в офис — данные опроса HR-директоров
— Как меняется ситуация в России: прогнозы по числу удаленщиков к концу года
— Как использовать офисные и домашние дни с максимальной пользой, если гибрид неизбежен
Подробный разбор с исследованиями и прогнозами — в материале на Хабре.
👍2🤔2