BenchLabs
340 subscribers
28 photos
2 videos
9 links
Download Telegram
К сожалению, у нас возникли технические сложности, связанные с блокировкой OpenRouter'а на отправление запросов из России

Арена в ближайшее время не будет работать

Мы активно обновляем задачи бенчмарка и готовим большой пул задач с разными категориями. Бенчмарк тоже пострадал из-за блокировки

Также до нового года мы готовим новые функции в наш сервис, которые будут полезны всем! Обязательно вернемся с новостями!

А пока работаем над исправлением всех неполадок!
🥰3🔥1
Арена снова доступна!

Мы устранили неполадки, связанные с блокировками, и сервис снова работает в штатном режиме. Спасибо, что оставались с нами!

Вместе с возвращением функционала мы обновили список доступных моделей. Уже сейчас вы можете протестировать и сравнить Gemini 3.0 Flash и GLM 4.7!

Заходите, тестируйте промпты и голосуйте за лучшие ответы. Ваши голоса формируют объективный рейтинг нейросетей!
👍9❤‍🔥1
Channel name was changed to «BenchLabs»
Channel photo updated
🚀 Ребрендинг и большой апдейт — раздел с промптами!

Наш проект "1С LLM Бенчмарк" теперь официально называется BenchLabs

Почему мы это сделали?
Мы расширяем поле наших исследований. Теперь это не только сравнение моделей, но и тесты RAG-систем, а также другие изыскания, которые помогают в работе с 1С и смежными областями. Название BenchLabs лучше отражает этот масштаб 👀

Методология, Arena Mode и все старые результаты доступны по новому адресу: 🌐 BenchLabs.ru

И уже на обновленном сайте вы можете увидеть новые разделы — "Промпты" и "Подборки промптов"

Мы решили создать единую базу промптов именно для 1С-сообщества. Раньше не было одного места, где можно было бы найти качественные запросы для аналитики, разработки, администрирования или тестирования в 1С. Теперь оно появилось.

Что в этих разделах интересного:

1️⃣ Авторские подборки: Это не просто свалка текстов. Блогеры, преподаватели или эксперты могут создавать свои тематические коллекции (например, «Промпты для написания ТЗ» или «Помощник кода»).
2️⃣ Удобные шаблоны: Больше не нужно копировать текст в блокнот и вручную удалять лишнее. Если в промпте есть параметры в [квадратных скобках], вы просто заполняете их в специальном поле на сайте — и на выходе получаете готовый текст.
3️⃣ Проверка в Арене: Понравился чей-то промпт? Нажмите кнопку "В арену" и сразу отправьте его в "Арену", чтобы сравнить, какая модель выдаст лучший результат.
4️⃣ Сообщество: Каждый может добавить свой промпт, ставить лайки и собирать избранное для быстрой работы.

Зачем мы это делаем?
🎯
Наша цель — помочь тем, кто работает с 1С, быстрее решать рабочие задачи. Мы объединяем опыт сообщества, чтобы вам не приходилось каждый раз заново изобретать велосипед при общении с нейросетью.

Заходите на сайт, тестируйте новый функционал и делитесь своими наработками:
➡️ Промпты тут

➡️Подборки тут
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥116🎉4
Мы собрали 18 MCP-серверов для 1С в одном удобном месте 🚀

Мы продолжаем превращать BenchLabs в единую точку входа для всего, что помогает эффективно использовать LLM в задачах по 1С — и в этом обновлении у нас важная штука: раздел с MCP-серверами.

Что сделали:
1️⃣ Запустили новый раздел MCP-Серверы
2️⃣ Уже добавили 18 MCP-серверов для 1С — большая часть из них — для разработки
3️⃣ Теперь можно в одном месте посмотреть, какие MCP-интеграции уже есть под 1С и что они умеют

Зачем это нужно?
MCP-серверы — это способ подключать LLM к инструментам и данным: от типовых операций и работы с конфигами до автоматизации рутины и интеграций.

Если вы не знакомы с MCP-серверами, советуем почитать пост у Валеры в канале 🥸

Мы хотим, чтобы 1С-комьюнити не собирало это по чатам и случайным репозиториям, а имело структурированный каталог, который можно быстро открыть и выбрать подходящее.

📌 Заходите и смотрите новый раздел:
➡️ https://benchlabs.ru/mcp-servers

И как обычно — если у вас есть свой MCP-сервер или вы знаете крутой проект, который мы пропустили: добавляйте сами или пишите, добавим 👀

ДИСКЛЕЙМЕР

BenchLabs не продаёт и не предоставляет MCP-серверы, размещённые в каталоге. Мы лишь собираем информацию о существующих решениях и указываем ссылки на первоисточники. Разработки принадлежат их авторам — пожалуйста, самостоятельно проверяйте актуальность, безопасность и условия использования перед установкой/подключением. Если ваш MCP-сервер попал в наш список, а вы не хотите, чтобы он там был, напишите в сообщения канала
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥13👍8😍61
В раздел MCP-Серверы приехали сразу 3 новых проекта 🚀

Что добавили:
1️⃣ ConfluenceMCP — Локальный MCP-сервер для поиска по внутренней документации в Confluence (поддержка SSE и streamable-http, Basic Auth).
➡️ Посмотреть подробнее

Автор этого MCP-сервера участник 1С AI Club — Иван Титов, автор Ютуб-канала ivantitov_tech

2️⃣ 1C MCP Toolkit от ROCTUP — инструмент для подключения AI-агентов (Kiro, Claude и др.) к базам 1С:Предприятие через MCP или REST API. Под капотом: Python прокси + внешняя обработка 1C, связь через HTTP long polling.
Ключевые плюсы:
без изменений конфигурации 1C
без публикации 1C сервера
без COM-соединения
совместимость с 8.2.13+ и 8.3.25+
Docker-friendly
➡️ Посмотреть подробнее

3️⃣1C Buddy от ROCTUP — чат + MCP-сервер + OpenAI-совместимый API-шлюз для общения с 1С:Напарник.

Плюс OpenAI-совместимый API:
совместимость с Chat Completions (/v1/chat/completions)
stream / non-stream + SSE
Bearer-токены
➡️ Посмотреть подробнее

📌 Раздел MCP-Серверы на BenchLabs:
➡️ https://benchlabs.ru/mcp-servers

И как обычно — если у вас есть свой MCP-сервер или вы знаете крутой проект, который мы пропустили: добавляйте сами или пишите, добавим.

ДИСКЛЕЙМЕР


BenchLabs не продаёт и не предоставляет MCP-серверы, размещённые в каталоге. Мы лишь собираем информацию о существующих решениях и указываем ссылки на первоисточники. Разработки принадлежат их авторам — пожалуйста, самостоятельно проверяйте актуальность, безопасность и условия использования перед установкой/подключением. Если ваш MCP-сервер попал в наш список, а вы не хотите, чтобы он там был, напишите в сообщения канала.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥6👍51❤‍🔥1😍1
Media is too big
VIEW IN TELEGRAM
Мы добавили в BenchLabs улучшение промптов с обучающим разбором 🚀

Больше не нужно угадывать, почему промпт не сработал.
Теперь вы видите что именно в запросе было слабым (контекст? роль? ограничения? структура?) — и как это исправить, чтобы получать стабильный результат.

Как это выглядит:
1️⃣ Пишете задачу своими словами, коротко
2️⃣ BenchLabs превращает это в структурированный промпт: роли, контекст, строгие ограничения
3️⃣ Параллельно — оценка и пояснение, почему стало лучше

🔗 Улучшенный промпт можно сохранить как шаблон в один клик и поделиться с сообществом и коллегами

🖥 Смотрите как это работает и пробуйте сами
➡️ https://benchlabs.ru/prompt-improver
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥9🎉4🤩4🆒21
Мы добавили в BenchLabs каталог скиллов для агентов 🚀

Продолжаем собирать в одном месте всё, что помогает применять LLM в реальной работе по 1С — и теперь на сайте появился новый раздел со скиллами для агентов.

Что уже доступно:
1️⃣ Запустили каталог скиллов для агентов
2️⃣ Уже выложили 116 скиллов, которые могут пригодиться в задачах по 1С
3️⃣ Добавили установку скилла одной командой — можно выполнить её в PowerShell или Bash прямо в нужной папке

Зачем это нужно
Скиллы помогают агентам быстрее получать нужные инструкции, сценарии и рабочие заготовки под конкретные задачи. Вместо того чтобы каждый раз собирать всё вручную, можно просто выбрать подходящий скилл из каталога и установить его сразу в свою рабочую папку.

К посту мы прикрепили карточки с объяснением, что такое навыки агентов и как это работает на практике — почитайте, там всё подробно и наглядно разобрано 🔍

Ещё одна полезная штука: добавить свой скилл можно очень просто ⚙️
Достаточно указать ссылку на Git-репозиторий:
— если это ссылка на папку с скиллом, загрузится только этот скилл
— если это ссылка на папку, где лежит несколько скиллов, загрузятся сразу все скиллы

Остается только дождаться уведомления о принятии вашего "скилла" на сайте 📈

Мы хотим, чтобы 1С-сообщество могло не искать такие вещи по чатам, заметкам и случайным репозиториям, а открывать единый каталог, где уже есть готовые и понятные решения 🤖

📍Полезные ссылки по навыкам ищите у Валеры в канале📍

📣 Всё это уже доступно на сайте:
🔗 benchlabs.ru/skills
Меньше слов — лучше просто зайти, посмотреть карточки и попробовать в работе 🔬
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥11