🚀 Как мы строили QA-процессы с нуля: от хаоса к чуть меньшему хаосу
👉 В статье описан опыт по созданию процесса тестирования практически с нуля. Какие шаги предпринимались и как вообще получается в современном мире существовать без тестирования.
Читать подробнее: https://habr.com/ru/articles/928986/
👉 В статье описан опыт по созданию процесса тестирования практически с нуля. Какие шаги предпринимались и как вообще получается в современном мире существовать без тестирования.
Читать подробнее: https://habr.com/ru/articles/928986/
🚀 T-Pro 2.0 — открытая гибридно-ризонинговая русскоязычная LLM
👉 Читать подробнее: https://habr.com/ru/companies/tbank/articles/928956/
👉 Читать подробнее: https://habr.com/ru/companies/tbank/articles/928956/
🚀 Как я устал тестировать LLM-системы вручную и написал универсальный сканер уязвимостей
👉 Полгода назад я работал над внедрением RAG-системы в крупной финансовой компании. Задача была типичная: построить корпоративного чат-бота, который мог бы отвечать на вопросы сотрудников по внутренним документам. Казалось бы, что может пойти не так? Берем готовую LLM, подключаем к базе знаний, добавляем немного магии с векторным поиском — и готово.
Но когда я начал тестировать систему перед продакшеном, обнаружил, что наш "умный" ассистент превращается в болтливого предателя при правильно сформулированных вопросах.
Читать подробнее: https://habr.com/ru/articles/929168/
👉 Полгода назад я работал над внедрением RAG-системы в крупной финансовой компании. Задача была типичная: построить корпоративного чат-бота, который мог бы отвечать на вопросы сотрудников по внутренним документам. Казалось бы, что может пойти не так? Берем готовую LLM, подключаем к базе знаний, добавляем немного магии с векторным поиском — и готово.
Но когда я начал тестировать систему перед продакшеном, обнаружил, что наш "умный" ассистент превращается в болтливого предателя при правильно сформулированных вопросах.
Читать подробнее: https://habr.com/ru/articles/929168/
🚀 Как тестировать качество ответов RAG системы?
👉 LLM могут принимать на вход все большее количество токенов, но большое количество переданных на вход токенов, включая промт, контекст и историю переписки, не равно качеству ответа.
В идеале на вход LLM нужно передавать минимально достаточный набор данных для получения ожидаемого качественного ответа.
Читать подробнее: https://habr.com/ru/articles/930008/
👉 LLM могут принимать на вход все большее количество токенов, но большое количество переданных на вход токенов, включая промт, контекст и историю переписки, не равно качеству ответа.
В идеале на вход LLM нужно передавать минимально достаточный набор данных для получения ожидаемого качественного ответа.
Читать подробнее: https://habr.com/ru/articles/930008/
Хабр
Как тестировать качество ответов RAG системы?
LLM могут принимать на вход все большее количество токенов, но большое количество переданных на вход токенов, включая промт, контекст и историю переписки, не равно качеству ответа. В идеале на вход...
🚀 Автоматизация рутины в Postman (часть 1): 10 pre-request скриптов, которые мне упростили жизнь
👉 Если вы, как и я, проводите немало времени в Postman, то знаете, насколько рутинной может быть работа: постоянно копировать значения, вручную обновлять токены, проверять одни и те же поля... Знакомо?
Вот тут-то на сцену и выходят наши помощники - pre-request и post-request скрипты в Postman. Эти небольшие кусочки кода способны превратить вашу работу с API из нудного прокликивания в элегантный и автоматизированный процесс.
Читать подробнее: https://habr.com/ru/articles/906150/
👉 Если вы, как и я, проводите немало времени в Postman, то знаете, насколько рутинной может быть работа: постоянно копировать значения, вручную обновлять токены, проверять одни и те же поля... Знакомо?
Вот тут-то на сцену и выходят наши помощники - pre-request и post-request скрипты в Postman. Эти небольшие кусочки кода способны превратить вашу работу с API из нудного прокликивания в элегантный и автоматизированный процесс.
Читать подробнее: https://habr.com/ru/articles/906150/
Хабр
Автоматизация рутины в Postman (часть 1): 10 pre-request скриптов, которые мне упростили жизнь
Евгений Гусинец Middle+ QA Engineer в Бизнес-Инфо (Минск) Привет, коллеги по цеху! На связи снова Евгений Гусинец , QA Engineer и автор ТГ-канала о тестировании QA❤️4Life . За плечами у меня 3 года в...
🚀 Автоматизация рутины в Postman (часть 2): 10 Post-response скриптов, которые упростили мне жизнь
👉 В первой части нашей серии мы научились готовить идеальные запросы с помощью pre-request скриптов. Мы автоматизировали получение токенов, генерировали динамические данные и настраивали переменные. Наш запрос полностью готов и отправлен на сервер... но что дальше?
А дальше начинается самое интересное – работа с ответом. Как понять, что API отработало корректно? Как убедиться, что в ответе пришли нужные данные? И как использовать эти данные в следующих шагах, выстраивая сложные тестовые цепочки?
Читать подробнее: https://habr.com/ru/articles/927358/
👉 В первой части нашей серии мы научились готовить идеальные запросы с помощью pre-request скриптов. Мы автоматизировали получение токенов, генерировали динамические данные и настраивали переменные. Наш запрос полностью готов и отправлен на сервер... но что дальше?
А дальше начинается самое интересное – работа с ответом. Как понять, что API отработало корректно? Как убедиться, что в ответе пришли нужные данные? И как использовать эти данные в следующих шагах, выстраивая сложные тестовые цепочки?
Читать подробнее: https://habr.com/ru/articles/927358/
Хабр
Автоматизация рутины в Postman (часть 2): 10 Post-response скриптов, которые упростили мне жизнь
Привет, коллеги! На связи снова Евгений Гусинец , QA Engineer и автор ТГ-канала о тестировании QA❤️4Life . Евгений Гусинец Middle+ QA Engineer в Бизнес-Инфо (Минск) В первой части нашей серии мы...
🚀 Типичные ошибки Junior QA. Большая серия разборов от практиков.
👉 Поиск работы в IT часто напоминает «чёрный ящик». Мы отправляем резюме в пустоту, проходим через череду созвонов, получаем странные вопросы и не менее странные отказы. Что на самом деле происходит в голове у рекрутера? Почему один и тот же ответ в одной компании вызывает восторг, а в другой – вежливое «мы вам перезвоним»? И где проходит та тонкая грань между уверенностью и наглостью, между честностью и наивностью?
Читать подробнее: https://habr.com/ru/articles/929764/
👉 Поиск работы в IT часто напоминает «чёрный ящик». Мы отправляем резюме в пустоту, проходим через череду созвонов, получаем странные вопросы и не менее странные отказы. Что на самом деле происходит в голове у рекрутера? Почему один и тот же ответ в одной компании вызывает восторг, а в другой – вежливое «мы вам перезвоним»? И где проходит та тонкая грань между уверенностью и наглостью, между честностью и наивностью?
Читать подробнее: https://habr.com/ru/articles/929764/
🚀 Как начинающему тестировщику выстраивать коммуникацию с командой
👉 Когда начинаешь карьеру в тестировании, кажется, что главное — это баги, тест‑кейсы и чек‑листы. Но очень быстро становится понятно: технических знаний недостаточно.
Читать подробнее: https://habr.com/ru/companies/naumen/articles/930806/
👉 Когда начинаешь карьеру в тестировании, кажется, что главное — это баги, тест‑кейсы и чек‑листы. Но очень быстро становится понятно: технических знаний недостаточно.
Читать подробнее: https://habr.com/ru/companies/naumen/articles/930806/
🚀 Прозрачность QA для заказчика: как TMS помогает в аутсорсе
👉 До внедрения TMS процесс тестирования был довольно локальным — QA и команды внутри проектов самостоятельно определяли насколько плотно покрывать проверками функционал, где и как эти проверки хранить, какой выбирать формат для отчетов по регрессам. Такой подход имеет право на существование, но он не масштабируется, неудобен в случае усиления команды новыми участниками и совершенно непрозрачен для клиентов. Мы решили перейти от подхода «у каждого свое» к централизованной и прозрачной для всех стейкхолдеров системе.
Читать подробнее: https://habr.com/ru/companies/kts/articles/931610/
👉 До внедрения TMS процесс тестирования был довольно локальным — QA и команды внутри проектов самостоятельно определяли насколько плотно покрывать проверками функционал, где и как эти проверки хранить, какой выбирать формат для отчетов по регрессам. Такой подход имеет право на существование, но он не масштабируется, неудобен в случае усиления команды новыми участниками и совершенно непрозрачен для клиентов. Мы решили перейти от подхода «у каждого свое» к централизованной и прозрачной для всех стейкхолдеров системе.
Читать подробнее: https://habr.com/ru/companies/kts/articles/931610/
Хабр
Прозрачность QA для заказчика: как TMS помогает в аутсорсе
Во многих компаниях, в том числе и аутсорс, тестировщик воспринимается как человек, который приходит, сверяет фактический результат с ожидаемым и уходит. Наша же задача как аутсорс компании,...