Желтый QA
关闭频道
Канал QA-комьюнити Т-Банка. Здесь мы делимся кейсами, рассказываем про технологии тестирования и говорим про надежность и качество продуктов. Кейсы, технологии и анонсы митапов по направлениям: https://t.me/kod_zheltyi
显示更多
3 994
订阅者
无数据24 小时
-87 天
-2930 天
正在加载数据
相似频道
标签云
进出提及
---
---
---
---
---
---
吸引订阅者
十一月 '2611月 '26
十一月 '260
在0个频道中
十月 '26
+3
在0个频道中
Get PRO
九月 '26
+17
在0个频道中
Get PRO
八月 '26
+45
在0个频道中
Get PRO
七月 '26
+1
在0个频道中
Get PRO
六月 '26
+8
在1个频道中
Get PRO
五月 '26
+10
在0个频道中
Get PRO
四月 '26
+21
在2个频道中
Get PRO
三月 '26
+41
在0个频道中
Get PRO
二月 '26
+37
在0个频道中
Get PRO
一月 '26
+169
在6个频道中
Get PRO
十二月 '25
+41
在0个频道中
Get PRO
十一月 '25
+52
在0个频道中
Get PRO
十月 '25
+53
在0个频道中
Get PRO
九月 '25
+42
在0个频道中
Get PRO
八月 '25
+41
在0个频道中
Get PRO
七月 '25
+42
在0个频道中
Get PRO
六月 '25
+46
在0个频道中
Get PRO
五月 '25
+84
在0个频道中
Get PRO
四月 '25
+69
在2个频道中
Get PRO
三月 '25
+63
在0个频道中
Get PRO
二月 '25
+134
在1个频道中
Get PRO
一月 '25
+70
在0个频道中
Get PRO
十二月 '24
+89
在0个频道中
Get PRO
十一月 '24
+119
在0个频道中
Get PRO
十月 '24
+100
在0个频道中
Get PRO
九月 '24
+159
在0个频道中
Get PRO
八月 '24
+77
在0个频道中
Get PRO
七月 '24
+40
在0个频道中
Get PRO
六月 '24
+113
在0个频道中
Get PRO
五月 '24
+97
在0个频道中
Get PRO
四月 '24
+182
在1个频道中
Get PRO
三月 '24
+257
在0个频道中
Get PRO
二月 '24
+245
在1个频道中
Get PRO
一月 '24
+301
在2个频道中
Get PRO
十二月 '23
+387
在3个频道中
Get PRO
十一月 '23
+383
在3个频道中
Get PRO
十月 '23
+131
在0个频道中
Get PRO
九月 '23
+165
在0个频道中
Get PRO
八月 '23
+161
在0个频道中
Get PRO
七月 '23
+125
在0个频道中
Get PRO
六月 '23
+226
在0个频道中
Get PRO
五月 '23
+216
在0个频道中
Get PRO
四月 '23
+127
在0个频道中
Get PRO
三月 '23
+127
在0个频道中
Get PRO
二月 '23
+112
在0个频道中
Get PRO
一月 '23
+114
在0个频道中
Get PRO
十二月 '22
+162
在0个频道中
Get PRO
十一月 '22
+218
在0个频道中
Get PRO
十月 '22
+179
在0个频道中
Get PRO
九月 '22
+516
在0个频道中
| 日期 | 订阅者增长 | 提及 | 频道 | |
| 09 十一月 | 0 | |||
| 08 十一月 | 0 | |||
| 07 十一月 | 0 | |||
| 06 十一月 | 0 | |||
| 05 十一月 | 0 | |||
| 04 十一月 | 0 | |||
| 03 十一月 | 0 | |||
| 02 十一月 | 0 | |||
| 01 十一月 | 0 |
频道帖子
🎙 Как тестировать LLM, если нет точного ожидаемого результата
На один и тот же запрос модель может ответить по-разному, даже если код не менялся.
Из видео с Лизой Антоновой и Александром Петровым вы узнаете:
↗️ что учитывать при тестировании LLM и чем оно отличается от привычного
↗️ чем заменить точный ожидаемый результат
↗️ зачем один сценарий прогоняют сотни раз
↗️ кто такой LLM-судья и почему им может быть та же модель
↗️ почему одних тестов мало и что ловит мониторинг на проде
↗️ с чего начать, если вы только разбираетесь в теме
А как вы проверяете ответы LLM у себя: вручную, отдельной моделью или пока никак?
Подписывайтесь 📚
#спросили_qa
| 2 | 没有文字... | 697 |
| 3 | 没有文字... | 1 |
| 4 |  视频消息 | 904 |
| 5 | 没有文字... | 871 |
| 6 | 📊 Итоги: кто ревьюит автотесты от ИИ-агента?
Как видно из голосования, расклад такой:
✅ Большинство отдаёт ревью QA — 61%:
- тесты проверяют требования, а требования проверяет QA
- QA видит, что тест закрепляет неверный ожидаемый результат
- код сервиса для сверки кейсов читать не нужно
⚠️ Но есть важный нюанс: 39% голосов у разработчика, и просто отдать всё QA не выйдет. Если QA читает весь дифф агента, он становится очередью на релиз: агент открывает MR быстрее, чем их успевают смотреть. Ключ — разделить работу:
- QA сверяет кейсы «вход → ОР» с требованием
- разработчик смотрит дифф теста: не заменил ли агент ОР на ответ сервиса, не ослабил ли ассерт с 403 до «не 500», не поставил ли Disabled
Главное — за пропущенный баг отвечает тот, кто поставил Approve. «Тест написал агент» на разборе инцидента ничего не объясняет.
Продолжим дискуссию в комментариях👇
— Кто у вас сверяет кейсы, а кто читает дифф?
— Ловили агента на подменённом ОР?
Подписывайтесь 📚
#сложный_выбор | 757 |
| 7 | Кто проводит ревью автотестов от ИИ агента? 👩💻 | 973 |
| 8 |  视频消息 | 907 |
| 9 |  视频消息 | 902 |
| 10 | ❗️ Разработчик подключил ИИ-агента: тот написал автотесты и открыл MR, все тесты зелёные. Кто их ревьюит — и с кого спросят, если тесты пропустят баг?
Мнения наших экспертов, как всегда, разделились:
👉 разработчик: «тест в MR — такой же код, ревьюит тот, кто запустил агента»
👉 QA: «агент берёт ожидаемый результат из кода, а код тоже ошибается»
А как считаете вы?
Подписывайтесь 📚
#сложный_выбор | 883 |
| 11 |  100% покрытие кода не гарантирует, что тесты ловят баги. Оно показывает только то, что код выполнялся, но не качество самих проверок.
Проверить тесты можно мутационным тестированием: фреймворк меняет операторы в коде (например, > на >=) и смотрит, упадут ли тесты.
Подробнее про концепцию и работу с мутантами
Подписывайтесь 📚
#статья_телеграф | 896 |
| 12 |  视频消息 | 1 067 |
| 13 | Вам уже приходилось тестировать интеграцию сервисов с LLM-моделью? | 1 329 |
| 14 |  +9🤖 Как тестировать LLM-бота?
Нейросети активно внедряются в программные продукты. Кому как не QA контролировать качество этих внедрений и предотвращать инциденты, когда LLM может упасть или поддаться атаке?
В карточках постарались разобрать небольшой кейс с тестированием LLM-бота и отметить основные моменты, на которые стоит обратить внимание при его проверке.
А вам приходилось тестировать сервисы, интегрированные с LLM? На какие моменты вы посоветовали бы обратить внимание? Напишите в комментариях 👇
Подписывайтесь 📚
#полезная_подборка | 1 440 |
| 15 |  Уже заполнили планер на октябрь? 🍁
В этом месяце пройдут 2 больших конференции полезных QA-инженеру. С нашей стороны выступят два докладчика:
🖥 На Heisenbug Михаил Мурунов расскажет о собственной системе для нахождения багов в программах на примерах наших любимых QA-инструментов
🖥 А на SQA days Веста Рамазанова поделится опытом взаимодействия мобильной команды и AI Скилла по нахождению изменений в merge request'е
📌 Когда и где?
Heisenbug: 16-17 октября в г. Санкт-Петербург + онлайн
SQA DAYS: 30-31 октября в г. Москва + онлайн
Встретимся на конференциях 🧡
Подписывайтесь
#конференция | 1 115 |
| 16 |  С найденным багом работа QA только начинается 😠
Подписывайтесь 📚
#мем | 1 075 |
| 17 | Если у вас еще нет списка дел на сегодня, то держите наш ✍️ | 1 207 |
| 18 |  ⚡️Помогите отловить тренды QA и узнать, что тормозит развитие инженерной культуры
JUG Ru Group, организатор профильных IT-конференций, запускает исследование State of Testing. Результаты помогут разобраться, что мешает развивать инженерную культуру (автоматизацию, внедрение инструментов, тест-дизайн) и как вы используете ИИ на реальных проектах.
JUG Ru Group представит первые результаты опроса на открытии конференции Heisenbug, а затем пришлет подробный отчет с графиками всем участникам на email.
Помогите ребятам составить актуальную картину индустрии — поделитесь своим опытом в опросе. Вопросов много, но если времени мало, можно заполнить только блок про препятствия. Ответы ждут от всех причастных к качеству: QA, разработчиков, аналитиков и тимлидов.
⭐️Среди участников опроса разыграют 3 офлайн- и 6 онлайн-билетов на конференцию Heisenbug 2026 Autumn.
Принять участие в опросе
#опрос | 1 119 |
| 19 |  🚀 Playwright Agents: выбери, кто ты - элитный пилот или лишнее звено?
В своей новой статье Даниил Кучинский рассказал про два решения от Playwright – Playwright Test Agents и Playwright CLI with SKILLs, для чего они нужны, какой инструмент выбрать для работы.
Какой AI инструмент выбрали вы? Поделитесь в комментариях своим опытом и ответьте на вопросы автора статьи. 👇
Подписывайтесь 📚
#статья_телеграф | 1 037 |
| 20 |  Тест-кейсы как код: как перестать вести тест-кейсы в двух местах 📝
В этом видео разбираем практику Тест-кейсы как код — зачем хранить тест-кейсы прямо в коде проекта, а не в отдельной TMS.
Поговорим о том:
✨ почему двойная работа — сначала в TMS, потом в коде — это боль, от которой легко избавиться
✨ как тест-кейсы, живущие в репозитории, получают историю изменений и ревью наравне с кодом
✨ зачем автоматически выгружать результаты прогонов обратно в TMS
✨ с чего начать внедрение, если тест-кейсов уже накопилось очень много
💬 А как у вас сейчас живут тест-кейсы — в TMS или в коде? Делитесь в комментариях!
Подписывайтесь 📚
#спросили_qa | 1 270 |
