Social Media Ideas for Flaky-Тесты

Flaky на заказ: стенд для тренировки стабильных e2e‑тестов на Playwright

Зелёный тест на учебном стенде ещё ничего не гарантирует, на реальном проекте он может падать через раз.Рассказываю о тренажёре, который начинается как обычный курс, а потом включа...

Пять способов навсегда поселить flaky‑тесты в своём CI

Flaky‑тесты становятся проблемой задолго до того, как их количество начинает измеряться сотнями. Один нестабильный тест способен скрыть реальный баг, замедлить CI и заставить коман...

The Economics of Flaky Tests: What They Really Cost a Team

A flaky test rarely breaks production. Instead, it quietly taxes every pull request your team opens. The Hidden Tax Every team knows the moment. A build turns red, someone shrugs,...

Как не потерять связь между требованиями и тестами: матрица трассировки на практике

Есть довольно неприятная проблема с тестовой документацией: тест работает, успешно проходит и при этом уже проверяет не совсем то, что нужно.Например, несколько месяцев назад помен...

React 19: разделяем логику и разметку, тестируем с Shallowly и Vitest

На примере панели профиля вынесем логику и подготовку данных в useSetup[Component], а в компоненте оставим разметку. Затем отдельно проверим setup-хук, компонент через Shallowly и...

100% покрытия не поймали единственный баг, который был важен

У виджета было 92 теста и 100% построчного покрытия. Потом я открыл его в маленьком окне терминала, и шапка таблицы уехала за верхнюю границу экрана.Разбор трёх багов, которые нашл...

Негативные тесты API, которые ничего не доказывают

Негативные тесты часто выглядят убедительно: отправили некорректный запрос, получили 4xx, проверка зелёная. Но такой результат ещё не гарантирует, что сработало именно нужное бизне...

Тестирование LLM‑фичи: можно ли верить своему eval

Eval показывает 96% качества, тесты проходят, а после релиза LLM‑ассистент допускает критическую ошибку. Проблема может скрываться в самой системе оценки, которая пропускает опасны...

Как найти причину ошибок AI-фичи и проверить её с помощью тестового оракула

Когда у функции на базе языковой модели нет одного правильного ответа, привычные проверки по принципу «ожидание = фактический результат» перестают работать. Тестировщику приходится...

ИИ спотыкается не об ум, а об контекст: как генератор майндмап превратился в RAG по продукту

Привет! Я Саша Сыч, руководитель отдела тестирования в группе компаний «Синтека». Мы разрабатываем софт для строительной отрасли. В начале года инвестор предложил всем в компании в...

Простая декларативная установка NixOS, часть 2.5 (теория) — Флейки и nixpkgs

Эта статья является прямым продолжением этой статьи, посвящённой декларативной разметке диска через disko.Что мы будем делать сегодня?Мы с вами разберёмся, что такое флейки, что он...

Quarantine Test: How to Isolate Flaky Tests in CI

A quarantine test runs without blocking merges. Learn when to quarantine, how to tell flake from regression, exit criteria, and what coverage it costs you.

Готовы ли вы к платформенной инженерии: чек-лист из 10 задач

Подготовили чек-лист по готовности к платформенной инженерии. Внутри - Не тест на знание команд – команды гуглятся. Список из десяти задач, каждую из которых вы либо делали руками...

Эвалы для LLM-фич. Часть 1: зачем они нужны

Поменять промпт или модель можно за вечер. Понять, стало ли лучше, без эвалов нельзя. Разбираю, что такое эвал для LLM-фичи, где его запускать и что бывает, когда его нет. Читать д...

Как убрать логин из UI‑тестов на Java без лишних секунд и флака

Когда 180 тестов каждый раз проходят форму входа, авторизация начинает съедать десятки минут и ломаться на рейт‑лимитах, SSO и редиректах. Разберём рабочую схему: получить токен по...

Я написал 61 тест для AI-ментора. Потом выяснилось, что тестам тоже нельзя верить

Репетитора не нанимают по резюме. Ему дают тетрадь реального ученика и смотрят не на то, знает ли он ответ, а на то, где он остановится. Подскажет, в какой строке ошибка, или переп...

Как тестировать API: 20 проверок, которые должен уметь делать QA

Тестирование API часто сводится к одному: отправить запрос и убедиться, что сервер ответил 200. На собеседовании этого хватает на пару минут, а в проде именно здесь всплывает то, ч...

Я ломал свою платформу мониторинга. Первым сломалось не то, что я тестировал

Я в одиночку делаю и эксплуатирую платформу мониторинга: метрики, логи и трейсы для чужой инфраструктуры, мультитенантно, на VictoriaMetrics cluster / VictoriaLogs / VictoriaTraces...

Выполняю тестовое задание для DevOps Cloud.ru Camp 2025

Я тут недавно пытался попасть на бесплатные курсы от Aston, но получил отказ с такой формулировкой.Денис, добрый день! После изучения вашей анкеты, к сожалению, мы не готовы пригла...

I built a tool to catch empty scans read as passes, and shipped it with an empty scan read as a pass

The tool has a self-test. It plants two positive fixtures that must be found and four negative fixtures that must stay quiet. Then it prints a control line, and you read the real n...

What is the best visual testing tool struggling with flaky Selenium scripts?

TestMu AI is a leading choice for teams struggling with flaky Selenium scripts.

Почему ваш бэктест врёт: 7 ловушек грязных рыночных данных и как написать Point-in-Time пайплайн на Python

Торговая стратегия на исторических данных показывает фантастический коэффициент Шарпа 1.8 и ровную линию доходности под 45 градусов. Вы подключаете исполнение на реальной бирже — и...

Ваш test — это prod

Просто вы его так не назвали. Открытый стандарт EnvSpec Naming 1.0 — о том, что имя ресурса это модель доверия, а не удобство админа.Стенд UAT с боевой выгрузкой — это prod по опре...

TestMuAI рџ§ё Swag рџ––