Social Media Ideas for Детерминированное Тестирование

Как тестируют баги, которые невозможно воспроизвести

Редкий сбой в распределённой системе может месяцами ускользать от команды, а при попытке воспроизведения исчезать из‑за изменившегося порядка событий. В статье разберём, как determ...

Первый осмысленный план нагрузочного тестирования

Первое нагрузочное тестирование часто начинается с формулировки «давайте запустим побольше пользователей и посмотрим». В статье разбираем, почему этого недостаточно и как собрать о...

Deterministic automation

От бесконечности к конечности: как математика помогает в тестировании

Когда я учился в университете, мне повезло с преподавателем математического анализа. Он не просто объяснял теоремы и выводил формулы на доске — ему удалось показать красоту чистой...

Мой тестовый харнесс нашёл баг в моей же реализации Raft. Рассказываю, как именно

Набор тестов, который всегда зелёный, содержит непроверяемое допущение: он может ловить ошибки, а может не смотреть вообще — по цвету это неразличимо.Я писал реализацию Raft на Typ...

Playwright не спасает от флапающих тестов: разбираемся, как он ждёт на самом деле

Локально тесты проходят стабильно, а в CI начинают падать в случайных местах — знакомая картина даже для проектов на Playwright. В статье разберём, где заканчивается встроенное авт...

CheckMateDB в РСХБ: как мы автоматизируем автотесты на Java (и почему это не заменяет автоматизаторов)

Меня зовут Герасимов Михаил, я главный инженер в Россельхозбанке (РСХБ), работаю в команде автоматизации тестирования. Наш основной фокус — регрессионные автотесты на Java.Эта публ...

Как я сделала отчет о дифференциальном тестировании через Cursor

Я хочу рассказать, как я сделала отчет о дифференциальном тестировании (сравнение двух функций на одних данных) через ИИ. Знаю, что многие уже применяют ИИ и в хвост и в гриву, но...

РТК-ЦОД начал оказывать услуги независимого тестирования ИТ-решений

РТК-ЦОД, ИТ-сервис-провайдер полного цикла, приступил к проведению независимых коммерческих испытаний ИТ-решений на базе собственной R&D-лаборатории. Пилотным заказчиком стала...

Правильный код мы отклоняем — и так задумано

Мой валидатор забраковал ответ, сославшись на несуществующую статью, — а ведь именно он поставлен ловить галлюцинации. После этого я собрал конвейер из восьми открытых пакетов: он...

Testcontainers в CI: почему тесты зелёные локально и красные на пайплайне

Локально Testcontainers запускается за секунды, тесты стабильно зелёные, а в CI тот же набор начинает падать в трёх запусках из ста и каждый раз по новой причине. В статье разберём...

Как убрать логин из UI‑тестов на Java без лишних секунд и флака

Когда 180 тестов каждый раз проходят форму входа, авторизация начинает съедать десятки минут и ломаться на рейт‑лимитах, SSO и редиректах. Разберём рабочую схему: получить токен по...

РТК-ЦОД начал оказывать услуги независимого тестирования ИТ-решений

Источник: Компьютерра - Журнал о науке и технологиях РТК-ЦОД, ИТ-сервис-провайдер полного цикла, приступил к проведению независимых коммерческих испытаний ИТ-решений на базе собст...

Playwright: пишем тесты на Kotlin и Java

В статье я разберу, как писать тесты, используя Playwright. И покажу все на собственном примере.Когда наш продукт стал сложным, мы столкнулись с тем, что релизы стали затаскивать н...

Train и eval в ARC-AGI-2 — это разные распределения

Если вы замеряете прогресс своего солвера на случайной подвыборке из train, вы замеряете его не на том наборе. Медианная задача train занимает 100 клеток на выходе, у медианной зад...

100% покрытия не поймали единственный баг, который был важен

У виджета было 92 теста и 100% построчного покрытия. Потом я открыл его в маленьком окне терминала, и шапка таблицы уехала за верхнюю границу экрана.Разбор трёх багов, которые нашл...

Testing Non-Deterministic AI Outputs: A Practical Guide

Testing non-deterministic AI outputs without exact-match assertions: determinism knobs, four assertion types, pass-rate sample sizes, metamorphic relations.

Community non-determinism

Как тестировать распределенные системы: тайм-ауты, дубликаты, Saga и частичные отказы

Распределенная система может сломаться так, что по отдельности все ее части будут выглядеть исправными.Представим обычную оплату заказа: сервис отправил запрос платежному провайдер...

Куча дисков еще не T-RAID: как один компонент проходит через руки десятков тестировщиков

Q, хабряне! На связи Максим Тучков, инженер по разработке ПО в YADRO. Хочу рассказать об уровнях тестирования  RAID-массива T-RAID — одного из общих компонентов семейства TATLIN —...

Как превратить приемочные критерии в систему, а не в список

Большие наборы приемочных сценариев часто создают ложное ощущение контроля: тесты проходят, отчёты зелёные, но команда всё равно может пропустить важный переход в логике системы. В...

Нефункциональные требования: 5 ошибок, которые всплывут в проде

Система прошла приёмку, но первая реальная нагрузка разогнала p99, исчерпала пул соединений и увеличила счёт за облако. Разбираем пять ошибок в нефункциональных требованиях и спосо...

Скилл для ИИ-агента: как превратить пожелание в правило

Сначала это даже приятно. Просишь ИИ-агента сделать одну фичу — он делает, код работает, переключаешься на следующую задачу. Потом просишь написать похожее для другой фичи — и он д...

Мини‑ПК на Strix Halo под параллельной нагрузкой: 236 tok/s на 32 одновременных запросах и три ошибки

Один Beelink GTR9 Pro на Ryzen AI Max+ 395 выдал 236 tok/s суммарной генерации на 32 одновременных запросах в коротких прогонах и удержал в среднем 226 tok/s за 30 минут непрерывно...