Тесты были зелёными, а задача — неправильной: как я проверял 27 генераторов геометрии

Habr ·

Тесты были зелёными, а задача — неправильной: как я проверял 27 генераторов геометрии

Так выглядит задача на сайте: условие, варианты ответа и разбор. Представьте пятиклассника, который открывает задачу: «Может ли существовать треугольник со сторонами 3, 4 и 8?» Варианты — «да» и «нет». Если генератор ошибся и считает, что может, ребёнок выбирает «да», получает зелёную галочку и уходит с уверенностью, что 3 + 4 = 8. Это не абстрактный баг. Это момент, после которого ребёнок может решить, что геометрия — не его. И именно такой баг обычные тесты не видят. В прошлой статье я разбирал, как устроен генератор школьных задач: seed, Task , 1 809 проверенных заданий, сокращение sitemap с 1 547 до 453 URL. После неё я добавил 27 тем геометрии для 7–11 классов. Код писался быстро. А потом началось самое неприятное — проверка того, что каждая задача не врёт ребёнку. Читать далее

Источник: Habr