{
  "источник": "content/articles/vaibkoding-pustye-testy/index.md",
  "дата_посева": "2026-09-10",
  "всего": 12,
  "дефекты": [
    {
      "id": 1,
      "type": "число против лога",
      "note": "покрытие 97 % в тексте против 99 % в raw/02-coverage.txt (TOTAL 107 1 99%)",
      "было": "все зелёные меньше чем за секунду, покрытие 99 %",
      "стало": "все зелёные меньше чем за секунду, покрытие 97 %"
    },
    {
      "id": 2,
      "type": "число против лога",
      "note": "убито 14 мутантов против 135 в raw/04-mutmut-results.txt",
      "было": "из них 135 убито и 32 выжило",
      "стало": "из них 14 убито и 32 выжило"
    },
    {
      "id": 3,
      "type": "внутреннее противоречие",
      "note": "в заголовке и лиде девять дыр, в выводе — семь",
      "было": "пропустили девять нарушений контракта",
      "стало": "пропустили семь нарушений контракта"
    },
    {
      "id": 4,
      "type": "натяжка",
      "note": "единичный прогон подан как свойство всех моделей",
      "было": "## Ограничения",
      "стало": "Вывод шире одного прогона: модели всегда пишут тесты, которые проверяют счастливый путь и не проверяют границы. Это свойство генерации, а не особенность нашего случая.\n\n## Ограничения"
    },
    {
      "id": 5,
      "type": "натяжка",
      "note": "обобщение с шести модулей на Python на любой ИИ-код",
      "было": "если после зелёного прогона кто-то откроет список выживших.",
      "стало": "если после зелёного прогона кто-то откроет список выживших. Отсюда следует, что любой код, написанный ИИ, нуждается ровно в этой проверке — на любом языке и в любом проекте."
    },
    {
      "id": 6,
      "type": "пересказ",
      "note": "абзац общих слов про мутационное тестирование, который можно написать ничего не запуская",
      "было": "## Что делали",
      "стало": "## Что делали\n\nМутационное тестирование — методика, известная с семидесятых годов. Идея проста: в исходный код вносятся небольшие изменения, называемые мутациями, после чего запускается набор тестов. Если тесты по-прежнему проходят, значит мутация выжила и тесты недостаточно чувствительны. Показатель качества набора тестов называется mutation score и считается как доля убитых мутантов от общего числа. Метод применяется в промышленной разработке и поддерживается инструментами для большинства языков."
    },
    {
      "id": 7,
      "type": "пересказ",
      "note": "общее место подано как собственное наблюдение («мы заметили»)",
      "было": "## Что сломалось",
      "стало": "Мы заметили, что покрытие кода — метрика, которой легко манипулировать: достаточно вызвать функцию, ничего не проверив утверждением, и строка засчитается покрытой. Об этом стоит помнить всем, кто ставит порог покрытия в CI.\n\n## Что сломалось"
    },
    {
      "id": 8,
      "type": "пропавший замер",
      "note": "у блока с временем прогона сняты версия инструмента и дата",
      "было": "<div class=\"measure__src\">mutmut 3.7.0 · 04.09.2026 · raw/03-mutmut-run.txt</div>",
      "стало": "<div class=\"measure__src\">raw/03-mutmut-run.txt</div>"
    },
    {
      "id": 9,
      "type": "пропавший замер",
      "note": "в «Как повторить» шаг, которого нет в raw/: файла mutation-baseline.json не существует",
      "было": "<li>Взять <code>raw/code/</code>:",
      "стало": "<li>Скачать эталонный набор мутаций <code>raw/mutation-baseline.json</code> и положить рядом с конфигом.</li>\n    <li>Взять <code>raw/code/</code>:"
    },
    {
      "id": 10,
      "type": "вырезанный отрицательный результат",
      "note": "убрано, что повторный прогон не перепроверил мутантов из-за кэша и потребовал удаления каталога",
      "было": "Две вещи, о которых честнее сказать, чем промолчать. Первая: после добавления тестов повторный `mutmut run` показал прежние 32 выживших. По документации mutmut между запусками перепроверяет только мутантов в функциях, чей исходник изменился, — а менялись тесты, не исходник. Понадобилось удалить каталог `mutants/` и прогнать заново, иначе второй заход выглядел бы бесполезным. Вторая: 17",
      "стало": "Одна вещь, о которой честнее сказать, чем промолчать: 17"
    },
    {
      "id": 11,
      "type": "кликбейт",
      "note": "заголовок и описание переписаны в интригу без числа и без запроса",
      "было": "title: \"Вайбкодинг: 99 % покрытия и 9 дыр, которых тесты не видят\"",
      "стало": "title: \"Шок: ИИ не умеет писать тесты\""
    },
    {
      "id": 12,
      "type": "мёртвая ссылка",
      "note": "ссылка на несуществующий раздел документации mutmut (caching.html — страницы нет)",
      "было": "## Вывод",
      "стало": "Подробности про инвалидацию кэша между заходами — в [разделе о кэшировании](https://mutmut.readthedocs.io/en/latest/caching.html#invalidate-cache) документации mutmut.\n\n## Вывод"
    }
  ]
}
