Вопрос или проблема
У меня есть проект MSTest с классами тестов и методами тестов. Некоторые из тестов игнорируются из-за неудобных системных требований. Несмотря на это, кажется, что тесты выполняются.
Это проявляется в том, что игнорируемые тесты, если системные требования не выполнены, создают MessageBox для предупреждения пользователя и рекомендованных действий. Эти MessageBox появляются при запуске определенных тестов из интерфейса Visual Studio. Я пытался запустить тесты в режиме отладки и установил точки останова в местах появления MessageBox, но отладчик там не останавливается, хотя MessageBox появляются и выполняются по какой-то причине. Добавив трассировку стека к MessageBox, я вижу, что игнорируемый метод теста является источником вызова.
Есть ли что-то концептуальное в MSTest, что я упускаю, что могло бы объяснить, почему игнорируемые и невыбранные тесты начинают выполняться?
Резюме для размышлений:
- Я мог бы попробовать закомментировать или использовать #ifdef для атрибута метода теста, чтобы обойти проблему, вместо того чтобы добавлять атрибут Ignored. Вопрос остается открытым.
- Не припомню, ведут ли себя Traits/TestCategories так же. Проверьте и обновите.
- В дополнение к трассировке стека у проблемного теста мне стоит проверить PID. Проверьте и обновите.
- Проверьте и добавьте версии MSTest и Visual Studio в пост.
Ответ или решение
Ваша проблема с MSTest, в которой игнорируемые тесты запускаются, может быть вызвана несколькими факторами, и я постараюсь рассмотреть основные из них в ответе.
Понимание игнорируемых тестов
В MSTest у вас есть возможность пометить тесты как игнорируемые с помощью атрибута [TestMethod] вместе с [Ignore]. Это должно предотвратить выполнение этих тестов и, соответственно, появление любых сообщений или действий, связанных с ними. Тем не менее, если игнорируемые тесты все равно вызывают выполнение какого-либо кода (например, показывают MessageBox), это может быть обусловлено следующими причинами:
-
Логика в тестах: Проверьте, действительно ли игнорируемые тесты имеют атрибут
[Ignore]. Иногда при тестировании также можно использовать условные операторы, которые могут приводить к выполнению кода, даже если тест помечен как игнорируемый. -
Место, где вызываются MessageBox: Если тест содержит код, который выполняется независимо от статуса теста (например, в статическом конструкторе класса или в методах, которые вызываются в сценариях инициализации), это может привести к тому, что MessageBox будет отображаться.
- Ошибки конфигурации: Убедитесь, что ваши файлы конфигурации не содержат настроек, которые могут изменять поведение тестов. Возможно, у вас есть специальная логика управления тестами, которая запускает их в зависимости от других условий.
Как можно это исправить
-
Проверьте атрибуты: Убедитесь, что ваши тестовые методы имеют правильные атрибуты. Используйте
[Ignore("Причина игнорирования")]для игнорируемых тестов. -
Измените логику тестов: Если у вас есть код, вызывающий MessageBox, возможно, вам стоит перенести его в отдельный метод, который может быть вызван только при выполнении теста, а не в других местах.
-
Логи и отладка: Добавьте дополнительный журнал (логирование) в ваши тесты для отслеживания их выполнения. Это поможет вам понять, какие именно тесты выполняются и почему.
-
Анализ кода: Запустите анализатор кода, чтобы проверить наличие нежелательных вызовов или зависимостей, которые могут приводить к запуску игнорируемых тестов.
- Проверка версий: Убедитесь, что вы используете последнюю версию MSTest и Visual Studio. Иногда проблемы могут быть вызваны ошибками, которые уже исправлены в более новых релизах.
Дополнительные рекомендации
- Если проблема не решается, возможно, имеет смысл создать минимальный пример, который воспроизводит поведение, и обратиться за помощью на форумы или в поддержку Microsoft.
- Обратите внимание на то, как используются атрибуты группировки тестов (Traits/TestCategories) — они не должны влиять на игнорирование, но лучше это проверить.
Если вы продолжите сталкиваться с проблемами, пожалуйста, уточните, какие действия вы уже сделали, и предоставьте дополнительную информацию о версии используемых инструментов, чтобы можно было лучше помочь вам.