Разделы презентаций
- Разное
- Английский язык
- Астрономия
- Алгебра
- Биология
- География
- Геометрия
- Детские презентации
- Информатика
- История
- Литература
- Математика
- Медицина
- Менеджмент
- Музыка
- МХК
- Немецкий язык
- ОБЖ
- Обществознание
- Окружающий мир
- Педагогика
- Русский язык
- Технология
- Физика
- Философия
- Химия
- Шаблоны, картинки для презентаций
- Экология
- Экономика
- Юриспруденция
UI тесты мобильных приложений: ожидание и реальность
Содержание
- 1. UI тесты мобильных приложений: ожидание и реальность
- 2. О чем Основные виды автотестов и принципы
- 3. ПродуктыDIRECTUM, DirectumRX;веб-сервер NOMAD;мобильные приложения DIRECTUM Solo, DIRECTUM Jazz.
- 4. Пирамида автоматизации тестирования
- 5. Слайд 5
- 6. Антипаттерн
- 7. Виды тестирования на примере наших продуктов
- 8. ИнтеграционноеПроверяют взаимодействие веб-сервиса с СЭД через API.Имитируется работа клиентского приложения.
- 9. Сквозное тестированиеЧерез UI приложения обращаются к веб-сервису.Веб-сервис взаимодействует с СЭД.Имитируется полноценная работа конечного пользователя.
- 10. Зачем нам АТ мобильных приложений
- 11. Зачем нам АТ мобильных приложенийПокрыть АТ основные кейсы приложенияУменьшить количество багов на регрессии
- 12. Текущие целиУменьшение количества ручных регрессионных тестовРаннее нахождение багов в стабильной функциональностиПроверка UI
- 13. Когда пора внедрять АТЕсть стабильная функциональностьЕсть понимание,
- 14. Автотесты мобильных приложений. ОжиданияТестируют UIБольшое покрытие конфигурацийМассмаркет, частые релизы
- 15. Наши автотесты. РеальностьПрогоняются раз в деньЛокальноНа двух
- 16. Xamarin.UITestфреймворк для автоматического тестирования UI;C#, NUnit;Xamarin.iOS, Xamarin.Android
- 17. Встраивание в проектiOS: NuGet пакет Xamarin Test
- 18. Принцип работыПоиск элемента (Queries)Взаимодействие с ним (Actions):Tap;Swipe;EnterText;..
- 19. Пример теста public void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong() {
- 20. Пример теста public void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong() {
- 21. Пример теста public void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong() {
- 22. Пример тестаpublic void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong() { var
- 23. Пример тестаpublic void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong() { var
- 24. Пример тестаpublic static void EnterLoginAndPassword(this AndroidApp app,
- 25. Слайд 25
- 26. REPL (read-eval-print-loop)
- 27. Немного боли
- 28. Цель – перейти в папку Outbox и выполнить в ней определенные действия
- 29. Цель – перейти в папку Outbox и выполнить в ней определенные действияПишем тест.…app.OpenFolder(Strings.ExplorerFoldersOutbox);app.Tap(Resources.Identifiers.HeaderTaskJob);…
- 30. Цель – перейти в папку Outbox и
- 31. Слайд 31
- 32. Ограничения Xamarin.UITestнет возможности запускать iOS тесты из
- 33. Автотесты в CIUnit тесты запускаются на PR;Integration
- 34. Автотесты в CIБилд в TFS
- 35. Автотесты в CIАнализ результатов в TFS
- 36. Итогписать автотесты, когда в этом есть смысл:стабильная функциональность;планы развития приложения.
- 37. Итогписать автотесты, когда в этом есть смысл;решать применением автотестов ваши проблемы;
- 38. Итогписать автотесты, когда в этом есть смысл;решать
- 39. Итогписать автотесты, когда в этом есть смысл;решать
- 40. Спасибо за внимание
- 41. Скачать презентанцию
О чем Основные виды автотестов и принципы их применения.Наш опыт автоматизации:какие у нас АТ и почему;XamarinUI.Test;как АТ внедрены в процесс разработки.
Слайды и текст этой презентации
Слайд 1UI тесты мобильных приложений: ожидание
и реальность
Устинова Анна, тимлид команды тестирования
мобильных решений DIRECTUM
Слайд 2О чем
Основные виды автотестов и принципы их применения.
Наш опыт
автоматизации:
какие у нас АТ и почему;
XamarinUI.Test;
как АТ внедрены в процесс
разработки.
Слайд 3Продукты
DIRECTUM, DirectumRX;
веб-сервер NOMAD;
мобильные приложения DIRECTUM Solo, DIRECTUM Jazz.
Слайд 8Интеграционное
Проверяют взаимодействие веб-сервиса с СЭД через API.
Имитируется работа клиентского приложения.
Слайд 9Сквозное тестирование
Через UI приложения обращаются к веб-сервису.
Веб-сервис взаимодействует с СЭД.
Имитируется
полноценная работа конечного пользователя.
Слайд 11Зачем нам АТ мобильных приложений
Покрыть АТ основные кейсы приложения
Уменьшить количество
багов на регрессии
Слайд 12Текущие цели
Уменьшение количества ручных регрессионных тестов
Раннее нахождение багов в стабильной
функциональности
Проверка UI
Слайд 13Когда пора внедрять АТ
Есть стабильная функциональность
Есть понимание, что приложение будет
развиваться дальше
Есть ресурсы (на поддержку и развитие)
Слайд 14Автотесты мобильных приложений.
Ожидания
Тестируют UI
Большое покрытие конфигураций
Массмаркет, частые релизы
Слайд 15Наши автотесты. Реальность
Прогоняются раз в день
Локально
На двух девайсах (iOS, Android)
Минимально
проверяют UI, упор на функциональность
Android ~ 40 тестов, ~ 50
минут iOS ~ 30 тестов, ~ 20 минут
Написаны с использованием Xamarin.UITest
Слайд 16Xamarin.UITest
фреймворк для автоматического тестирования UI;
C#, NUnit;
Xamarin.iOS, Xamarin.Android проекты (но поддерживает
и проекты на Objective-C / Swift и Java).
Слайд 17Встраивание в проект
iOS:
NuGet пакет Xamarin Test Cloud Agent
в метод
AppDelegate.FinishedLaunching:
#if ENABLE_TEST_CLOUD
Xamarin.Calabash.Start();
#endif
Android не требует дополнительной настройки в проекте.
Слайд 19Пример теста
public void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong()
{
var
wrongLogin = TestsSettings.UserLogin + "1";
app.EnterLoginAndPassword(wrongLogin, TestsSettings.UserPassword);
app.WaitForElement(Resources.Identifiers.ErrorMessage, "Login is incorrect, alert message wasn't shown.", TestsSettings.Delay);Assert.AreEqual(CoreResources.ErrIncorrectLoginOrPassword, ErrorMessage);
}
Слайд 20Пример теста
public void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong()
{
var
wrongLogin = TestsSettings.UserLogin + "1";
app.EnterLoginAndPassword(wrongLogin, TestsSettings.UserPassword);
app.WaitForElement(Resources.Identifiers.ErrorMessage, "Login is incorrect, alert message wasn't shown.", TestsSettings.Delay);Assert.AreEqual(CoreResources.ErrIncorrectLoginOrPassword, ErrorMessage);
}
Слайд 21Пример теста
public void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong()
{
var
wrongLogin = TestsSettings.UserLogin + "1";
app.EnterLoginAndPassword(wrongLogin, TestsSettings.UserPassword);
app.WaitForElement(Resources.Identifiers.ErrorMessage, "Login is incorrect, alert message wasn't shown.", TestsSettings.Delay);Assert.AreEqual(CoreResources.ErrIncorrectLoginOrPassword, ErrorMessage);
}
Слайд 22Пример теста
public void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong()
{
var wrongLogin = TestsSettings.UserLogin
+ "1";
app.EnterLoginAndPassword(wrongLogin,
TestsSettings.UserPassword);app.WaitForElement(Resources.Identifiers.ErrorMessage, "Login is incorrect, alert message wasn't shown.", TestsSettings.Delay);
Assert.AreEqual(CoreResources.ErrIncorrectLoginOrPassword, ErrorMessage);
}
Слайд 23Пример теста
public void ShowErrIncorrectLoginOrPassword_IfLoginIsWrong()
{
var wrongLogin = TestsSettings.UserLogin
+ "1";
app.EnterLoginAndPassword(wrongLogin, TestsSettings.UserPassword);
app.WaitForElement(Resources.Identifiers.ErrorMessage, "Login is incorrect,
alert message wasn't shown.", TestsSettings.Delay);Assert.AreEqual(CoreResources.ErrIncorrectLoginOrPassword, ErrorMessage);
}
private string ErrorMessage =>
app.Query(x => x.Marked(Resources.Identifiers.ErrorMessage)).First().Text;
Слайд 24Пример теста
public static void EnterLoginAndPassword(this AndroidApp app, string login, string
password)
{
app.WaitForElement(Resources.Identifiers.LoginEdit, TestsSettings.Delay);
app.EnterText(Resources.Identifiers.LoginEdit,
login);app.EnterText(Resources.Identifiers.PasswordEdit, password);
app.Tap(Resources.Identifiers.LoginButton);
}
Слайд 29Цель – перейти в папку Outbox и выполнить в ней
определенные действия
Пишем тест.
…
app.OpenFolder(Strings.ExplorerFoldersOutbox);
app.Tap(Resources.Identifiers.HeaderTaskJob);
…
Слайд 30Цель – перейти в папку Outbox и выполнить в ней
определенные действия
Пишем тест.
Нужные нам шаги:
app.OpenFolder(Strings.ExplorerFoldersOutbox);
app.Tap(Resources.Identifiers.HeaderTaskJob);
Запускаем локально – всё ок.
Запускаем на
стенде АТ – падает при открытии папки
Слайд 32Ограничения Xamarin.UITest
нет возможности запускать iOS тесты из Visual Studio for
Windows;
нет возможности работать с системными уведомлениями и диалогами;
нет возможности управлять
системными параметрами (сеть, интернет подключение и т.п);нет интеграции с другими приложениями на устройстве.
Слайд 33Автотесты в CI
Unit тесты запускаются на PR;
Integration тесты на ночных
сборках сервиса;
E2E тесты ежедневно по расписанию на dev-ветке.
Слайд 36Итог
писать автотесты, когда в этом есть смысл:
стабильная функциональность;
планы развития приложения.
Слайд 38Итог
писать автотесты, когда в этом есть смысл;
решать применением автотестов ваши
проблемы, например:
уменьшить количество багов на регрессии;
снизить количество ручного тестирования;
ускорить релизы;
…
Слайд 39Итог
писать автотесты, когда в этом есть смысл;
решать применением автотестов ваши
проблемы;
количество тестов, конфигураций, подход к написанию и прогону тестов зависят
от ваших целей;соблюдать принцип пирамиды при автоматизации тестирования
