Доклад Якова Краманенко на конференции SQA Days-18, 27-28 ноября 2015 г., Москва www.sqadays.com

1. Вам не нужен
Автоматизатор!

3. Нет:p

4. Нет:p

5. если знать как её
готовить;)
Нет:p

6. Но всему свое время:)

7. Начнем сначала…

8. Продукт

9. Шушпанчики

10. Юз кейсы (черновик)
Деревья
шпят
едят
бегают
висят
Норы
шпят
едят
бегают
During All
activities:
шуршпанят
Особенные случаи:
GIVEN шпят
WHEN есть кто за 2 метра
THEN становятся
невидимыми
Переходы:
деревья > норы
деревья < норы

11. Деревья
шпят *
едят *
бегают *
висят *
Норы
шпят *
едят *
бегают *
During All
activities:
шуршпанят
Особенные случаи:
GIVEN шпят
WHEN есть кто за 2 метра
THEN становятся
невидимыми
Переходы:
деревья > норы *
деревья < норы *
Выбираем высокоприоритетные
“фичи”

12. Деревья
шпят *
едят *
бегают *
висят *
Норы
шпят *
едят *
бегают *
Переходы:
деревья > норы *
деревья < норы *
Что бы автоматизировать в первую очередь
и побыстрей (Smoke)

13. Сценарий (End to End)
перебежать в нору
побегать
перебежать на дерево
повисеть
поесть
перебежать в нору
пошпать

14. Деревья
шпят
едят e
бегают
висят e
Норы
шпят e
едят
бегают e
During All
activities:
шуршпанят
Особенные случаи:
GIVEN шпят
WHEN есть кто за 2 метра
THEN становятся
невидимыми
Переходы:
деревья > норы e
деревья < норы e
Прослеживаем покрытие

15. Коробит?

16. будь DRY ;)
Улучшаем наглядность
будь DRY

17. ДействияКонтексты Норы Деревья шуршпанят?
побегать !!e ! !
повисеть - !!e !
поесть !! !!e !
пошпать !!e !! !
- невидимым ? !! !
Переходы:
норы > деревья e
норы < деревья e

18. ДействияКонтексты Норы Деревья шуршпанят?
побегать !!e ! !
повисеть - !!e !
поесть !! !!e !
пошпать !!e !! !
- невидимым ? !! !
Переходы:
норы > деревья e
норы < деревья e
Дыра в покрытии

19. E2E тест одной Фичи
перебежать на дерево
пошпать невидимым
перебежать в нору
побегать
перебежать на
дерево
повисеть
поесть
перебежать в нору
пошпать
Заканчиваем Smoke покрытие

20. E2E тест одной Фичи
перебежать на
дерево
пошпать невидимым
проверить
шуршпание
Используем момент для увеличения покрытия
перебежать в нору
побегать
перебежать на
дерево
повисеть
поесть
перебежать в нору
пошпать

21. ДействияКонтексты Норы Деревья шуршпанят?
побегать !!e ! !
повисеть - !!e !
поесть !! !!e !
пошпать !!e !! !
- невидимым ? !!f !f
Переходы:
норы > деревья e
норы < деревья e

22. ДействияКонтексты Норы Деревья шуршпанят?
побегать !!e !f !f
повисеть - !!e !f
поесть !!f !!e !f
пошпать !!e !!f !f
- невидимым ? !!f !f
Закончили Smoke? - Переходим к полному
(приемочному) покрытию с помощью фиче-
тестов

23. Советы: покрываем
функциональные юз-кейсы
высокого приоритета,
(пользователь будет использовать регулярно)

24. Советы: НЕ покрываем
низко-приоритетные проверки
проверки “всех возможных вариаций”

25. ДействияКонтексты Норы Деревья шуршпанят?
побегать !!e !f !f
повисеть - !!e !f
поесть !!f !!e !f
пошпать !!e !!f !f
- невидимым ? !!f !f
Нет низко-приоритетным проверкам

26. ДействияКонтексты Норы Деревья шуршпанят?
побегать !!e !f !f
- быстро
- медленно
повисеть - !!e !f
- низко
- высоко
поесть !!f !!e !f
- много
- мало
пошпать !!e !!f !f
Нет проверкам “всех возможных вариаций”

27. ДействияКонтексты Норы Деревья шуршпанят?
побегать !!e !f !f
- быстро
- медленно
повисеть - !!e !f
- низко
- высоко
поесть !!f !!e !f
- много
- мало
пошпать !!e !!f !f
Должны быть покрыты на уровне юнит тестов
разные вариации
одной “функции”
(дающие тот же
“user flow” )

28. Мы здесь =>
=> Только:
функциональны
е
юз-кейсы
высокого
приоритета
разные вариации
одной “функции”
Здесь =>

29. Избегаем =>
переносим
дополнительные
требования такие как
“разные типы даных”,
и другие “вариации функций”,
и т. д. …
<= в
=> из

30. Где код?

31. Спокойствие и только
спокойствие:)

32. Product
От

33. Product
До

34. Действия
бегать, висеть,
есть, шпать
создать, редактировать, удалить,
переключить (активная/завершенная),
переключить все
Контексты
норы, деревья
фильтры:
все, активные, завершенные

35. Действия
бегать, висеть,
есть, шпать
create, edit, delete, toggle, toggle all
Контексты
норы, деревья
фильтры:
all, active, completed

36. Одно и то же ;)

37. Сценарий (End to End)
перебежать в нору
побегать
перебежать на дерево
повисеть
поесть
перебежать в нору
пошпать

38. Сценарий (End to End)
given at todomvc
add "a"
toggle "a"
filter active
filter completed
edit "a" to "a edited"
toggle "a edited"
…

39. Добавляем ожидаемые результаты
given at todomvc
add "a"
toggle "a"
filter active
assert no tasks
filter completed
edit "a" to "a edited"
toggle "a edited"
assert no tasks
…

40. given at todomvc
add "a"
toggle "a"
filter active
assert no tasks
filter completed
edit "a" to "a edited"
toggle "a edited"
assert no tasks
…
Часто можем оставить “неявные” проверки

41. Демо

42. Начнем же кодить ;)
given at todomvc
add "a"
toggle "a"
filter active
assert no tasks
filter completed
edit "a" to "a edited"
toggle "a edited"
assert no tasks
…

43. Помогаем компьютеру понять код (на Java)
givenAtTodoMVC();
add("a");
toggle("a");
filterActive();
assertNoTasks();
filterCompleted();
edit("a", "a edited");
toggle("a edited");
assertNoTasks();
//…

44. public class TodoMVCTest {
@Test
public void testTasksLifeCycle(){
givenAtTodoMVC();
add("a");
toggle("a");
filterActive();
assertNoTasks();
filterCompleted();
edit("a", "a edited");
toggle("a edited");
assertNoTasks();
//...
}
}

45. public class TodoMVCTest {
@Test
public void testTasksLifeCycle(){
givenAtTodoMVC();
add("a");
toggle("a");
filterActive();
assertNoTasks();
filterCompleted();
edit("a", "a edited");
toggle("a edited");
assertNoTasks();
//...
}
}
?

46. public static void givenAtTodoMVC(){
open("https://todomvc4tasj.herokuapp.com/");
newTask.shouldBe(enabled);
}
givenAtTodoMVC();

47. public static SelenideElement newTask = $("#new-todo");
newTask
CSS Selector

48. CSS Selector ?

54. [id=“new-todo"] <=> #new-todo

55. public static SelenideElement newTask = $("#new-todo");
newTask
[id=“new-todo"] <=> #new-todo

56. public static void add(String taskText) {
newTask.setValue(taskText).pressEnter();
}
add("a");

57. public static void toggle(String taskText) {
tasks.findBy(exactText(taskText)).$(".toggle").click();
}
toggle("a");

58. public static void toggle(String taskText) {
tasks.findBy(exactText(taskText)).$(".toggle").click();
}
toggle("a");

59. public static ElementsCollection tasks = $$("#todo-list>li");
tasks

60. public static ElementsCollection tasks = $$("#todo-list>li");
tasks

62. public static void toggle(String taskText) {
tasks.findBy(exactText(taskText)).$(".toggle").click();
}
toggle("a");

64. public static void filterActive(){
$(By.linkText("Active")).click();
}
filterActive();

65. By.linkText("Active")

66. public static void assertNoTasks() {
tasks.filterBy(visible).shouldBe(empty);
}
assertNoTasks();

67. tasks.filterBy(visible).shouldBe(empty);

68. public class TodoMVCTest {
@Test
public void testTasksLifeCycle(){
givenAtTodoMVC();
add("a");
toggle("a");
filterActive();
assertNoTasks();
filterCompleted();
edit("a", "a edited");
toggle("a edited");
assertNoTasks();
//...
}
}

69. open("https://todomvc4tasj.herokuapp.com/");
newTask.shouldBe(enabled);
newTask = $("#new-todo");
tasks = $$("#todo-list>li");
newTask.setValue("a").pressEnter();
tasks.findBy(exactText("a")).$(".toggle").click();
$(By.linkText("Active")).click();
tasks.filterBy(visible).shouldBe(empty);

70. Просто?

71. End to End Юнит/1-фича-на-тест
Стиль тестов
перебежать на дерево
пошпать невидимым
перебежать в нору
побегать
перебежать на дерево
повисеть
поесть
перебежать в нору
пошпать

72. public void testFiltering(){
givenAtTodoMVC();
add("a");
toggle("a");
filterActive();
assertNoTasks();
filterCompleted();
edit("a", "a edited");
toggle("a edited");
assertNoTasks();
//...
}
public void testDelete(){
givenAtTodoMVC();
add("a");
delete("a");
assertNoTasks();
}
End to End Юнит/1-фича-на-тест
Стиль тестов

73. End to End
Плюсы
+ больше покрытия
за меньшее время
с меньшими усилиями во
время реализации POC для
фреймворка
+ интеграционное покрытие
+ в случае багов, дают
более полный
репорт
+ с репортах проще
идентифицировать
проблему
=>
+ меньше времени и
усилий на саппорт
“Фиче-тесты”

74. End to End
Когда использовать?
+ в начале, во время разработки
POC для фреймворка
+ в спешке, для покрытия как
можно большего количества
фич
+ для “черновиков”
+ для интеграционного
покрытия
+ для новых фич
+ на регулярной
основе, когда POC
утвержден
“Фиче-тесты”

75. Разве это было сложно? :)

76. Простые инструменты?

77. Easy tools?
Java: Selenide
Python: Selene is coming…
C#: NSelene is coming…
Ruby: Capybara
? JavaScript: Protractor
? PHP: Codeception

78. Как начать?
Выбрать язык
Выучить язык (книги, интерактивные туториалы, koans,
exercism.io, google.com, другое)
Выбрать “простые инструменты”
Найти ментора (друг, программист на проекте, it-чаты, форумы,
другое…)
Вперед!

79. Как выбрать язык?
Есть проект?
=> язык на котором пишут разработчики (бекенд)
Нет проекта но нужно побыстрее найти работу?
=> самый популярный язык на рынке
Нет проекта, не важна скорость нахождения работы,
важно удовольствие от процесса программирования?
=> язык который подходит вам по стилю

80. Нет простого инструмента для нужного
языка?
Недостаточно опыта?
=> попросить программистов помочь
Есть опыт/время?
=> реализовать самому

81. Послесловие
Есть хорошие практики в контексте,
но нет самых лучших практик.
(c) Cem Kaner, James Bach

82. Вопросы

83. Спасибо
github.com/yashaka
youtube.com/c/ItlabsNetUa
gitter.im/yashaka/better-selenium
slideshare.net/yashaka
yashaka@gmail.com@yashaka