1. Об опыте тестирования программного компонента без UI Игорь Любин, Казань

2. Вступительное словоНемного о Казани 2

5. Программный компонентПримеры API приложений WEB-сервисы «Внутренности» приложения 5

6. Программный компонент– это чёрный ящик 6

7. Постановка задачиПроект Интернет газета с сервисами блогосферы Профили пользователей Лента новостей Блоги Друзья, Фотки Избранное … 7

8. Постановка задачиПроект развивается Профили пользователей Лента новостей Блоги Друзья, Фотки Избранное, Теги … 8 Расширяет возможности доступа

9. Постановка задачиНа проекте идет разработка 9 Появляется API (Программный компонент)

10. Постановка задачиИмеем картину Профили пользователей Лента новостей Блоги Друзья, Фотки Избранное, Теги … 10

11. Постановка задачиНавходе POST запрос 11 POST— методзапроса для передачи данных заданному ресурсу ~40 команд login / logoff blog friends favorite …

12. Постановка задачиНавходе POST запрос 12 POST— методзапроса для передачи данных заданному ресурсу ~40 команд Параметры /login?username=user@mail.ru&password=123 Пример визуализации POSТ запросав виде GET

13. Постановка задачиНавыходе JSON 13 JSON— текстовый формат обмена данными {}–объект []– массив { "ключ1":"значение1", "ключ2":"значение2" }

14. Постановка задачиНавыходе JSON 14 JSON— текстовый формат обмена данными Статус Данные { "status": 0,"data": {"id_user": 1024} }

15. Постановка задачиНадо тестировать!? Профили пользователей Лента новостей Блоги Друзья, Фотки Избранное, Теги … 15

16. Постановка задачиПочему надо тестировать API? Уверенность, что API работает Обратная совместимость API с моб. клиентом 16 Для командыразработки API

17. Постановка задачиПочему надо тестировать API? Профили пользователей Лента новостей Блоги Друзья, Фотки Избранное, Теги … 17 Для команды разработки моб. клиента Пример использования Документация

18. Постановка задачиЦель Проверить работу команд API сервиса 18

19. РешениеПрограммировать Тестовый инструмент Управление набором тестов Запуск/остановка Отчетность Конфигурирование 19

20. РешениеИнструмент должен уметь 20 Формировать запрос Проверять результат

21. РешениеОрганизация тестов Отделить тесты от инструмента 21

22. РешениеИнструмент должен уметь 22 Загружать тесты

23. РешениеОрганизация тестов 1 тест = 1 файл Следствие Управление тестами сводится к управлению файлами 23

24. РешениеОрганизация тестов 24 Формат тестов задает API

25. РешениеПример тест-кейса { "name":"Вход пользователя на сайт", "command" : "login", "input" : {"username": "user@mail.ru", "password": "123" }, "assert" : "equal", "output" : {"status": 0, "data": {"id_user": 1024} } } 25

26. РешениеФормирование POST запроса { "name" : "Вход пользователя на сайт", "command" : "login", "input" : {"username": "user@mail.ru", "password": "123" }, "assert" : "equal", "output" : { "status": 0, "data": {"id_user": 1024} } } 26 /login?username=user@mail.ru&password=123

27. РешениеПроверка результата { "name" :"Вход пользователя на сайт", "command" : "login", "input" : {"username": "user@mail.ru", "password": "123" }, "assert" : "equal", "output" : {"status": 0, "data": {"id_user": 1024} } } 27

28. РешениеПример тест-сценария { "testsuite_name" : "Название сценария", "testcases": [ { "name" : "Тест-кейс 1", "command": "login", "input" : {"username":"user@mail.ru","password":"123"}, "output" : {"status": 0, "data": []} }, { "name" : "Тест-кейс 2", "command": "logoff", "input" : {}, "output" : {"status": 0, "data": []} } ] } 28

29. РешениеТестовый инструмент 29

30. РешениеФормирование POST запроса 30

31. РешениеПроверка результата 31 array_diff_assoc($array1, $array2)

32. РешениеСхема тестового инструмента 32

33. РешениеЛог 20.06.2010 06:15:49 Run test case: Вход пользователя Request: /login?username=user@mail.ru&password=123 20.06.2010 06:15:50 End test case. Response: {"status":0,"data":{"id_user":1024}} 20.06.2010 06:15:50TEST PASSED 33

34. РешениеЛог 20.06.2010 06:15:49 Run test case: Вход пользователя Request: /login?username=user@mail.ru&password=123 20.06.2010 06:15:50 End test case. Response: {"status":1,"data":[]} 20.06.2010 06:15:50TEST FAILED Expected: {"status":0,"data":{"id_user":1024}} Разница cur-exp:[status => 1] Разница exp-cur:[status => 0] 34

35. РешениеЛог 20.06.2010 06:15:49 Run test case: Вход пользователя Request: /login?username=user@mail.ru&password=123 20.06.2010 06:15:50 End test case. Response: {"status":0,"data":{"id_user":1024}} 20.06.2010 06:15:50TEST PASSED ... ********************************** Time: 268 sec. Tests: 199, Passed: 191, Failed: 8 ********************************** 35

36. РезультатСтатистика 36 1 д. = 8 ч.

37. Другие примерыПроект экстрактор 37

38. Другие примерыПроект сбора статистики 38

39. РезультатРезюмируем 39

40. Спасибо за внимание!Вопросы? igor.lyubin ilyubin@yandex.ru ap-test-team.blogspot.com 40