Серебряная пуля автоматизированного тестирования
DESCRIPTION
SQA Days 11. День 1. Секция А. Наталья Руколь Лаборатория Качества Москва, Россия Игорь Любин Undev.ru Москва, РоссияTRANSCRIPT
![Page 1: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/1.jpg)
Совершено убийство
![Page 2: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/2.jpg)
Потерпевший:
• Стартап
• Частные инвестиции
• 14 месяцев разработки
• 9 разработчиков, РМ, 6 тестировщиков
• Ни одного клиента
• Закончилось финансирование
Причина смерти:
Острая Финансовая Недостаточность
![Page 3: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/3.jpg)
Расследование ведут:
![Page 4: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/4.jpg)
Собираем улики
![Page 5: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/5.jpg)
Куда потратили деньги?
• 46% - разработка
• 19% - RnD
• 27% - отладка
• 37% - тестирование
• 24% - автоматизация тестов
• 13% - ручное тестирование
• 11% - реклама
• 6% - орграсходы
![Page 6: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/6.jpg)
Куда потратили деньги?
• 46% - разработка
• 19% - RnD
• 27% - отладка
• 37% - тестирование
• 24% - автоматизация тестов
• 13% - ручное тестирование
• 11% - реклама
• 6% - орграсходы
![Page 7: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/7.jpg)
Проведём допрос!
![Page 8: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/8.jpg)
Я не убивал проект!
• Я работал по 12 часов и написал более 600 тестов!
• Мы сами написали отличный фреймворк.
• Из-за изменений в продукте приходилось часто менять тесты.
• Сейчас у меня всё готово, осталось только баги исправить!
Автоматизатор
![Page 9: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/9.jpg)
Я не убивал проект!
• У нас были автотесты, в стартапах это необходимо
• Эффективность автотестов доказана KPI
• Для автоматизации отбирались наиболее приоритетные тесты
• Мы каждый месяц увеличивали покрытие на 15%
Тест-менеджер
![Page 10: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/10.jpg)
Менеджер проекта
Ух ты!!! У нас были
автотесты???
![Page 11: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/11.jpg)
Зачем начали автоматизировать тесты? Ну не манки-тестингом
же заниматься?! Автотесты – всегда
инвестиция!
![Page 12: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/12.jpg)
Зачем начали автоматизировать тесты? Ну не манки-тестингом
же заниматься?! Автотесты – всегда
инвестиция!
Для повышения качества продукта и
эффективности тестирования
![Page 13: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/13.jpg)
Зачем начали автоматизировать тесты? Ну не манки-тестингом
же заниматься?! Автотесты – всегда
инвестиция!
Для повышения качества продукта и
эффективности тестирования
Ээээ…. Это тестировщики
решали…
![Page 14: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/14.jpg)
Что дала автоматизация тестов? Это к менеджерам, я
сделал всё что сказали
![Page 15: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/15.jpg)
Что дала автоматизация тестов? Это к менеджерам, я
сделал всё что сказали
![Page 16: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/16.jpg)
Что дала автоматизация тестов? Это к менеджерам, я
сделал всё что сказали
Ну эээ… Судя по провалу проекта,
ничего?
![Page 17: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/17.jpg)
Как отбирали тесты? Через одно место отбирали! Самые
сложные в реализации! И всё время менялись…
![Page 18: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/18.jpg)
Как отбирали тесты? Через одно место отбирали! Самые
сложные в реализации! И всё время менялись…
Самые важные для пользователя, мы с
первого дня стремились достичь полного покрытия!!!
![Page 19: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/19.jpg)
Как отбирали тесты? Через одно место отбирали! Самые
сложные в реализации! И всё время менялись…
…
Самые важные для пользователя, мы с
первого дня стремились достичь полного покрытия!!!
![Page 20: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/20.jpg)
Everybody lies?!
![Page 21: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/21.jpg)
Нет цели: Зачем автотесты? Нет общего понимания Нет стратегического видения
![Page 22: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/22.jpg)
Anti-Monkey: Автоматизировали без ручного тестирования Непонимание пользователя и продукта Пропуск ошибок из-за незнания продукта Задержки в разработке из-за нехватки знаний
![Page 23: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/23.jpg)
Нечёткие задачи: Хочу автотесты!!! Приоритетов нет… Не смогли договориться Вы же профи и сами знаете как надо Недостаточно квалификации
![Page 24: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/24.jpg)
Пустые обещания: Да тут дел на пару дней! Риски? Нет, не слышал. Когда-то тесты всё равно окупятся
![Page 25: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/25.jpg)
Нет процесса: Перекладывание ответственности, не обсудили роли Нет окружений, условий, инструментов Автоматизировали нестабильный продукт
![Page 26: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/26.jpg)
Тюнинг незрелых решений: Много окружений Запуски каждый коммит «Рюшечки» в отчётах
![Page 27: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/27.jpg)
Большие запросы: Полное покрытие ручных тестов Много окружений, регулярный запуск Прогибались под пользователя
![Page 28: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/28.jpg)
Изобрели велосипед: Свой фреймворк, Автозапуск, Отчётность…
![Page 29: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/29.jpg)
Изменения: Не узнали что будет меняться Не доносили информацию об изменениях вовремя Не договорились о стабильности интерфейса
![Page 30: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/30.jpg)
Инженерные ошибки: Не провели анализ инструментов Нет Code Review и Coding Guidelines Разработка на языке продукта! Недостаточное логгирование
![Page 31: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/31.jpg)
Молчание: Не рассказывали про продукт Не говорили про высокоуровневые планы Не предоставляли необходимую информацию
![Page 32: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/32.jpg)
Аутичность: Ничего не спрашивали Не предупреждали о сдвигах сроков Не рассказывали о проблемах
![Page 33: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/33.jpg)
Виновный найден:
![Page 34: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/34.jpg)
Виновный найден: незрелый подход к автоматизации
![Page 35: Серебряная пуля автоматизированного тестирования](https://reader033.vdocuments.site/reader033/viewer/2022042714/54c2e5f54a7959896c8b45b8/html5/thumbnails/35.jpg)
Здоровья вашим проектам!