O mercado tem exigido cada vez mais rapidez nas entregas dos times de desenvolvimento, para atender as demandas de negócio e manter a competitividade. Para garantir que essas entregas aconteçam no tempo esperado e com qualidade, é muito importante investir em todos os níveis de teste automatizados. Vamos ver quais são esses níveis de teste e alguns exemplos práticos usando Python de testes unitários, integração, funcionais, performance e mutação.

1. Importância de testes
automatizados para sustentar
Continuous Delivery e DevOps
@samantacicilia

2. Sobre mim
Importância de Testes Automatizados
Quadrante de Testes
Pirâmide de Testes & Antipadrões
Tipos de Teste & Continuous Delivery
Demo
Referências
@samantacicilia

3. Sobre mim
@samantacicilia

6. insideoutproject.com.br

7. Mulheres Palestrantes
http://insideoutproject.com.br/mulheres-palestrantes

9. Importância de Testes
Automatizados
@samantacicilia

11. Testes automatizados?

12. Testes automatizados?
- Feedback rápido;

13. Testes automatizados?
- Feedback rápido;
- Menos passível de erro de execução;

14. Testes automatizados?
- Feedback rápido;
- Menos passível de erro de execução;
- Executar testes automatizados no decorrer do pipeline ++ qualidade;

15. Testes automatizados?
- Feedback rápido;
- Menos passível de erro de execução;
- Executar testes automatizados no decorrer do pipeline ++ qualidade;
- Melhoria Contínua na Estratégia de Testes;

16. Testes automatizados?
- Feedback rápido;
- Menos passível de erro de execução;
- Executar testes automatizados no decorrer do pipeline ++ qualidade;
- Melhoria Contínua na Estratégia de Testes;
- Testes = especificação executável do comportamento do sistema;

17. Testes automatizados?
- Feedback rápido;
- Menos passível de erro de execução;
- Executar testes automatizados no decorrer do pipeline ++ qualidade;
- Melhoria Contínua na Estratégia de Testes;
- Testes = especificação executável do comportamento do sistema;
- Feedback, Feedback, Feedback;

18. Quadrante de Testes
@samantacicilia

19. @samantacicilia

20. Pirâmide de Testes
@samantacicilia

21. @samantacicilia

22. @samantacicilia

23. Antipadrões
@samantacicilia

24. @samantacicilia

25. @samantacicilia

26. Tipos de Teste &
Continuous Delivery
@samantacicilia

27. Testes Unitários
@samantacicilia

28. Testes Unitários
@samantacicilia

29. Testes Unitários
@samantacicilia
- Feedback extremamente rápido;

30. Testes Unitários
@samantacicilia
- Feedback extremamente rápido;
- 10-minute build (eXtreme Programming);

31. Testes Unitários
@samantacicilia
- Feedback extremamente rápido;
- 10-minute build (eXtreme Programming);
- Testes de valores limite, diferentes combinações, excessões…

32. Testes Unitários
@samantacicilia
- Feedback extremamente rápido;
- 10-minute build (eXtreme Programming);
- Testes de valores limite, diferentes combinações, excessões…
- Cobertura de Código;

33. Testes Unitários
@samantacicilia
- Feedback extremamente rápido;
- 10-minute build (eXtreme Programming);
- Testes de valores limite, diferentes combinações, excessões…
- Cobertura de Código;
- Segurança para fazer mudanças (eXtreme Programming);

34. Testes Unitários
@samantacicilia
- Feedback extremamente rápido;
- 10-minute build (eXtreme Programming);
- Testes de valores limite, diferentes combinações, excessões…
- Cobertura de Código;
- Segurança para fazer mudanças (eXtreme Programming);
- Qualidade também nos testes unitários!

35. Testes Unitários
@samantacicilia
- Feedback extremamente rápido;
- 10-minute build (eXtreme Programming);
- Testes de valores limite, diferentes combinações, excessões…
- Cobertura de Código;
- Segurança para fazer mudanças (eXtreme Programming);
- Qualidade também nos testes unitários!
- Test Driven Development;

36. Testes Unitários
@samantacicilia
- Feedback extremamente rápido;
- 10-minute build (eXtreme Programming);
- Testes de valores limite, diferentes combinações, excessões…
- Cobertura de Código;
- Segurança para fazer mudanças (eXtreme Programming);
- Qualidade também nos testes unitários!
- Test Driven Development;
- Design de Código que permita testes;

37. Testes Unitários
@samantacicilia
- Feedback extremamente rápido;
- 10-minute build (eXtreme Programming);
- Testes de valores limite, diferentes combinações, excessões…
- Cobertura de Código;
- Segurança para fazer mudanças (eXtreme Programming);
- Qualidade também nos testes unitários!
- Test Driven Development;
- Design de Código que permita testes;
- Mocks;

38. Ferramentas
@samantacicilia

39. Links das Ferramentas
@samantacicilia
- http://junit.org/junit4/
- http://www.nunit.org/
- http://testng.org/doc/index.html
- https://phpunit.de/
- http://jasmine.github.io/
- https://mochajs.org/
- http://robolectric.org/
- http://rspec.info/
- https://docs.python.org/2.7/library/unittest.html

40. Testes de Mutação
@samantacicilia

41. Testes de Mutação
@samantacicilia
- Testar seus Testes Unitários;

42. Testes de Mutação
@samantacicilia
- Testar seus Testes Unitários;
- Ferramenta introduz mutações no seu código e executa os testes unitários;

43. Testes de Mutação
@samantacicilia
- Testar seus Testes Unitários;
- Ferramenta introduz mutações no seu código e executa os testes unitários;
- Se os testes falharem = OK!

44. Testes de Mutação
@samantacicilia
- Testar seus Testes Unitários;
- Ferramenta introduz mutações no seu código e executa os testes unitários;
- Se os testes falharem = OK!
- Se os testes passarem = NOK!

45. Testes de Mutação
@samantacicilia

46. Ferramentas
@samantacicilia

47. Links das Ferramentas
@samantacicilia
- http://pitest.org/
- https://pypi.python.org/pypi/MutPy
- https://ninjaturtles.codeplex.com/
- http://visualmutator.github.io/web/
- https://github.com/mbj/mutant
- http://jumble.sourceforge.net/

48. Testes de Serviços
@samantacicilia

49. Testes de Serviço
@samantacicilia

50. Testes de Serviço
@samantacicilia
- Depois dos Testes de Unidade e antes dos Testes de UI;

51. Testes de Serviço
@samantacicilia
- Depois dos Testes de Unidade e antes dos Testes de UI;
- Testar seu app + módulos, componentes, banco de dados;

52. Testes de Serviço
@samantacicilia
- Depois dos Testes de Unidade e antes dos Testes de UI;
- Testar seu app + módulos, componentes, banco de dados;
- Sem interface;

53. Testes de Serviço
@samantacicilia
- Depois dos Testes de Unidade e antes dos Testes de UI;
- Testar seu app + módulos, componentes, banco de dados;
- Sem interface;
- Stubs;

54. Testes de Serviço
@samantacicilia

55. Testes de Serviço
@samantacicilia
- Integração/Componentes

56. Testes de Serviço
@samantacicilia
- Integração/Componentes
- Contratos

57. Testes de Serviço
@samantacicilia
- Integração/Componentes
- Contratos
- API/Webservices

58. Ferramentas
@samantacicilia

59. Links das Ferramentas
@samantacicilia
- https://www.soapui.org/
- https://github.com/jayway/rest-assured
- http://flask-restless.readthedocs.io/en/stable/
- http://frisbyjs.com/
- https://github.com/visionmedia/supertest
- https://github.com/svanoort/pyresttest
- https://github.com/rest-client/rest-client
- https://github.com/brooklynDev/airborne

60. Testes de UI
@samantacicilia

61. Testes Funcionais
@samantacicilia

62. Testes Funcionais
@samantacicilia
- Lentos :(

63. Testes Funcionais
@samantacicilia
- Lentos :(
- Fluxos principais da aplicação;

64. Testes Funcionais
@samantacicilia
- Lentos :(
- Fluxos principais da aplicação;
- Diferentes browsers (IE, Firefox, Chrome, Safari & Headless);

65. Testes Funcionais
@samantacicilia
- Lentos :(
- Fluxos principais da aplicação;
- Diferentes browsers (IE, Firefox, Chrome, Safari & Headless);
- Mobile;

66. Ferramentas
@samantacicilia

67. Links das Ferramentas
@samantacicilia
- http://www.seleniumhq.org/
- https://github.com/jnicklas/capybara
- http://angular.github.io/protractor/#/
- https://github.com/RobotiumTech/robotium
- http://calaba.sh/
- http://appium.io/

68. Testes de Regressão Visual
@samantacicilia
- Comparação de Imagens;

69. Testes de Regressão Visual
@samantacicilia
- Comparação de Imagens;

70. Ferramentas
@samantacicilia

71. Links das Ferramentas
@samantacicilia
- https://github.com/yahoo/kobold
- https://github.com/Huddle/PhantomCSS
- https://applitools.com/
- https://dpxdt-test.appspot.com/
- https://github.com/BBC-News/wraith
- https://github.com/xebia/VisualReview

72. Bônus
@samantacicilia

73. Testes de Performance
@samantacicilia

74. Testes de Performance
@samantacicilia
- Comportamento da aplicação diante de uma carga conhecida;

75. Testes de Performance
@samantacicilia
- Comportamento da aplicação diante de uma carga conhecida;
- Baselines;

76. Testes de Performance
@samantacicilia
- Comportamento da aplicação diante de uma carga conhecida;
- Baselines;
- Ter um ambiente para esses testes;

77. Testes de Performance
@samantacicilia
- Comportamento da aplicação diante de uma carga conhecida;
- Baselines;
- Ter um ambiente para esses testes;
- Definir as métricas;

78. Testes de Performance
@samantacicilia
- Comportamento da aplicação diante de uma carga conhecida;
- Baselines;
- Ter um ambiente para esses testes;
- Definir as métricas;
- Análise automática???

79. Ferramentas
@samantacicilia

80. Links das Ferramentas
@samantacicilia
- http://www.radview.com/pt-br/baixe-o-webload/
- https://smartbear.com/product/loadcomplete/overview/
- http://www.neotys.com/neoload/overview
- http://jmeter.apache.org/
- http://grinder.sourceforge.net/
- http://locust.io/
- http://gatling.io/
- https://www.loadui.org/

81. E Continuous Delivery?
@samantacicilia

82. Testes X Estágios
@samantacicilia

83. Testes X Estágios
@samantacicilia
- Estágio de Commit:
- Testes Unitários
- Testes de Mutação

84. Testes X Estágios
@samantacicilia
- Estágio de Commit:
- Testes Unitários
- Testes de Mutação
- Estágio de Aceite (primeiro ambiente):
- Testes de Serviço

85. Testes X Estágios
@samantacicilia
- Estágio de Commit:
- Testes Unitários
- Testes de Mutação
- Estágio de Aceite (primeiro ambiente):
- Testes de Serviço
- Estágio de Aceite (pré-produção):
- Testes de UI
- Testes de Regressão Visual
- Testes de Performance

86. Demo
@samantacicilia

87. Ruby:
- Unitário (Rspec)
- Mutação (mutant-rspec)
https://github.com/samycici/mutation_example
@samantacicilia

88. Exemplo 1

89. Exemplo 1

90. Exemplo 1

91. Exemplo 1

92. Exemplo 2

93. Exemplo 2

94. Exemplo 2

95. App em Python usando Flask:
- Unitário (unittest + fixtures)
- Integração (unittest + sqlite)
- API (pyresttest)
- Funcional (selenium)
- Performance (locust.io)
https://github.com/samycici/todoapp-flask
@samantacicilia

96. Referências
@samantacicilia

97. @samantacicilia

98. http://www.guru99.com/mutation-testing.html
http://blog.arkency.com/2015/05/mutation-testing-and-continuous-integration/
http://blog.arkency.com/2015/06/how-good-are-your-ruby-tests-testing-your-tests-with-mutant/
https://blog.blockscore.com/how-to-write-better-code-using-mutation-testing/
http://www.slideshare.net/stefanteixeira/vr-dev-summit-2016-primeiros-passos-em-automao-de-testes
http://pt.slideshare.net/fredoriginal/palestra-de-como-testar-sua-api-rest-no-grupo-de-teste-carioca
https://css-tricks.com/visual-regression-testing-with-phantomcss/
http://www.softwaretestinghelp.com/performance-testing-tools-load-testing-tools/
https://talkingabouttesting.com/2015/08/19/mao-na-massa-com-visual-review-e-protractor/
https://robots.thoughtbot.com/how-to-stub-external-services-in-tests

100. Contatos
➔ testedesoftware.com
➔ rtstreinamentos.com.br
➔ medium.com/@samantacicilia
➔ Linkedin: Samanta Cicilia
➔ Twitter: @samantacicilia
➔ Slideshare: pt.slideshare.net/samantacicilia/
➔ Email: samycici@gmail.com