AZ-400 · Strategia testów w potokach
Projektowanie strategii testów dla potoków
Najważniejsze
- Piramida testów: dużo szybkich jednostkowych, mniej integracyjnych, najmniej wolnych UI.
- Shift left: szybkie testy lokalnie i przy każdym PR; cięższe później w środowisku testowym z danymi syntetycznymi lub maskowanymi.
- Testy obciążeniowe i wydajnościowe przed wydaniem.
- Azure Load Testing: URL, Apache JMeter lub Locust; kryteria niepowodzenia: czas odpowiedzi, odsetek błędów.
- Flaky: izoluj, napraw lub kwarantanna, nie ponawiaj do skutku.
Źródło: https://learn.microsoft.com/en-us/azure/app-testing/load-testing/overview-what-is-azure-load-testing
Przykładowe pytania
Które dwa frameworki testowe oparte na skryptach obsługuje Azure Load Testing?
- Apache JMeter i Locust
- Selenium i Playwright
- JUnit i NUnit
- Gatling i k6
Pokaż odpowiedź
Odpowiedź: A. Apache JMeter i Locust
Azure Load Testing uruchamia skrypty Apache JMeter i Locust (oraz szybkie testy oparte na URL). Selenium i Playwright to narzędzia do automatyzacji UI, a Gatling i k6 nie są obsługiwanymi formatami skryptów.
Które praktyki są przykładami przesuwania testów w lewo (shift left)?
- Programiści uruchamiają testy jednostkowe lokalnie przed pushem.
- Build pull requesta uruchamia testy jednostkowe przed scaleniem.
- Build PR uruchamia też analizę statyczną i skanowanie zależności.
- Testy obciążeniowe są odkładane na po wydaniu produkcyjnym.
- Zestaw UI jest uruchamiany ręcznie raz na kwartał.
Pokaż odpowiedź
Odpowiedź: A. Programiści uruchamiają testy jednostkowe lokalnie przed pushem., B. Build pull requesta uruchamia testy jednostkowe przed scaleniem., C. Build PR uruchamia też analizę statyczną i skanowanie zależności.
Uruchamianie testów przed pushem, walidacja każdego pull requesta buildem i analiza statyczna w tym samym buildzie przyspieszają informację zwrotną. Odkładanie testów obciążeniowych na po wydaniu lub ręczne testy UI raz na kwartał robią coś odwrotnego.
Prawda czy fałsz: automatyczne ponawianie niestabilnego testu do skutku to dobre rozwiązanie na dłuższą metę.
Pokaż odpowiedź
Odpowiedź: Fałsz
Fałsz. Ponawianie ukrywa przyczynę (współdzielony stan, czas, środowisko) i spowalnia potok. Test należy naprawić, odizolować lub poddać kwarantannie i śledzić jako defekt.
Przećwicz 8 pytań z tego tematu w Bitzu
Krótkie lekcje, natychmiastowe wyjaśnienia i powtórki tego, w czym się mylisz. Za darmo na iOS i Androida.
