Podsumowanie
Kluczowe efekty
Mniejszy nakład pracy manualnej przy tworzeniu i migracji testów firmware’u
Szybsze debugowanie i szerszy zakres testów
Utrzymanie efektywności testowania wraz z rozwojem frameworków
Zmiany w wykorzystywanych frameworkach testowych zwiększyły potrzebę wdrożenia podejścia, które pozwoliłoby szybciej przygotowywać, migrować i wykonywać testy firmware’u oraz sprawniej diagnozować problemy pojawiające się podczas ich realizacji. WS Audiology chciała również podnieść jakość testów, rozszerzyć ich zakres, uprościć utrzymanie środowiska oraz lepiej zintegrować proces testowania z potokami ciągłej integracji.
Kolejnym priorytetem było ograniczenie nakładu pracy potrzebnego do tworzenia i migracji testów przy jednoczesnym lepszym wykorzystaniu zgromadzonej wiedzy testowej. Informacje zwrotne z wykonania testów miały także wspierać ich iteracyjne doskonalenie i szybsze rozwiązywanie problemów. WS Audiology zaangażowała Sii Polska do rozbudowy frameworka opartego na Pythonie i zwiększenia jego możliwości w zakresie automatyzacji.
Rozwój bardziej skalowalnego środowiska
Sii Polska rozbudowała i usprawniła środowisko klienta do testowania. Prace objęły kilka obszarów – od rozwoju funkcji frameworka i procesów ciągłej integracji po wsparcie w diagnozowaniu błędów oraz generowanie i migrację testów z wykorzystaniem AI. Zespół dodał również testy jednostkowe i dokumentację techniczną.
Zakres projektu obejmował:
- Rozwój komponentów graficznego interfejsu użytkownika oraz skryptów pomocniczych
- Dodanie testów jednostkowych i dokumentacji technicznej
- Usprawnienie potoków ciągłej integracji w Azure DevOps
- Wsparcie w diagnozowaniu błędów w testach i analizie logów
- Budowę agentów AI do generowania i migracji testów
- Wykorzystanie generowania wspomaganego wyszukiwaniem (RAG) do korzystania ze zgromadzonej wiedzy testowej
- Włączenie iteracyjnych informacji zwrotnych z wykonania testów do procesu testowego wspieranego przez agentów AI
Bardziej elastyczne podejście do ciągłego zapewniania jakości firmware’u
Rozbudowane środowisko pozwala WS Audiology łatwiej dostosowywać proces testowania do zmian we frameworkach testowych. Usprawnienia go, wsparcie automatyzacji oraz lepsza integracja z potokami CI sprawiają również, że całe środowisko można łatwiej skalować i utrzymywać.
Klient może teraz bardziej konsekwentnie wykorzystywać zgromadzoną wiedzę oraz doskonalić wygenerowane lub zmigrowane testy na podstawie informacji uzyskanych podczas ich wykonywania. Pozwala to rozszerzać zakres testów i zwiększać pewność ciągłej walidacji firmware’u bez proporcjonalnego wzrostu nakładu pracy manualnej.
KLUCZOWE REZULTATY
- Mniejszy nakład pracy manualnej przy tworzeniu i migracji testów
- Krótszy czas diagnozowania błędów i szybsze dostarczanie zmian
- Skuteczniejsze wykorzystanie zgromadzonej wiedzy testowej
- Szerszy zakres testów firmware’u
- Łatwiejsze utrzymanie środowiska testowego
- Większa pewność ciągłej walidacji firmware’u