ConSelenium 2024

Wstęp

Jak uratowaliśmy framework Playwright przed regresją

Zwykły bug zgłoszony twórcom Playwright zapoczątkował lawinę fascynujących wydarzeń. W tej prelekcji opowiemy o tym, jak pasja i wnikliwość testerów mogą znacząco wpływać na jakość globalnego produktu. Podzielimy się wnioskami z tej przygody, które każdy z nas może wykorzystać w swojej pracy.

Kim jesteśmy?

Krzysiek Kijas Senior Software Quality Engineer, Tech Lead, Mentor Zwycięzca ogólnopolskiego plebiscytu Ludzie Testowania 2024 (testerzy.pl) Microsoft Most Valuable Professional (MVP) profil na LinkedIn

O doświadczeniu... Jako Tech Lead odpowiada za architekturę automatów z Playwright. Z testowaniem i dbaniem o jakość oprogramowania jestem profesjonalnie związany od 2011. Nabywałem doświadczenie w wielu projektach IT z różnych domen biznesowych (transport, finanse, administracja, zarządzanie systemami). Posiadam doświadczenie praktyczne w pracy z różnymi narzędziami CI/CD (Jenkins, GitLab CI, Azure DevOps). W codziennej pracy dbam o szeroko pojętą jakość w projekcie – poczynając od projektowania testów i strategii testowania, definiowanie i usprawnianie procesów, konsultacje rozwiązań, aż po tworzenie i projektowanie architektury frameworków do testów automatycznych. Od 2014 zdobywam doświadczenie jako trener poprzez prowadzenie warsztatów dotyczących jakości, pisania testów i narzędzi wspomagających testowanie. Współtworzę inicjatywę jaktestowac.pl, gdzie od początku przygotowuje kursy i materiały dla Nowoczesnych Testerów.

Przemek Barański Senior Software Quality Engineer, Principal Engineer Zwycięzca ogólnopolskiego plebiscytu Ludzie Testowania 2024 (testerzy.pl) Microsoft Most Valuable Professional (MVP) profil na LinkedIn

O doświadczeniu... Rozwija frameworki w Playwright do testów GUI oraz API zintegrowane z procesami CI/CD Komercyjnym testowaniem oprogramowania zajmuje się od ponad 10 lat! Specjalizuje się w tematach performance i automation, które praktycznie wykorzystuje przy zapewnieniu jakości dla globalnych systemów informatycznych. Trenuje testerów od 2015, nie tylko online, ale też bezpośrednio na warsztacie, meetupie, konferencji czy uczelni. Twórca bezpłatnych treści wspomagających testerów w całej Polsce ze stawianiem swoich pierwszych kroków w różnych obszarach testowania (vlog, Git dla Testerów, Podstawy Automatyzacji). Zafascynowany technicznym rozwojem oraz upraszczaniem poznanych konceptów do łatwych i przyjemnych treści 😀 Tester nie tylko aplikacji ale i praktyk związanych z życiem, rozwojem i szeroko rozumianą jakością.

Jak wspieramy i dzielimy się wiedzą o Playwright?

• 👉 O naszym wsparciu społeczności testerskiej w temacie Playwright poczytasz na Playwright Contribution
• 👉 Jesteśmy autorami pierwszego polskiego bloga w całości o Playwright – playwright.info
• 👉 Nasz darmowy, ponad 9 godzinny darmowy kurs na YouTube o podstawach projektowania frameworka z Playwright – Praktyczne wprowadzenie do testów automatycznych z Playwright
• 👉 Nasz darmowy, ponad 4 godzinny darmowy kurs na YouTube o automatyzacji z Playwright – Playwright Elements: Skuteczne lokalizowanie i operacje na elementach

  Jest on częścią naszego płatnego kursu Playwright Elements.

• 👉 Nasz kompleksowy, ponad 80 godzinny Program o projektowaniu profesjonalnego frameworka z Playwright – Program Testy Automatyczne z Playwright
• 👉 Stworzone przez nas wtyczki do VS Code i Playwright – VS Code 💗 jaktestowac.pl

Linki z prelekcji

Poniżej znajdziesz linki do materiałów, o których wspominaliśmy podczas wystąpienia:

Statystyki

• Statystyki pobrań z npmtrends – cypress vs playwright-core vs puppeteer-core vs selenium-webdriver
• Statystyka błędów w Playwright na przestrzeni lat – Issues in Playwright

Zgłoszenia do Playwright

• Zgłoszony przez nas Bug do Playwright, którego naprawa wywołała wiele różnych wydarzeń – [BUG] Different response code recorded in Playwright and Browser DevTools
• Zgłoszony przez nas Bug do Playwright, który wyłapywał regresję w wersji 1.42 – [Bug]: Handling: Response body is unavailable for redirect responses
• Zgłoszony przez nas Bug do Playwright – [Bug]: UI Mode, status line summary incorrectly computed when running tests what depend form other tests (projects) #27365
• Nasze działania w głównym repozytorium Playwright – błędy, usprawnienia, poprawki i testy nowyh wersji – microsoft / playwright
  

Raporty z testów Playwright

• Przykładowy raport z testów pisanych do Playwright – Job oraz bezpośredni link do raportu Test Report (aktualnie jest ponad 36400 testów do Playwright!). Rapport ten pochodzi z workflow, kótórej jest odpowiedzialne za mergowanie raportów z próżnych runów Publish Test Results

Narzędzia

• Currents.dev – platforma do monitorowania testów z Playwright
• Sprawdź jakie wtyczki stworzyliśmy do VS Code, aby usprawnić pracę z Playwright – Nasze wtyczki do VS Code – efektywna automatyzacja testów z Playwright

Strony do testów

• Tworzona przez nas aplikacja do testów i pisania testów automatycznych – https://github.com/jaktestowac/gad-gui-api-demo
• https://practicesoftwaretesting.com/#/

💡 Protipy z prelekcji

• 💡PRO TIP: Bądź dociekliwy

  Gdy natrafisz na problem – zadaj sobie pytania:

  Dlaczego tak to działa?

  Jak to powinno działać?

  Czy problem leży w wymaganiach, procesie czy może narzędziach, które zostały użyte?

  Warto również zastanowić się, jak dana funkcja powinna działać. Czy oczekiwania są dobrze zdefiniowane? Czy procesy są optymalne? Bycie dociekliwym pomaga w znajdowaniu długoterminowych rozwiązań i usprawnianiu całego procesu tworzenia oprogramowania.

• 💡PRO TIP: Wykorzystaj narzędzia

  Na rynku jest dostępnych mnóstwo różnych narzędzi.

  Poznawaj je i wprowadzaj w projekcie, aby usprawnić i przyśpieszyć swoja pracę.

• 💡PRO TIP: Inspiruj się

  Zobacz jak do jakości i procesów podchodzą inne zespoły.

  Obserwuj dobre praktyk w pracy zespołów, analizuj sposób komunikacji, sposób testowania.

  Wdrażaj rozwiązania, które w twoim kontekście się sprawdzą.

• 💡PRO TIP: Usprawniaj

  Usprawniaj narzędzia z których korzystasz.

  Zgłaszaj błędy, usprawnienia, zaimplementuj poprawki i bierz udział w życiu danej społeczności.
  Dzięki temu masz wpływ na narzędzia, z których korzystasz, i z których korzysta cała społeczność.

• 💡PRO TIP: 🌍Masz globalny wpływ na jakość

Dzięki za obecność!