Díky definici závislostí mezi testy jsou v případě selhání některého z testů všechny závislé testy přeskočeny ("skipped") - tzn. nejsou vykonány. To znatelně usnadňuje identifikaci problémového testu. Pokud některý z testů i při opakovaném spuštění selže a jsou dodrženy "Podmínky úspěšného spuštění testů" (viz výše), je nezbytné odhalenou chybu vložit do Flyspray nebo ji případně ihned opravit. Pokud k selhání testu dochází z důvodu změny aplikace, je nezbytné test opravit tak, aby odpovídal aktuální podobě aplikace. Testy je vhodné dále rozšiřovat - zejména pokud je do aplikace přidána nová funkcionalita nebo je odhalena chyba, která není stávajícími testy zachycena. Testy musí být vždy vytvořeny tak, aby byly opakovatelné - tzn. pokud v rámci testu dochází k vytvoření záznamu v DB, měl by být tento záznam po vykonání testu odstraněn.

Testy je také možné spouštět prostřednictvím nástroje Maven. Spuštění se provádí příkazem:

Díky definici závislostí mezi testy jsou v případě selhání některého z testů všechny závislé testy přeskočeny ("skipped") - tzn. nejsou vykonány. To znatelně usnadňuje identifikaci problémového testu. Pokud některý z testů i při opakovaném spuštění selže a jsou dodrženy "Podmínky úspěšného spuštění testů" (viz výše), je nezbytné odhalenou chybu vložit do Redmine nebo ji případně ihned opravit. Pokud k selhání testu dochází z důvodu změny aplikace, je nezbytné test opravit tak, aby odpovídal aktuální podobě aplikace. Testy je vhodné dále rozšiřovat - zejména pokud je do aplikace přidána nová funkcionalita nebo je odhalena chyba, která není stávajícími testy zachycena. Testy musí být vždy vytvořeny tak, aby byly opakovatelné - tzn. pokud v rámci testu dochází k vytvoření záznamu v DB, měl by být tento záznam po vykonání testu odstraněn.

• http://www.tutorialspoint.com/testng/index.htm
• http://testng.org/doc/selenium.html

Díky definici závislostí mezi testy jsou v případě selhání některého z testů všechny závislé testy přeskočeny ("skipped") - tzn. nejsou vykonány. To znatelně usnadňuje identifikaci problémového testu. Pokud některý z testů i při opakovaném spuštění selže a jsou dodrženy "Podmínku úspěšného spuštění testů" (viz výše), je nezbytné odhalenou chybu vložit do Redmine nebo ji případně ihned opravit. Pokud k selhání testu dochází z důvodu změny aplikace, je nezbytné test opravit tak, aby odpovídal aktuální podobě aplikace. Testy je vhodné dále rozšiřovat - zejména pokud je do aplikace přidána nová funkcionalita nebo je odhalena chyba, která není stávajícími testy zachycena. Testy musí být vždy vytvořeny tak, aby byly opakovatelné - tzn. pokud v rámci testu dochází k vytvoření záznamu v DB, měl by být tento záznam po vykonání testu odstraněn.

Údržba testů

Selenium testy SPOTu

Díky definici závislostí mezi testy jsou v případě selhání některého z testů všechny závislé testy přeskočeny ("skipped") - tzn. nejsou vykonány. To znatelně usnadňuje identifikaci problémového testu. Pokud některý z testů i při opakovaném spuštění selže a jsou dodrženy "Podmínku úspěšného spuštění testů" (viz výše), je nezbytné odhalenou chybu vložit do Redmine nebo ji případně ihned opravit. Pokud k selhání testu dochází z důvodu změny aplikace, je nezbytné test opravit tak, aby odpovídal aktuální podobě aplikace. Testy je vhodné dále rozšiřovat - zejména pokud je do aplikace přidána nová funkcionalita. Testy musí být vždy vytvořeny tak, aby byly opakovatelné. Pokud v rámci testu dochází k vytvoření záznamu v DB, měl by být tento záznam po vykonání testu odstraněn.

Odkazy:

• JemnyUvodDoTestoveni
• TestyJUnit
• TestovaciScenare
• http://vavru.cz/testovani-aplikaci/selenium-mocna-zbran-na-akceptacni-testy/
• http://seleniumhq.org
• http://docs.seleniumhq.org/
• http://docs.seleniumhq.org/download/maven.jsp
• http://mojo.codehaus.org/selenium-maven-plugin/usage.html
• http://www.vineetmanohar.com/2007/06/maven-selenium/ (kapitola 3.8)

Díky definici závislostí mezi testy jsou v případě selhání některého z testů všechny závislé testy přeskočeny ("skipped") - tzn. nejsou vykonány. To znatelně usnadňuje identifikaci problémového testu. Pokud některý z testů i při opakovaném spuštění selže a jsou dodrženy "Podmínku úspěšného spuštění testů" (viz výše), je nezbytné odhalenou chybu vložit do Redmine nebo ji případně ihned opravit. Pokud k selhání testu dochází z důvodu změny aplikace, je nezbytné test opravit tak, aby odpovídal aktuální podobě aplikace.

Vytvořené testy lze pohodlně spouštět přímo z vývojového prostředí Eclipse (popř. STS). Spuštění se provádí pomocí doplňku "TestNG for Eclipse", který je dostupný v "Eclipse Marketplace".

Spuštění testů: pravé tlačítko myši na konkrétní třídě TestCase nebo na XML souboru TestSuite, "Run As" -> "TestNG Test" (popř. "TestNG Suite")

• V databázi musí být záznamy potřebné pro testování (uživatelé, slova,...) - tyto záznamy je možné do DB nahrát pomocí skriptu sql/SeleniumTestingData/testing_data.sql

Testy je možné spouštět prostřednictvím nástroje Maven. Spuštění se provádí příkazem:

• $ mvn verify

Při tomto příkazu se nejprve automaticky sestaví webová aplikace. Dále se sestavená webová aplikace spustí s využitím kontejneru Jetty (maven-jetty-plugin) a na závěr dojde k samotnému vykonání testů.

Spuštění testů a generování logu s průběhem testů zajišťuje maven-failsafe-plugin. Průběh testování je zaznamenáván do xml soubrů v adresáři ${basedir}/target/failsafe-reports.

V pom.xml je možné určit, jaké testy (sady testů) mají být při zadání příkazu mvn verify spouštěny a jaké ignorovány (include/exclude).

Podmínky úspěšného spuštění testů:

• Musí být spuštěna databáze, kterou aplikace používá
• V databázi musí být záznamy potřebné pro testování (uživatelé, slova,...) - tyto záznamy je možné do DB nahrát pomocí skriptu sql/SeleniumTestingData/testing_data.sql
• Na PC musí být nainstalován internetový prohlížeč Firefox (případně musí být vhodným způsobem upraveno vytváření instance WebDriveru ve třídě AbstractAnonymUserTest.java)

Vytvořené testy lze spouštět přímo z vývojového prostředí Eclipse (popř. STS). Spuštění se provádí pomocí doplňku "TestNG for Eclipse", který je dostupný v "Eclipse Marketplace".

Instalace doplňku do Eclipse: "Help" -> "Eclipse Marketplace...", vyhledat doplněk podle názvu, "Install"

Spuštění testů: pravé tlačítko myši na třídě TestCase nebo XML souboru TestSuite, "Run As" -> "TestNG Test" (popř. "TestNG Suite")

Podmínky úspěšného spuštění testů:

• Před spuštěním testů musí být manuálně spuštěna testovaná webová aplikace (například přes plugin "Eclipse Jetty 3.7.0" využívající kontejner Jetty)
• Předem spuštěná testovaná aplikace musí být přístupná přes URI http://localhost:8080/spot/ (je vhodné mít projekt pojmenován "spot") nebo musí být adresa upravena ve třídě AbstractAnonymUserTest.java
• Musí být spuštěna databáze, kterou aplikace používá
• V databázi musí být nahrány záznamy potřebné pro testování (uživatelé, slova,...) - tyto záznamy je možné do DB nahrát pomocí skriptu SeleniumTestingData?/testing_data.sql
• Na PC musí být nainstalován internetový prohlížeč Firefox (případně musí být vhodným způsobem upraveno vytváření instance WebDriveru ve třídě AbstractAnonymUserTest.java)

Spuštění testů - Maven

Údržba testů

Aktuální (květen 2014) Selenium testy SPOTu jsou vytvořeny s využitím testovacího frameworku TestNG a to zejména kvůli definici závislostí mezi jednotlivými testy.

Spuštění testů - Eclipse IDE (STS)

Spuštění testů je díky frameworku JUnit velmi jednoduché. Provádí se například přímo v použitém vývojovém prostředí nebo lze testy spouštět nástroji Maven či Ant.

Integrace s testovacím frameworkem TestNG má stejné přínosy jako integrace s JUnit a použití je rovněž velmi podobné. Mimo jiné ale TestNG navíc nabízí možnost definice závislostí mezi testy. To je výhodné zejména při testování webových aplikací většího rozsahu. Pomocí závislostí lze eliminovat duplicitní kód testů a usnadnit lokalizaci chyb na základě výsledků testů.

Selenium

Selenium testy SPOTu

Selenium

Selenium IDE

Selenium RC

Selenium WebDriver

Selenium Grid

Selenium 2 + JUnit

Selenium 2 + TestNG

Integrace s testovacím frameworkem TestNG má stejné přínosy jako integrace s JUnit. Nabízí ale navíc definice závislostí mezi testy. To je výhodné zejména při testování webových aplikací většího rozsahu. Pomocí závislostí lze eliminovat duplicitní kód testů a usnadnit lokalizaci chyb na základě výsledků testů.

Selenium

Selenium 2 + JUnit

K použití Selenium testů v praxi je velmi výhodná integrace s dalšími testovacími frameworky. Na platformě Java je vhodným frameworkem například JUnit. Podoba výsledných testů se od klasických JUnit testů příliš neliší. V testových metodách se využívají standardní assert metody z knihovny JUnit, ale ve zbytku těla testu jsou používány metody a objekty Selenium knihovny doplněné o libovolný Java kód. V testech je rovněž možné využívat funkcionalitu poskytovanou dalšími knihovnami.

Spuštění testů je díky frameworku JUnit velmi jednoduché. Provádí se například přímo v použitém vývojovém prostředí (viz obrázek 3.4) nebo lze testy spouštět nástroji Maven či Ant.

Selenium 2 + TestNG

Selenium testy SPOTu

Selenium

Selenium testy SPOTu?

Selenium IDE je jedním z nástrojů sady Selenium. Je distribuováno ve formě doplňku do internetového prohlížeče Firefox. Nástroj je cílen zejména na skupinu uživatelů bez programátorských znalostí a zkušeností, kterým i tak dovoluje vytvářet poměrně komplexní testy. Jeho předností je grafické uživatelské rozhraní umožňující vytvářet testy prostřednictvím záznamu uživatelem prováděných akcí. Takto zaznamenané posloupnosti akcí lze dále editovat nebo rovnou beze změn spouštět. (Pro potřeby testování je nezbytné doplnit přinejmenším kroky provádějící ověřovací příkazy - assert/verify.)

Selenium IDE se do prohlížeče Firefox nainstaluje přes odkaz umístěný přímo na stránkách produktu. Instalaci doplňku je nutné potvrdit. Nainstalovaný doplněk je poté spustitelný skrze nabídku "Firefox" -> "Vývoj webu".

Pro Selenium IDE existuje velké množství dalších rozšíření (např. File Logging (Selenium IDE) umožňující zápis výsledků testů do logovacího souboru).

Selenium WebDriver je plnohodnotnou náhradou za starší Selenium RC. Nástroj je díky jednotnému rozhraní WebDriver, podporovaného internetovými prohlížeči, možné používat bez spuštění jakékoli aplikace serveru (viz obrázek). Využití pokročilejších funkcí (například spuštění testů na jiném stroji), ale běžící instanci serveru nadále vyžaduje. Použití Selenium WebDriver je na úrovni zdrojového kódu velmi podobné Selenium RC. Přináší ale rozšíření některých možností a celkově je uživatelsky přívětivější.

Selenium Grid

Selenium Grid je posledním zástupcem z množiny Selenium nástrojů. Používá se k paralelnímu běhu testů. Umožňuje také současné testování na několika různých platformách. Díky distribuci testů mezi více strojů se zkracuje doba potřebná k jejich vykonání.

Selenium WebDriver

Selenium WebDriver je plnohodnotnou náhradou za starší Selenium RC. Nástroj je díky jednotnému rozhraní WebDriver?, podporovaného internetovými prohlížeči, možné používat bez spuštění jakékoli aplikace serveru (viz obrázek). Využití pokročilejších funkcí (například spuštění testů na jiném stroji), ale běžící instanci serveru nadále vyžaduje. Použití Selenium WebDriver je na úrovni zdrojového kódu velmi podobné Selenium RC. Přináší ale rozšíření některých možností a celkově je uživatelsky přívětivější.

Selenium WebDriver - zjednodušené schéma

Poznámka: V některých zdrojích je jako ekvivalentní označení pro Selenium WebDriver uváděno Selenium 2. Přesněji je ale Selenium 2 souhrnný název balíku, který zahrnuje starší Selenium RC (Selenium 1) i novější Selenium WebDriver.

Následující text a některé obrázky jsou výtahem z mé diplomové práce ("Nástroje pro podporu testování", Jan Rada, 2014).

Selenium

Selenium je sada nástrojů určených primárně k automatizovanému testování webových aplikací. (Dovoluje však i jiné způsoby užití – například k automatizaci rutinních úkonů prováděných prostřednictvím webového rozhraní nějakého systému.) Pomocí Selenium lze dokonale simulovat chování uživatele, jeho interakci s webovou aplikací ("proklikávání") a testovat tak její funkcionalitu.

Selenium IDE

Selenium IDE je jedním z nástrojů sady Selenium. Je distribuováno ve formě doplňku do internetového prohlížeče Firefox. Nástroj je cílen zejména na skupinu uživatelů bez programátorských znalostí a zkušeností, kterým i tak dovoluje vytvářet poměrně komplexní testy. Jeho předností je grafické uživatelské rozhraní umožňující vytvářet testy prostřednictvím záznamu uživatelem prováděných akcí. Takto zaznamenané posloupnosti akcí lze dále editovat nebo rovnou beze změn spouštět. (Pro potřeby testování je nezbytné doplnit přinejmenším kroky provádějící ověřovací příkazy - assert/verify.)

Selenium IDE velmi dobře poslouží i zkušenějším uživatelům (programátorům) při seznamování s produktem Selenium. Tito uživatelé ale budou postupně narážet na různá omezení. Omezením je například absence řídících struktur použitelných v testech. Limitující může být také spuštění testů výhradně v internetovém prohlížeči Firefox. Pokročilejší způsoby použití Selenium testů jsou popsány níže.

Selenium IDE se do prohlížeče Firefox nainstaluje přes odkaz umístěný přímo na stránkách produktu. Instalaci doplňku je nutné potvrdit. Nainstalovaný doplněk je poté spustitelný skrze nabídku "Firefox" -> "Vývoj webu".

• možnost exportu vytvořených testů do podoby zdrojového kódu (využití viz níže)
• omezené možnosti testování (absence řídících struktur, pouze internetový prohlížeč Firefox)

Selenium RC

Nástroj Selenium RC (někdy též označován jako Selenium 1) je oproti Selenium IDE určen pokročilejším uživatelům a jeho použití vyžaduje alespoň elementární programátorské znalosti. Základem je tzv. Remote Control Server. Jedná se o program napsaný v programovacím jazyku Java, který musí být spuštěn před vykonáváním testů. RC Server zajišťuje vytvoření okna prohlížeče, interpretuje a spouští Selenium příkazy (tzv. „Selenese“) a figuruje jako prostředník mezi internetovým prohlížečem a testovanou aplikací. Druhou část Selenium RC tvoří RC Client, což je knihovna poskytující rozhraní mezi použitým programovacím jazykem (ve kterém jsou s použitím knihovny testy napsány) a RC Serverem. Zjednodušené schéma je na obrázku.

Selenium RC - zjednodušené schéma

Hlavní výhodou pro zkušené programátory je možnost psát scénáře testů přímo v oblíbeném programovacím jazyce (což je obvykle rychlejší než záznam a editace kroků v Selenium IDE). Díky tomu lze testy obohatit o libovolnou logiku realizovanou standardními konstrukcemi daného programovacího jazyka včetně řídících struktur nebo o použití dalších knihoven.

Selenium RC je na oficiálních stránkách označeno jako „deprecated“ (zastaralé) a ačkoli je do jisté míry stále podporováno, tak není příliš vhodné jej používat. Důvodem je zejména horší kompatibilita s novějšími verzemi internetových prohlížečů a nestabilní chování testů.

Selenium WebDriver

Selenium WebDriver je plnohodnotnou náhradou za starší Selenium RC. Nástroj je díky jednotnému rozhraní WebDriver?, podporovaného internetovými prohlížeči, možné používat bez spuštění jakékoli aplikace serveru (viz obrázek). Využití pokročilejších funkcí (například spuštění testů na jiném stroji), ale běžící instanci serveru nadále vyžaduje. Použití Selenium WebDriver je na úrovni zdrojového kódu velmi podobné Selenium RC. Přináší ale rozšíření některých možností a celkově je uživatelsky přívětivější.

Selenium WebDriver - zjednodušené schéma

Poznámka: V některých zdrojích je jako ekvivalentní označení pro Selenium WebDriver uváděno Selenium 2. Přesněji je ale Selenium 2 souhrnný název balíku, který zahrnuje starší Selenium RC (Selenium 1) i novější Selenium WebDriver?.

Použitý Selenium server integrovaný v selenium-maven-pluginu je obvykle starší verze (než aktuální verze Selenium serveru), což může způsobovat problémy při pokusu o vykonání testů v novějších verzích internetových prohlížečů. V případě problémů s vykonáním testů je proto vhodné zkusit změnit internetový prohlížeč, ve kterém mají být testy vykonány (viz Poznámky ke spouštění Selenium testů), nebo nainstalovat starší verzi některého prohlížeče.

Použitý Selenium server integrovaný v selenium-maven-pluginu je obvykle starší verze (než aktuální verze Selenium serveru), což může způsobovat problémy při pokusu o vykonání testů v novějších verzích internetových prohlížečů. V případě problémů s vykonáním testů je proto vhodné zkusit změnit internetový prohlížeč, ve kterém mají být testy vykonány (viz Poznámky ke spouštění Selenium testů), nebo nainstalovat starší verzi některého prohlížeče.

• testy mají mezi sebou závislosti, takže v případě jejich jednotlivého spuštění nebo spuštění v jiném pořadí než je uvedeno v SeleniumSuitTest.java, může dojít k selhání (např. test vložení již existujícího slova neproběhne v pořádku, pokud před jeho provedením nebyl vykonán test vložení slova)
• Test AddAbbrForWordTest.java není opakovatelný, jelikož po předchozím spuštění celé sady testů v databázi zůstane testovací zkratka a výpis, který je v testu porovnáván, má proto při opakovaném spuštění jinou podobu (pozn. ponechání zkratky v databázi i při smazání odpovídajícího slova je správné chování aplikace - zkratka totiž může být přiřazena i k jinému slovu a neměla by proto být se slovem mazána); před opakovaným spuštěním testů je proto vhodné z databáze testovací zkratku manuálně odstranit (přes pgAdmin)

• testy mají mezi sebou závislosti, takže v případě jejich jednotlivého spuštění nebo spuštění v jiném pořadí než je uvedeno v SeleniumSuitTest.java, může dojít k selhání (např. test vložení slova neproběhne v pořádku, pokud po jeho předchozím spuštění nebyl vykonán i test smazání slova a slovo tudíž zůstalo v databázi)
• testy by bylo vhodné z důvodu snadnější orientace rozdělit do více balíků a sad testů

• V abstraktní třídě SeleniumTestCase.java je definováno spouštění testů (možnost volby internetového prihlížeče).

(Spuštění samotného Selenium serveru bez provedení testů: $ mvn selenium:start-server. Kompletní sada testů je vždy provedena i při zadání: $ mvn deploy.)

• $ mvn site - je vygenerována stránka s technickými údaji aplikace

V pom.xml je možné určit, jaké testy (sady testů) mají být při zadání příkazu $ mvn integration-test spouštěny a jaké ignorovány (include/exclude).

• Testy se vytvářejí nebo editují s využitím pluginu Selenium IDE pro Firefox. Zdrojové soubory s testy jsou ukládány ve výchozím formátu (tzn. html) do složky ${basedir}/src/test/resources/selenium_src/. Finální podoba testu je vždy vyexportována do Java kódu a vložena do odpovídající třídy v ${basedir}/src/test/java/cz/zcu/kiv/spot/selenium/. V případě přímé editace Java kódu testu je nezbytné provést tyto změny i v odpovídajícím zdrojovém html souboru pro Selenium IDE!

Při tomto příkazu se nejprve automaticky sestaví webová aplikace. Dále se sestavená webová aplikace spustí s využitím kontejneru Jetty (maven-jetty-plugin). Následně je provedeno spuštění Selenium serveru (integrován v selenium-maven-plugin) a na závěr dojde k samotnému vykonání testů.

Selenium IDE je doplněk do prohlížeče Firefox, který umožňuje zaznamenávat interakci uživatele s webovou aplikací. Takto zaznamenané posloupnosti událostí lze dále editovat a výsledný záznam slouží k automatickému testování bez nutnosti zásahu testera. Test může být spuštěn přímo v Selenium IDE nebo vyexportován do zvoleného programovacího jazyka (např. Java) a spuštěn některým ze způsobů níže.

Produkt Selenium slouží k tvorbě a spouštění automatizovaných integračních testů. Selenium testy provádějí automatické "proklikávání" aplikace. Spuštění testů je možné provést několika způsoby - viz dále.

• spuštění testů přes Maven na OS Windows s aktuálními verzemi standardních internetových prohlížečů (Firefox, Opera, Internet Explorer) je nefunkční (z důvodu nekompatibility použitých knihoven a aktuálních verzí prohlížečů) a je nutné používat spouštění testů přímo z Eclipse IDE (STS) - osvědčilo se použití Selenium serveru verze 2.32.0 a prohlížeče Firefox verze 21.0, problém se spouštěním testů přes Maven by mohl být v budoucnu vyřešen přechodem na testy Selenium 2.0 a použitím novějších verzí knihoven

Problémy a nedostatky současných (1.6.2013) Selenium testů:

• http://vavru.cz/testovani-aplikaci/selenium-mocna-zbran-na-akceptacni-testy/

• http://docs.seleniumhq.org/download/maven.jsp
• http://mojo.codehaus.org/selenium-maven-plugin/usage.html

• http://www.vineetmanohar.com/2007/06/maven-selenium/ (kapitola 3.8)

Produkt Selenium slouží k tvorbě a spouštění automatizovaných integračních testů. Selenium testy provádějí automatické "proklikávání" aplikace. Ke spuštění testů je možné využít několika způsobů - viz dále.

Selenium IDE je doplněk do prohlížeče Firefox, který umožňuje zaznamenávat interakci uživatele s webovou aplikací. Takto zaznamenané posloupnosti událostí lze dále editovat a výsledný záznam slouží k automatickému testování bez nutnosti zásahu testera. Test může být spuštěn přímo v Selenium IDE nebo vyexportován do zvoleného programovacího jazyka (Java, Python, Perl, Ruby, Php, C#).

1. v Eclipse vybrat požadovaný test (sadu testů) a spustit přes Run As -> JUnit Test

• Změna internetového prohlížeče pro vykonání testů se provádí ve třídě SeleniumTestCase.java, kde je požadovaný prohlížeč zvolen prostřednictvím odpovídajícího klíčového slova. V případě nestandardní cesty k instalaci vybraného prohlížeče je možno přesně specifikovat i cestu (viz zakomentované varianty).

• Testování je poměrně náročné a chyba při vykonání testu může být způsobena například jen pomalou odezvou serveru - nemusí tedy vždy znamenat chybu v aplikaci

Pravidla pro vytváření a editaci Selenium testů:

• Testy se vytvářejí nebo editují s využitím pluginu Selenium IDE pro Firefox. Zdrojové soubory s testy jsou ukládány ve výchozím formátu (tzn. html) do složky src/test/resources/selenium_src/. Finální podoba testu je vždy vyexportována do Java kódu a vložena do odpovídající třídy v src/test/java/cz/zcu/kiv/spot/selenium/. V případě přímé editace Java kódu testu je nezbytné provést tyto změny i v odpovídajícím zdrojovém html souboru pro Selenium IDE!
• Třída SeleniumSuitTest.java představuje sadu testů (jednotlivé testy jsou do sady přiřazeny s využitím anotace). Testy uvedené v sadě je možné spouštět naráz.
• V abstraktní třídě SeleniumTestCase.java je definováno spouštění testů (volba internetového prihlížeče).

Problémy a nedostatky současných (1.6.2013) Selenium testů

• spuštění testů přes Maven na OS Windows s aktuálními verzemi standardních internetových prohlížečů (Firefox, Opera, Internet Explorer) je nefunkční a je nutné používat spouštění testů přímo z Eclipse IDE (STS) - osvědčilo se použití Selenium serveru verze 2.32.0 a prohlížeče Firefox verze 21.0, problém se spouštěním testů přes Maven by mohl být v budoucnu vyřešen přechodem na testy Selenium 2.0 a použitím novějších verzí knihoven
• testy jsou často zaměřeny jen na optimistické scénáře (např. uživatel zadal veškeré vstupy do formuláře správně)
• testy zdaleka nepokrývají celou aplikaci, ale jen základní funkce

• http://www.vineetmanohar.com/2007/06/maven-selenium/ kap. 3.8

V pom.xml je možné určit, jaké testy (sady testů) mají být při zadání příkazu $ mvn integration-test spouštěny a jaké ignorovány (include/exclude).

Použitý Selenium server integrovaný v selenium-maven-pluginu je obvykle starší verze (než aktuální verze Selenium serveru), což může způsobovat problémy při pokusu o vykonání testů v novějších verzích internetových prohlížečů. V případě problémů s vykonáním testů je proto vhodné zkusit změnit internetový prohlížeč, ve kterém mají být testy vykonány (viz Poznámky ke spouštění Selenium testů), nebo nainstalovat starší verzi některého prohlížeče.

• Během provádění testů vyžadujících přihlášeného uživatele, jsou pro přihlášení používány speciálně vytvořené uživatelské účty (testuser a testadmin), které jsou již v dumpu databáze a nemusí se proto vytvářet
• Změna internetového prohlížeče pro vykonání testů se provádí ve třídě SeleniumTestCase.java (z balíku cz.zcu.kiv.spot.selenium), kde je požadovaný prohlížeč zvolen prostřednictvím odpovídajícího klíčového slova. V případě nestandardní cesty k instalaci vybraného prohlížeče je možno přesně specifikovat i cestu (viz zakomentované varianty).
• Pokud při spuštění Selenium testů není nalezen zvolený internetový prohlížeč, je použitý ten prohlížeč, který Selenium považuje pro daný systém jako defaultní (pro Windows - Internet Explorer, jinak - Firefox).

Výhody Selenium testů

• test je komplexní a postihuje téměř veškeré komponenty systému
• není potřebná dokonalá znalost aplikace
• test lze spustit najednou pro více systémů a prohlížečů
• intuitivní práce s IDE rozhraním

Nevýhody Selenium testů

• psaní testů je zdlouhavé a při změně testované součásti se musí změnit i test
• některé komponenty nelze vůbec otestovat
• chybný výsledek testu nemusí znamenat chybu aplikace (např. pomalá odezva webového serveru)

• Výborný addon Web Developer pro webové vývojáře určený pro Firefox dostupný z https://addons.mozilla.org/en-US/firefox/addon/60.

K úspěšnému provedení testů je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá. Operační systém musí být v grafickém režimu a v systému se musí nacházet (běžný) internetový prohlížeč, ve kterém mají být testy vykonány.

Stejně jako v případě spouštění testů přes Maven je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá a v systému se nacházel zvolený internetový prohlížeč.

Knihovny potřebné pro spuštění Selenium testů jsou do aplikace SPOT staženy pomocí Mavenu a konfigurovány v pom.xml. Spuštění testů se provádí příkazem:

Použitý Selenium server integrovaný v selenium-maven-pluginu je obvykle starší verze (než aktuální Selenium server), což může způsobovat problémy při pokusu o vykonání testů v novějších verzích internetových prohlížečů. V případě problémů s vykonáním testů je proto vhodné zkusit změnit internetový prohlížeč, ve kterém mají být testy vykonány (viz Poznámky ke spouštění Selenium testů), nebo nainstalovat starší verzi některého prohlížeče.

K úspěšnému provedení testů je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá. Operační systém musí být v grafickém režimu a v systému se musí nacházet (běžný) internetový prohlížeč, ve kterém mají být testy vykonány.

Průběh testování je zaznamenáván do xml soubrů v adresáři ${basedir}/target/surefire-reports. Tato data lze exportovat do přehledné webové stránky, která bude umístěna v ${basedir}/target/site.

V pom.xml je možné určit, jaké testy (sady testů) mají být při zadání příkazu $ mvn integration-test spouštěny a jaké ignorovány (include/exclude).

(Spuštění samotného Selenium serveru bez provedení testů: $ mvn selenium:start-server. Kompletní sada testů je vždy provedena i při zadání: $ mvn deploy .)

Stejně jako v případě spouštění testů přes Maven je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá a v systému se nacházel webový prohlížeč.

K úspěšnému provedení testů je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá. Operační systém musí být v grafickém režimu a v systému se musí nacházet (běžný) internetový prohlížeč, ve kterém jsou testy vykonány. (Volba prohlížeče se provádí ve třídě SeleniumTestCase.java - viz Poznámky ke spouštění Selenium testů).

Poznámky ke spouštění Selenium testů:

K úspěšnému provedení testů je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá. Operační systém musí být v grafickém režimu a v systému se musí nacházet (běžný) internetový prohlížeč, ve kterém jsou testy vykonány. (Volba prohlížeče se provádí ve třídě SeleniumTestCase.java - viz Poznámky ke spouštění Selenium testů).

Poznámky ke spouštění Selenium testů:

K úspěšnému provedení testů je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá. Operační systém musí být v grafickém režimu a v systému se musí nacházet (běžný) internetový prohlížeč, ve kterém jsou testy vykonány. (Volba prohlížeče se provádí ve třídě SeleniumTestCase.java - viz Poznámky ke spouštění Selenium testů).

Poznámky ke spouštění Selenium testů: {{anchor|poznamky}}

Produkt Selenium slouží k tvorbě a spouštění automatizovaných integračních testů. Selenium testy provádějí automatické "proklikávání" aplikace.

Selenium IDE je doplněk do prohlížeče Firefox, který umožňuje zaznamenávat interakci uživatele s webovou aplikací. Takto nahrané posloupnosti událostí lze dále editovat a výsledný záznam slouží k automatickému testování bez nutnosti zásahu testera. Test může být spuštěn přímo v Selenium IDE nebo vyexportován do zvoleného programovacího jazyka (Java, Python, Perl, Ruby, Php, C#).

Pro Selenium IDE existuje velké množství dalších rozšíření (např. File Logging (Selenium IDE) umožňující zápis výsledků testů do logovacího souboru).

• rychlá tvorba testů díky možnosti záznamu uživatelem prováděných úkonů

K úspěšnému provedení testů je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá. Operační systém musí být v grafickém režimu a v systému se musí nacházet (běžný) internetový prohlížeč, ve kterém jsou testy vykonány. (Volba prohlížeče se provádí ve třídě SeleniumTestCase.java - viz #Poznámky ke spouštění Selenium testů).

Selenium IDE

[]

Attach:selenIDE.png

Produkt Selenium slouží k tvorbě a spouštění automatizovaných integračních testů. Selenium testy provádějí automatizované "proklikávání" aplikace.

Spouštění a vytváření testů přes Selenium IDE

Selenium IDE je doplněk do prohlížeče Firefox, který umožňuje zaznamenávat interakci uživatele s webovou aplikací. Takto nahrané posloupnosti událostí lze dále editovat a výsledný záznam slouží k automatickému testování bez nutnosti zásahu testera. Test může být spuštěn přímo v Selenium IDE nebo vyexportován ve zvoleném programovacím jazyce (Java, Python, Perl, Ruby, Php, C#).

Selenium IDE se do prohlížeče Firefox nainstaluje prostřednictvím odkazu umístěného přímo na stránkách produktu. Instalaci doplňku je nutné potvrdit. Nainstalovaný doplněk je poté spustitelný přes nabídku "Firefox" -> "Vývoj webu".

• možnost exportu zaznamenaných posloupností úkonů do různých formátů - např. Java => vyexportovaný kód testů pak stačí nakopírovat do projektu webové aplikace (využití knihovny selenium-java-client-driver)

Spouštění testů přes Maven (selenium-maven-plugin + maven-surefire-plugin + maven-jetty-plugin)

Knihovny potřebné pro spuštění Selenium testů jsou do aplikace SPOT staženy pomocí Mavenu a konfigurovány v pom.xml. Spuštění testů se provádí příkazem:

Při tomto příkazu se nejprve automaticky sestaví webová aplikace. Dále se sestavená webová aplikace spustí s využitím kontejneru Jetty ( maven-jetty-plugin). Následně je provedeno spuštění Selenium serveru (integrován v selenium-maven-plugin) a na závěr dojde k samotnému vykonání testů.

K úspěšnému provedení testů je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá. Operační systém musí být v grafickém režimu a v systému se musí nacházet (běžný) internetový prohlížeč, ve kterém jsou testy vykonány. Volba prohlížeče se provádí ve třídě SeleniumTestCase.java (viz "Poznámky ke spouštění Selenium testů").

• Zvážit, zada má význam export testů ze Selenium IDE pro Firefox do zdrojového kódu Javy. Bylo by možné testy ukládat přímo v html (defaultní formát Selenium IDE) do určité složky ve struktuře projektu. Výhodou tohoto řešení by byla jednodušší modifikace existujících testů přes Selenium IDE. S tím souvisí i možnost testy v Selenium IDE přímo spouštět. A díky doplňku File Logging (Selenium IDE) lze zařídit i logování do souboru. Automatické spouštění testů (uložených jako html) přes Maven by mělo být s využitím selenium-maven-plugin možné i v tomto případě - viz kapitola 3.8 zde:http://www.vineetmanohar.com/2007/06/maven-selenium/. Asi jedinou nevýhodou by byla nemožnost spouštění testů přímo v Eclipse IDE (STS), což vzhledem ke "komplikovanosti" (ruční spuštění aplikace a Selenium serveru) stejně není často používaná varianta. Navíc by byl tento způsob spouštění nahrazen možností testy spustit přímo v Selenium IDE.

Výhody a nevýhody Selenium testů

Pro Selenium IDE existuje velké množství dalších rozšíření (např. File Logging (Selenium IDE)) umožňující zápis výsledků testů do logovacího souboru).

Testy se nacházejí v balíku cz.zcu.kiv.spot.selenium a byly vytvořeny s využitím Selenium IDE pro Firefox a následně vyexportovány do podoby Java kódu, který byl nakopírován do tříd v projektu. V abstraktní třídě SeleniumTestCase.java je definováno spouštění testů. Třída SeleniumSuitTest představuje sadu testů (jednotlivé testy jsou do sady přiřazeny s využitím anotace).

Současné (25.5.2013) Selenium testy jsou často zaměřeny jen na optimistické scénáře (např. uživatel zadal veškeré vstupy do formuláře správně) a nelze je proto považovat za kompletní testy aplikace. Před dalším rozšiřováním Selenium testů by bylo vhodné prozkoumat následující:

• Zvážit, zada má význam export testů ze Selenium IDE pro Firefox do zdrojového kódu Javy. Bylo by možné testy ukládat přímo v html (defaultní formát Selenium IDE) do určité složky ve struktuře projektu. Výhodou tohoto řešení by byla jednodušší modifikace existujících testů přes Selenium IDE. S tím souvisí i možnost testy v Selenium IDE přímo spouštět. A díky doplňku File Logging (Selenium IDE) lze zařídit i logování do souboru. Automatické spouštění testů (uložených jako html) přes maven by mělo být s využitím selenium-maven-plugin možné i v tomto případě - viz kapitola 3.8 zde:http://www.vineetmanohar.com/2007/06/maven-selenium/. Asi jedinou nevýhodou by byla nemožnost spouštění testů přímo v Eclipse IDE (STS), což vzhledem ke "komplikovanosti" (ruční spuštění aplikace a Selenium serveru) stejně není často používaná varianta. Navíc by byl tento způsob spouštění nahrazen možností testy spustit přímo v Selenium IDE.
• Zjistit jaké výhody by přinesla migrace testů na "Selenium 2" a případně migraci provést.

Testy se nacházejí v balíku cz.zcu.kiv.spot.selenium. Současné Selenium testy byly vytvořeny s využitím Selenium IDE pro Firefox a následně vyexportovány do podoby Java kódu, který byl nakopírován do projektu. V abstraktní třídě SeleniumTestCase.java je definováno spuštění testů. Třída SeleniumSuitTest představuje sadu testů.

(Spuštění pouze Selenium serveru se provede příkazem $ mvn selenium:start-server, kompletní sada testů je proveda i po spuštění příkazu: $ mvn deploy )

1. v Eclipse vybrat požadovaný test/testy a spustit přes Run As -> JUnit Test

• Pokud při spuštění Selenium testů není nalezen zvolený internetový prohlížeč, je použitý prohlížeč, který Selenium považuje pro daný systém jako defaultní (pro Windows - Internet Explorer, jinak - Firefox).

Testy se nacházejí v balíku cz.zcu.kiv.spot.selenium. Současné Selenium testy byly vytvořeny s využitím Selenium IDE pro Firefox a následně vyexportovány do podoby Java kódu, který byl nakopírován do projektu. V abstraktní třídě {@SeleniumTestCase?.java@] je definováno spuštění testů. Třída {@SeleniumSuitTest?@] představuje sadu testů.

Firefox plugin Selenium IDE

Selenium RC a aplikace SPOT (selenium-maven-plugin + maven-surefire-plugin + maven-jetty-plugin)

Spuštění Selenium testů přes Eclipse IDE (STS)

Poznámky ke spouštění Selenium testů:

Selenium testy SPOTU

Výhody a nevýhody

Používá se jako doplněk do prohlížeče Firefox.

Selenium IDE se do prohlížeče Firefox nainstaluje prostřednictvím odkazu umístěného přímo na stránkách produktu. Instalaci doplňkuje nutné potvrdit. Nainstalovaný doplněk je poté spustitelný přes nabídku "Firefox" -> "Vývoj webu".

Shrnutí vlastností:

• možnost exportu zaznamenaných posloupností úkonů do různých formátů - např. Java => vyexportovaný kód testů pak stačí nakopírovat do projektu (využití knihovny selenium-java)
• možnost spouštění testů (sad testů) přímo přes plugin

Selenium Core je testovací nástroj, který běžící přímo v browseru. Slouží pro spouštění testů vytvořených pomocí Selenium IDE.

Selenium Remote Control (RC) je nástroj, který umožňuje spouštět testy uživatelského rozhraní (napsané v libovolném programovacím jazyce) v běžném prohlížeči.

Tento nástroj dokáže spolupracovat s více operačnímy systémy a browsery.

Selenium RC a aplikace SPOT (selenium-maven-plugin + maven-surefire-plugin + maven-jetty-plugin)

Knihovny nutné pro Selenium testy jsou do aplikace SPOT staženy pomocí mavenu a konfigurovány v pom.xml.

Při tomto příkazu se nejprve automaticky sestaví webová aplikace. Dále se sestavená webová aplikace spustí s využitím kontejneru jetty ( maven-jetty-plugin). Následně je provedeno spuštění Selenium serveru (integrován v selenium-maven-plugin) a na závěr dojde k samotnému vykonání testů.

K úspěšnému provedení testů je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá. Operační systém musí být v grafickém režimu a v systému se musí nacházet webový prohlížeč.

Použitý integrovaný Selenium server v selenium-maven-pluginu je starší verze, což může způsobovat problémy například při pokusu o vykonání testů v některých novějších verzích internetových prohlížečů. V případě problémů s vykonáním testů je proto vhodné zkusit změnit internetový prohlížeč, ve kterém mají být testy vykonány, nebo nainstalovat starší verzi některého prohlížeče.

Generování logu s průběhem testů zajišťuje maven-surefire-plugin.

• $ mvn site je vygenerována stránka s technickými údaji aplikace

V pom.xml je možné určit, jaké testy mají být při zadání příkazu $ mvn integration-test spouštěny a jaké ignorovány (include/exclude).

(Spuštění pouze Selenium serveru se provede příkazem $ mvn selenium:start-server , kompletní sada testů je proveda i po spuštění příkazu: $ mvn deploy )

Spuštění Selenium testů přes Eclipse IDE (STS)

Selenium testy je možné spustit také přímo přes Eclipse IDE (STS). Postup:

1. nutné ručně spustit aplikaci (například přes Run Jetty)
2. nutné ručně spustit Selenium server (java -jar selenium-server-standalone-2.32.0.jar), který je možné stáhnout ze stránky http://code.google.com/p/selenium/downloads/list
3. v Eclipse vybrat požadovaný test/testy a spustit přes Run As -> JUnit? Test

Stejně jako v případě spouštění testů přes maven je nezbytné, aby byla spuštěna databáze, kterou webová aplikace používá a v systému se nacházel webový prohlížeč.

Poznámky ke spouštění Selenium testů:

• Spuštěná webová aplikace musí být přístupná přes URI http://localhost:8080/spot/ (case sensitive), jinak nebudou Selenium testy úspěšně vykonány. Je proto vhodné, aby byl lokální projekt pojmenován jako "spot".
• Během provádění testů vyžadujících přihlášeného uživatele, je pro přihlášení použitý speciálně vytvořený uživatelský účet, který je již v dumpu databáze
• Jako nejvhodnější pro spouštění Selenium testů se zdá být Internet Explorer, jelikož v tomto případě většinou nevznikají problémy při použítí starší verze Selenium serveru (integrovaný Selenium Server v selenium-maven-plugin) a nové verze Internet Exploreru.
• Při spouštění Selenium testů na OS GNU Linux je použití alternativního internetového prohlížeče nezbytné. V případě problémů se spuštěním testů je pak nutné nainstalovat a použít některou ze starších verzí zvoleného alternativního internetového prohlížeče.
• Změna internetového prohlížeče pro vykonání testů se provádí ve třídě SeleniumTestCase.java, kde je požadovaný prohlížeč zvolen prostřednictvím odpovídajícího klíčového slova. V případě nestandardní cesty k instalaci vybraného prohlížeče je možno přesně specifikovat i cestu (viz zakomentované varianty).
• Pokud při spuštění Selenium testů není nalezen zvolený internetový prohlížeč, je použitý prohlížeč, který Selenium považuje pro daný systém jako defaultní (pro Windows - InternetExplorer?, jinak - Firefox).
• Testování je poměrně náročné a chyba při vykonání testu může být způsobena například pomalou odezvou serveru - nemusí tedy vždy znamenat chybu v aplikaci

Selenium testy SPOTU

Výhody a nevýhody

+ test je komplexní a postihu téměř veškeré komponeny systému

+ není potřebná dokonalá znalost aplikace

+ test lze spustit najednou pro více systémů a prohlížečů

+ intuitivní práce s IDE rozhraním

- psaní testů je zdlouhavé a při změně testované součásti se musí změnit i test

- některé komponenty nelze vůbec otestovat

- chybný výsledek testu nutně neznamená chybu aplikace

• http://docs.seleniumhq.org/download/maven.jsp
• http://docs.seleniumhq.org/docs/05_selenium_rc.jsp
• http://mojo.codehaus.org/selenium-maven-plugin/examples/using-with-surefire.html
• http://mojo.codehaus.org/selenium-maven-plugin/usage.html
• http://www.vineetmanohar.com/2007/06/maven-selenium/#Maven-Selenium_Plugin (3.8)
• http://maven.apache.org/surefire/maven-surefire-plugin/examples/inclusion-exclusion.html

Firefox plugin Selenium IDE

Používá se jako addon do prohlížeče Firefox

Selenium IDE je integrované testovací prostředí, které zaznamenává interakci uživatele s webovou aplikací. Takto nahrané posloupnosti událostí je možné dále editovat a výsledný záznam slouží k automatickému testování bez nutnosti zásahu testera. Test může být v tomto IDE spuštěn, nebo vyexportován ve zvoleném programovacím jazyce (Java, Python, Perl, Ruby, Php, C#). Výstupem je i přehledný log prováděných testů.

Hlavní okno Selenium IDE

Instalace:

Selenium IDE se do prohlížeče Firefox nainstaluje prostřednictvím odkazu umístěného přímo na stránkách produktu. Instalaci pluginu je nutné potvrdit. Nainstalovaný plugin je poté spustitelný přes nabídku "Firefox" -> "Vývoj webu".

Další možností, jak nástroj rychle spouštět, je instalace doplňku Selenium IDE Button.

Pro Selenium IDE existuje velké množství dalších rozšíření (např. File Logging (Selenium IDE) umožňující zápis výsledků testů do logovacího souboru).

Shrnutí:

• rychlá tvorba testů díky možnosti záznamu prováděných úkonů
• možnost exportu zaznamenaných posloupností úkonů do různých formátů - např. Java => vyexportovaný kód testů pak stačí nakopírovat do projektu (využití knihovny selenium-java-client-driver)

- možnost spouštění testů (sad testů) přímo přes plugin

• TestovaciScenare

• TestyJUnit

Automatizované testování webové aplikace pomocí Selenium

Selenium

Produkt Selenium slouží pro tvorbu a spouštění automatických integračních testů.

Selenium IDE

Používá se jako addon do prohlížeče firefox

Selenium IDE je integrované testovací prostředí, které zaznamenává interakci uživatele s webovou aplikací. Takto nahrané posloupnosti událostí je možné dále editovat a výsledný záznam slouží k automatickému testování bez nutnosti zásahu testera. Test může být v tomto IDE spuštěn, nebo exportován ve zvoleném programovacím jazyce(Java, Python, Perl, Ruby, Php, C#). Výstupem je i přehledný log prováděných testů.

?

okno Selenium IDE

instalace:

IDE selenium se přidá do prohlížeče firefox jako standardní addon. Poté se nachází v záložce "nástroje".

Selenium Core

Selenium Core je testovací nástroj, který běžící přímo v browseru. Slouží pro spouštění testů vytvořených vytvořit pomocí Selenium IDE.

Selenium Remote Control (RC)

Selenium Remote Control (RC) je testovací nástroj, který umožňuje psát automatizované testování uživatelského rozhraní v libovolném programovacím jazyce, s použitím běžných prohlížečů.

1. spustí se server Selenium(RC), který funguje jako http proxy mezi prohlížečm a dotazy z aplikace
2. použije se testovací knihovna
3. RC server natáhne selenium core do prohlížeče

?

Tento nástroj dokáže spolupracovat s operačnímy systémy a browsery

• Windows, Linux, MacOSX?, Solaris
• Firefox 2,3, IE 7,8, Opera 9, Safari...

Výhody a nevýhody

+ test je komplexní a postihu téměř veškeré komponeny systému

+ není potřebná dokonalá znalost aplikace

+ test lze pusit najednou pro více systémů a prohlížečů

+ intuitivní práce s IDE rozhraním

- psaní testů je zdlouhavé a při změně testované součásti se musí změnit i test

- některé komponenty nelze vůbec otestovat

- chybný výsledek testu nutně neznamená chybu aplikace

Selenium RC a aplikace SPOT

Knihovny nutné pro testování jsou do aplikace SPOT staženy pomocí mavenu a konfigurovány v pom.xml. Důležité je nastavení portu, defaultní je 4444.

...
<artifactId>selenium-maven-plugin</artifactId>
...
    <configuration>
       <port>4444</port>
       <background>true</background>
    </configuration>
...

Testování se provádí příkazem:

• $ mvn integration-test

Při tomto příkazu se spustí nejprve jetty kontejner a následovně Selenium server.

Spuštění pouze Selenia serveru se provede příkazem:

• $ mvn selenium:start-server

Kompletní sada testů je proveda i po spuštění příkazu:

• $ mvn deploy

O generování logu se stará plugin maven-surefire-plugin. Generování probíhá do adresáře /target/surefire-reports. Pro každý test je vytvořen samostatný xml výstup.

Je třeba míti na paměti, že pro běh testů musí být spuštěna aplikace SPOT( webový kontejner a databáze), operační systém musí být v grafickém režimu a v systému se musí nacházet webový prohlížeč.

Zobrazení reportů

Průběh testování je zaznamenáván do xml soubrů v adresáři ${basedir}/target/surefire-reports. Tyto data lze exportovat do přehledné webové stránky, kreá bude umístěna v ${basedir}/target/site.

• $ mvn surefire-report:report
• $ mvn site je vygenerována stránka s technickými údaji aplikace()

Programování testů

Třída, která se stará o napojení na selenium server:

package cz.zcu.kiv.spot.selenium;
...
public abstract class SeleniumTestCase extends SeleneseTestCase {
    public Selenium selenium;
    @Override
    public void setUp() throws Exception {
        super.setUp();
        //adresa selemia srv,port,prohlizec,adresa testovane stranky
        selenium = new DefaultSelenium("localhost", 4444, "*firefox", "http://localhost:8080");
        selenium.start();
    }
    public void tearDown() throws Exception {
        selenium.stop();
        super.tearDown();
    }
}

Třída, která spouští jednotlivé testy. Zde se může použít vygenerovaný kód ze Selenium IDE. Příklad použití:

package cz.zcu.kiv.spot.selenium;

public class DefaultClickTest extends SeleniumTestCase {
    @Test
    public void testClickCZ() throws Exception {
        selenium.open("/spot/");
        verifyTrue(selenium.isTextPresent("Slovník odborné terminologie"));
        selenium.click("link=Hlavní stránka");
        selenium.waitForPageToLoad("30000");
        verifyTrue(selenium.isTextPresent("Slovník odborné terminologie"));
        selenium.click("link=Přidat slovo");
        selenium.waitForPageToLoad("30000");
...

Poznámky

• Pro testování "přihlášeného živatele" je třeba jej založit v databázi
• testováni je pro PC celkem zátěž, testy mívají problémy se špatnou odezvou lokálního webserveru, nedokončení testu nemusí znamenat nalezení chyby
• test lze nasměrovat na libovolnou adresu

WARNING

• momentálně je jako testovací prohlížeč používána opera9.68, z důvodu špatného zobrazení kódování některých stránek

Testy SPOTU

Vytvoření testovacích uživatelů

INSERT INTO users(
            users_id, "login", pass, firstname, lastname, email, email_pub, 
            homepage, description, rights, active, active_code)
    VALUES (85, 'userTest', md5('user'), 'roman', 'namor', 'fbvf@seznam.cz', FALSE, 
            '', 'testovaci uzivatel', 10, 1, 'ACTIVATED');

INSERT INTO users(
            users_id, "login", pass, firstname, lastname, email, email_pub, 
            homepage, description, rights, active, active_code)
    VALUES (85, 'adminTest', md5('test'), 'roman', 'namor', 'fbvf@seznam.cz', FALSE, 
            '', 'testovaci uzivatel', 10, 1, 'ACTIVATED');

Odkazy:

• JemnyUvodDoTestoveni
• https://addons.mozilla.org/cs/firefox/addon/2079
• http://seleniumhq.org
• http://vavru.cz/testovani-aplikaci/selenium-mocna-zbran-na-akceptacni-testy/
• http://www.bitmotif.com/selenium/selenium-remote-control-for-java-a-tutorial/
• http://www.bitmotif.com/selenium/selenium-remote-control-for-java-a-tutorial-part-2/

Addony pro vývoj webových aplikací

• Výborný addon Web Developer pro webové vývojáře určený pro Mozilla Firefox stahnutelný na https://addons.mozilla.org/en-US/firefox/addon/60