IT Systems Integration Consultant
ISTQB CT-AI: certifikácia pre testovanie AI systémov
ISTQB AI Testing (CT-AI) je špecializovaná certifikácia pre testovanie systémov s umelou inteligenciou. Ak pracuješ s modelmi strojového učenia alebo zvažuješ špecializáciu, ktorá ťa na trhu odlíši, ide o jednu z mála formálnych kvalifikácií v tejto oblasti. Spoznaj, čo certifikácia CT-AI pokrýva, pre koho je určená, ako prebieha skúška na Slovensku a čím sa odlišuje od príbuznej certifikácie CT-GenAI.
V článku sa dozvieš:
Čo je ISTQB CT-AI certifikácia
ISTQB CT-AI (Certified Tester AI Testing) je špecializovaná certifikácia, ktorá overuje schopnosť testera testovať systémy založené na umelej inteligencii (AI testing), teda systémy, ktorých správanie nie je vždy deterministické. Certifikát stojí na úrovni Specialist a nadväzuje na ISTQB Foundation Level (CTFL), ktorý je preň povinnou prerekvizitou.
Kým Foundation Level pokrýva základy testovania softvéru, CT-AI ich rozširuje o špecifiká, ktoré klasické testovanie nepozná: pravdepodobnostné správanie, závislosť od trénovacích dát a priebežne sa meniace modely. Tester sa tu učí, ako pristupovať k systému, ktorý sa „učí“ sám a ktorého výstup závisí od dát, na ktorých bol natrénovaný.
Dôležité je nezamieňať dve veci. ISTQB AI Testing sa zameriava na testovanie systémov, ktoré obsahujú AI alebo komponenty strojového učenia (ML), model je v tomto prípade predmetom testu. Medzi špecializované certifikácie tak pribudla aj AI testing certifikácia, ktorá rozširuje CTFL o testovanie inteligentných systémov. Cieľom nie je naučiť ťa stavať modely, ale rozumieť tomu, ako ich kvalitne otestovať.
Vieš, že…
…testovanie AI systémov potrebuje vlastnú certifikáciu? Klasické testovanie počíta s tým, že rovnaký vstup dá rovnaký výstup. Pri systémoch s umelou inteligenciou to neplatí, výstup nie je vždy rovnaký pri rovnakom vstupe a práve tento nedeterminizmus je dôvod, prečo CT-AI vznikla ako samostatná certifikácia.
CT-AI v2.0 vs v1.0: čo sa zmenilo
Aktuálna verzia je CT-AI v2.0, verzia v1.0 je vo fáze retirement. Anglická verzia v1.0 ostáva dostupná do 21. apríla 2027 a neanglické verzie do 21. októbra 2027, po týchto dátumoch sa skúšky ani školenia pre v1.0 už neponúkajú.
Verzia v2.0 prestavala sylabus okolo životného cyklu systému strojového učenia. Pribudli témy pravdepodobnostného správania, nedeterminizmu a závislosti od dát a rozšírilo sa pokrytie testovania generatívnej AI vrátane veľkých jazykových modelov (LLM).
Zásadná zmena je v rozsahu. Pôvodná v1.0 obsahovala aj kapitolu o používaní AI pri testovaní. Tú v2.0 vypustila a presunula do samostatnej certifikácie CT-GenAI. Aktuálny sylabus sa tak sústredí čisto na testovanie AI systémov a učebné materiály pripravené pre v1.0 sú už zastarané.
Odporúčame ti…
Pred prihlásením na skúšku si over aktuálnu verziu sylabu priamo na istqb.org a drž sa materiálov, ktoré sú s ňou zosúladené. Prípravu podľa v1.0 si len zbytočne predĺžiš.
Čo pokrýva sylabus CT-AI (AI Testing sylabus)
Sylabus CT-AI pokrýva faktory kvality AI systémov, testovanie strojového učenia, neurónové siete a testovanie generatívnej AI vrátane veľkých jazykových modelov. Oficiálny ISTQB AI Testing syllabus je postavený okolo toho, ako sa AI systém vyvíja a kde doň môže tester zasiahnuť. Namiesto kopírovania oficiálneho dokumentu tu nájdeš hlavné tematické okruhy:
- Faktory kvality AI systémov (AI quality characteristics), vlastnosti ako nedeterminizmus, transparentnosť, vysvetliteľnosť a odolnosť. Práve tieto charakteristiky určujú, čo vlastne pri AI systéme testuješ.
- Metriky funkčnej výkonnosti modelov strojového učenia (ML functional performance metrics), presnosť, návratnosť a ďalšie ukazovatele, ktoré pri AI nahrádzajú jednoduché „prešlo/zlyhalo“.
- Testovanie ML modelov naprieč životným cyklom, od kvality vstupných a trénovacích dát cez testovanie na úrovni modelu až po testovanie celého systému v produkcii.
- Neurónové siete a prístupy k ich testovaniu vrátane techník, ktoré odhaľujú slabé miesta a hranice modelu.
- Testovanie systémov založených na generatívnej AI a LLM, kde výstup nie je nikdy úplne predvídateľný a treba ho hodnotiť inak než pevný očakávaný výsledok.
Práve šírka týchto tém robí z AI testing certifikácie niečo viac než rozšírenie bežného testovacieho kurzu: vyžaduje pochopenie toho, ako sa model učí, kde robí chyby a ako sa jeho kvalita vôbec meria. Pre testera, ktorý prichádza z klasického testovania, je to nový spôsob uvažovania o kvalite. Sylabus tieto okruhy prepája s celým životným cyklom modelu, od prípravy dát cez tréning až po nasadenie a monitorovanie v produkcii, takže vidíš, kde aké riziko vzniká.
Pre koho je CT-AI určená
CT-AI je určená testerom, QA inžinierom, test analytikom aj dátovým špecialistom, ktorí pracujú so systémami obsahujúcimi AI alebo ML komponenty. Hodí sa aj testovacím manažérom, konzultantom a vývojárom, ktorí chcú rozumieť, ako sa kvalita AI systému zabezpečuje. Spoločným menovateľom je zložený CTFL, bez neho sa na skúšku neprihlásiš.
V regulovaných odvetviach ako insurtech a fintech je certifikácia obzvlášť relevantná. AI a ML modely tu vstupujú do produkcie napríklad v scoringu klientov, oceňovaní rizika alebo pri detekcii podvodov, kde chyba modelu má priamy finančný aj regulačný dopad. Pre testera v takom prostredí je certifikát pre AI testera spôsob, ako preukázať, že rozumie rizikám nedeterministických systémov a vie ich systematicky overiť.
Aj v msg life Slovakia, kde sa insurtech a AI stretávajú, je testovanie AI systémov témou, ktorá rastie. Pre kariérny rast testera je to oblasť, kde sa špecializácia oplatí skôr než neskôr.
Odporúčame ti…
Sylabus CT-AI stavia na základoch ISTQB Foundation Level. Ak ešte nemáš základnú certifikáciu, začni prehľadom celého ISTQB systému.
Ako prebieha skúška CT-AI
Skúška CT-AI pozostáva z otázok s výberom odpovede. Aktuálne parametre (počet otázok, čas a hranica úspešnosti) si over vždy na oficiálnom sylabe ISTQB alebo na casqb.org, keďže sa medzi verziami menia. Prerekvizitou je platný certifikát CTFL, bez neho ťa na skúšku CT-AI neprihlásia.
Skúšku zložíš cez certifikačný board alebo skúšobného partnera. Na Slovensku a v Česku ju zastrešuje CASQB, kde nájdeš aktuálne termíny, ceny aj možnosti online skúšky. K dispozícii sú aj oficiálne sample questions od ISTQB, na ktorých si formát otázok vyskúšaš bez záväzku a zistíš, či je tvoja príprava dostatočná.
Konkrétne čísla (počet otázok, časový limit aj počet bodov potrebných na úspech) sa pri prechode medzi verziami menia, preto sa pri certifikácii ISTQB AI Testing spoľahni na údaj v aktuálnom oficiálnom sylabe, nie na staršie blogy. ISTQB navyše oficiálne nezverejňuje mieru úspešnosti, takže akýkoľvek „pass rate“ z internetu ber len ako orientačný.
Odporúčame ti…
Príprava na skúšku má osvedčený postup: sylabus, glossary, mock testy. Preštuduj si návod, ako sa pripraviť na ISTQB skúšku priamo od testerky, ktorá ju zvládla na prvýkrát.
CT-AI vs CT-GenAI: aký je rozdiel
CT-AI sa zameriava na testovanie AI systémov, kým CT-GenAI (Certified Tester Generative AI) sa zameriava na používanie generatívnej AI v procese testovania. Tieto dve certifikácie sa často zamieňajú, hoci riešia opačné strany tej istej mince. Pri CT-AI je AI predmetom testu, overuješ kvalitu modelu. Pri CT-GenAI je AI nástrojom v tvojich rukách, ktorým napríklad generuješ testovacie prípady či analyzuješ defekty.
Ak v práci riešiš testing s generative AI, teda nasadzuješ LLM priamo do testovacieho procesu, smeruješ skôr ku CT-GenAI. Ak testuješ produkt s AI funkciami, dáva zmysel CT-AI. Obe pritom stoja na rovnakom základe, na Foundation Level.
| Hľadisko | CT-AI | CT-GenAI |
|---|---|---|
| Čo testuješ | AI systém ako predmet testu | testovací proces s pomocou AI |
| Rola AI | predmet testu | nástroj testera |
| Typické témy | ML modely, neurónové siete, kvalita AI | LLM, prompt engineering, generovanie testov |
| Prerekvizita | CTFL | CTFL |
FAQ: Často kladené otázky o ISTQB AI Testingu
Čo je ISTQB CT-AI certifikácia?
ISTQB CT-AI je špecializovaná certifikácia pre testovanie systémov s umelou inteligenciou. Overuje, že tester rozumie špecifikám AI a ML modelov a dokáže prispieť k ich testovacej stratégii. Stojí na úrovni Specialist nad Foundation Level (CTFL) a cieli na testerov, QA inžinierov aj dátových špecialistov. Nezameriava sa na to, ako modely stavať, ale ako kvalitne overiť ich správanie vrátane nedeterminizmu, ktorý klasické testovanie nepozná.
Ako sa stať testerom AI systémov?
Cesta vedie cez základ v testovaní a až potom cez špecializáciu. Zlož ISTQB Foundation Level, získaj prax s testovaním dát a modelov a doplň si certifikát pre AI testera, teda CT-AI. Pomôže aj základné pochopenie strojového učenia: ako sa model trénuje, ako sa meria jeho kvalita a prečo sa jeho správanie mení s dátami. Najviac sa naučíš na projekte, kde AI model reálne beží v produkcii a rieši sa jeho spoľahlivosť.
Potrebujem CTFL pred CT-AI skúškou?
Áno, na skúšku CT-AI potrebuješ platný certifikát ISTQB Foundation Level (CTFL). Bez neho sa na CT-AI nemôžeš prihlásiť. CTFL je teda prvý krok a certifikát CT-AI naň nadväzuje ako špecializácia. Foundation Level ti dá spoločný slovník a základné princípy testovania, na ktorých CT-AI stavia, keď ich rozširuje o špecifiká AI a ML systémov. Ak CTFL ešte nemáš, začni ním.
Aký je rozdiel medzi CT-AI a CT-GenAI?
CT-AI je o testovaní AI systémov, CT-GenAI je o používaní generatívnej AI pri testovaní. Sú to dve odlišné certifikácie s opačným zámerom a často sa zamieňajú. Pri CT-AI je model predmetom testu a overuješ jeho kvalitu, pri CT-GenAI je AI tvojím nástrojom, ktorým napríklad generuješ testovacie prípady. CT-AI rieši ML modely a neurónové siete, CT-GenAI skôr LLM a prompt engineering. Obe pritom stoja na rovnakom základe, na Foundation Level (CTFL).
Investícia do certifikácie ISTQB AI Testing
Certifikácia ISTQB AI Testing sa oplatí, ak pracuješ alebo chceš pracovať s testovaním AI a ML systémov. Je to zatiaľ jedna z mála formálnych kvalifikácií v tejto rýchlo rastúcej oblasti. Dopyt po testeroch, ktorí rozumejú AI systémom, rastie a certifikát je spôsob, ako sa odlíšiť, najmä v regulovaných odvetviach, kde je dôvera v model kritická. CT-AI je jedným z viacerých certifikátov pre testerov, ktoré sa oplatí zvážiť, a dáva najväčší zmysel ako ďalší krok po zvládnutom Foundation Level.
Ak ešte len začínaš, zlož najprv CTFL a až potom sa špecializuj. Bez základu sa na skúšku ani nedostaneš. Ak ťa zaujíma širší dopad umelej inteligencie na prácu testera, pozri, ako sa AI reálne využíva v testovaní softvéru a kde má limity. Certifikát ti sám prácu nenájde, no v oblasti, kde je formálnych kvalifikácií málo, je silným signálom, že téme rozumieš.
Zdroje:
- https://istqb.org/certifications/certified-tester-ai-testing-ct-ai/
- https://istqb.org/certifications/certified-tester-ai-testing-ct-ai-retiring/
- https://casqb.org/sk
- https://astqb.org/certifications/istqb-ai-testing/
