AI Quality Engineer at RB — Slovakia

← Back to job listings

About The Role

Pomôž nám definovať, čo znamená kvalitné a bezpečné AI riešenie. • Hľadáme AI Quality Engineera, ktorého primárnou úlohou bude rozvíjať testovanie a evaluáciu AI, ML a agentických riešení. Pri tradičnom softvéri často vieme jednoznačne určiť správny výsledok. Pri AI riešeniach musíme hodnotiť aj spoľahlivosť odpovedí, prácu s kontextom, stabilitu správania a reakcie na hraničné alebo rizikové situácie. Tvojou úlohou bude premeniť tieto očakávania na merateľné kritériá, testovacie scenáre a praktickú evaluačnú metodiku. Zároveň však nehľadáme človeka, ktorý sa chce držať iba úzkej definície testovania. AI projekty sú často nové, nejednoznačné a menia sa počas realizácie, preto potrebujeme niekoho, kto vie ísť za hranice klasickej QA roly a podľa potreby priložiť ruky k dielu aj v ďalších oblastiach projektu. • Čo ťa u nás čaká • Definovanie testovacieho a evaluačného prístupu pre AI, ML a agentické riešenia. • Spolupráca na tvorbe akceptačných kritérií už počas discovery a návrhu riešenia. • Identifikácia rizikových scenárov, edge cases a neželaného správania AI riešení. • Návrh a realizácia funkčných, integračných a regresných testov. • Príprava testovacích dát a evaluačných datasetov. • Hodnotenie správania AI modelov, agentov a workflow. • Overovanie spoľahlivosti výstupov, práce s kontextom a stability pri opakovanom spustení. • Interpretácia výsledkov evaluácie a komunikácia zistení vývojárom, architektom, Data Scientistom a Product Ownerovi. • Návrh úprav acceptance kritérií, promptov, agentických workflow alebo guardrails. • Tvorba spoločných testovacích štandardov a praktických pravidiel pre hodnotenie AI riešení. • Využívanie automatizácie a AI nástrojov pri testovaní. • Základom roly zostáva kvalita, testovanie a evaluácia AI riešení. Nepôjde však iba o kontrolu funkčnosti aplikácie, ale aj o hodnotenie správania AI, spoľahlivosti výstupov, práce s kontextom a stability výsledkov. Podľa potrieb konkrétneho projektu sa môžeš zapojiť aj do prípravy požiadaviek, návrhu riešenia, práce s dátami, dokumentácie, nastavovania guardrails alebo podpory tímu pri uvádzaní riešenia do praxe. • Aký človek sa k nám hodí • Si presný, skeptický a zvedavý človek, ktorý sa nespokojí s povrchným overením riešenia. Pýtaš sa na nejasné očakávania, dokážeš odhaliť slabé acceptance kritériá a nezameníš technicky fungujúce demo za kvalitné produkčné riešenie. Zároveň máš chuť byť súčasťou tímu, ktorý veci nielen kontroluje, ale aj aktívne pomáha dotiahnuť ich do použiteľného stavu a podľa potreby vie priložiť ruky k dielu aj mimo samotného testovania. • Čo ponúkame • Prácu na AI riešeniach a platformách s reálnym využitím v banke. • Priestor skúmať nové technológie a premieňať ich na bezpečné, prevádzkovateľné služby. • Spoluprácu s odborníkmi z oblasti AI, dát, vývoja, architektúry, cloudu a bezpečnosti. • Možnosť ovplyvniť technické štandardy a spôsob využívania AI v organizácii. • Podporu odborného rastu, zdieľania know-how a praktického experimentovania. • Prostredie, v ktorom sa od ľudí očakáva samostatnosť, otvorená komunikácia a zodpovednosť za výsledok.