Prijeđi na sadržaj
SilkTrain

SilkTrain

Kako provjeravamo trenere umjetne inteligencije

Redoslijed pet provjera, ljudski pregled i probni rad na stvarnim zadacima.

← Blog

Primamo prijave za pilot-projekte. Provjera identiteta, snimanje testova i automatske isplate su u pripremi. Sastav tima i rokove potvrđujemo pojedinačno.

Najprije provjere s manjim troškom

Vlastita izjava o mjestu boravka, provjera IP adrese, uređaja i broja telefona. Napisan na tom jeziku, s vremenskim ograničenjem, sa zadacima o stilu i dijalektu te otkrivanjem lijepljenja teksta. Označavanje, rangiranje za RLHF ili kviz iz struke, s automatskim bodovanjem.

Prva tri koraka počinju besplatnim automatskim testovima. Tier 1 klijentima ne predstavljamo kao spremnost za angažman. Plaćena provjera identiteta slijedi tek za kandidate koji su pokazali sposobnost.

Posljednje dvije provjere vodi čovjek

Provjera dokumenta i prisutnosti uživo, zatim snimljeni ponovljeni test s novim zadacima. Zadatak od 20 minuta uz snimanje kamere i zaslona, zatim usmeno objašnjenje od 2 minute na tom jeziku, koje ocjenjuje recenzent izvorni govornik.

Snimka sama ne sprječava pomoć s drugog uređaja. Usmeno objašnjenje odluka na vlastitom jeziku omogućuje procjenu načina razmišljanja.

Probni rad na stvarnom projektu

Tier 2 · spremni za angažman. Probno razdoblje: prvih 10 naplaćenih sati na svakom novom projektu dvostruko se provjerava. Tier 3: 200+ naplaćenih sati u upravljanim timovima uz QA ocjenu od 92% ili više.

Jedan rezultat i jasna pravila

QA mjeri točnost zlatnih zadataka u posljednjih 30 dana. Rezultat ispod 85% dva radna dana zaredom znači stanku i plaćenu kalibraciju. Ako je nakon dva tjedna i dalje ispod 85%, razina se snižava i angažman na projektu završava. Automatska oznaka sama ne uzrokuje zabranu; žalbu drugom pregledavatelju možete podnijeti u roku od 14 dana.