Прескокни до содржината
SilkTrain

SilkTrain

Како ги проверуваме обучувачите на вештачка интелигенција

Редоследот на петте проверки, човечкиот преглед и пробниот период на вистински задачи.

← Блог

Примаме пријави за пилот-проекти. Проверката на идентитет, снимањето тестови и автоматските исплати се во подготовка. Тимот и роковите ги потврдуваме поединечно.

Прво проверките со понизок трошок

Лична изјава за живеалиштето, проверка на IP-адресата, уредот и телефонот. Напишан на самиот јазик, со временско ограничување, со задачи за регистар и дијалект и со откривање на залепен текст. Анотација, рангирање за RLHF или квиз од областа, автоматски бодуван.

Првите три чекори почнуваат со бесплатни автоматски тестови. Tier 1 не се претставува како подготвеност за ангажман. Платената проверка на идентитет следува за кандидати што веќе покажале вештини.

Последните две проверки ги води човек

Проверка на документот и на присуството во живо, потоа снимен повторен тест со нови задачи. 20-минутна задача при која се снимаат камерата и екранот, потоа 2-минутно усно објаснување на самиот јазик, кое го оценува рецензент што е мајчин говорител.

Самата снимка не спречува помош од друг уред. Усното објаснување на одлуките на сопствениот јазик овозможува оценување на размислувањето.

Пробен период на вистински проект

Tier 2 · достапен за клиентите. Пробен период: првите 10 наплатени часа на секој нов проект се проверуваат двојно. Tier 3: најмалку 200 наплатени часа во управувани тимови и QA-оценка од 92% или повеќе.

Еден резултат и јасни правила

QA ја мери точноста на златните задачи во последните 30 дена. Под 85% два работни дена по ред значи пауза и платена калибрација. Ако по две недели резултатот е сè уште под 85%, нивото се намалува и ангажманот завршува. Автоматската ознака сама не води до забрана; во рок од 14 дена може да се поднесе жалба до друг оценувач.