Към съдържанието
SilkTrain

SilkTrain

Как проверяваме обучителите на изкуствен интелект

Редът на петте проверки, човешкият преглед и изпитателният период в реална работа.

← Блог

Приемаме заявки за пилотни проекти. Подготвяме проверката на самоличност, записването на тестове и автоматичните плащания. Потвърждаваме екипа и сроковете индивидуално.

Първо проверките с по-ниска цена

Самодекларация за местоживеене, проверка на IP адреса, на устройството и на телефона. Писмен, на съответния език, с ограничено време, със задачи за стил и диалект и със засичане на поставен текст. Анотиране, класиране за RLHF или тест по специалността, оценявани автоматично.

Първите три стъпки започват с безплатни автоматични тестове. Tier 1 не се представя като готовност за наемане. Платената проверка на самоличност следва за кандидати, които вече са показали умения.

Последните две проверки се водят от човек

Проверка на документа и проверка, че пред камерата е реален човек, след това записан повторен тест с нови задачи. Задача от 20 минути със запис на камерата и екрана, след това 2-минутно устно обяснение на съответния език, оценено от проверяващ – носител на езика.

Самият запис не пречи на помощ от друго устройство. Устното обяснение на решенията на собствения език позволява да се оцени начинът на мислене.

Изпитателен период в реален проект

Tier 2 · готовност за наемане. Изпитателен период: първите 10 фактурирани часа по всеки нов проект се проверяват двойно. Tier 3: 200+ фактурирани часа в управлявани екипи с QA оценка от 92% или повече.

Един резултат и ясни правила

QA измерва точността на еталонни задачи за последните 30 дни. Под 85% два работни дни поред води до пауза и платено калибриране. Ако след две седмици резултатът още е под 85%, нивото се понижава и участието в проекта приключва. Автоматичният сигнал сам не налага забрана; в срок от 14 дни може да се подаде жалба до друг проверяващ.