{
  "schema": "silktrain-pilot-sample/v1",
  "synthetic": true,
  "locale": "kk",
  "workflow": "preference-data",
  "service": "training-evaluation",
  "title": "Жауаптарды артықшылық бойынша іріктеу және RLHF",
  "source_scenario": "Екі жауап бір ережені түсіндіреді. Біреуінде негізсіз ерекшелік бар.",
  "expected_delivery": "DPO немесе сыйақы моделіне арналған таңдалған және қабылданбаған жауап жұптары, негіздемелер мен тең бағалар.",
  "acceptance_check": "Екі сарапшы іріктемені бір өлшеммен бағалап, экспортқа дейін келіспеушілікті шешеді.",
  "scoping_checklist": "Жауаптарды, дереккөздерді, бағалау өлшемдерін және екінші маман тексеретін мысалдарды дайындаңыз.",
  "examples": [
    {
      "id": "P-023",
      "source": "Orders can be cancelled before dispatch.",
      "a": "All orders can be cancelled.",
      "b": "Cancellation is available before dispatch.",
      "chosen": "B",
      "rejected": "A",
      "criterion": "source_fidelity"
    },
    {
      "id": "P-024",
      "source": "Support replies within two working days.",
      "a": "Expect a reply within two working days.",
      "b": "Expect a reply within 48 hours.",
      "chosen": "A",
      "rejected": "B",
      "criterion": "business_days"
    },
    {
      "id": "P-025",
      "source": "Use reference K9 for this example.",
      "a": "The reference is K9.",
      "b": "Your reference is K9.",
      "chosen": null,
      "rejected": null,
      "tie": true,
      "criterion": "equivalent"
    }
  ]
}