Score — notare pe o grilă în Jev

Un răspuns real

Trimis către jev-1.13.0. Cifrele de mai jos sunt ce s-a întors.

2,35 stă imediat după „un flux de lucru e stricat” — dar citește distribuția, nu numărul. 77% stau pe nivelul 2 și totuși 13% urcă tocmai pe nivelul 4, fiindcă trunchierea tăcută chiar poate însemna pierdere de date. O medie de 2,35 și un vârf îngust la 2,35 sunt răspunsuri diferite, iar doar `probabilities` le deosebește.

{
  "state": "CSV export silently truncates at 1000 rows since 4.2.0. No error shown. Downgrading fixes it. Reproduced on two accounts. This breaks our month-end close.",
  "model": "jev-latest",
  "questions": {
    "severity": {
      "type": "score",
      "instructions": "How severe is this issue?",
      "criteria": [
        "Cosmetic",
        "Minor, has a workaround",
        "Major, a workflow is broken",
        "Critical, core functionality is unusable",
        "Catastrophic, data loss or a security hole"
      ]
    }
  }
}

{
  "model": "jev-1.13.0",
  "answers": {
    "severity": {
      "type": "score",
      "score": 2.35,
      "confidence": 0.7,
      "legend": {
        "0": "Cosmetic",
        "1": "Minor, has a workaround",
        "2": "Major, a workflow is broken",
        "3": "Critical, core functionality is unusable",
        "4": "Catastrophic, data loss or a security hole"
      },
      "probabilities": {
        "0": 0,
        "1": 0,
        "2": 0.77,
        "3": 0.1,
        "4": 0.13
      }
    }
  }
}

Ce conține răspunsul

type "score"

Corespunde tipului întrebării.

score number

Media ponderată cu probabilități a numerelor de nivel. La cinci niveluri merge de la 0 la 4 și poate cădea între niveluri.

legend map<string, string>

Fiecare număr de nivel pus înapoi în legătură cu descrierea pe care ai scris-o.

probabilities map<string, number>

Fiecare nivel cu probabilitatea lui. Însumează 1.

confidence number

De la 0 la 1. Un singur vârf pe un nivel înseamnă ridicată; probabilitatea împrăștiată peste niveluri înseamnă scăzută.

Reguli și limite

• criteria este un tablou ordonat de descrieri de nivel, de la capătul de jos. Are nevoie de cel puțin două niveluri și acceptă până la zece.
• Numărul unui nivel este poziția lui în tablou, începând de la 0.
• Distribuții diferite produc același scor: 1,0 poate însemna că toată probabilitatea stă pe nivelul 1 sau că se împarte egal între nivelurile 0 și 2. Citește alături probabilities și confidence.

Celelalte două