Score — vurdering efter et kriterium i Jev

En Score er en af de tre spørgsmålstyper i TypeSafes Jev-model. Den vurderer inputtet efter ordnede niveauer, du skriver, og returnerer en sandsynlighedsvægtet værdi, der kan lande mellem to niveauer.

En Score er et kriterium. Du skriver niveauerne i rækkefølge, laveste først, med ord — og svaret er en position på den skala, nummereret fra 0. Fordi det er et sandsynlighedsvægtet gennemsnit af niveauerne, kan og gør det ofte det at lande mellem to af dem.

Beskriv niveauerne frem for at nummerere dem. TypeSafes egen dokumentation viser det samme input score rent mod tre beskrevne niveauer og dele sin sandsynlighed, når det kun får bare tal: uden noget at matche imod har modellen intet at ræsonnere ud fra.

Et rigtigt svar

Sendt til jev-1.13.0. Tallene nedenfor er, hvad der kom tilbage.

Tilstanden

CSV-eksporten afkorter stille ved 1000 rækker siden 4.2.0. Ingen fejl vises. Nedgradering løser det. Reproduceret på to konti. Det her ødelægger vores månedsafslutning.

Spørgsmålet

Hvor alvorligt er dette problem?

70 %

middel

2.35 af 4 · Større, en arbejdsgang er brudt

2.35

0 Kosmetisk 0 %
1 Mindre, har en omvej 0 %
2 Større, en arbejdsgang er brudt 77 %
3 Kritisk, kernefunktionalitet er ubrugelig 10 %
4 Katastrofal, datatab eller sikkerhedshul 13 %

2,35 ligger lige forbi „en arbejdsgang er brudt“ — men læs fordelingen frem for tallet. 77 % ligger på niveau 2, og alligevel ligger 13 % helt oppe på niveau 4, for stille afkortning kan faktisk være datatab. Et gennemsnit på 2,35 og en smal top ved 2,35 er forskellige svar, og kun `probabilities` skelner dem.

Forespørgslen og svaret, ordret

Forespørgsel

{
  "state": "CSV export silently truncates at 1000 rows since 4.2.0. No error shown. Downgrading fixes it. Reproduced on two accounts. This breaks our month-end close.",
  "model": "jev-latest",
  "questions": {
    "severity": {
      "type": "score",
      "instructions": "How severe is this issue?",
      "criteria": [
        "Cosmetic",
        "Minor, has a workaround",
        "Major, a workflow is broken",
        "Critical, core functionality is unusable",
        "Catastrophic, data loss or a security hole"
      ]
    }
  }
}

Svar

{
  "model": "jev-1.13.0",
  "answers": {
    "severity": {
      "type": "score",
      "score": 2.35,
      "confidence": 0.7,
      "legend": {
        "0": "Cosmetic",
        "1": "Minor, has a workaround",
        "2": "Major, a workflow is broken",
        "3": "Critical, core functionality is unusable",
        "4": "Catastrophic, data loss or a security hole"
      },
      "probabilities": {
        "0": 0,
        "1": 0,
        "2": 0.77,
        "3": 0.1,
        "4": 0.13
      }
    }
  }
}

Hvad svaret indeholder

type "score": Svarer til spørgsmålstypen.
score number: Det sandsynlighedsvægtede gennemsnit af niveaunumrene. For fem niveauer går det fra 0 til 4, og det kan lande mellem niveauer.
legend map<string, string>: Hvert niveaunummer knyttet tilbage til den beskrivelse, du skrev.
probabilities map<string, number>: Hvert niveau knyttet til sin sandsynlighed. De summer til 1.
confidence number: 0 til 1. Én top på ét niveau er høj; sandsynlighed spredt over niveauer er lav.

Regler og grænser

criteria er en ordnet liste af niveaubeskrivelser, laveste ende først. Den kræver mindst to niveauer og tager op til ti.
Et niveaus nummer er dets position i listen, med start ved 0.
Forskellige fordelinger giver den samme score: 1,0 kan betyde, at al sandsynlighed ligger på niveau 1, eller at den er delt ligeligt mellem niveau 0 og 2. Læs probabilities og confidence ved siden af.

Grib til en Score, når

Svarene er trin på én og samme stige — alvor, hastværk, frustration, kvalitet, risiko.
At lande mellem to niveauer er informativt frem for et problem.
Du vil kombinere flere vurderinger med vægte, du styrer, i stedet for at stille ét vagt spørgsmål om samlet kvalitet.

Brug noget andet, når

Mulighederne er ikke ordnede. En Choice er den ærlige form for uordnede kategorier.
Du kan ikke beskrive niveauerne tydeligt adskilt. Brug så mange, du kan beskrive, og ikke flere — ubeskrevne niveauer giver modellen intet at matche imod.

De to andre

Noul

En Noul er en af de tre spørgsmålstyper i TypeSafes Jev-model. Den stiller ét ja/nej-spørgsmål og svarer med sandsynligheden for, at svaret er ja, som et tal fra 0 til 1.

Choice

En Choice er en af de tre spørgsmålstyper i TypeSafes Jev-model. Den vælger præcis én mulighed fra et sæt, du definerer, og returnerer vinderen, en sandsynlighed for hver mulighed og en tillidsværdi.

Stil en Score om din egen tekst

Legepladsen sender alt, du indsætter, til Jev og tegner hvert svar op. Ingen konto, ingen nøgle.

Åbn legepladsen