Score — arviointi asteikkoa vasten Jevissä

Score on yksi TypeSafen Jev-mallin kolmesta kysymystyypistä. Se arvioi syötteen kirjoittamiasi järjestettyjä tasoja vasten ja palauttaa todennäköisyyspainotetun arvon joka voi osua kahden tason väliin.

Score on asteikko. Kirjoitat tasot järjestyksessä, matalin ensin, sanoin — ja vastaus on sijainti tuolla asteikolla, numeroituna nollasta. Koska se on tasojen todennäköisyyspainotettu keskiarvo, se voi osua ja usein osuukin kahden väliin.

Kuvaile tasot äläkä numeroi niitä. TypeSafen oma dokumentaatio näyttää saman syötteen saavan puhtaan pistemäärän kolmea kuvattua tasoa vasten ja jakavan todennäköisyytensä kun annetaan pelkät numerot: ilman mitään mihin verrata mallilla ei ole mistä päätellä.

Oikea vastaus

Lähetetty mallille jev-1.13.0. Alla olevat luvut ovat se mitä palasi.

Tila

CSV-vienti katkeaa hiljaisesti 1000 riviin versiosta 4.2.0 lähtien. Virhettä ei näytetä. Vanhempaan versioon palaaminen korjaa sen. Toistettu kahdella tilillä. Tämä rikkoo kuukauden sulkemisemme.

Kysymys

Kuinka vakava tämä ongelma on?

70 %

keskitasoinen

2.35 / 4 · Suuri, työnkulku rikki

2.35

0 Kosmeettinen 0 %
1 Pieni, kiertotie olemassa 0 %
2 Suuri, työnkulku rikki 77 %
3 Kriittinen, ydintoiminto käyttökelvoton 10 %
4 Katastrofaalinen, tietohäviö tai tietoturva-aukko 13 %

2,35 istuu juuri kohdan ”työnkulku rikki” jälkeen — mutta lue jakauma äläkä lukua. 77 prosenttia on tasolla 2, ja silti 13 prosenttia istuu aivan tasolla 4, koska hiljainen katkeaminen voi todella olla tietohäviö. Keskiarvo 2,35 ja kapea huippu kohdassa 2,35 ovat eri vastauksia, ja vain `probabilities` erottaa ne.

Pyyntö ja vastaus, sanatarkasti

Pyyntö

{
  "state": "CSV export silently truncates at 1000 rows since 4.2.0. No error shown. Downgrading fixes it. Reproduced on two accounts. This breaks our month-end close.",
  "model": "jev-latest",
  "questions": {
    "severity": {
      "type": "score",
      "instructions": "How severe is this issue?",
      "criteria": [
        "Cosmetic",
        "Minor, has a workaround",
        "Major, a workflow is broken",
        "Critical, core functionality is unusable",
        "Catastrophic, data loss or a security hole"
      ]
    }
  }
}

Vastaus

{
  "model": "jev-1.13.0",
  "answers": {
    "severity": {
      "type": "score",
      "score": 2.35,
      "confidence": 0.7,
      "legend": {
        "0": "Cosmetic",
        "1": "Minor, has a workaround",
        "2": "Major, a workflow is broken",
        "3": "Critical, core functionality is unusable",
        "4": "Catastrophic, data loss or a security hole"
      },
      "probabilities": {
        "0": 0,
        "1": 0,
        "2": 0.77,
        "3": 0.1,
        "4": 0.13
      }
    }
  }
}

Mitä vastaus sisältää

type "score": Vastaa kysymystyyppiä.
score number: Tasonumeroiden todennäköisyyspainotettu keskiarvo. Viidellä tasolla se kulkee nollasta neljään ja voi osua tasojen väliin.
legend map<string, string>: Jokainen tasonumero liitettynä takaisin kirjoittamaasi kuvaukseen.
probabilities map<string, number>: Jokainen taso liitettynä todennäköisyyteensä. Ne summautuvat yhteen.
confidence number: 0–1. Yksi huippu yhdellä tasolla on korkea; tasojen yli levinnyt todennäköisyys matala.

Säännöt ja rajat

criteria on järjestetty taulukko tasokuvauksia, matalin pää ensin. Se vaatii vähintään kaksi tasoa ja ottaa enintään kymmenen.
Tason numero on sen sijainti taulukossa, alkaen nollasta.
Eri jakaumat tuottavat saman pistemäärän: 1,0 voi tarkoittaa että kaikki todennäköisyys istuu tasolla 1 tai että se jakautuu tasan tasojen 0 ja 2 kesken. Lue probabilities ja confidence sen rinnalla.

Tartu Score-tyyppiin kun

Vastaukset ovat yhden ja saman tikkaan askelmia — vakavuus, kiireellisyys, turhautuminen, laatu, riski.
Kahden tason väliin osuminen on informatiivista eikä ongelma.
Haluat yhdistää useita arvioita hallitsemillasi painoilla sen sijaan että esittäisit yhden epämääräisen kysymyksen kokonaislaadusta.

Käytä jotain muuta kun

Vaihtoehdot eivät ole järjestyksessä. Choice on rehellinen muoto järjestämättömille kategorioille.
Et osaa kuvata tasoja selvästi erillisinä. Käytä niin montaa kuin osaat kuvata, et enempää — kuvaamattomat tasot eivät anna mallille mitään mihin verrata.

Kaksi muuta

Noul

Noul on yksi TypeSafen Jev-mallin kolmesta kysymystyypistä. Se esittää yhden kyllä/ei-kysymyksen ja vastaa todennäköisyydellä sille että vastaus on kyllä, lukuna nollasta yhteen.

Choice

Choice on yksi TypeSafen Jev-mallin kolmesta kysymystyypistä. Se valitsee täsmälleen yhden vaihtoehdon määrittelemästäsi joukosta ja palauttaa voittajan, todennäköisyyden jokaiselle vaihtoehdolle sekä varmuusarvon.

Kysy Score omasta tekstistäsi

Leikkikenttä lähettää kaiken liittämäsi Jeville ja piirtää jokaisen vastauksen. Ei tiliä, ei avainta.

Avaa leikkikenttä