Score — pagmamarka laban sa rubrik sa Jev

Ang Score ay isa sa tatlong uri ng tanong sa modelong Jev ng TypeSafe. Minamarkahan nito ang input laban sa nakaayos na mga antas na ikaw ang sumulat at nagbabalik ng halagang timbang sa probabilidad na maaaring mapunta sa pagitan ng dalawang antas.

Ang Score ay isang rubrik. Isinusulat mo ang mga antas nang maayos, pinakamababa muna, sa salita — at ang sagot ay isang posisyon sa sukat na iyon, binibilang mula 0. Dahil ito ay timbang-sa-probabilidad na katamtaman ng mga antas, kaya nito at madalas nitong mapuntahan ang pagitan ng dalawa.

Ilarawan ang mga antas sa halip na bilangan. Ipinapakita ng sariling dokumentasyon ng TypeSafe na ang parehong input ay nagmamarka nang malinis laban sa tatlong inilarawang antas at naghahati ng probabilidad kapag binigyan ng hubad na numero: kapag walang maitutugma, walang mapagbabatayan ang modelo.

Isang tunay na sagot

Ipinadala sa jev-1.13.0. Ang mga numero sa ibaba ang bumalik.

Ang estado

Tahimik na pinuputol ng CSV export ang datos sa 1000 row mula 4.2.0. Walang ipinapakitang error. Nawawala kapag bumalik sa dating bersyon. Naulit sa dalawang account. Sinisira nito ang pagsasara namin sa katapusan ng buwan.

Ang tanong

Gaano kalubha ang isyung ito?

70%
katamtaman
2.35 sa 4 · Malaki, may nasirang daloy ng trabaho

Ang 2.35 ay bahagyang lampas sa “may nasirang daloy ng trabaho” — pero basahin ang distribusyon sa halip na ang numero. Nasa antas 2 ang 77%, at gayunpaman nasa itaas pa sa antas 4 ang 13%, dahil talagang maaaring pagkawala ng datos ang tahimik na pagputol. Magkaibang sagot ang katamtamang 2.35 at ang makitid na tuktok sa 2.35, at ang `probabilities` lamang ang nakapaghihiwalay sa kanila.

Ang kahilingan at ang tugon, salita sa salita
Kahilingan
{
  "state": "CSV export silently truncates at 1000 rows since 4.2.0. No error shown. Downgrading fixes it. Reproduced on two accounts. This breaks our month-end close.",
  "model": "jev-latest",
  "questions": {
    "severity": {
      "type": "score",
      "instructions": "How severe is this issue?",
      "criteria": [
        "Cosmetic",
        "Minor, has a workaround",
        "Major, a workflow is broken",
        "Critical, core functionality is unusable",
        "Catastrophic, data loss or a security hole"
      ]
    }
  }
}
Tugon
{
  "model": "jev-1.13.0",
  "answers": {
    "severity": {
      "type": "score",
      "score": 2.35,
      "confidence": 0.7,
      "legend": {
        "0": "Cosmetic",
        "1": "Minor, has a workaround",
        "2": "Major, a workflow is broken",
        "3": "Critical, core functionality is unusable",
        "4": "Catastrophic, data loss or a security hole"
      },
      "probabilities": {
        "0": 0,
        "1": 0,
        "2": 0.77,
        "3": 0.1,
        "4": 0.13
      }
    }
  }
}

Ano ang laman ng sagot

type "score"
Tumutugma sa uri ng tanong.
score number
Ang timbang-sa-probabilidad na katamtaman ng mga numero ng antas. Sa limang antas ito ay tumatakbo mula 0 hanggang 4, at kaya nitong pumagitna sa mga antas.
legend map<string, string>
Bawat numero ng antas ay itinutugma pabalik sa paglalarawang isinulat mo.
probabilities map<string, number>
Bawat antas ay itinutugma sa probabilidad nito. Umaabot sila sa 1.
confidence number
0 hanggang 1. Ang isang tuktok sa iisang antas ay mataas; ang probabilidad na kumalat sa mga antas ay mababa.

Mga tuntunin at hangganan

  • Ang criteria ay nakaayos na array ng paglalarawan ng antas, pinakamababa muna. Kailangan nito ng hindi bababa sa dalawang antas at tumatanggap ito ng hanggang sampu.
  • Ang numero ng isang antas ay ang posisyon nito sa array, simula sa 0.
  • Magkakaibang distribusyon ang nagbubunga ng parehong puntos: ang 1.0 ay maaaring mangahulugang nasa antas 1 ang lahat ng probabilidad, o hati ito nang pantay sa antas 0 at 2. Basahin ang probabilities at confidence kasabay nito.

Gumamit ng Score kapag

  • Ang mga sagot ay baitang sa iisang hagdan — lubha, apura, pagkabigo, kalidad, panganib.
  • Ang pagpagitna sa dalawang antas ay nagbibigay-kabatiran, hindi problema.
  • Gusto mong pagsamahin ang ilang pagtatasa gamit ang timbang na ikaw ang may kontrol, sa halip na magtanong ng iisang malabong tanong tungkol sa pangkalahatang kalidad.

Gumamit ng iba kapag

  • Hindi nakaayos ang mga pagpipilian. Ang Choice ang tapat na hugis para sa di-nakaayos na kategorya.
  • Hindi mo mailarawan nang magkakaiba ang mga antas. Gamitin ang kasindami ng kaya mong ilarawan at wala nang higit pa — ang mga antas na walang paglalarawan ay walang maibibigay sa modelo para itugma.

Ang dalawa pa

Magtanong ng Score tungkol sa sarili mong teksto

Ipinapadala ng palaruan kay Jev ang anumang ipina-paste mo at iginuguhit ang bawat sagot. Walang account, walang key.

Buksan ang palaruan