Score — βαθμολόγηση σε κλίμακα στο Jev

Μια πραγματική απάντηση

Στάλθηκε στο jev-1.13.0. Οι αριθμοί παρακάτω είναι ό,τι επέστρεψε.

Το 2,35 κάθεται λίγο μετά το «μια ροή εργασίας έχει σπάσει» — αλλά διάβασε την κατανομή αντί για τον αριθμό. Το 77% βρίσκεται στο επίπεδο 2, κι όμως 13% κάθεται ψηλά στο επίπεδο 4, γιατί η σιωπηλή περικοπή μπορεί όντως να είναι απώλεια δεδομένων. Ένας μέσος 2,35 και μια στενή κορυφή στο 2,35 είναι διαφορετικές απαντήσεις, και μόνο το `probabilities` τις ξεχωρίζει.

{
  "state": "CSV export silently truncates at 1000 rows since 4.2.0. No error shown. Downgrading fixes it. Reproduced on two accounts. This breaks our month-end close.",
  "model": "jev-latest",
  "questions": {
    "severity": {
      "type": "score",
      "instructions": "How severe is this issue?",
      "criteria": [
        "Cosmetic",
        "Minor, has a workaround",
        "Major, a workflow is broken",
        "Critical, core functionality is unusable",
        "Catastrophic, data loss or a security hole"
      ]
    }
  }
}

{
  "model": "jev-1.13.0",
  "answers": {
    "severity": {
      "type": "score",
      "score": 2.35,
      "confidence": 0.7,
      "legend": {
        "0": "Cosmetic",
        "1": "Minor, has a workaround",
        "2": "Major, a workflow is broken",
        "3": "Critical, core functionality is unusable",
        "4": "Catastrophic, data loss or a security hole"
      },
      "probabilities": {
        "0": 0,
        "1": 0,
        "2": 0.77,
        "3": 0.1,
        "4": 0.13
      }
    }
  }
}

Τι περιέχει η απάντηση

type "score"

Ταιριάζει με τον τύπο της ερώτησης.

score number

Ο σταθμισμένος με πιθανότητες μέσος των αριθμών των επιπέδων. Για πέντε επίπεδα πάει από 0 έως 4 και μπορεί να πέσει ανάμεσα σε επίπεδα.

legend map<string, string>

Κάθε αριθμός επιπέδου αντιστοιχισμένος πίσω στην περιγραφή που έγραψες.

probabilities map<string, number>

Κάθε επίπεδο αντιστοιχισμένο στην πιθανότητά του. Αθροίζονται στο 1.

confidence number

0 έως 1. Μία κορυφή σε ένα επίπεδο είναι υψηλή· πιθανότητα απλωμένη στα επίπεδα είναι χαμηλή.

Κανόνες και όρια

• Το criteria είναι διατεταγμένος πίνακας περιγραφών επιπέδων, με το κάτω άκρο πρώτο. Χρειάζεται τουλάχιστον δύο επίπεδα και δέχεται έως δέκα.
• Ο αριθμός ενός επιπέδου είναι η θέση του στον πίνακα, ξεκινώντας από το 0.
• Διαφορετικές κατανομές δίνουν την ίδια βαθμολογία: το 1,0 μπορεί να σημαίνει ότι όλη η πιθανότητα κάθεται στο επίπεδο 1 ή ότι μοιράζεται ισόποσα ανάμεσα στα επίπεδα 0 και 2. Διάβασε τα probabilities και confidence μαζί της.

Τα άλλα δύο