Nedenstående rapport viser hver intents præstation med forskellige målinger. Hver måling giver indblik i, hvorfor hver intention opfører sig på en bestemt måde.
Typer af præstationsmålinger
1. Præcision
Den viser procentdelen af forvirring mellem en og andre intentioner, f.eks. Hvis præcisionen er 100%, er der ingen forvirring mellem prøver af intentionen og andre intentioner. Denne måling giver indblik i forvirringen mellem 2 intentioner eller flere.
Antag, at du har to intentioner; den ene har prøver, der skal være i den anden intention. Modellen er nu forvirret, ude af stand til at kategorisere prøven i hvilken intention, f.eks. hvis en intention har 20 prøver, og de alle er korrekte, og en anden intention har 10 prøver, hvoraf 5 af dem hører til den foregående intention, så bliver præcisionsmålingen for den første intention mindre.
Hvad skal du gøre, hvis præcisionen for en intention er lav
- Gå til intents forvirringsrapporten.
- Tjek intents-kolonnen for at se, hvilke intentioner der er forvirrede.
ℹ️ Grafen viser intentioner med lav præcision i Gul og dem med mere præcision i Blå.
2. Recall
Viser nøjagtigheden af hver intentions prøve. Dvs. når en intention har 20 prøver, er 10 nøjagtige, og de resterende 10 er unøjagtige. Intentionens recall her er 50% nøjagtighed. Recall tjekker nøjagtigheden af hver intentions prøver. Den besvarer spørgsmålet: “Hvor mange prøver er korrekt klassificeret?”
Hvad skal du gøre, hvis nøjagtigheden for en intention er lav
- Gå tilbage til intent sample-siden for at se, om prøverne er fejlklassificerede eller klassificeret i en anden intention.
- Hvis prøverne ikke er klassificerede, tilføj flere prøver.
- Hvis prøverne er fejlklassificerede i andre intentioner, skal du tjekke, om de hører til intentionen eller ej. Hvis ikke, tilføj flere lignende prøver.
ℹ️ Hvis dine prøvers recall-måling er lav, skal du tilføje flere prøver til dine intentioner.
ℹ️ Grafen viser intentioner med lav recall i Rød og dem med mere recall i Blå.
3. F1-score
Dette er den gennemsnitlige måling mellem Præcision og Recall. For at vurdere effektiviteten af modellen fuldt ud, bør du overveje både præcision og recall.
Hvad skal du gøre, hvis F1-scoren er lav
- Afvej antallet af prøver mellem intentioner og løs præcisions- og recallproblemer.