I den här artikeln får du lära dig hur du hanterar ärenden som har skippats under AI-träningen i Labelf, hur du använder dem för att förbättra kategoridefinitionerna, och hur du diskuterar svåra fall med Analysarkitekten och teamet.
Varför Använda "Skip"-funktionen?
Som vi har gått igenom tidigare är "Skip"-funktionen ett viktigt verktyg när du är osäker på hur du ska klassificera en text. Det är alltid bättre att skippa ett ärende än att klassificera det felaktigt och riskera att försämra modellens prestanda.
Vad Händer med Skippade Ärenden?
När du skippar ett ärende sparas det i en separat lista som du och dina kollegor kan gå igenom senare. Du hittar listan med skippade ärenden under respektive modell.
Hur Går Man Igenom Skippade Ärenden?
Gå till listan med skippade ärenden:
Navigera till den modell du vill jobba med.
Scrolla ner till listan med de senaste skippade ärendena.
Granska ärendena: Gå igenom de skippade ärendena ett i taget och försök att förstå varför de skippades.
Klassificera ärendena (om möjligt): Om du nu, efter att ha funderat lite extra eller diskuterat med kollegor, känner dig säker på hur ett ärende ska klassificeras kan du nu gå in och klassificera det.
Diskutera svåra fall: Om du fortfarande är osäker på hur ett ärende ska klassificeras, eller om du tycker att kategoridefinitionerna är otydliga, ta upp ärendet för diskussion med din Analysarkitekt och dina kollegor.
Uppdatera kategoridefinitionerna (vid behov): Om genomgången av skippade ärenden visar att det finns problem med kategoridefinitionerna, se till att uppdatera dem så att de blir tydligare och lättare att använda.
Ta bort ärenden från "skip listan": När du har hanterat ett ärende, antingen genom att annotera det eller genom att komma fram till att det inte går att annotera, ta bort det från skip listan genom att klicka på "X" bredvid ärendet.
Hur Använder Man Skippade Ärenden för att Förbättra Kategoridefinitionerna?
Identifiera återkommande problem: Om flera Modelltränare har skippat liknande ärenden kan det indikera att det finns ett problem med kategoridefinitionerna eller att det saknas en kategori.
Förtydliga gränser: Använd de skippade ärendena som exempel för att förtydliga gränserna mellan olika kategorier.
Lägg till exempel: Lägg till exempel från de skippade ärendena i kategoribeskrivningarna för att göra dem mer informativa.
Skapa nya kategorier: Om det finns en typ av ärende som ofta skippas och som inte passar in i någon av de befintliga kategorierna kan det vara nödvändigt att skapa en ny kategori.
Slå ihop kategorier: Om det finns två kategorier som är väldigt lika och som ofta blandas ihop kan det vara bättre att slå ihop dem till en kategori.
Hur Diskuterar Man Svåra Fall med Analysarkitekten och Teamet?
Förbered dig: Innan du tar upp ett ärende för diskussion, se till att du har läst igenom texten noggrant och att du har en klar uppfattning om varför du tycker att ärendet är svårt att klassificera.
Var tydlig och koncis: När du presenterar ärendet för Analysarkitekten och teamet, var tydlig och koncis i din beskrivning av problemet.
Lyssna på andras perspektiv: Var öppen för att lyssna på andras åsikter och förslag.
Fokusera på att hitta en lösning: Målet med diskussionen är att komma fram till en gemensam tolkning av kategorierna och att hitta en lösning på problemet.
Dokumentera besluten: Se till att alla beslut som fattas om kategoridefinitioner och annoteringspraxis dokumenteras så att alla i teamet kan ta del av dem.
Exempel:
Du har skippat ett ärende där en kund ringer in och klagar på att de har fått en påminnelseavgift trots att de har betalat sin faktura i tid. Du är osäker på om du ska klassificera ärendet som "Fakturafrågor" -> "Felaktig debitering" eller "Fakturafrågor" -> "Betalningsproblem".
Du tar upp ärendet för diskussion med din Analysarkitekt och dina kollegor.
Du förklarar varför du tycker att ärendet är svårt att klassificera.
Ni diskuterar ärendet och kommer fram till att det bör klassificeras som "Fakturafrågor" -> "Felaktig debitering" eftersom problemet i grunden handlar om en felaktig debitering, även om kunden har betalat i tid.
Ni uppdaterar kategoribeskrivningen för "Felaktig debitering" med ett exempel som liknar det aktuella ärendet för att förtydliga hur kategorin ska tillämpas.
Du går tillbaka till listan med skippade ärenden, hittar ärendet och annoterar det med "Fakturafrågor" -> "Felaktig debitering".
Du tar bort ärendet från "skip listan".
Sammanfattning
Att hantera skippade ärenden är en viktig del av AI-träningsprocessen i Labelf. Genom att regelbundet gå igenom och diskutera skippade ärenden kan du:
Förbättra din egen och dina kollegors annoteringsförmåga.
Identifiera problem med kategoridefinitionerna.
Förbättra kvaliteten på träningsdatan.
Skapa mer träffsäkra och användbara AI-modeller.
Kom ihåg att "Skip"-funktionen är ett värdefullt verktyg som hjälper dig att göra ett bättre jobb som Modelltränare. Använd den flitigt och se till att du och ditt team har en bra process för att hantera och lära av de skippade ärendena.