Cum calculăm scorul

Ce se punctează

Evaluatorul raportează 26 de criterii, fiecare de la 0 la 100. Le grupăm aici pentru lectură; gruparea nu influențează calculul.

Cum se construiește totalul

• Totalul nu este o medie ponderată a celor 26 de criterii, iar criteriile nu au ponderi fixe. Este construit din reguli care citesc transcrierea.
• Pornește de la o bază de 58 și este ajustat în funcție de dificultatea scenariului: +2 pentru începător, 0 pentru standard, −2 pentru avansat, −4 pentru expert și −6 pentru testul de stres.
• Semnalele regulilor adaugă apoi sau scad puncte, de exemplu pentru o deschidere clară, întrebări despre nevoi, tratarea unei obiecții legate de preț, un pas următor concret, presiune sau o formulare interzisă. Rezultatul este limitat la intervalul 0–100.
• Plafoanele de siguranță pot reduce totalul indiferent de celelalte puncte forte. De exemplu, ignorarea cererii unui client de a nu fi sunat îl limitează la 35 (62 dacă cererea a fost mai blândă), iar o promisiune riscantă îl limitează la 55.
• Stelele reprezintă totalul împărțit la 20, rotunjit în sus, de la 1 la 5. Un administrator al companiei poate pune accent pe anumite criterii (de la 0,5 la 2). Aceasta apare ca un număr ponderat separat, lângă totalul standard, și nu îl înlocuiește niciodată.

Scoruri preliminare și finale

Un scor este final când poate fi comparat cu alte scoruri. Altfel, este marcat ca preliminar.

Textul de feedback al AI dintr-un raport explică rezultatul. Nu modifică numărul: scorul provine din evaluatorul determinist, iar raportul este verificat pentru a confirma că numărul nu a fost modificat după adăugarea feedbackului.

Versiunea și artefactul evaluatorului

Fiecare raport stochează versiunea metodologiei și amprenta codului evaluatorului care l-a produs. Un scor poate fi astfel mereu urmărit până la versiunea exactă. Rapoartele mai vechi nu sunt recalculate atunci când versiunea se schimbă.

Ce nu judecă AI

• Vocea, accentul, aspectul, emoțiile sau personalitatea dumneavoastră. DIRI AI nu recunoaște emoții: scorul pornește de la transcrierea și evenimentele apelului de exersare, iar criterii precum empatia se uită doar la ceea ce s-a spus.
• Dacă o afirmație este corectă din punct de vedere juridic sau de reglementare. Criteriul de conformitate caută tipare riscante cunoscute și formulările interzise stabilite de dumneavoastră. Nu reprezintă consultanță juridică, de asigurări sau financiară și nici o aprobare.
• Rezultatele dumneavoastră în apeluri reale cu clienți, potențialul dumneavoastră sau aptitudinea pentru un post.
• Orice a transcris greșit transcrierea. Erorile de recunoaștere a vorbirii pot modifica un scor.

Cum este verificată metoda în prezent

• Dezvoltatorii testează evaluatorul cu 15 conversații sintetice, fiecare scrisă în cinci limbi, cu rezultate așteptate pe care autorii le-au stabilit în prealabil. Aceste așteptări sunt ipoteze, nu judecăți ale unor evaluatori umani.
• Nu există încă o comparație cu evaluatori umani independenți. Este planificată ca o lucrare separată și intenționăm să publicăm rezultatele ei împreună cu versiunea metodologiei, de îndată ce vor exista.
• Până atunci, tratați un scor ca pe un semnal de coaching care vă ajută să alegeți ce să exersați în continuare, nu ca pe o măsurătoare cu o eroare cunoscută.

Utilizare preconizată și drepturile dumneavoastră

Scorurile DIRI AI sunt făcute pentru antrenament. Ele nu sunt o decizie despre o persoană.

• Punctarea este folosită pentru a oferi feedback și a sugera exersare. DIRI AI nu ia decizii despre persoane, iar produsul nu este conceput pentru a lua decizii bazate exclusiv pe prelucrare automată care produc efecte juridice sau o afectează în mod similar într-o măsură semnificativă (articolul 22 din GDPR). Dacă, totuși, o organizație ar întemeia o astfel de decizie doar pe un scor, ea ar fi responsabilă pentru acea decizie.
• DIRI AI nu este concepută și nici oferită pentru recrutare, salarizare, promovare, sancțiuni disciplinare, concediere, repartizarea sarcinilor sau pentru monitorizarea și evaluarea performanței profesionale a angajaților. Utilizarea ei în aceste scopuri depășește scopul său preconizat.
• Conform Regulamentului UE privind AI, sistemele de AI destinate acestor scopuri legate de angajare sunt clasificate ca prezentând risc ridicat (anexa III, punctul 4). DIRI AI nu a fost evaluată și nici introdusă pe piață ca sistem cu risc ridicat și nu afirmăm că ar îndeplini aceste cerințe. O organizație care o folosește în astfel de scopuri acționează în afara scopului preconizat și își asumă obligațiile care decurg din această utilizare.
• Fiecare participant își poate vedea propriul raport și explicația din spatele lui. Managerii văd rapoartele permise de rolul lor. Atunci când angajatorul dumneavoastră administrează spațiul de lucru, acesta este de obicei operatorul datelor dumneavoastră de antrenament și decide cine poate vedea rapoartele.
• Dacă considerați că o transcriere, un scor sau un raport este greșit, puteți semnala acest lucru și puteți cere o verificare umană la support@diriai.com. Drepturile dumneavoastră privind protecția datelor, inclusiv accesul, rectificarea și opoziția, sunt descrise în politica de confidențialitate.

Manageri: nu folosiți un scor ca unică bază a unei decizii de resurse umane. Orice decizie despre o persoană trebuie să se bazeze pe judecată umană și pe alte dovezi, iar persoana trebuie să poată discuta despre ea.

Transparență privind AI

• Clientul dintr-un apel de exersare este un personaj simulat de AI, nu o persoană reală.
• Scorul este calculat de un evaluator determinist, bazat pe reguli, pornind de la transcrierea apelului (în apelurile vocale, transcrierea este produsă prin recunoaștere automată a vorbirii). Explicațiile din raport sunt scrise de un model de AI, care poate greși; verificați-le față de propriul apel.
• Această pagină este un rezumat în limbaj simplu și este actualizată odată cu fiecare versiune a metodologiei.

Conexe

• Politica de confidențialitate
• Notă de transparență privind AI
• Întrebați despre metodologie