Come assegniamo il punteggio

Che cosa viene valutato

Lo strumento di punteggio riporta 26 criteri, ciascuno da 0 a 100. Qui li raggruppiamo per facilitare la lettura; il raggruppamento non incide sul calcolo.

Come si costruisce il totale

• Il totale non è una media ponderata dei 26 criteri, e i criteri non hanno pesi fissi. Si costruisce a partire da regole che leggono la trascrizione.
• Parte da una base di 58 e viene adeguato in base alla difficoltà dello scenario: +2 per principiante, 0 per standard, −2 per avanzato, −4 per esperto e −6 per test di stress.
• Poi i segnali delle regole aggiungono o tolgono punti, per esempio per un’apertura chiara, domande sui bisogni, la gestione di un’obiezione sul prezzo, un prossimo passo concreto, pressione o una frase vietata. Il risultato è limitato all’intervallo da 0 a 100.
• I limiti di sicurezza possono abbassare il totale indipendentemente da altri punti di forza. Per esempio, ignorare la richiesta di un cliente di non essere chiamato lo limita a 35 (62 se la richiesta era più morbida), e una promessa rischiosa lo limita a 55.
• Le stelle sono il totale diviso per 20, arrotondato per eccesso, da 1 a 5. L’amministratore dell’azienda può dare maggiore rilievo ad alcuni criteri (da 0,5 a 2). Ciò viene mostrato come numero ponderato separato accanto al totale standard e non lo sostituisce mai.

Punteggi preliminari e definitivi

Un punteggio è definitivo quando può essere confrontato con altri. In caso contrario è indicato come preliminare.

Il testo del feedback dell’IA in un report spiega il risultato. Non modifica il numero: il punteggio proviene dallo strumento deterministico, e il report viene controllato per confermare che il numero non sia stato alterato dopo l’aggiunta del feedback.

Versione e artefatto dello strumento di punteggio

Ogni report conserva la versione della metodologia e l’impronta del codice dello strumento che lo ha prodotto. Un punteggio può quindi sempre essere ricondotto alla versione esatta. I report precedenti non vengono ricalcolati quando la versione cambia.

Che cosa l’IA non giudica

• La Sua voce, il Suo accento, il Suo aspetto, le Sue emozioni o la Sua personalità. DIRI AI non riconosce le emozioni: il punteggio parte dalla trascrizione e dagli eventi della chiamata di esercitazione, e criteri come l’empatia considerano solo ciò che è stato detto.
• Se un’affermazione sia corretta sul piano legale o normativo. Il criterio di conformità cerca schemi rischiosi noti e le Sue frasi vietate. Non è una consulenza legale, assicurativa o finanziaria né un’autorizzazione.
• I Suoi risultati nelle chiamate reali con i clienti, il Suo potenziale o la Sua idoneità a un incarico.
• Qualsiasi cosa la trascrizione abbia riportato in modo errato. Gli errori del riconoscimento vocale possono modificare un punteggio.

Come viene verificato oggi il metodo

• Gli sviluppatori testano lo strumento con 15 conversazioni sintetiche, ciascuna scritta in cinque lingue, con risultati attesi stabiliti in anticipo dagli autori. Queste attese sono ipotesi, non giudizi di valutatori umani.
• Non esiste ancora un confronto con valutatori umani indipendenti. È previsto come lavoro a sé, e intendiamo pubblicarne i risultati insieme alla versione della metodologia quando saranno disponibili.
• Fino ad allora, consideri il punteggio un segnale di coaching che aiuta a scegliere che cosa esercitare in seguito, non una misurazione con un errore noto.

Uso previsto e i Suoi diritti

I punteggi di DIRI AI sono pensati per la formazione. Non sono una decisione su una persona.

• Il punteggio serve a fornire feedback e a suggerire esercitazioni. DIRI AI non prende decisioni sulle persone, e il prodotto non è progettato per assumere decisioni basate unicamente su un trattamento automatizzato che producano effetti giuridici o incidano in modo analogo significativamente (articolo 22 del GDPR). Se un’organizzazione basasse comunque una decisione di questo tipo solo su un punteggio, ne sarebbe responsabile.
• DIRI AI non è progettata né offerta per assunzioni, retribuzione, promozioni, provvedimenti disciplinari, licenziamenti, assegnazione dei compiti o per il monitoraggio e la valutazione delle prestazioni lavorative dei dipendenti. Utilizzarla per tali scopi esula dalla sua finalità prevista.
• Ai sensi del regolamento UE sull’IA, i sistemi di IA destinati a tali scopi occupazionali sono classificati come ad alto rischio (allegato III, punto 4). DIRI AI non è stata valutata né immessa sul mercato come sistema ad alto rischio, e non affermiamo che soddisfi tali requisiti. Un’organizzazione che la utilizzi per tali scopi agisce al di fuori della finalità prevista e si assume gli obblighi connessi a tale uso.
• Ogni partecipante può vedere il proprio report e la spiegazione che lo accompagna. I responsabili vedono i report consentiti dal loro ruolo. Quando il Suo datore di lavoro gestisce lo spazio di lavoro, di norma è il titolare del trattamento dei Suoi dati di formazione e decide chi può vedere i report.
• Se ritiene che una trascrizione, un punteggio o un report siano errati, può segnalarlo e chiedere una revisione umana scrivendo a support@diriai.com. I Suoi diritti in materia di protezione dei dati, tra cui accesso, rettifica e opposizione, sono descritti nell’informativa sulla privacy.

Responsabili: il punteggio non va usato come unica base di una decisione sulle risorse umane. Ogni decisione su una persona deve fondarsi sul giudizio umano e su altri elementi, e la persona deve poterla discutere.

Trasparenza sull’IA

• Il cliente in una chiamata di esercitazione è un personaggio simulato dall’IA, non una persona reale.
• Il punteggio è calcolato da uno strumento deterministico basato su regole a partire dalla trascrizione della chiamata (nelle chiamate vocali la trascrizione è prodotta dal riconoscimento vocale automatico). Le spiegazioni nel report sono scritte da un modello di IA, che può sbagliare: le confronti con la Sua chiamata.
• Questa pagina è una sintesi in linguaggio semplice e viene aggiornata a ogni versione della metodologia.

Correlati

• Informativa sulla privacy
• Avviso di trasparenza sull’IA
• Chiedere informazioni sulla metodologia