Esercizi - 8. Tecniche di valutazione

ESERCIZIO 8.4

Scegliete un metodo di valutazione appropriato per ciascuna delle seguenti situazioni. In ogni caso identificate:

(i) i partecipanti

(ii) le tecniche usate

(iii) i compiti rappresentativi da esaminare

(iv) le misurazioni da eseguire

(v) un progetto di massima su come eseguire la valutazione.

(a) Siete alla prima fase del design di un pacchetto di fogli elettronici e desiderate verificare quale tipo di icone saranno più facili da imparare.

(b) Avete un prototipo per un sistema di prenotazione teatrale che deve essere usato da potenziali frequentatori di teatri per ridurre le code alla biglietteria.

(d) Avete sviluppato un sistema di supporto alle decisioni di gruppo per l'ufficio di un avvocato.

(e) Vi è stato chiesto di sviluppare un sistema per memorizzare e gestire i risultati degli esami degli studenti e vorreste testare due design diversi prima dell’implementazione o della prototipazione.

Risposta

Si noti che queste risposte sono solo illustrative; ci sono molte tecniche di valutazione possibili che potrebbero essere adatte agli scenari descritti.

Pacchetto di fogli elettronici

(i) Soggetti	Utenti tipici: segretari, universitari, studenti, contabili, utenti da casa, alunni
(ii) Tecnica	Valutazione euristica
(iii) Compiti rappresentativi	Ordinamento dei dati, stampa del foglio elettronico, formattazione delle celle, aggiunta di funzioni, creazione di grafici
(iv) Misurazioni	Velocità di riconoscimento, precisione del riconoscimento, chiarezza percepita dall’utente
(v) Progetto di massima	Esaminate i soggetti con esempi di ogni icona in vari stili, prendendo nota delle risposte.

Sistema di prenotazione teatrale

(i) Soggetti	Frequentatori di teatri, il pubblico in generale
(ii) Tecnica	Thinking aloud
(iii) Compiti rappresentativi	Trovare biglietti ancora disponibili per uno spettacolo, scegliere i posti, cambiare posti, cambiare la data di prenotazione
(iv) Misurazioni	Misurazioni qualitative della comodità degli utenti nell’uso del sistema, misurazioni della complessità cognitiva, misurazioni quantitative del tempo richiesto per eseguire il compito, errori commessi
(v) Progetto di massima	Presentate agli utenti i compiti e il sistema prototipo, registrate le loro osservazioni mentre eseguono i compiti e perfezionate i risultati nelle categorie identificate nel punto (iv).

Nuovo sistema di gioco

(i) Soggetti	Il pubblico finale del gioco: l’età, il sesso e il profilo tipico per il gioco dovrebbero essere determinati in anticipo e gli utenti del test dovrebbero essere scelti tra queste persone, più alcuni dall’esterno per vedere se hanno maggior successo
(ii) Tecnica	Thinking aloud
(iii) Compiti rappresentativi	Qualsiasi compito del gioco – movimento dei personaggi, problem solving, e così via.
(iv) Misurazioni	Velocità di risposta, punteggi ottenuti, diffusione del gioco presentato.
(v) Progetto di massima	Consentire ai soggetti di giocare e chiedere loro come lo fanno. Raccogliere prove qualitative e quantitative, compilare il questionario per valutare la soddisfazione con l’esperienza del gioco, e così via.

Sistema di supporto alle decisioni di gruppo

(i) Soggetti	Avvocati, assistenti legali, clienti possibili
(ii) Tecnica	Walkthrough cognitivo
(iii) Compiti rappresentativi	Qualsiasi cosa che richiede un processo decisionale condiviso: richieste di compensi, accordi di difesa, questioni complesse con serie diversa di esperienza necessaria.
(iv) Misurazioni	Accuratezza di informazioni presentate e accessibili, veridicità del controllo permanente della discussione, ingombro e confusione dello schermo, confusione appartenente ai protocolli dei turni nella conversazione
(v) Progetto di massima	Valutare tramite esperti che esaminano il sistema eseguendo i vari compiti e commentando come necessario.

Gestione dei risultati degli esami

(i) Soggetti	Responsabile degli esami, segretari, universitari
(ii) Tecnica	Thinking aloud, questionari
(iii) Compiti rappresentativi	Memorizzazione dei voti, modifica dei voti, eliminazione dei voti, raccolta di informazioni, protezione di sicurezza
(iv) Misurazioni	Facilità d’uso, forniti livelli di sicurezza e correzione degli errori, accuratezza dell’utente
(v) Progetto di massima	Gli utenti eseguono serie di compiti, con commento verbale attivo sulle riflessioni immediate e le considerazioni ottenute dal questionario alla fine.