Come Iveco Group ha trasformato i dati analitici sugli utenti dei modelli LLM in approfondimenti attraverso decine di copiloti basati sull'intelligenza artificiale

Nebuly ha introdotto una svolta rivoluzionaria nell'LLM analytics che ha trasformato strumenti AI frammentati in una piattaforma unificata di user intelligence  - con un feedback azionabile 100 volte superiore.

Mentre Iveco implementava decine di copilot AI interni per automatizzare le attività e supportare la produttività dei dipendenti, il suo team IT si è scontrato con una sfida cruciale: capire come questi strumenti AI venissero effettivamente utilizzati dagli utenti. I metodi tradizionali, come sondaggi e interviste, non erano scalabili e gli stakeholder non avevano visibilità sui propri investimenti in AI.

Iveco aveva bisogno di un sistema completo di LLM analytics e monitoraggio GenAI per ottimizzare le prestazioni in tutto il proprio ecosistema AI, senza dover fare affidamento su una raccolta di feedback manuale e lenta.

"La percezione delle nuove tecnologie AI tra i dipendenti di Iveco Group è stata estremamente positiva, segnando un importante passo avanti nella trasformazione digitale dell'azienda.”

Fabio Ricciato

Head of IT Customer Journey

Ecco cosa ha fornito Nebuly per potenziare la trasformazione dell'LLM analytics di Iveco:

Feedback 100 volte superiore

Analisi reale sull'utilizzo degli LLM da ogni singola interazione. Niente moduli, niente bias, solo dati completi basati sul comportamento effettivo degli utenti su tutti i copilot GenAI.

Visibilità end-to-end

L'analytics dei copilot AI ha offerto a team e stakeholder una visione chiara sull'adozione, il livello di soddisfazione e i pattern di utilizzo nell'intero panorama AI aziendale.

Decisioni più rapide con dati AI affidabili

Una base solida e completa di analytics sull'AI aziendale che guida all'azione, migliora la reportistica per gli stakeholder e supporta le decisioni di investimento in AI.

La sfida

Con diversi copilot GenAI attivi in tutta l'azienda, il team IT di Iveco Group aveva bisogno di un modo per comprendere le prestazioni reali di questi strumenti. Tuttavia, i feedback erano frammentati: i sondaggi mancavano di volume, le interviste non erano scalabili e gli stakeholder avevano scarsa visibilità sull'utilizzo o sul valore generato.

Iveco ha valutato la possibilità di sviluppare una soluzione interna per colmare questo divario, ma Nebuly ha offerto un percorso di insight più rapido, progettato specificamente per monitorare i prodotti LLM su scala.

L'approccio di Nebuly

01. Comprendere il comportamento degli utenti grazie all'LLM analytics

La piattaforma di LLM analytics di Nebuly ha categorizzato le interazioni per argomento e intento su decine di copilot GenAI, eliminando la necessità di interviste dispendiose in termini di tempo e sondaggi poco affidabili.

"In passato dovevo affidarmi interamente alle interviste degli utenti. Con Nebuly, possiamo validare i risultati dei sondaggi ma, cosa ancora più importante, possiamo estendere la nostra intelligence al 100% degli utenti del chatbot con un solo clic."

Andrea Russotto

IT Artificial Intelligence

02. Catturare dati sulle prestazioni GenAI privi di bias

I sondaggi tradizionali offrivano un volume ridotto e introducevano bias. Il monitoraggio GenAI passivo e in tempo reale di Nebuly ha rivelato i problemi reali basandosi sul comportamento effettivo degli utenti su tutti i copilot AI.

"I sondaggi tra gli utenti sono utili sotto certi aspetti, ma le ricerche mostrano anche che introducono un elemento di bias. Nebuly elimina il bias dall'equazione con il suo processo di raccolta feedback non invasivo e completamente automatizzato... Con Nebuly, abbiamo dati di cui possiamo fidarci per prioritizzare i miglioramenti degli LLM."

Pasquale Morra

IT Artificial Intelligence

03. Ottenere insight sull'AI pronti per gli stakeholder

La reportistica sulla piattaforma di LLM analytics di Nebuly ha reso semplice la condivisione dei pattern di adozione, soddisfazione e utilizzo, aiutando i team a investire meglio e a tracciare il rapporto costo-valore in tutte le iniziative di GenAI.

"Con Nebuly, siamo riusciti a condividere facilmente insight rilevanti con tutti gli stakeholder, che ora hanno un quadro chiaro del perché, e di come, i loro casi d'uso AI vengono impiegati in produzione. I nostri stakeholder lo adorano, e questo riduce anche in modo significativo il carico di reportistica per il team AI, permettendoci di concentrarci sul lancio di nuove iniziative. È una vittoria per tutti."

Andrea Russotto

IT Artificial Intelligence

Un futuro di innovazione continua

Mentre Iveco Group prevede un aumento del 40% dei progetti GenAI entro la metà del 2025, la piattaforma di LLM analytics di Nebuly svolgerà un ruolo chiave nel supportare i suoi team ad adattare continuamente le soluzioni AI alle reali esigenze degli utenti, siano essi dipendenti, clienti o altri stakeholder.

"Siamo stati estremamente felici della stretta collaborazione con Nebuly. Con l'aumentare del numero e della complessità dei casi d'uso GenAI, la necessità di una soluzione come Nebuly è evidente."

Fabio Ricciato

Head of IT Customer Journey & Digital Architecture

"Nebuly promuove una cultura di apprendimento continuo e curiosità, che si allinea perfettamente con il nostro DNA. Questo mantiene i nostri team motivati, aggiornati sulle competenze AI essenziali e focalizzati sull'innovazione."

Andrea Russotto

IT Artificial Intelligence