Monitorare l’attività degli agenti AI

TL;DR

Monitora gli agenti AI distribuiti nella dashboard Attività agente per tenere traccia di azioni, trigger, stato di riuscita/errore e del ragionamento dell’AI. Usa i filtri per eseguire il debug delle esecuzioni e rivedere i log ogni settimana. Per limitare azioni eccessive, restringi l’ambito dell’agente con i filtri delle azioni, indirizza tipi specifici di elementi, utilizza sotto-elementi attivati e evita di collocare agenti in cartelle di grandi dimensioni.

• Panoramica
• Tabella delle attività degli agenti
• Filtrare i log di attività degli agenti AI
• Visualizzare i log dettagliati delle azioni
• Best practice di monitoraggio
• Come limitare il numero di azioni eseguite dall’agente AI
• Cosa succede dopo?

Panoramica

Una volta distribuiti gli agenti AI, puoi monitorarne le prestazioni nella dashboard Attività agente all’interno dell’interfaccia di gestione degli agenti AI.

Tabella delle attività degli agenti AI

• Stato – mostra se l’agente è attualmente attivo o inattivo.
• Nome – il nome dell’agente AI.
• Posizioni attive – le posizioni in cui l’agente AI è attualmente abilitato. Puoi rimuovere un agente da una posizione facendo clic nella cella e selezionando l’icona × accanto al nome della posizione. Tuttavia, le posizioni non possono essere aggiunte manualmente e compaiono qui solo dopo che l’agente è stato @menzionato in un commento nella posizione.
• Azioni, questo mese – indica quante azioni ha eseguito l’agente durante il mese corrente.
• Creato da – l’utente che ha creato l’agente AI.
• Creato il – la data in cui l’agente è stato creato.
• Ultima modifica di – l’utente che ha aggiornato per ultimo l’agente AI.
• Ultima modifica il – la data dell’ultimo aggiornamento dell’agente.

Raggruppa per esecuzioni: quando un singolo trigger attiva un agente che esegue più azioni, puoi raggruppare tali azioni in un’unica esecuzione, in modo che il log mostri un solo inserimento per ogni esecuzione invece di una riga per ogni azione. Ciò rende più semplice vedere cosa ha fatto l’agente in risposta a un singolo evento.

Filtrare i log di attività degli agenti AI

Utilizza i controlli dei filtri sopra la tabella delle attività per restringere il log e individuare più rapidamente esecuzioni specifiche.

Filtri disponibili: Timestamp, Azione, Elemento di lavoro, Attivato da, Stato.

Utile negli spazi ad alto volume in cui l’agente è stato eseguito centinaia di volte: effettua il debug di un errore filtrando per stato di errore o traccia la cronologia di un elemento di lavoro specifico.

Visualizzare i log dettagliati delle azioni

1. Passa il cursore sull’agente AI nella tabella Panoramica agenti.
2. Fai clic sul menu con i tre punti.
3. Seleziona Mostra log.

• Timestamp – quando si è verificata l’azione.
• Azione – l’azione eseguita dall’agente.
• Elemento di lavoro – l’elemento in cui l’agente ha agito.
• Attivato da – l’evento che ha attivato l’agente.
• Stato – se l’azione è riuscita o fallita.

• Il percorso completo verso l’elemento di lavoro e il suo link permanente 1.
• L’azione eseguita in modo preciso (ad esempio, "Campo Categoria richiesta aggiornato in risorsa creativa") 2.
• Il ragionamento dell’agente AI, che spiega perché è stata presa la decisione 3.

Best practice di monitoraggio

• Revisione regolare: controlla ogni settimana i log di attività degli agenti AI per assicurarti che gli agenti funzionino come previsto.
• Analisi del ragionamento: utilizza la visualizzazione dettagliata del ragionamento per comprendere le decisioni e individuare opportunità di miglioramento dei prompt.
• Monitoraggio del tasso di riuscita: monitora gli stati di riuscita ed errore per individuare problemi in corso.
• Regolazione delle prestazioni: perfeziona i prompt degli agenti in base ai log di attività per aumentare accuratezza e coerenza.

Come limitare il numero di azioni eseguite dall’agente AI

Presta attenzione all’ambito: il passo più importante per creare un’automazione efficace.

• Evita “Seleziona tutto”: selezionare tutti gli ambiti disponibili può portare ad azioni indesiderate e problemi di prestazioni.
• Usa i filtri delle azioni per definire esattamente dove deve operare un agente.
• Prendi di mira elementi specifici: configura gli agenti affinché lavorino solo su determinati tipi di elementi o stati (ad es., "attivo").

Sfrutta i sotto-elementi attivati

• Automatizza i blueprint di progetto: imposta l’agente affinché esegua azioni su tutti i sotto-elementi non appena cambia lo stato del progetto principale.
• Precisione delle azioni: garantisce che l’automazione si propaghi verso il basso attraverso la struttura del progetto esattamente quando necessario.

Gestisci la capacità delle cartelle

• Limita il numero di elementi: non assegnare agenti a cartelle con un numero enorme di elementi (ad es., 20.000 elementi).
• Previeni problemi di prestazioni: volumi elevati di cartelle possono causare problemi tecnici nell’elaborazione dell’agente.

Cosa succede dopo?

• Limitazioni e risoluzione dei problemi degli agenti AI
• Scrivere prompt efficaci per gli agenti