Imposta i budget AI a livello di utente, workspace o organizzazione e individua tempestivamente le spese AI fuori controllo.
di Kevin Stumpf
• I carichi di lavoro AI creano nuove sfide di gestione dei costi, come cicli di tentativi incontrollati o sperimentazioni di agenti fuori controllo, rendendo i controlli di budget cloud tradizionali insufficienti per l'adozione moderna dell'AI.\r\n• I Controlli di Spesa AI di Unity AI Gateway introducono avvisi di budget proattivi per utenti, workspace, casi d'uso e interi account, aiutando le organizzazioni a monitorare e contenere i costi dell'AI prima che diventino rischi aziendali.\r\n• In combinazione con le tabelle di sistema di Unity Catalog e i budget Databricks, Unity AI Gateway fornisce una governance unificata per l'utilizzo dell'AI, la visibilità dei costi e la responsabilità operativa su modelli, agenti, MCP e provider.
Oggi annunciamo Controlli di Spesa AI in Unity AI Gateway. Questa release estende la visibilità dei costi esistente di Unity AI Gateway con avvisi di budget proattivi per darti il pieno controllo sulla spesa AI della tua organizzazione - dagli agenti di codifica che i tuoi sviluppatori usano ogni giorno, agli agenti di produzione che servono i tuoi clienti, ai job batch che vengono eseguiti durante la notte:

I carichi di lavoro AI offrono un valore sproporzionato - ma il loro profilo di costo è fondamentalmente più difficile da gestire rispetto alla tua spesa cloud tradizionale:
I dipendenti di ingegneria, supporto, vendite e operazioni stanno adottando l'AI più velocemente di qualsiasi altra tecnologia nell'ultimo decennio, sbloccando nuovi casi d'uso settimana dopo settimana. Ma questa adozione porta una sfida di gestione: l'utilizzo dei modelli di base ora si estende a decine di team, centinaia di utenti e migliaia di agenti con un mix variabile di fornitori e livelli di modello. I controlli di spesa devono essere applicati uniformemente a tutti i carichi di lavoro AI, in modo che la tua organizzazione possa affidarsi con fiducia all'AI senza preoccuparsi di sorprese sulla fattura.
Mentre i controlli di spesa devono essere applicati uniformemente, diverse parti della tua organizzazione necessitano di controlli di costo diversi. Un team di piattaforma si preoccupa dei totali a livello di workspace. Un responsabile FinOps si preoccupa del consumo mensile a livello di organizzazione. Un responsabile dell'ingegneria si preoccupa dei budget di sperimentazione per sviluppatore. I Controlli di Spesa AI ti permettono di impostarli tutti da un unico posto e sono profondamente integrati con i budget esistenti di Databricks:
Per monitorare la spesa AI della tua organizzazione, segui questi passaggi:

Quando uno dei tuoi budget viene superato, riceverai un'email di notifica:

La sezione Costo della console del tuo account ti permette di rispondere alle email di avviso budget o di monitorare proattivamente lo stato dei tuoi budget attivi. Nella pagina Budget vedi a colpo d'occhio l'andamento dei tuoi budget:

Apri qualsiasi budget per vedere l'andamento della tua spesa AI:

Se hai configurato soglie di budget a livello di utente, la pagina dei dettagli del Budget ti mostrerà l'andamento della spesa AI individuale degli utenti della tua organizzazione. Quando gli utenti superano la loro soglia individuale, il loro stato e la loro spesa sono chiaramente evidenziati in modo da poter agire rapidamente:

Per aumentare la soglia di un budget, puoi semplicemente modificare il Budget e i suoi limiti di spesa.
I Budget di Unity AI Gateway ti offrono una panoramica di alto livello della spesa per utente e per budget. Per analizzare ulteriormente quali utenti, modelli o casi d'uso stanno guidando la tua spesa, puoi utilizzare le capacità di monitoraggio dei costi esistenti di Unity AI Gateway. Ogni richiesta viene registrata nelle tabelle di sistema di Unity Catalog con i costi DBU e non solo i conteggi dei token. Il throughput provisionato, l'uptime, l'utilizzo pay-per-token e persino i costi dei token dei fornitori di modelli esterni sono tutti calcolati automaticamente. Puoi suddividere i dati in base a come la tua organizzazione traccia la spesa:
Accedi alla dashboard di Cost Analytics navigando alla pagina Unity AI Gateway nel tuo workspace Databricks e clicca su “Visualizza Dashboard”:

Questo apre una dashboard di analisi di utilizzo e costi che puoi personalizzare completamente:

I Controlli di Spesa AI sono una naturale estensione delle capacità di governance che già utilizzi in Databricks:
Databricks ti fornisce un sistema unico e coerente per governare ciò che i tuoi agenti possono fare, per chi possono farlo e quanto possono spendere per farlo. Inizia oggi stesso!
(Questo post sul blog è stato tradotto utilizzando strumenti basati sull'intelligenza artificiale) Post originale
Iscriviti al nostro blog e ricevi gli ultimi articoli direttamente nella tua casella di posta.