Passa al contenuto principale

Serving di modelli di base

Offri modelli di base aperti all'avanguardia per carichi di lavoro di inferenza in tempo reale e in batch. Potrai così creare rapidamente e facilmente applicazioni che sfruttano un modello di AI generativa di alta qualità senza dover gestire personalmente la distribuzione del modello.

Loading...

* I prezzi visualizzati non garantiscono la disponibilità del prodotto in quella regione. Per informazioni sulla disponibilità del prodotto, vedere qui: AWSAzureGCPSAP
1. Azure Databricks, in qualità di servizio di prima parte su Microsoft Azure, offre fatturazione e supporto unificati da parte di Microsoft
   Il livello Premium su Azure Databricks corrisponde al livello Enterprise su AWS e GCP
2. La tariffazione oraria viene addebitata con incrementi di un minuto
3. Il throughput in una singola unità di capacità PT varia in base al modello e alla forma della query (token di input e di output). Utilizza il GenAI Calculator per stimare il throughput specifico per il carico di lavoro e il costo totale

Tariffe DBU per Foundation Model Serving

ModelloPay-per-tokenThroughput fornito
DBU / M token
di input
DBU / M token
di output
DBU / ora
(capacità di ingresso)
DBU / ora
(capacità di scalabilità)
Llama 4 Maverick7.14321.42985.71485.714
Llama 3.3 70B7.14321.42985.714342.857
Qwen 3 Next 80B2.14317.14378.57178.571
Qwen 3.5 122B3.14331.42985.71485.714
GPT OSS 120B2.1438.57171.42971.429
Gemma 3 12B2.1437.14371.42971.429
Llama 3.1 8B2.1436.42953.571106.000
GPT OSS 20B1.0004.28653.57153.571
Llama 3.2 3Bn/an/a46.42992.857
Llama 3.2 1Bn/an/a42.85785.714
Embedding Qwen 3 0.6B0.286n/a25.00025.000
GTE1.857n/a20.00020.000
BGE Large1.429n/a24.00024.000

1: La capacità di ingresso è la piccola unità di capacità PT a basso costo, progettata per fornire ai clienti un punto di partenza più accessibile. Questi forniscono un throughput proporzionalmente ridotto rispetto alla capacità di scalabilità. Questi sono disponibili solo in Azure e AWS per le aree geografiche di Stati Uniti, Canada e Brasile e solo per i modelli di base (non sottoposti a fine-tuning).

2: La capacità di scaling è l'incremento di capacità PT standard che può essere fornito per un modello. Oltre alla capacità di base (disponibile in cloud e regioni selezionate), la capacità del throughput di cui è stato effettuato il provisioning aumenta e diminuisce in incrementi di queste unità di capacità di scalabilità. Nei cloud/regioni in cui la capacità di base non è disponibile, l'incremento minimo di acquisto PT è l'intera unità di capacità di scalabilità.

Pagamento a consumo con prova gratuita di 14 giorni oppure contattaci per sconti sui livelli di utilizzo garantiti o requisiti personalizzati.

Serving di modelli di base