Creazione di una implementazione
Creare una distribuzione nel servizio OCI Generative AI per distribuire un contenitore agente in grado di servire le richieste client per un'applicazione.
Quando si crea una distribuzione, si seleziona un'immagine contenitore e una tag immagine. È inoltre possibile attivare la distribuzione durante la creazione per renderla la versione in esecuzione dell'applicazione.
Questo task descrive come creare una distribuzione utilizzando la console di Oracle Cloud.
Uso e scala delle risorse
L'uso della distribuzione dipende dalle risorse che eseguono la distribuzione attiva. Ogni replica in esecuzione utilizza le risorse di computazione e qualsiasi servizio OCI gestito abilitato per l'applicazione potrebbe creare un altro uso.
Le impostazioni dell'applicazione controllano la scalabilità delle distribuzioni. Queste impostazioni includono il numero minimo di repliche, il numero massimo di repliche e le metriche di ridimensionamento automatico. Vedere Ridimensionamento.
Una distribuzione viene eseguita come una o più repliche. Ogni replica in esecuzione utilizza l'allocazione di computazione definita dal servizio per l'applicazione. Quando il ridimensionamento automatico aggiunge repliche, l'uso di Compute aumenta in base al numero di repliche in esecuzione.
Ad esempio, se una distribuzione attiva viene ridimensionata da una replica a tre repliche, utilizza tre repliche di computazione per il tempo di esecuzione di tali repliche.
Per stimare l'uso di Compute, utilizzare la formula seguente:
average running replicas x runtime hours x Compute allocation per replica
Il numero medio di repliche in esecuzione dipende dal numero minimo di repliche dell'applicazione, dal numero massimo di repliche, dal volume di traffico e dalle impostazioni di ridimensionamento automatico.
Per limitare lo scale-out, impostare un numero massimo di repliche più piccolo. Per disabilitare il ridimensionamento automatico, impostare il numero minimo di repliche e il numero massimo di repliche sullo stesso valore.
Lo storage gestito, la cache, il database, il log, la rete e altri servizi OCI abilitati potrebbero generare un utilizzo separato. Stimare l'uso di tali risorse separatamente dal dashboard Compute di distribuzione.
Una stima mensile non è un impegno. L'uso effettivo dipende dal numero di repliche eseguite e dalla durata dell'esecuzione.
Passi
Dopo aver creato una distribuzione, è possibile visualizzarne i dettagli ed eseguire altri task, ad esempio l'attivazione, la copia del relativo OCID o l'eliminazione. Per accedere a questi task, utilizzare il menu nella console. Per ulteriori informazioni, vedere Elenca distribuzioni.