Andmete asukoht LLM API-de jaoks

Iga kataloogis olev mudel koos regiooniga, kus selle järeldamine töötab, ja säilitusajaga, mida selle lõpp-punkt kajastab, loetud lõpp-punkti ridadest, mille järgi ruuter ise filtreerib, mitte turunduslehelt. Mudel, millel pole aktiivset lõpp-punkti, on allpool loetletud ainult kataloogina, sest see ongi see, mis see on.

Selles juurutuses pole tootmise järeldamise taustarakendust. Igale taotlusele vastab sisseehitatud mock-taustarakendus regioonis dev-mock, seega midagi ei töödelda regioonides, mida lõpp-punkti read kajastavad. Järeldamise regioon on allpool näidatud dev-mockina sel põhjusel ja ühelegi mudelile, millel siin käituskeskkonda pole, ei omistata majutusklassi.

See leht on dokumentatsioon, mitte sertifikaat. See kajastab, mida iga lõpp-punkt ütleb oma regiooni, säilitusaja ja majutusklassi kohta, ja nimetab allika. See ei ole õiguslik arvamus, mitte vastavushindamine ega garantii ühegi pakkuja kohta.

0 / 53 kataloogi mudelil on aktiivne lõpp-punkt, mis ei ole mock-taustarakendus.
Mudel Pakkuja Järeldamise regioon Säilitamine Majutusklass Litsents
Devstral Small 2 (24B) Mistral AI dev-mock zero käituskeskkonda siin pole apache-2.0
EuroLLM-1.7B-Instruct EuroLLM (utter-project) dev-mock zero käituskeskkonda siin pole apache-2.0
EuroLLM-22B-Instruct (2512) EuroLLM (utter-project) dev-mock zero käituskeskkonda siin pole apache-2.0
EuroLLM-9B-Instruct (2512) EuroLLM (utter-project) dev-mock zero käituskeskkonda siin pole apache-2.0
Mistral Small 4 (119B-A6B) Mistral AI dev-mock zero käituskeskkonda siin pole apache-2.0
Whisper large-v3 OpenAI dev-mock zero käituskeskkonda siin pole apache-2.0

Ainult kataloog — lõpp-punkti veel pole

Need mudelid on kataloogis dokumenteeritud, kuid neil pole lõpp-punkti, mis saaks taotlusele vastata, seega nende kohta pole regiooni ega säilitusaega teatada. Nende küsimine tagastab vea, mitte ei suuna kuhugi mujale.

Vaata ka: Majutus · Dokumendid · Dokumenteeritud