Rezidencia dát pre LLM API

Každý model v katalógu s regiónom, v ktorom beží jeho inferencia, a uchovávaním, ktoré zaznamenáva jeho koncový bod, prečítané z riadkov koncových bodov, podľa ktorých samotný router filtruje, a nie z marketingovej stránky. Model bez živého koncového bodu je nižšie uvedený iba ako katalóg, pretože to je to, čím je.

Toto nasadenie nemá produkčný backend inferencie. Každú požiadavku odpovedá vstavaný simulovaný backend v regióne dev-mock, takže sa nič nespracúva v regiónoch, ktoré zaznamenávajú riadky koncových bodov. Región inferencie je preto nižšie zobrazený ako dev-mock a pre model, ktorý tu nemá runtime, sa neuvádza žiadna trieda hostingu.

Táto stránka je dokumentácia, nie certifikácia. Zaznamenáva, čo každý koncový bod uvádza o svojom regióne, uchovávaní a triede hostingu, a uvádza zdroj. Nie je právnym názorom, nie je posúdením zhody a nie je zárukou o žiadnom poskytovateľovi.

0 z 53 modelov v katalógu má živý koncový bod, ktorý nie je simulovaný backend.
Model Poskytovateľ Región inferencie Uchovávanie Trieda hostingu Licencia
Devstral Small 2 (24B) Mistral AI dev-mock zero žiadny runtime tu apache-2.0
EuroLLM-1.7B-Instruct EuroLLM (utter-project) dev-mock zero žiadny runtime tu apache-2.0
EuroLLM-22B-Instruct (2512) EuroLLM (utter-project) dev-mock zero žiadny runtime tu apache-2.0
EuroLLM-9B-Instruct (2512) EuroLLM (utter-project) dev-mock zero žiadny runtime tu apache-2.0
Mistral Small 4 (119B-A6B) Mistral AI dev-mock zero žiadny runtime tu apache-2.0
Whisper large-v3 OpenAI dev-mock zero žiadny runtime tu apache-2.0

Iba katalóg — zatiaľ žiadny koncový bod

Tieto modely sú zdokumentované v katalógu, ale nemajú žiadny koncový bod, ktorý by mohol odpovedať na požiadavku, takže pre ne nie je uvedený žiadny región ani uchovávanie. Požiadanie o jeden vráti chybu namiesto presmerovania niekam inam.

Pozri tiež: Hosting · Dokumenty · Overené