Model garden Router · op aanvraag Dedicated · beschikbaar

OPI Llama 3.1 8B Instruct

Dit model draait als eigen dedicated GPU-deployment, direct te starten via de wizard. Data blijft in Europa.

OPI Llama 3.1 8B Instruct is een open-source taalmodel van BAAI met 8B parameters en een contextvenster van 131K tokens, gehost op Europese GPU's via een OpenAI-compatibele API.

BAAI/OPI-Llama-3.1-8B-Instruct Op aanvraag
text->text · BAAI · sovereign EU
Runs on EU infrastructure operated by European companies; US marketplace capacity is never part of this chain. Full chain
8B
Parameters
131K
Contextvenster
24GB
Minimale VRAM
POST /api/v1/chat/completions Op aanvraag

Specificaties

Parameters 8B
Contextvenster 131,072 tokens
Minimale VRAM 24 GB
Architectuur LlamaForCausalLM (vLLM)
Licentie llama3.1
Modaliteit text->text
Uitgebracht September 2024
Uitgever BAAI ↗

Prijzen

Gedeelde router · per token
Op aanvraag
Niet beschikbaar op de gedeelde router. Prijs op aanvraag als dedicated GPU-deployment.
Dedicated GPU · per uur
vanaf €1,95 per uur
Eigen vLLM-instance op Europese cloud (24 GB VRAM), per uur afgerekend.

Gedeelde EU-router, pay-per-token, scale-to-zero. Dedicated GPU-deployments worden per uur afgerekend, zie prijzen.

Direct aanroepen

Drop-in vervanger voor OpenAI: wijzig alleen de base-URL en de API-key. Ook het Anthropic-formaat (/v1/messages) wordt ondersteund.

curl https://hostyourai.com/api/v1/chat/completions \
  -H "Authorization: Bearer hyai-..." \
  -H "Content-Type: application/json" \
  -d '{
    "model": "BAAI/OPI-Llama-3.1-8B-Instruct",
    "messages": [{"role": "user", "content": "Hello!"}]
  }'

Veelgestelde vragen

Kan ik OPI Llama 3.1 8B Instruct in de EU draaien?

Ja. HostYourAI draait OPI Llama 3.1 8B Instruct op GPU's in Europese datacenters via vLLM. Prompts en outputs verlaten de EU niet en er is geen Amerikaanse cloudprovider in de keten.

Is OPI Llama 3.1 8B Instruct hosten AVG/GDPR-compliant?

Ja. Alle verwerking vindt plaats binnen de EU, er is een verwerkersovereenkomst (DPA) beschikbaar en de subprocessor-lijst is openbaar. Open-source gewichten betekenen ook: geen training op jouw data.

Wat kost OPI Llama 3.1 8B Instruct?

OPI Llama 3.1 8B Instruct is beschikbaar op aanvraag: via de gedeelde EU-router na kort overleg, of als eigen dedicated GPU-deployment per uur. Vertel ons je use case, dan zetten we het voor je klaar.

Is de API compatibel met OpenAI?

Ja. Je gebruikt de standaard OpenAI-SDK's met een aangepaste base-URL (https://hostyourai.com/api/v1). Ook de Anthropic Messages API wordt ondersteund als drop-in.

Andere modellen van BAAI

Probeer OPI Llama 3.1 8B Instruct gratis

Account aanmaken duurt een minuut. Test OPI Llama 3.1 8B Instruct direct in de playground.

Start gratis