Naar de inhoud
03 Model garden Serve

Llama 2 70b chat hf

Dit model draait als eigen dedicated GPU-deployment, direct te starten via de wizard. Data blijft in Europa.

curl
$ curl https://hostyourai.com/api/v1/chat/completions \
  -H "Authorization: Bearer hyai-..." \
  -H "Content-Type: application/json" \
  -d '{
    "model": "meta-llama/Llama-2-70b-chat-hf",
    "messages": [{"role": "user", "content": "Hello!"}]
  }'

Direct aanroepen

Drop-in vervanger voor OpenAI: wijzig alleen de base-URL en de API-key. Ook het Anthropic-formaat (/v1/messages) wordt ondersteund.

Serve Model garden Op aanvraag
meta-llama/Llama-2-70b-chat-hf

text->text · meta-llama · soeverein in de EU

Draait op EU-infrastructuur van Europese bedrijven, van je verzoek tot aan de GPU. Bekijk de volledige keten

Llama 2 70b chat hf is een open-source taalmodel van Meta met 69B parameters, gehost op Europese GPU's via een OpenAI-compatibele API.

Router
Router · op aanvraag
Dedicated
Dedicated · beschikbaar
69BParameters
166GBMinimale VRAM
POST /api/v1/chat/completions Op aanvraag

Specificaties

Parameters69B
Minimale VRAM166 GB
ArchitectuurLlamaForCausalLM (vLLM)
Licentiellama2
Modaliteittext->text
UitgebrachtJuly 2023
Uitgevermeta-llama ↗

Prijzen

Gedeelde router · per token

Op aanvraag Niet beschikbaar op de gedeelde router. Prijs op aanvraag als dedicated GPU-deployment.

Dedicated GPU · per uur

vanaf €4,42 per uurEigen vLLM-instance op Europese cloud (166 GB VRAM), per minuut afgerekend.

Gedeelde EU-router, je betaalt alleen per token. Dedicated GPU-deployments worden per minuut afgerekend, zie prijzen.

Bench-index

Bench is onze kwaliteitsindex voor elk model, 0 tot 100. Hij steunt op openbare metingen (Epoch AI met zo’n 40 benchmarks, LiveBench, LMArena en meer) en wordt elke ochtend ververst. Waar niemand meet, staat een schatting met bandbreedte.

19,6 / 100 · Gemeten

Gemeten door Epoch AI over 14 benchmarks, met bandbreedte.

Bandbreedte 12,0 tot 26,1 · Plek 210 van 257 bij Epoch AI

Bronnen: Epoch AI ↗ · LiveBench ↗ · LMArena ↗ · Dagelijks bijgewerkt, laatst op 19-11-2026

Alle benchmarks (14)
TriviaQA87,6
HellaSwag80,4
LAMBADA78,9
ARC AI271,1
GSM8K69,6
PIQA65,6
Winogrande60,4
MMLU59,9
BBH53,2
OpenBookQA46,9
MATH level 53,3
DTBench2,7
GPQA diamond1,8
OTIS Mock AIME 2024-20250,0
Vragen

Veelgestelde vragen

Kan ik Llama 2 70b chat hf in de EU draaien?

Ja. HostYourAI draait Llama 2 70b chat hf op GPU's in Europese datacenters via vLLM. Prompts en outputs verlaten de EU niet en er is geen Amerikaanse cloudprovider in de keten.

Is Llama 2 70b chat hf hosten AVG/GDPR-compliant?

Ja. Alle verwerking vindt plaats binnen de EU, er is een verwerkersovereenkomst (DPA) beschikbaar en de subprocessor-lijst is openbaar. Open-source gewichten betekenen ook: geen training op jouw data.

Wat kost Llama 2 70b chat hf?

Llama 2 70b chat hf heeft meerdere GPU's tegelijk nodig en draait daarom als dedicated deployment. Je betaalt dan per GPU-minuut en niet per token. Vertel ons je volume, dan rekenen we het voor je door.

Is de API compatibel met OpenAI?

Ja. Je gebruikt de standaard OpenAI-SDK's met een aangepaste base-URL (https://hostyourai.com/api/v1). Ook de Anthropic Messages API wordt ondersteund als drop-in.

Het platform

Eén platform, vier lagen

Begin met één laag en voeg de andere toe als het werk erom vraagt. Ze delen één key, één saldo en één Activity-overzicht.

Code

Je coding agent op open modellen in Europa, ingericht met één commando.

Bekijk

Control

Sleutels, budgetten en guardrails per team, en persoonsgegevens tegengehouden voordat een model ze ziet.

Bekijk

Serve

Gedeeld per token, of alleen voor jou, vanuit Europese datacenters.

Bekijk

EU compute

Eigen GPU's in Europa, van H100 tot B300, afgestemd op reactietijd, generatiesnelheid en gelijktijdige gebruikers.

Bekijk

Probeer Llama 2 70b chat hf gratis

Account aanmaken duurt een minuut. Test Llama 2 70b chat hf direct in de playground.

  • Jantine
  • Hans
  • Sander
  • Jos
  • Daan
  • Kyra
  • Margriet
  • Stan
Het team achter HostYourAI