Model garden Router · auf Anfrage Dedicated · verfügbar

Meta Llama 3 70B Instruct

Läuft als eigenes dediziertes GPU-Deployment, direkt über den Wizard startbar. Daten bleiben in Europa.

Meta Llama 3 70B Instruct ist ein quelloffenes Sprachmodell von Meta mit 71B Parametern, gehostet auf europäischen GPUs über eine OpenAI-kompatible API.

meta-llama/Meta-Llama-3-70B-Instruct Auf Anfrage
text->text · meta-llama · sovereign EU
Runs on EU infrastructure operated by European companies; US marketplace capacity is never part of this chain. Full chain
71B
Parameter
—
Kontextfenster
170GB
Minimaler VRAM
POST /api/v1/chat/completions Auf Anfrage

Spezifikationen

Parameter 71B
Minimaler VRAM 170 GB
Architektur LlamaForCausalLM (vLLM)
Lizenz llama3
Modalität text->text
Veröffentlicht April 2024
Anbieter meta-llama ↗

Preise

Gemeinsamer Router · pro Token
Auf Anfrage
Nicht über den gemeinsamen Router verfügbar. Preis auf Anfrage als dediziertes GPU-Deployment.
Dediziertes GPU · pro Stunde
ab €5,07 pro Stunde
Eigene vLLM-Instanz in europäischer Cloud (170 GB VRAM), stundenweise abgerechnet.

Gemeinsamer EU-Router, Pay-per-Token, Scale-to-Zero. Dedizierte GPU-Deployments werden stundenweise abgerechnet, siehe Preise.

Bench-Index

Bench ist unser Qualitätsindex für jedes Modell, 0 bis 100. Er stützt sich auf öffentliche Messungen (Epoch AI mit rund 40 Benchmarks, LiveBench, LMArena und weitere) und wird jeden Morgen aktualisiert. Wo niemand misst, steht eine Schätzung mit Bandbreite.

41,2 / 100 · Gemessen

Gemessen von Epoch AI über 7 Benchmarks, mit Bandbreite.

Bandbreite 33,6 bis 44,8 · Platz 184 von 270 bei Epoch AI

Quellen: Epoch AI ↗ · LiveBench ↗ · LMArena ↗ · Täglich aktualisiert, zuletzt am 05-10-2026

LiveBench · 37,7
Reasoning 30,7
Coding 22,0
Mathematik 32,3
Datenanalyse 43,8
Sprache 34,1
Anweisungen befolgen 63,5
Alle Benchmarks (7)
MMLU 72,4
Winogrande 67,0
DTBench 23,6
MATH level 5 22,6
GPQA diamond 20,7
Cybench 5,0
OTIS Mock AIME 2024-2025 4,2
LiveBench · Alle Aufgaben
Reasoning
web of lies v2 32,0
zebra puzzle 30,0
spatial 30,0
Coding
LCB generation 32,1
coding completion 12,0
Mathematik
AMPS Hard 22,0
math comp 20,8
olympiad 54,1
Datenanalyse
cta 54,0
tablejoin 25,2
tablereformat 52,0
Sprache
connections 31,2
plot unscrambling 31,2
typos 40,0
Anweisungen befolgen
paraphrase 57,9
simplify 67,1
story generation 69,8
summarize 59,3

Direkt aufrufen

Drop-in-Ersatz für OpenAI: Ändern Sie nur die Base-URL und den API-Key. Auch das Anthropic-Format (/v1/messages) wird unterstützt.

curl https://hostyourai.com/api/v1/chat/completions \
  -H "Authorization: Bearer hyai-..." \
  -H "Content-Type: application/json" \
  -d '{
    "model": "meta-llama/Meta-Llama-3-70B-Instruct",
    "messages": [{"role": "user", "content": "Hello!"}]
  }'

Häufig gestellte Fragen

Kann ich Meta Llama 3 70B Instruct in der EU betreiben?

Ja. HostYourAI betreibt Meta Llama 3 70B Instruct auf GPUs in europäischen Rechenzentren über vLLM. Prompts und Outputs verlassen die EU nicht und es ist kein US-Cloud-Anbieter in der Kette.

Ist das Hosting von Meta Llama 3 70B Instruct DSGVO-konform?

Ja. Die gesamte Verarbeitung findet innerhalb der EU statt, ein Auftragsverarbeitungsvertrag (AVV) ist verfügbar und die Liste der Subprozessoren ist öffentlich. Open-Source-Gewichte bedeuten außerdem: kein Training mit Ihren Daten.

Was kostet Meta Llama 3 70B Instruct?

Meta Llama 3 70B Instruct braucht mehrere GPUs gleichzeitig und läuft deshalb als dediziertes Deployment, das nach GPU-Stunden abgerechnet wird, nicht pro Token. Nennen Sie uns Ihr Volumen, dann rechnen wir es für Sie durch.

Ist die API OpenAI-kompatibel?

Ja. Sie verwenden die Standard-OpenAI-SDKs mit einer angepassten Base-URL (https://hostyourai.com/api/v1). Auch die Anthropic Messages API wird als Drop-in unterstützt.

Weitere Modelle von Meta

Testen Sie Meta Llama 3 70B Instruct kostenlos

Die Kontoerstellung dauert eine Minute. Testen Sie Meta Llama 3 70B Instruct direkt im Playground.

Kostenlos starten