Zum Inhalt
03 Model garden Serve

Meta Llama 3 70B Instruct

Läuft als eigenes dediziertes GPU-Deployment, direkt über den Wizard startbar. Daten bleiben in Europa.

curl
$ curl https://hostyourai.com/api/v1/chat/completions \
  -H "Authorization: Bearer hyai-..." \
  -H "Content-Type: application/json" \
  -d '{
    "model": "meta-llama/Meta-Llama-3-70B-Instruct",
    "messages": [{"role": "user", "content": "Hello!"}]
  }'

Direkt aufrufen

Drop-in-Ersatz für OpenAI: Ändern Sie nur die Base-URL und den API-Key. Auch das Anthropic-Format (/v1/messages) wird unterstützt.

Serve Model garden Auf Anfrage
meta-llama/Meta-Llama-3-70B-Instruct

text->text · meta-llama · souverän in der EU

Läuft auf EU-Infrastruktur europäischer Unternehmen, von Ihrer Anfrage bis zur GPU. Die vollständige Kette ansehen

Meta Llama 3 70B Instruct ist ein quelloffenes Sprachmodell von Meta mit 71B Parametern, gehostet auf europäischen GPUs über eine OpenAI-kompatible API.

Router
Router · auf Anfrage
Dedicated
Dedicated · verfügbar
71BParameter
170GBMinimaler VRAM
POST /api/v1/chat/completions Auf Anfrage

Spezifikationen

Parameter71B
Minimaler VRAM170 GB
ArchitekturLlamaForCausalLM (vLLM)
Lizenzllama3
Modalitättext->text
VeröffentlichtApril 2024
Anbietermeta-llama ↗

Preise

Gemeinsamer Router · pro Token

Auf Anfrage Nicht über den gemeinsamen Router verfügbar. Preis auf Anfrage als dediziertes GPU-Deployment.

Dediziertes GPU · pro Stunde

ab €4,42 pro StundeEigene vLLM-Instanz in europäischer Cloud (170 GB VRAM), pro Minute abgerechnet.

Gemeinsamer EU-Router, Sie zahlen nur pro Token. Dedizierte GPU-Deployments werden pro Minute abgerechnet, siehe Preise.

Bench-Index

Bench ist unser Qualitätsindex für jedes Modell, 0 bis 100. Er stützt sich auf öffentliche Messungen (Epoch AI mit rund 40 Benchmarks, LiveBench, LMArena und weitere) und wird jeden Morgen aktualisiert. Wo niemand misst, steht eine Schätzung mit Bandbreite.

39,2 / 100 · Gemessen

Gemessen von Epoch AI über 7 Benchmarks, mit Bandbreite.

Bandbreite 34,6 bis 43,4 · Platz 182 von 257 bei Epoch AI

Quellen: Epoch AI ↗ · LiveBench ↗ · LMArena ↗ · Täglich aktualisiert, zuletzt am 19-11-2026

LiveBench · 37,7

Reasoning30,7
Coding22,0
Mathematik32,3
Datenanalyse43,8
Sprache34,1
Anweisungen befolgen63,5
Alle Benchmarks (7)
MMLU72,4
Winogrande67,0
DTBench23,6
MATH level 522,6
GPQA diamond21,6
Cybench5,0
OTIS Mock AIME 2024-20254,2
LiveBench · Alle Aufgaben
Reasoning
web of lies v232,0
zebra puzzle30,0
spatial30,0
Coding
LCB generation32,1
coding completion12,0
Mathematik
AMPS Hard22,0
math comp20,8
olympiad54,1
Datenanalyse
cta54,0
tablejoin25,2
tablereformat52,0
Sprache
connections31,2
plot unscrambling31,2
typos40,0
Anweisungen befolgen
paraphrase57,9
simplify67,1
story generation69,8
summarize59,3
Fragen

Häufig gestellte Fragen

Kann ich Meta Llama 3 70B Instruct in der EU betreiben?

Ja. HostYourAI betreibt Meta Llama 3 70B Instruct auf GPUs in europäischen Rechenzentren über vLLM. Prompts und Outputs verlassen die EU nicht und es ist kein US-Cloud-Anbieter in der Kette.

Ist das Hosting von Meta Llama 3 70B Instruct DSGVO-konform?

Ja. Die gesamte Verarbeitung findet innerhalb der EU statt, ein Auftragsverarbeitungsvertrag (AVV) ist verfügbar und die Liste der Subprozessoren ist öffentlich. Open-Source-Gewichte bedeuten außerdem: kein Training mit Ihren Daten.

Was kostet Meta Llama 3 70B Instruct?

Meta Llama 3 70B Instruct braucht mehrere GPUs gleichzeitig und läuft deshalb als dediziertes Deployment, das pro GPU-Minute abgerechnet wird, nicht pro Token. Nennen Sie uns Ihr Volumen, dann rechnen wir es für Sie durch.

Ist die API OpenAI-kompatibel?

Ja. Sie verwenden die Standard-OpenAI-SDKs mit einer angepassten Base-URL (https://hostyourai.com/api/v1). Auch die Anthropic Messages API wird als Drop-in unterstützt.

Die Plattform

Eine Plattform, vier Ebenen

Starten Sie mit einer Ebene und ergänzen Sie die anderen, wenn die Arbeit es verlangt. Alle teilen sich einen Key, ein Guthaben und eine Activity-Ansicht.

Code

Ihr Coding-Agent auf offenen Modellen in Europa, eingerichtet mit einem Befehl.

Öffnen

Control

Schlüssel, Budgets und Guardrails pro Team, und personenbezogene Daten gestoppt, bevor ein Modell sie sieht.

Öffnen

Serve

Gemeinsam genutzt pro Token oder nur für Sie, aus europäischen Rechenzentren.

Öffnen

EU compute

Private GPUs in Europa, von H100 bis B300, ausgelegt auf Antwortzeit, Generierungsgeschwindigkeit und gleichzeitige Nutzer.

Öffnen

Testen Sie Meta Llama 3 70B Instruct kostenlos

Die Kontoerstellung dauert eine Minute. Testen Sie Meta Llama 3 70B Instruct direkt im Playground.

  • Jantine
  • Hans
  • Sander
  • Jos
  • Daan
  • Kyra
  • Margriet
  • Stan
Das Team hinter HostYourAI