Ir para o conteúdo principal
← Glossary
technology

Ollama

Ollama

1 min May 19, 2026
Ollama ist ein Open-Source-Tool, das den lokalen Betrieb von KI-Sprachmodellen vereinfacht — mit automatischem Download, GPU-Nutzung, OpenAI-kompatibler REST-API und einfacher Modellverwaltung.

Was ist Ollama?

Ollama vereinfacht das lokale Betreiben von KI-Modellen auf:

  • Mac (M1/M2/M3, Metal GPU)
  • Linux (NVIDIA/AMD CUDA)
  • Windows (WSL2 + NVIDIA)

Kernfunktionen:

  • Modell-Download und -Verwaltung (ollama pull llama3)
  • Automatische GPU-Nutzung
  • OpenAI-kompatible REST-API (localhost:11434)
  • Modelfile-System für Custom-Modelle

Unterstützte Modelle (Auswahl)

FamilieModelleStärke
Llama3.1 8B, 70B, 405BGeneral Purpose
Qwen2.5 7B, 32B, 72BCoding, Reasoning
Mistral7B, LargeEuropäisches Modell
DeepseekCoder-V2, R1Coding, Math
Phi3.5, 4Kleine, schnelle Modelle
Gemma2 2B, 9BGoogle Open Source

Ollama API

# Chat
curl http://localhost:11434/api/chat -d '{
  "model": "qwen2.5:7b",
  "messages": [{"role": "user", "content": "Was ist EU AI Act?"}]
}'

# Generate
curl http://localhost:11434/api/generate -d '{
  "model": "qwen2.5:7b",
  "prompt": "Erkläre HITL in einem Satz"
}'

# Modelle auflisten
curl http://localhost:11434/api/tags

IIO AI Hub Setup

IIO nutzt Ollama als Inference-Backend:

GPU-Server (inhzgx4/inhzgx9)
    └── Ollama (Port 11434)

        LiteLLM (Port 4000) ← Routing + Aliase

        OpenWebUI (Port 3000) ← UI für Nutzer

DSGVO und Ollama

Ollama ist die DSGVO-konforme KI-Lösung:

  • Keine Daten verlassen den Server — vollständig lokal
  • Kein API-Vertrag mit US-Anbietern — kein Drittland-Transfer
  • Vollständige Kontrolle über Modellversion und Updates

Citação

"Ollama." Open Cognition Commons Foundation. https://opencognitioncommons.org/pt/glossary/ollama. CC-BY 4.0.
Metadados legíveis por máquina
{
  "@context": "https://schema.org",
  "@type": "DefinedTerm",
  "name": "Ollama",
  "description": "Ollama ist ein Open-Source-Tool, das den lokalen Betrieb von KI-Sprachmodellen vereinfacht — mit automatischem Download, GPU-Nutzung, OpenAI-kompatibler REST-API und einfacher Modellverwaltung.\n",
  "url": "https://opencognitioncommons.org/pt/glossary/ollama",
  "license": "https://creativecommons.org/licenses/by/4.0/",
  "alternateName": [
    "Ollama"
  ]
}

Curso disponível em learn.iio.space

Local AI with Ollama →