Live cutover 2026-07-15 odkrył: nvidia-smi not found, brak libnvidia-ml w ldcache — host nigdy nie miał sterownika, natywna Ollama mieliła na CPU. Sekcja deploy.resources (nvidia) zakomentowana do czasu instalacji sterownika (backlog). nvidia-container-toolkit doinstalowany na hoście (prerequisite, brakował w runbooku). Kontener zweryfikowany: 5/5 modeli z bind-mounta, embed bge-m3 dim=1024, reachable z PIHA przez tailnet. |
||
|---|---|---|
| .. | ||
| docker-compose.yml | ||
| env.example | ||
| healthcheck.sh | ||
| README.md | ||
| service.yaml | ||
Ollama
Get up and running with large language models locally.
Usage
Deployed on the solaria node for GPU acceleration.
API is available on port 11434.
Example check:
curl http://localhost:11434/api/tags