LibreAI / Lokale LLMs / ramalama
// local-llm · containers/ramalama

ramalama

ramalama ist ein Open-Source-Projekt aus der Kategorie Lokale LLMs von containers (containers/ramalama auf GitHub). Es hat 3.069 Sterne auf GitHub und 378 Forks, wird unter der Lizenz MIT veröffentlicht und wurde zuletzt am 3. Oktober 2026 auf GitHub aktualisiert.

RamaLama is an open-source developer tool that simplifies the local serving of AI models from any source and facilitates their use for inference in productio…

★ 3,1 Tsd. Sterne⑂ 378 ForksMITaktualisiert Okt 2026
▦ Visual — das README dieses Projekts enthält keinen einbettbaren Screenshot,
darum hier ein Platzhalter. Die Anleitung unten ist trotzdem vollständig.
// projektdaten

Projektdaten

GitHub-Sterne
3.069
Forks
378
Lizenz
MIT
Zuletzt auf GitHub aktualisiert
3. Oktober 2026
Kategorie
Lokale LLMs
Eintragstyp
Vollständige Installationsanleitung
Offizielle Website
Official site
// so funktioniert es

So funktioniert es

  1. Install the runtime

    One binary or app gets you a working local model setup.

  2. Download a model

    Pick a size that fits your RAM/VRAM; smaller models run on laptops.

  3. Chat or integrate

    Use the built-in UI, or point OpenAI-compatible clients at it.

  4. Go private

    Airplane mode works — your prompts never leave the device.

// funktionen

Warum es so beliebt ist

LLM-powered

Large language models drive its smartest features, locally or via API.

Offline capable

Works on planes, in basements, behind firewalls.

Model choice

Swap between hundreds of open models freely.

OpenAI-compatible APIs

Existing tools plug in by changing one URL.

Document chat

Ask questions over your PDFs, notes, and codebases.

No subscriptions

Pay nothing per token, ever.

Advertisement
// selbst ausführen

Führe es selbst aus

  1. Step 1 — Clone the repo

    Download the source and move into the project folder.

    git clone https://github.com/containers/ramalama.git
    cd ramalama
  2. Step 2 — Check the README

    Every project documents its own setup; start with install requirements.

    cat README.md | head -60
  3. Step 3 — Run it

    Follow the project's launch command — Docker, pip, npm, or a binary release.

    # see README for the exact launch command
// anwendungsfälle

Was du damit bauen kannst

Advertisement
// häufige fragen

Häufige Fragen

Who maintains ramalama?

It is an open-source project at containers/ramalama with 378 forks. Check the repo's contributors and recent commits to see how active maintenance is.

Is ramalama free for commercial use?

MIT licensed — use it commercially, no strings attached.

Which model should I start with?

A recent 8–32B instruct model is the sweet spot for most machines.

Is it really private?

Yes — with no network calls, there's nothing to leak.

Are local models as good as GPT-4?

Close on many tasks now; frontier cloud models still lead on hard reasoning.

// weiter entdecken

Ähnliche Tools

Lokale LLMs

MaxKB

🔥 MaxKB is an open-source platform for building enterprise-grade agents. 强大易用的开源企业级智能体平台。

★ 22,9 Tsd. SterneGPL-3.0
Anleitung ansehen →
Lokale LLMs

ext-apps

Official repo for spec & SDK of MCP Apps protocol - standard for UIs embedded AI chatbots, served by MCP servers

★ 2,9 Tsd. SterneUnknown
Anleitung ansehen →
Lokale LLMs

GPT4All

GPT4All — run local LLMs on any device: a free desktop chat client and Python SDK that run open models entirely on your CPU, no GPU or cloud required

★ 77,4 Tsd. SterneMIT
Anleitung ansehen →
Lokale LLMs

WhisperJAV

Noise-robust subtitle generator powered by Whisper and local ASR models.

★ 2,3 Tsd. SterneMIT
Anleitung ansehen →
Lokale LLMs

vllm-omni

vLLM-Omni — efficient inference for omni-modality models: image, audio, video, diffusion and policies.

★ 7,1 Tsd. SterneApache-2.0
Anleitung ansehen →
Lokale LLMs

lemonade

Discover and run local AI apps, serving optimized LLMs from your own GPU and NPU.

★ 5,8 Tsd. SterneApache-2.0
Anleitung ansehen →
// alternativen

Alternativen im Bereich Lokale LLMs

Die anderen Projekte der Kategorie Lokale LLMs mit den meisten Sternen im LibreAI-Katalog — die realistische Auswahl, falls ramalama nicht das Richtige ist.

// mehr in local-llm

Mehr in Lokale LLMs

Verwandte Projekte der Kategorie Lokale LLMs im Katalog, die ramalama bei den Sternen am nächsten stehen — zum Weiterstöbern auf beiden Seiten.

Hol dir ramalama

Kostenlos und offen — hol dir den Quellcode, gib dem Repository einen Stern und leg los.