// devtools · Lightning-AI/litgpt

litgpt

litgpt ist ein Open-Source-Projekt aus der Kategorie Entwickler-Tools von Lightning-AI (Lightning-AI/litgpt auf GitHub). Es hat 13.695 Sterne auf GitHub und 1.516 Forks, wird unter der Lizenz Apache-2.0 veröffentlicht und wurde zuletzt am 7. Oktober 2026 auf GitHub aktualisiert.

20+ high-performance LLMs implemented from scratch, with proven recipes to pretrain, finetune and deploy.

★ 13,7 Tsd. Sterne⑂ 1,5 Tsd. ForksApache-2.0aktualisiert Okt 2026
▦ Visual — das README dieses Projekts enthält keinen einbettbaren Screenshot,
darum hier ein Platzhalter. Die Anleitung unten ist trotzdem vollständig.
// projektdaten

Projektdaten

GitHub-Sterne
13.695
Forks
1.516
Lizenz
Apache-2.0
Zuletzt auf GitHub aktualisiert
7. Oktober 2026
Eintragstyp
Vollständige Installationsanleitung
Offizielle Website
Official site
// so funktioniert es

So funktioniert es

  1. Choose a model and a workflow

    Pick from 20+ supported LLMs and decide whether you are chatting, fine-tuning, pretraining, evaluating or serving.

  2. Install LitGPT

    Install the package with the extra dependencies bundle from PyPI, or clone the repo for a source install.

  3. Load a model

    Use the CLI or the Python API - weights download automatically for supported models (some gated models need a Hugging Face token).

  4. Run your workflow

    Fine-tune on your JSON dataset with a proven recipe, chat with the result to test it, then serve it as an API.

// funktionen

Warum es so beliebt ist

From-scratch, single-file models

Every LLM is implemented from scratch with no abstractions, making the code easy to read, debug and modify.

20+ model families

Llama 2/3, Code Llama, Gemma 2/3, Phi, Qwen2.5/Qwen3, Mistral/Mixtral, Falcon, Pythia, OLMo, DeepSeek R1 distills and more, listed via litgpt download list.

Full workflow CLI

Pretrain, continued pretrain, finetune, evaluate (for example MMLU and TruthfulQA), chat and serve, all through one litgpt command interface.

Parameter-efficient finetuning

LoRA, QLoRA, Adapter and Adapter v2 recipes, plus YAML configuration files for reproducible, out-of-the-box performance.

Scale and precision options

Flash Attention v2, FSDP multi-GPU support, optional CPU offloading, TPU/XLA support, and FP16/BF16 plus 4-bit and 8-bit quantization to cut memory.

One-command deployment

litgpt serve turns a pretrained or fine-tuned checkpoint into a web server you can query over HTTP.

Advertisement
// selbst ausführen

Führe es selbst aus

  1. Clone the repository

    Clone LitGPT for a source install; PyPI users can skip the clone.

    git clone https://github.com/Lightning-AI/litgpt.git
    cd litgpt
  2. Install LitGPT

    Install the package with its extra dependencies from PyPI.

    pip install 'litgpt[extra]'
  3. Chat with a model

    Download and chat with a model in one command - weights are fetched automatically.

    litgpt chat microsoft/phi-2
// anwendungsfälle

Was du damit bauen kannst

Advertisement
// häufige fragen

Häufige Fragen

Who maintains LitGPT?

LitGPT is developed by Lightning AI, the company behind PyTorch Lightning, with open-source contributors.

Is LitGPT free to use?

Yes. It is Apache-2.0 licensed, which the project highlights as allowing unlimited enterprise use. Model weights you download carry their own licenses.

Does it need a paid API key?

No. Everything runs on your own GPUs; some gated Hugging Face models require a free access token to download.

How does LitGPT compare with Hugging Face Transformers or ms-swift?

Transformers is a broad modeling library and ms-swift a ModelScope training framework; LitGPT focuses on a curated set of from-scratch, hackable implementations with proven end-to-end recipes in one CLI.

How do I get started?

Run pip install 'litgpt[extra]', then litgpt chat microsoft/phi-2 to talk to a model in minutes.

// weiter entdecken

Ähnliche Tools

Entwickler-Tools

rocketride-server

A high-performance AI pipeline engine - build LLM workflows as portable .pipe files

★ 17,8 Tsd. SterneMIT
Anleitung ansehen →
Entwickler-Tools

jcode

A high-performance coding agent harness in Rust - fast TUI, swarms and every provider

★ 20,4 Tsd. SterneMIT
Anleitung ansehen →
Entwickler-Tools

ms-swift

Fine-tune and deploy 600+ LLMs and 300+ multimodal models with PEFT or full-parameter training.

★ 15,8 Tsd. SterneApache-2.0
Anleitung ansehen →
Entwickler-Tools

DataDesigner

NVIDIA NeMo Data Designer: build validated, multimodal synthetic datasets from scratch or from seed data.

★ 2,3 Tsd. SterneApache-2.0
Anleitung ansehen →
Entwickler-Tools

claude-cookbooks

Anthropic's official collection of notebooks and recipes for using Claude effectively

★ 53,3 Tsd. SterneMIT
Anleitung ansehen →
Entwickler-Tools

langextract

Google's Python library for extracting structured data from unstructured text with LLMs, with grounding

★ 38,9 Tsd. SterneApache-2.0
Anleitung ansehen →
// alternativen

Alternativen im Bereich Entwickler-Tools

Die anderen Projekte der Kategorie Entwickler-Tools mit den meisten Sternen im LibreAI-Katalog — die realistische Auswahl, falls litgpt nicht das Richtige ist.

// mehr in devtools

Mehr in Entwickler-Tools

Verwandte Projekte der Kategorie Entwickler-Tools im Katalog, die litgpt bei den Sternen am nächsten stehen — zum Weiterstöbern auf beiden Seiten.

Hol dir litgpt

Kostenlos und offen — hol dir den Quellcode, gib dem Repository einen Stern und leg los.