// devtools · modelscope/ms-swift

ms-swift

ms-swift ist ein Open-Source-Projekt aus der Kategorie Entwickler-Tools von modelscope (modelscope/ms-swift auf GitHub). Es hat 15.796 Sterne auf GitHub und 1.726 Forks, wird unter der Lizenz Apache-2.0 veröffentlicht und wurde zuletzt am 8. Oktober 2026 auf GitHub aktualisiert.

Fine-tune and deploy 600+ LLMs and 300+ multimodal models with PEFT or full-parameter training.

★ 15,8 Tsd. Sterne⑂ 1,7 Tsd. ForksApache-2.0aktualisiert Okt 2026
▦ Visual — das README dieses Projekts enthält keinen einbettbaren Screenshot,
darum hier ein Platzhalter. Die Anleitung unten ist trotzdem vollständig.
// projektdaten

Projektdaten

GitHub-Sterne
15.796
Forks
1.726
Lizenz
Apache-2.0
Zuletzt auf GitHub aktualisiert
8. Oktober 2026
Eintragstyp
Vollständige Installationsanleitung
Offizielle Website
Official site
// so funktioniert es

So funktioniert es

  1. Pick a base model and training method

    Choose from 600+ LLMs or 300+ multimodal models, then decide between lightweight PEFT (such as LoRA) and full-parameter training.

  2. Install ms-swift

    Install the package from PyPI with pip or uv, or clone the repo and install from source for the latest main branch.

  3. Prepare your dataset

    Use one of the 150+ built-in datasets or format your own for pre-training, SFT, alignment, embedding or reranker tasks.

  4. Train, evaluate and deploy

    Launch training with the CLI or scripts, evaluate the result, then quantize and serve it with vLLM, SGLang or LMDeploy.

// funktionen

Warum es so beliebt ist

Huge model coverage

Training-to-deployment pipelines for 600+ text LLMs and hundreds of multimodal models, with day-0 support for popular new releases.

Many training algorithms

CPT, SFT, DPO, KTO, RM, CPO, SimPO and ORPO, plus a GRPO-family reinforcement learning set including DAPO, GSPO and Reinforce++.

Lightweight fine-tuning methods

LoRA, QLoRA, DoRA, LoRA+, LLaMAPro, LongLoRA, Adapter, ReFT and more, alongside full-parameter training.

Megatron parallelism

Tensor, pipeline, context and expert parallelism techniques from Megatron to accelerate large training runs.

Broad hardware support

NVIDIA GPUs via CUDA, AMD GPUs via ROCm, Ascend NPU and other domestic accelerators, plus Apple MPS and CPU.

Quantization and fast serving

Train on BNB, AWQ, GPTQ, AQLM, HQQ and EETQ quantized models, and accelerate inference and deployment with vLLM, SGLang and LMDeploy.

Advertisement
// selbst ausführen

Führe es selbst aus

  1. Clone the repository

    Clone ms-swift if installing from source; PyPI installs do not need the clone.

    git clone https://github.com/modelscope/ms-swift.git
    cd ms-swift
  2. Install the package

    Install the latest release from PyPI and upgrade to the newest version.

    pip install ms-swift -U
  3. Install from source (alternative)

    For the main branch, install the cloned project in editable mode.

    pip install -e .
// anwendungsfälle

Was du damit bauen kannst

Advertisement
// häufige fragen

Häufige Fragen

Who maintains ms-swift?

It is provided by the ModelScope community (modelscope) and open-source contributors, and was presented at AAAI 2025.

Is ms-swift free to use?

Yes. It is Apache-2.0 licensed; the models and datasets you use with it carry their own licenses.

Does it need a paid API key?

No. Training and inference run on your own hardware; you only need model weights and data, which you download from hubs such as ModelScope or Hugging Face.

How does ms-swift compare with LLaMA-Factory or Axolotl?

All three fine-tune open LLMs; ms-swift stands out for its very wide model and multimodal coverage, Megatron parallelism and the breadth of built-in alignment algorithms - the best fit depends on your model and hardware.

How do I get started?

Run pip install ms-swift -U, pick a built-in dataset and a supported base model, and follow the quick-start training example in the docs.

// weiter entdecken

Ähnliche Tools

Entwickler-Tools

peft

Fine-tune huge models on small hardware with LoRA and other efficient methods

★ 21,8 Tsd. SterneApache-2.0
Anleitung ansehen →
Entwickler-Tools

litgpt

20+ high-performance LLMs implemented from scratch, with proven recipes to pretrain, finetune and deploy.

★ 13,7 Tsd. SterneApache-2.0
Anleitung ansehen →
Entwickler-Tools

evalscope

A streamlined framework for evaluating and benchmarking LLMs, VLMs and AIGC models.

★ 3,5 Tsd. SterneApache-2.0
Anleitung ansehen →
Entwickler-Tools

ai-game-devtools

Resource hub for AI-powered game development — LLMs, world models, agents.

★ 1,4 Tsd. SterneMIT
Anleitung ansehen →
Entwickler-Tools

LlamaFactory

Unified, efficient fine-tuning of 100+ LLMs and VLMs with a CLI and Web UI — ACL 2024

★ 75,4 Tsd. SterneApache-2.0
Anleitung ansehen →
Entwickler-Tools

forgecode

AI enabled pair programmer for Claude, GPT, O Series, Grok, Deepseek, Gemini and 300+ models

★ 7,6 Tsd. SterneApache-2.0
Anleitung ansehen →
// alternativen

Alternativen im Bereich Entwickler-Tools

Die anderen Projekte der Kategorie Entwickler-Tools mit den meisten Sternen im LibreAI-Katalog — die realistische Auswahl, falls ms-swift nicht das Richtige ist.

// mehr in devtools

Mehr in Entwickler-Tools

Verwandte Projekte der Kategorie Entwickler-Tools im Katalog, die ms-swift bei den Sternen am nächsten stehen — zum Weiterstöbern auf beiden Seiten.

Hol dir ms-swift

Kostenlos und offen — hol dir den Quellcode, gib dem Repository einen Stern und leg los.