text-generation-webui (oobabooga)
text-generation-webui hat viele Plugins — sinnvoll, wenn Sie die Web UI schon nutzen. Für MiniTavern: OpenAI-kompatible Extension / API.
Kurzablauf
- Nach offizieller Anleitung installieren und Modell laden.
- Extension oder Startparameter openai-kompatibel (Name/Schalter je Branch).
- Listen
0.0.0.0oder LAN; Port oft5000oder laut Doku. - Test:
http://127.0.0.1:Port/v1/models. - MiniTavern Base URL:
http://YOUR_PC_IP:Port/v1.
Tipps
- Branches und Extensions ändern sich — README Ihres Clones.
- Lieber out-of-the-box: Ollama / LM Studio / KoboldCPP.