Skip to main content

Text generation web UI

A Gradio web UI for Large Language Models.

只能執行本地模型,不支援外部模型 API。

支援以下多重功能的 AI 平台

  • Chat
  • Fine-Tune Model
  • Multiple model backends: Transformers, llama.cpp (through llama-cpp-python), ExLlamaV2, AutoGPTQ, AutoAWQ, GPTQ-for-LLaMa, QuIP#.
  • OpenAI-compatible API server with Chat and Completions endpoints

教學