开源模型
模型库、本地运行与权重 · 共 35 个开源模型库与本地运行入口(Hub、客户端、权重页)。许可证(Apache/MIT/自定义)决定能否商用;显存与量化方案以各项目 README 为准。
点卡片进入站内详情页,官网入口在详情页「访问官网」。也可对照 优惠线报 与 教程。
Ollama GitHub海外 · 开源Ollama 仓库LM Studio Docs海外 · 免费LM Studio 文档HF Datasets海外 · 有免费版数据集OpenLLM海外 · 开源BentoML OpenLLMBentoML海外 · 开源模型服务化Ray Serve海外 · 开源Ray ServeTriton Inference Server海外 · 开源NVIDIA TritonText Generation Inference海外 · 开源HF TGIAphrodite Engine海外 · 开源推理引擎ExLlamaV2海外 · 开源量化推理AutoAWQ海外 · 开源AWQ 量化AutoGPTQ海外 · 开源GPTQ 量化PEFT海外 · 开源参数高效微调TRL海外 · 开源RLHF/对齐训练Axolotl海外 · 开源微调框架OpenVINO海外 · 开源Intel 推理工具包ONNX Runtime海外 · 开源跨平台推理ExecuTorch海外 · 开源端侧 PyTorchMLC LLM海外 · 开源通用端侧 LLMWebLLM海外 · 开源浏览器内 LLMTransformers.js海外 · 开源浏览器 TransformersCandle海外 · 开源Rust ML 框架Burn海外 · 开源Rust 深度学习GGML海外 · 开源张量库llamafile海外 · 开源单文件本地 LLMJan Docs海外 · 开源Jan 文档SillyTavern Docs海外 · 开源ST 文档Hugging Face Hub海外 · 有免费版模型社区vLLM海外 · 开源高吞吐推理llama.cpp海外 · 开源本地推理ComfyUI海外 · 开源节点式生图