🔥 热门ollaya-dev/ollaya
ollaya — 本地跑决策模型,Ollama 式拉取与推理服务
本地跑决策模型,Ollama 式拉取与推理服务
2026-09-29项目主页
本文为要点摘要,完整细节以项目主页为准。
- 它是什么:Rust 写的本地决策模型运行时,可拉取并服务 Laya、decider、NLI、GLiClass,对外暴露 TypeSafe 兼容 API,定位是决策模型版的 Ollama。
- 为什么值得关注:把决策类模型从云端搬到本地,省去自建推理栈;Rust 实现,906 star 说明本地化决策模型需求正在起量。
- 参考价值:对 agent 与工具链开发者,TypeSafe 兼容 API 便于把本地决策能力接进现有流程;后端可参考其模型拉取与本地服务的设计。
项目:ollaya-dev/ollaya · ⭐ 906 · Rust