jundot/omlx

omlx

✅ 近期有维护

面向 Apple Silicon 的 LLM 推理服务,支持连续批处理与 SSD 缓存,可从 macOS 菜单栏直接管理,解决本地部署模型吞吐低、管理繁琐的问题。

23,304Stars
2,088Forks
+213近 7 天 Star

Python · Apache-2.0 · 最近推送 2026-11-03

官方仓库与安装文档 ↗

GitValue · 价值证据

待补证 · 证据覆盖 0%

试跑评分;文档声明与实测分开。未收集证据不代表项目没有价值。

Star 历史

2026-02-092026-11-03
查看历史数据
日期Stars
2026-10-0522,489
2026-10-0622,534
2026-10-0722,567
2026-10-0822,593
2026-10-0922,625
2026-10-1022,653
2026-10-1122,676
2026-10-1222,702
2026-10-1322,741
2026-10-1422,779
2026-10-1522,815
2026-10-1622,840
2026-10-1722,857
2026-10-1822,882
2026-10-1922,914
2026-10-2022,944
2026-10-2122,958
2026-10-2222,981
2026-10-2323,004
2026-10-2423,021
2026-10-2523,052
2026-10-2623,078
2026-10-2723,114
2026-10-2823,138
2026-10-2923,157
2026-10-3023,207
2026-10-3123,235
2026-11-0123,268
2026-11-0223,282
2026-11-0323,304

获取项目

git clone https://github.com/jundot/omlx.git

克隆仅获取源码;依赖与安装步骤请参照项目的 README.

相关项目与平替候选

同领域不等于功能完全相同,选型前请核对官方文档和许可证。