查看: 4|回复: 0

本地跑大模型,最麻烦的问题往往不是“哪个模型最好”,而是——你的电脑到底带得动哪个?

[复制链接]

15

主题

1

回帖

47

积分

新手上路

积分
47
发表于 1 小时前 | 显示全部楼层 |阅读模式
本地跑大模型,最麻烦的问题往往不是“哪个模型最好”,而是——你的电脑到底带得动哪个?

llmfit 就是专门解决这个问题的终端工具。

启动之后,它会自动检测你的 RAM、CPU、GPU,然后从大量模型中筛选适合当前硬件的选择,并给出综合评分。

主要功能包括:
🖥️ 自动识别本机硬件
📊 从质量、速度、适配度、上下文等维度评分
🧮 根据显存/内存情况选择合适量化版本
🧠 支持 MoE 模型
⚙️ 兼容 Ollama、llama.cpp、MLX、LM Studio
🖥️ TUI 交互界面 + CLI 命令行

以前折腾本地模型,经常是先下载一个几十 GB 的模型,折腾半天才发现内存不够或者速度惨不忍睹。

有了它,可以先让工具根据你的机器反推模型,再决定下载什么。

特别适合第一次搭本地 LLM 环境,或者手里有多台不同配置电脑、不知道该怎么选模型的人。🔗https://github.com/AlexsJones/llmfit




本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关注公众号

相关侵权、举报、投诉及建议等,请发 E-mail:2776601884@qq.com

Powered by Discuz! X5.0 © 2001-2026 Discuz! Team.|青ICP备2025004122号-1

在本版发帖
关注公众号
返回顶部