一个名为 MLC LLM 的全新开源项目已在 GitHub 上线,完全本地运行无需联网,甚至集显老电脑、苹果 iPhone 手机都能运行。
nerror="javascript:errorimg.call(this);">
IT之家查询 GitHub 页面发现,这个项目的开发者来自卡内基梅隆大学的 Catalyst 计划、SAMPL 机器学习研究小组以及华盛顿大学、上海交通大学和 OctoML 等。他们还有一个名为 Web LLM 的相关项目,该项目可以完全在网络浏览器中运行 AI 聊天机器人。
nerror="javascript:errorimg.call(this);">
目前,MLC LLM 可用于 Windows、Linux、macOS 和 iOS 平台,暂时还没有适用于 Android 的版本。
此外,ThinkPad X1 Carbon(第 6 代)也测试成功运行 MLC LLM,这是一款搭载 i7-8550U 处理器的笔记本,没有独立显卡,配有英特尔 UHD 620 GPU。MLC LLM 在 PC 平台需要通过命令行运行,外媒测试表现一般般,回复时间需要将近 30 秒,而且几乎没有连续对话能力,希望能在后续版本中得到改进吧。
nerror="javascript:errorimg.call(this);">

