llamafile:在PC上运行 LLM 的全新最...

发布时间 :2023-12-03 13:36:32
大模型日报AI前沿动态 [技术]
【llamafile:在PC上运行 LLM 的全新最佳方式】

原文链接:网页链接
概述:Justine Tunney 发布了 llamafile,也许是目前在自己的计算机上运行语言大模型(想象一下自己的本地 ChatGPT 副本)的最佳方式。

llamafile 是一个单个的多GB文件,其中包含了用于运行该模型所需的模型权重和代码,有时还包括一个完整的本地服务器,带有用于与其交互的 Web 用户界面。

这个可执行文件使用Cosmopolitan Libc编译,是由 Justine 开发的令人难以置信的项目,支持编译一个单个的二进制文件,能够在多个不同的操作系统和硬件架构上工作而无需修改。

热门评论

起长ID特招人烦总浪费别人空间
起长ID特招人烦总浪费别人空间

我的印象笔记

今日热门