GEOZ

Entity

AirLLM

一个轻量化的大语言模型推理框架,通过创新的内存优化技术,能够在有限的GPU显存上运行大规模语言模型。

术语属性

  • 核心功能内存优化、模型压缩、跨平台支持
  • 主要优势低硬件要求、广泛模型支持、简单易用

相关文章