跳转到内容
FreeEval Documentation

安装

安装 FreeEval

FreeEval 的设计旨在为语言模型提供可重现的评估框架。请按照以下步骤在您的环境中设置 FreeEval。

前提条件

在安装 FreeEval 之前，请确保您已具备：

  • Python 3.8 或更高版本
  • Git
  • （推荐）虚拟环境工具，如 conda 或 venv

用于模型评估的 Docker 设置

如果您计划评估自己的模型（尤其是大型语言模型），我们强烈建议安装带有 GPU 支持的 Docker：

  1. 按照官方 Docker 安装指南安装 Docker
  2. 对于 NVIDIA GPU 用户，按照官方指南安装 NVIDIA Container Toolkit

这种设置将允许您使用我们提供的工具高效部署模型。

安装步骤

FreeEval 目前可直接从 GitHub 仓库获取：

Terminal window
# 克隆仓库
git clone https://github.com/WisdomShell/FreeEval.git


# 导航到 FreeEval 目录
cd FreeEval


# 安装依赖
pip install -r requirements.txt

验证您的安装

要验证 FreeEval 是否正确安装，请尝试运行其中一个示例评估：

Terminal window
python run.py -c ./config/examples/mmlu.json

如果安装成功，您将看到 FreeEval 开始处理评估配置。

下一步

现在您已经安装了 FreeEval，请转到快速入门指南，了解如何配置和运行您自己的评估！