OpenCompass-基本使用

OpenCompass Github 仓库
OpenCompass 官网

介绍

OpenCompass 是一个用于评估和优化大规模机器学习模型性能的开源工具. 其提供标准化的 benchmark 测试, 用于评判模型的表现.

安装

先用 conda 准备 python 环境:

conda create --name opencompass_lmdeploy python=3.10 -y
conda activate opencompass

之后可以有两种安装方式:

1. pip

   pip install -U opencompass

2. source

   git clone https://github.com/open-compass/opencompass opencompass
   cd opencompass
   pip install -e .