在 OpenCompass 中,我们支持直接从 Huggingface 的 AutoModel.from_pretrained 和 AutoModelForCausalLM.from_pretrained 接口构建评测模型。如果需要评测的模型符合 HuggingFace 模型通常的生成接口, 则不需要编写代码,直接在配置文件中指定相关配置即可。 如下,为一个示例的 ...