#!/bin/bash
lm_eval
    --model hf \
    --model_args pretrained=~/Uni/tfm/qwen_random,dtype=bfloat16,device_mp=auto \
    --tasks hellaswag,arc_easy,boolq \
    --batch_size auto