Taskごとのevaluation config設定

[speed1313]

Taskごとに, 適切なハイパーパラメータ (max_new_token, temperature) が異なるため, Taskごとのdefault evaluation configを設定させたい.
lmms-evalを参考にする.

[speed1313]

"--rotate_choices"などのtask固有のパラメータをexamples/sample.pyのargsで指定しない方法を考えたい

[speed1313]

YAMLファイルを用いて, 評価時にTaskConfigに読み込ませる
tasks/jmmmu/config.yaml

max_token_len: 256