Merge branch 'main' into inverse-scaling-tasks

lm_eval/tasks/eus_exams/eus_exams_es

+include: eus_exams
+group:
+  - eus_exams_es
+doc_to_text: "Pregunta: {{question}}\nA: {{candidates[0]}}\nB: {{candidates[1]}}\nC: {{candidates[2]}}\nD: {{candidates[3]}}\nRespuesta:"

lm_eval/tasks/eus_exams/eus_exams_es_ejadministrativo.yaml

+# Generated by utils.py
+dataset_name: es_ejadministrativo
+include: eus_exams_es
+task: eus_exams_es_ejadministrativo

lm_eval/tasks/eus_exams/eus_exams_es_ejauxiliar.yaml

+# Generated by utils.py
+dataset_name: es_ejauxiliar
+include: eus_exams_es
+task: eus_exams_es_ejauxiliar

lm_eval/tasks/eus_exams/eus_exams_es_ejsubalterno.yaml

+# Generated by utils.py
+dataset_name: es_ejsubalterno
+include: eus_exams_es
+task: eus_exams_es_ejsubalterno

lm_eval/tasks/eus_exams/eus_exams_es_ejtecnico.yaml

+# Generated by utils.py
+dataset_name: es_ejtecnico
+include: eus_exams_es
+task: eus_exams_es_ejtecnico

lm_eval/tasks/eus_exams/eus_exams_es_opeayuntamientovitoria.yaml

+# Generated by utils.py
+dataset_name: es_opeayuntamientovitoria
+include: eus_exams_es
+task: eus_exams_es_opeayuntamientovitoria

lm_eval/tasks/eus_exams/eus_exams_es_opebilbao.yaml

+# Generated by utils.py
+dataset_name: es_opebilbao
+include: eus_exams_es
+task: eus_exams_es_opebilbao

lm_eval/tasks/eus_exams/eus_exams_es_opeehuadmin.yaml

+# Generated by utils.py
+dataset_name: es_opeehuadmin
+include: eus_exams_es
+task: eus_exams_es_opeehuadmin

lm_eval/tasks/eus_exams/eus_exams_es_opeehuaux.yaml

+# Generated by utils.py
+dataset_name: es_opeehuaux
+include: eus_exams_es
+task: eus_exams_es_opeehuaux

lm_eval/tasks/eus_exams/eus_exams_es_opeehubiblio.yaml

+# Generated by utils.py
+dataset_name: es_opeehubiblio
+include: eus_exams_es
+task: eus_exams_es_opeehubiblio

lm_eval/tasks/eus_exams/eus_exams_es_opeehuderecho.yaml

+# Generated by utils.py
+dataset_name: es_opeehuderecho
+include: eus_exams_es
+task: eus_exams_es_opeehuderecho

lm_eval/tasks/eus_exams/eus_exams_es_opeehueconomicas.yaml

+# Generated by utils.py
+dataset_name: es_opeehueconomicas
+include: eus_exams_es
+task: eus_exams_es_opeehueconomicas

lm_eval/tasks/eus_exams/eus_exams_es_opeehuempresariales.yaml

+# Generated by utils.py
+dataset_name: es_opeehuempresariales
+include: eus_exams_es
+task: eus_exams_es_opeehuempresariales

lm_eval/tasks/eus_exams/eus_exams_es_opeehusubalterno.yaml

+# Generated by utils.py
+dataset_name: es_opeehusubalterno
+include: eus_exams_es
+task: eus_exams_es_opeehusubalterno

lm_eval/tasks/eus_exams/eus_exams_es_opeehutecnico.yaml

+# Generated by utils.py
+dataset_name: es_opeehutecnico
+include: eus_exams_es
+task: eus_exams_es_opeehutecnico

lm_eval/tasks/eus_exams/eus_exams_es_opeehutecnicob.yaml

+# Generated by utils.py
+dataset_name: es_opeehutecnicob
+include: eus_exams_es
+task: eus_exams_es_opeehutecnicob

lm_eval/tasks/eus_exams/eus_exams_es_opeosakiadmin.yaml

+# Generated by utils.py
+dataset_name: es_opeosakiadmin
+include: eus_exams_es
+task: eus_exams_es_opeosakiadmin

lm_eval/tasks/eus_exams/eus_exams_es_opeosakiaux.yaml

+# Generated by utils.py
+dataset_name: es_opeosakiaux
+include: eus_exams_es
+task: eus_exams_es_opeosakiaux

lm_eval/tasks/eus_exams/eus_exams_es_opeosakiauxenf.yaml

+# Generated by utils.py
+dataset_name: es_opeosakiauxenf
+include: eus_exams_es
+task: eus_exams_es_opeosakiauxenf

lm_eval/tasks/eus_exams/eus_exams_es_opeosakicelador.yaml

+# Generated by utils.py
+dataset_name: es_opeosakicelador
+include: eus_exams_es
+task: eus_exams_es_opeosakicelador