Merge branch 'main' into metrics

# Conflicts:
#	lm_eval/models/vllm_causallms.py
#	pyproject.toml

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_chemistry.yaml

+description: 'Ecco una domanda a scelta multipla su chimica (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_chemistry
+task_alias: chemistry
+process_docs: !function utils.process_chemistry

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_computer_science.yaml

+description: 'Ecco una domanda a scelta multipla su informatica (con risposta). Si
+  prega di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)",
+  dove X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_computer_science
+task_alias: computer_science
+process_docs: !function utils.process_computer_science

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_economics.yaml

+description: 'Ecco una domanda a scelta multipla su economia (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_economics
+task_alias: economics
+process_docs: !function utils.process_economics

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_engineering.yaml

+description: 'Ecco una domanda a scelta multipla su ingegneria (con risposta). Si
+  prega di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)",
+  dove X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_engineering
+task_alias: engineering
+process_docs: !function utils.process_engineering

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_health.yaml

+description: 'Ecco una domanda a scelta multipla su salute (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_health
+task_alias: health
+process_docs: !function utils.process_health

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_history.yaml

+description: 'Ecco una domanda a scelta multipla su storia (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_history
+task_alias: history
+process_docs: !function utils.process_history

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_law.yaml

+description: 'Ecco una domanda a scelta multipla su diritto (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_law
+task_alias: law
+process_docs: !function utils.process_law

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_math.yaml

+description: 'Ecco una domanda a scelta multipla su matematica (con risposta). Si
+  prega di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)",
+  dove X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_math
+task_alias: math
+process_docs: !function utils.process_math

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_other.yaml

+description: 'Ecco una domanda a scelta multipla su altro (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_other
+task_alias: other
+process_docs: !function utils.process_other

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_philosophy.yaml

+description: 'Ecco una domanda a scelta multipla su filosofia (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_philosophy
+task_alias: philosophy
+process_docs: !function utils.process_philosophy

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_physics.yaml

+description: 'Ecco una domanda a scelta multipla su fisica (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_physics
+task_alias: physics
+process_docs: !function utils.process_physics

lm_eval/tasks/mmlu_prox/it/mmlu_prox_it_psychology.yaml

+description: 'Ecco una domanda a scelta multipla su psicologia (con risposta). Si
+  prega di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)",
+  dove X è la lettera dell''opzione corretta.
+
+  '
+include: _it_template_yaml
+task: mmlu_prox_it_psychology
+task_alias: psychology
+process_docs: !function utils.process_psychology

lm_eval/tasks/mmlu_prox/it/mmlu_prox_lite_it_biology.yaml

+description: 'Ecco una domanda a scelta multipla su biologia (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_lite_template_yaml
+task: mmlu_prox_lite_it_biology
+task_alias: biology
+process_docs: !function utils.process_biology

lm_eval/tasks/mmlu_prox/it/mmlu_prox_lite_it_business.yaml

+description: 'Ecco una domanda a scelta multipla su affari (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_lite_template_yaml
+task: mmlu_prox_lite_it_business
+task_alias: business
+process_docs: !function utils.process_business

lm_eval/tasks/mmlu_prox/it/mmlu_prox_lite_it_chemistry.yaml

+description: 'Ecco una domanda a scelta multipla su chimica (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_lite_template_yaml
+task: mmlu_prox_lite_it_chemistry
+task_alias: chemistry
+process_docs: !function utils.process_chemistry

lm_eval/tasks/mmlu_prox/it/mmlu_prox_lite_it_computer_science.yaml

+description: 'Ecco una domanda a scelta multipla su informatica (con risposta). Si
+  prega di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)",
+  dove X è la lettera dell''opzione corretta.
+
+  '
+include: _it_lite_template_yaml
+task: mmlu_prox_lite_it_computer_science
+task_alias: computer_science
+process_docs: !function utils.process_computer_science

lm_eval/tasks/mmlu_prox/it/mmlu_prox_lite_it_economics.yaml

+description: 'Ecco una domanda a scelta multipla su economia (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_lite_template_yaml
+task: mmlu_prox_lite_it_economics
+task_alias: economics
+process_docs: !function utils.process_economics

lm_eval/tasks/mmlu_prox/it/mmlu_prox_lite_it_engineering.yaml

+description: 'Ecco una domanda a scelta multipla su ingegneria (con risposta). Si
+  prega di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)",
+  dove X è la lettera dell''opzione corretta.
+
+  '
+include: _it_lite_template_yaml
+task: mmlu_prox_lite_it_engineering
+task_alias: engineering
+process_docs: !function utils.process_engineering

lm_eval/tasks/mmlu_prox/it/mmlu_prox_lite_it_health.yaml

+description: 'Ecco una domanda a scelta multipla su salute (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_lite_template_yaml
+task: mmlu_prox_lite_it_health
+task_alias: health
+process_docs: !function utils.process_health

lm_eval/tasks/mmlu_prox/it/mmlu_prox_lite_it_history.yaml

+description: 'Ecco una domanda a scelta multipla su storia (con risposta). Si prega
+  di ragionare passo dopo passo e terminare la risposta con "La risposta è (X)", dove
+  X è la lettera dell''opzione corretta.
+
+  '
+include: _it_lite_template_yaml
+task: mmlu_prox_lite_it_history
+task_alias: history
+process_docs: !function utils.process_history