EuroEval 15.5.0__py3-none-any.whl → 15.6.0__py3-none-any.whl

euroeval/prompt_templates/linguistic_acceptability.py

@@ -0,0 +1,112 @@
+"""Templates for the Linguistic Acceptability task."""
+
+from ..data_models import PromptConfig
+from ..languages import DA, DE, EN, ES, FO, FR, IS, IT, NB, NL, NN, NO, SV
+
+LA_TEMPLATES = {
+    DA: PromptConfig(
+        default_prompt_label_mapping=dict(correct="ja", incorrect="nej"),
+        default_prompt_prefix="Følgende er sætninger og om de er grammatisk korrekte.",
+        default_prompt_template="Sætning: {text}\nGrammatisk korrekt: {label}",
+        default_instruction_prompt="Sætning: {text}\n\nBestem om sætningen er "
+        "grammatisk korrekt eller ej. Svar kun med {labels_str}, og intet andet.",
+    ),
+    DE: PromptConfig(
+        default_prompt_label_mapping=dict(correct="ja", incorrect="nein"),
+        default_prompt_prefix="Die folgenden Sätze und ob sie grammatikalisch korrekt "
+        "sind.",
+        default_prompt_template="Satz: {text}\nGrammatikalisch richtig: {label}",
+        default_instruction_prompt="Satz: {text}\n\nBestimmen Sie, ob der Satz "
+        "grammatikalisch korrekt ist oder nicht. Antworten Sie mit {labels_str}, und "
+        "nichts anderes.",
+    ),
+    EN: PromptConfig(
+        default_prompt_label_mapping=dict(correct="yes", incorrect="no"),
+        default_prompt_prefix="The following are sentences and whether they are "
+        "grammatically correct.",
+        default_prompt_template="Sentence: {text}\nGrammatically correct: {label}",
+        default_instruction_prompt="Sentence: {text}\n\nDetermine whether the sentence "
+        "is grammatically correct or not. Answer with {labels_str}, and nothing else.",
+    ),
+    ES: PromptConfig(
+        default_prompt_label_mapping=dict(correct="sí", incorrect="no"),
+        default_prompt_prefix="Lo siguiente son textos y si son gramaticalmente "
+        "correctos.",
+        default_prompt_template="Texto: {text}\nGramaticalmente correcto: {label}",
+        default_instruction_prompt="Texto: {text}\n\nDetermina si el texto es "
+        "gramaticalmente correcto o no. Responde con {labels_str}, y nada más.",
+    ),
+    FO: PromptConfig(
+        default_prompt_label_mapping=dict(correct="ja", incorrect="nei"),
+        default_prompt_prefix="Hetta eru nakrir setningar og um teir eru mállæruliga "
+        "rættir.",
+        default_prompt_template="Setningur: {text}\nMállæruliga rættur: {label}",
+        default_instruction_prompt="Setningur: {text}\n\nGreinið hvort setningurin er "
+        "mállæruliga rættur ella ikki. Svara við {labels_str}, og einki annað.",
+    ),
+    FR: PromptConfig(
+        default_prompt_label_mapping=dict(correct="oui", incorrect="non"),
+        default_prompt_prefix="Les phrases suivantes indiquent si elles sont "
+        "grammaticalement correctes.",
+        default_prompt_template="Phrase : {text}\nCorrect du point de vue grammatical: "
+        "{label}",
+        default_instruction_prompt="Phrase: {text}\n\nDéterminez si la phrase est "
+        "grammaticalement correcte ou non. Répondez par {labels_str}, et rien d'autre.",
+    ),
+    IS: PromptConfig(
+        default_prompt_label_mapping=dict(correct="já", incorrect="nei"),
+        default_prompt_prefix="Eftirfarandi eru setningar og hvort þær eru "
+        "málfræðilega réttar.",
+        default_prompt_template="Setning: {text}\nMálfræðilega rétt: {label}",
+        default_instruction_prompt="Setning: {text}\n\nGreinið hvort setningin er "
+        "málfræðilega rétt eða ekki. Svaraðu með {labels_str}, og ekkert annað.",
+    ),
+    IT: PromptConfig(
+        default_prompt_label_mapping=dict(correct="si", incorrect="no"),
+        default_prompt_prefix="Di seguito sono riportate le frasi e la loro "
+        "correttezza grammaticale.",
+        default_prompt_template="Frase : {text}\nGrammaticalmente corretto : {label}",
+        default_instruction_prompt="Frase: {text}\n\nStabilite se la frase è "
+        "grammaticalmente corretta o meno. Rispondere con {labels_str}, e nient'altro.",
+    ),
+    NB: PromptConfig(
+        default_prompt_label_mapping=dict(correct="ja", incorrect="nei"),
+        default_prompt_prefix="Følgende er setninger og hvorvidt de er grammatisk "
+        "korrekte.",
+        default_prompt_template="Setning: {text}\nGrammatisk korrekt: {label}",
+        default_instruction_prompt="Setning: {text}\n\nBestem om setningen er "
+        "grammatisk korrekt eller ikke. Svar med {labels_str}, og ikke noe annet.",
+    ),
+    NL: PromptConfig(
+        default_prompt_label_mapping=dict(correct="ja", incorrect="nee"),
+        default_prompt_prefix="Hieronder staan zinnen en of ze grammaticaal correct "
+        "zijn.",
+        default_prompt_template="Zin: {text}\nGrammaticaal correct: {label}",
+        default_instruction_prompt="Zin: {text}\n\nBepaal of de zin grammaticaal "
+        "correct is of niet. Antwoord met {labels_str}, en verder niets.",
+    ),
+    NN: PromptConfig(
+        default_prompt_label_mapping=dict(correct="ja", incorrect="nei"),
+        default_prompt_prefix="Følgende er setninger og hvorvidt de er grammatisk "
+        "korrekte.",
+        default_prompt_template="Setning: {text}\nGrammatisk korrekt: {label}",
+        default_instruction_prompt="Setning: {text}\n\nBestem om setningen er "
+        "grammatisk korrekt eller ikke. Svar med {labels_str}, og ikke noe annet.",
+    ),
+    NO: PromptConfig(
+        default_prompt_label_mapping=dict(correct="ja", incorrect="nei"),
+        default_prompt_prefix="Følgende er setninger og hvorvidt de er grammatisk "
+        "korrekte.",
+        default_prompt_template="Setning: {text}\nGrammatisk korrekt: {label}",
+        default_instruction_prompt="Setning: {text}\n\nBestem om setningen er "
+        "grammatisk korrekt eller ikke. Svar med {labels_str}, og ikke noe annet.",
+    ),
+    SV: PromptConfig(
+        default_prompt_label_mapping=dict(correct="ja", incorrect="nej"),
+        default_prompt_prefix="Följande är meningar och huruvida de är grammatiskt "
+        "korrekta.",
+        default_prompt_template="Mening: {text}\nGrammatisk korrekt: {label}",
+        default_instruction_prompt="Mening: {text}\n\nBestäm om meningen är "
+        "grammatiskt korrekt eller inte. Svara med {labels_str}, och inget annat.",
+    ),
+}

euroeval/prompt_templates/multiple_choice.py

@@ -0,0 +1,97 @@
+"""Templates for all multiple choice tasks."""
+
+from ..data_models import PromptConfig
+from ..languages import DA, DE, EN, ES, FR, IS, IT, NB, NL, NN, NO, SV
+
+# TODO: Missing Faroese
+MULTIPLE_CHOICE_TEMPLATES = {
+    DA: PromptConfig(
+        default_prompt_prefix="Følgende er multiple choice spørgsmål (med svar).",
+        default_prompt_template="Spørgsmål: {text}\nSvar: {label}",
+        default_instruction_prompt="Spørgsmål: {text}\n\nBesvar ovenstående spørgsmål "
+        "ved at svare med {labels_str}, og intet andet.",
+        default_prompt_label_mapping="auto",
+    ),
+    DE: PromptConfig(
+        default_prompt_prefix="Die folgenden Fragen sind Multiple-Choice-Fragen "
+        "(mit Antworten).",
+        default_prompt_template="Frage: {text}\nAntwort: {label}",
+        default_instruction_prompt="Frage: {text}\n\nBeantworten Sie die obige Frage "
+        "mit {labels_str}, und nichts anderes.",
+        default_prompt_label_mapping="auto",
+    ),
+    EN: PromptConfig(
+        default_prompt_prefix="The following are multiple choice questions (with "
+        "answers).",
+        default_prompt_template="Question: {text}\nAnswer: {label}",
+        default_instruction_prompt="Question: {text}\n\nAnswer the above question by "
+        "replying with {labels_str}, and nothing else.",
+        default_prompt_label_mapping="auto",
+    ),
+    ES: PromptConfig(
+        default_prompt_prefix="Las siguientes son preguntas de opción múltiple "
+        "(con respuestas).",
+        default_prompt_template="Pregunta: {text}\nRespuesta: {label}",
+        default_instruction_prompt="Pregunta: {text}\n\nResponda la pregunta anterior "
+        "usando solo {labels_str}, y nada más.",
+        default_prompt_label_mapping="auto",
+    ),
+    FR: PromptConfig(
+        default_prompt_prefix="Les questions suivantes sont des questions à choix "
+        "multiples (avec réponses).",
+        default_prompt_template="Question: {text}\nRéponse: {label}",
+        default_instruction_prompt="Question: {text}\n\nRépondez à la question "
+        "ci-dessus par {labels_str}, et rien d'autre.",
+        default_prompt_label_mapping="auto",
+    ),
+    IS: PromptConfig(
+        default_prompt_prefix="Eftirfarandi eru fjölvalsspurningar (með svörum).",
+        default_prompt_template="Spurningar: {text}\nSvara: {label}",
+        default_instruction_prompt="Spurningar: {text}\n\nSvaraðu eftirfarandi "
+        "spurningum með {labels_str}, og engu öðru.",
+        default_prompt_label_mapping="auto",
+    ),
+    IT: PromptConfig(
+        default_prompt_prefix="Le seguenti sono domande a scelta multipla "
+        "(con relative risposte).",
+        default_prompt_template="Domanda: {text}\nRéponse: {label}",
+        default_instruction_prompt="Domanda: {text}\n\nRispondete alla domanda "
+        "precedente con {labels_str}, e nient'altro.",
+        default_prompt_label_mapping="auto",
+    ),
+    NB: PromptConfig(
+        default_prompt_prefix="Følgende er flervalgsspørsmål (med svar).",
+        default_prompt_template="Spørsmål: {text}\nSvar: {label}",
+        default_instruction_prompt="Spørsmål: {text}\n\nBesvar følgende spørsmål med "
+        "{labels_str}, og ikke noe annet.",
+        default_prompt_label_mapping="auto",
+    ),
+    NL: PromptConfig(
+        default_prompt_prefix="Hieronder staan meerkeuzevragen (met antwoorden).",
+        default_prompt_template="Vraag: {text}\nAntwoord: {label}",
+        default_instruction_prompt="Vraag: {text}\n\nBeantwoord de bovenstaande vraag "
+        "met {labels_str}, en niets anders.",
+        default_prompt_label_mapping="auto",
+    ),
+    NN: PromptConfig(
+        default_prompt_prefix="Følgende er flervalgsspørsmål (med svar).",
+        default_prompt_template="Spørsmål: {text}\nSvar: {label}",
+        default_instruction_prompt="Spørsmål: {text}\n\nBesvar følgende spørsmål med "
+        "{labels_str}, og ikke noe annet.",
+        default_prompt_label_mapping="auto",
+    ),
+    NO: PromptConfig(
+        default_prompt_prefix="Følgende er flervalgsspørsmål (med svar).",
+        default_prompt_template="Spørsmål: {text}\nSvar: {label}",
+        default_instruction_prompt="Spørsmål: {text}\n\nBesvar følgende spørsmål med "
+        "{labels_str}, og ikke noe annet.",
+        default_prompt_label_mapping="auto",
+    ),
+    SV: PromptConfig(
+        default_prompt_prefix="Följande är flervalsfrågor (med svar).",
+        default_prompt_template="Fråga: {text}\nSvar: {label}",
+        default_instruction_prompt="Fråga: {text}\n\nBesvara följande fråga med "
+        "{labels_str}, och inget annat.",
+        default_prompt_label_mapping="auto",
+    ),
+}

euroeval/prompt_templates/named_entity_recognition.py

@@ -0,0 +1,257 @@
+"""Templates for the Named Entity Recognition task."""
+
+from ..data_models import PromptConfig
+from ..languages import DA, DE, EN, ES, FO, FR, IS, IT, NB, NL, NN, NO, SV
+
+NER_TEMPLATES = {
+    DA: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "person",
+            "i-per": "person",
+            "b-loc": "sted",
+            "i-loc": "sted",
+            "b-org": "organisation",
+            "i-org": "organisation",
+            "b-misc": "diverse",
+            "i-misc": "diverse",
+        },
+        default_prompt_prefix="Følgende er sætninger og JSON-ordbøger med de navngivne "
+        "enheder, som forekommer i den givne sætning.",
+        default_prompt_template="Sætning: {text}\nNavngivne enheder: {label}",
+        default_instruction_prompt="Sætning: {text}\n\nIdentificér de navngivne "
+        "enheder i sætningen. Du skal outputte dette som en JSON-ordbog med nøglerne "
+        "{labels_str}. Værdierne skal være lister over de navngivne enheder af den "
+        "type, præcis som de forekommer i sætningen.",
+    ),
+    DE: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "person",
+            "i-per": "person",
+            "b-loc": "ort",
+            "i-loc": "ort",
+            "b-org": "organisation",
+            "i-org": "organisation",
+            "b-misc": "verschiedenes",
+            "i-misc": "verschiedenes",
+        },
+        default_prompt_prefix="Es folgen Sätze und JSON-Wörterbücher mit den benannten "
+        "Entitäten, die in der angegebenen Phrase vorkommen.",
+        default_prompt_template="Satz: {text}\nBenannte Entitäten: {label}",
+        default_instruction_prompt="Satz: {text}\n\nIdentifizieren Sie die benannten "
+        "Entitäten im Satz. Sie sollten dies als JSON-Wörterbuch mit den "
+        "Schlüsseln {labels_str} ausgeben. Die Werte sollten Listen der "
+        "benannten Entitäten dieses Typs sein, genau wie sie im Satz erscheinen.",
+    ),
+    EN: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "person",
+            "i-per": "person",
+            "b-loc": "location",
+            "i-loc": "location",
+            "b-org": "organization",
+            "i-org": "organization",
+            "b-misc": "miscellaneous",
+            "i-misc": "miscellaneous",
+        },
+        default_prompt_prefix="Below are sentences and JSON dictionaries with the "
+        "named entities that occur in the given sentence.",
+        default_prompt_template="Sentence: {text}\nNamed entities: {label}",
+        default_instruction_prompt="Sentence: {text}\n\nIdentify the named entities in "
+        "the sentence. You should output this as a JSON dictionary with the keys being "
+        "{labels_str}. The values should be lists of the named entities of that "
+        "type, exactly as they appear in the sentence.",
+    ),
+    ES: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "persona",
+            "i-per": "persona",
+            "b-loc": "lugar",
+            "i-loc": "lugar",
+            "b-org": "organización",
+            "i-org": "organización",
+            "b-misc": "misceláneo",
+            "i-misc": "misceláneo",
+        },
+        default_prompt_prefix="Lo siguiente son oraciones y diccionarios JSON con las "
+        "entidades nombradas que aparecen en la oración dada.",
+        default_prompt_template="Oración: {text}\nEntidades nombradas: {label}",
+        default_instruction_prompt="Oración: {text}\n\nIdentifica las entidades "
+        "nombradas en la oración. Debes producir esto como un diccionario JSON con las "
+        "claves {labels_str}. Los valores deben ser listas de las "
+        "entidades nombradas de ese tipo, exactamente como aparecen en la oración.",
+    ),
+    FO: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "persónur",
+            "i-per": "persónur",
+            "b-loc": "staður",
+            "i-loc": "staður",
+            "b-org": "felagsskapur",
+            "i-org": "felagsskapur",
+            "b-misc": "ymiskt",
+            "i-misc": "ymiskt",
+        },
+        default_prompt_prefix="Her eru nakrir setningar og nakrar JSON orðabøkur við "
+        "nevndar eindir, sum eru í setningunum.",
+        default_prompt_template="Setningur: {text}\nNevndar eindir: {label}",
+        default_instruction_prompt="Setningur: {text}\n\nGreinið nevndu einingarnar í "
+        "setningunni. Þú ættir að skila þessu sem JSON orðabók með lyklunum "
+        "{labels_str}. Gildin ættu að vera listi yfir nevndu einingarnar af "
+        "þeirri gerð, nákvæmlega eins og þær koma fram í setningunni.",
+    ),
+    FR: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "personne",
+            "i-per": "personne",
+            "b-loc": "lieu",
+            "i-loc": "lieu",
+            "b-org": "organisation",
+            "i-org": "organisation",
+            "b-misc": "divers",
+            "i-misc": "divers",
+        },
+        default_prompt_prefix="Vous trouverez ci-dessous des phrases et des "
+        "dictionnaires JSON avec les entités nommées qui apparaissent dans la "
+        "phrase donnée.",
+        default_prompt_template="Sentence: {text}\nEntités nommées: {label}",
+        default_instruction_prompt="Sentence: {text}\n\nIdentifiez les entités nommées "
+        "dans la phrase. Vous devez produire ceci sous forme de dictionnaire JSON "
+        "avec les clés {labels_str}. Les valeurs doivent être des listes des "
+        "entités nommées de ce type, exactement comme elles apparaissent dans "
+        "la phrase.",
+    ),
+    IS: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "einstaklingur",
+            "i-per": "einstaklingur",
+            "b-loc": "staðsetning",
+            "i-loc": "staðsetning",
+            "b-org": "stofnun",
+            "i-org": "stofnun",
+            "b-misc": "ýmislegt",
+            "i-misc": "ýmislegt",
+        },
+        default_prompt_prefix="Eftirfarandi eru setningar ásamt JSON lyklum með "
+        "nefndum einingum sem koma fyrir í setningunum.",
+        default_prompt_template="Setning: {text}\nNefndar einingar: {label}",
+        default_instruction_prompt="Setning: {text}\n\nGreinið nefndu einingarnar í "
+        "setningunni. Þú ættir að skila þessu sem JSON orðabók með lyklunum "
+        "{labels_str}. Gildin ættu að vera listi yfir nefndu "
+        "einingarnar af þeirri gerð, nákvæmlega eins og þær koma fram í "
+        "setningunni.",
+    ),
+    IT: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "persona",
+            "i-per": "persona",
+            "b-loc": "posizione",
+            "i-loc": "posizione",
+            "b-org": "organizzazione",
+            "i-org": "organizzazione",
+            "b-misc": "varie",
+            "i-misc": "varie",
+        },
+        default_prompt_prefix="Di seguito sono riportate le frasi e i dizionari JSON "
+        "con le entità denominate presenti nella frase data.",
+        default_prompt_template="Frase: {text}\nEntità denominate: {label}",
+        default_instruction_prompt="Frase: {text}\n\nIdentificare le entità nominate "
+        "nella frase. Il risultato dovrebbe essere un dizionario JSON con le chiavi "
+        "{labels_str}. I valori devono essere elenchi di entità "
+        "nominate di quel tipo, esattamente come appaiono nella frase.",
+    ),
+    NB: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "person",
+            "i-per": "person",
+            "b-loc": "sted",
+            "i-loc": "sted",
+            "b-org": "organisasjon",
+            "i-org": "organisasjon",
+            "b-misc": "diverse",
+            "i-misc": "diverse",
+        },
+        default_prompt_prefix="Følgende er fraser og JSON-ordbøker med de navngitte "
+        "enhetene som forekommer i den gitte frasen.",
+        default_prompt_template="Frase: {text}\nNavngitte enheter: {label}",
+        default_instruction_prompt="Frase: {text}\n\nIdentifiser de navngitte "
+        "enhetene i frasen. Du bør outputte dette som en JSON-ordbok med nøklene "
+        "{labels_str}. Verdiene skal være lister over de navngitte enhetene av den "
+        "typen, akkurat som de vises i frasen.",
+    ),
+    NL: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "persoon",
+            "i-per": "persoon",
+            "b-loc": "locatie",
+            "i-loc": "locatie",
+            "b-org": "organisatie",
+            "i-org": "organisatie",
+            "b-misc": "diversen",
+            "i-misc": "diversen",
+        },
+        default_prompt_prefix="Hieronder staan zinnen en JSON woordenboeken met de "
+        "genoemde entiteiten die voorkomen in de gegeven zin.",
+        default_prompt_template="Zin: {text}\nGenoemde entiteiten: {label}",
+        default_instruction_prompt="Zin: {text}\n\nIdentificeer de genoemde entiteiten "
+        "in de zin. Je moet dit uitvoeren als een JSON-woordenboek met de sleutels "
+        "{labels_str}. De waarden moeten lijsten zijn van de "
+        "genoemde entiteiten van dat type, precies zoals ze voorkomen in de zin.",
+    ),
+    NN: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "person",
+            "i-per": "person",
+            "b-loc": "sted",
+            "i-loc": "sted",
+            "b-org": "organisasjon",
+            "i-org": "organisasjon",
+            "b-misc": "diverse",
+            "i-misc": "diverse",
+        },
+        default_prompt_prefix="Følgende er fraser og JSON-ordbøker med de navngitte "
+        "enhetene som forekommer i den gitte frasen.",
+        default_prompt_template="Frase: {text}\nNavngitte enheter: {label}",
+        default_instruction_prompt="Frase: {text}\n\nIdentifiser de navngitte enhetene "
+        "i frasen. Du bør outputte dette som en JSON-ordbok med nøklene {labels_str}."
+        "Verdiene skal være lister over de navngitte enhetene "
+        "av den typen, akkurat som de vises i frasen.",
+    ),
+    NO: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "person",
+            "i-per": "person",
+            "b-loc": "sted",
+            "i-loc": "sted",
+            "b-org": "organisasjon",
+            "i-org": "organisasjon",
+            "b-misc": "diverse",
+            "i-misc": "diverse",
+        },
+        default_prompt_prefix="Følgende er fraser og JSON-ordbøker med de navngitte "
+        "enhetene som forekommer i den gitte frasen.",
+        default_prompt_template="Frase: {text}\nNavngitte enheter: {label}",
+        default_instruction_prompt="Frase: {text}\n\nIdentifiser de navngitte enhetene "
+        "i frasen. Du bør outputte dette som en JSON-ordbok med nøklene {labels_str}."
+        "Verdiene skal være lister over de navngitte enhetene "
+        "av den typen, akkurat som de vises i frasen.",
+    ),
+    SV: PromptConfig(
+        default_prompt_label_mapping={
+            "b-per": "person",
+            "i-per": "person",
+            "b-loc": "plats",
+            "i-loc": "plats",
+            "b-org": "organisation",
+            "i-org": "organisation",
+            "b-misc": "diverse",
+            "i-misc": "diverse",
+        },
+        default_prompt_prefix="Följande är meningar och JSON-ordböcker med de "
+        "namngivna enheter som förekommer i den givna meningen.",
+        default_prompt_template="Mening: {text}\nNamngivna entiteter: {label}",
+        default_instruction_prompt="Mening: {text}\n\nIdentifiera de namngivna "
+        "enheterna i meningen. Du ska outputta detta som en JSON-ordbok med nycklarna "
+        "{labels_str}. Värdena ska vara listor över de namngivna enheter av den "
+        "typen, precis som de förekommer i meningen.",
+    ),
+}

euroeval/prompt_templates/reading_comprehension.py

@@ -0,0 +1,118 @@
+"""Templates for the Reading Comprehension task."""
+
+from ..data_models import PromptConfig
+from ..languages import DA, DE, EN, ES, FO, FR, IS, IT, NB, NL, NN, NO, SV
+
+RC_TEMPLATES = {
+    DA: PromptConfig(
+        default_prompt_prefix="Følgende er tekster med tilhørende spørgsmål og svar.",
+        default_prompt_template="Tekst: {text}\nSpørgsmål: {question}\nSvar med maks. "
+        "3 ord: {label}",
+        default_instruction_prompt="Tekst: {text}\n\nBesvar følgende spørgsmål om "
+        "teksten ovenfor med maks. 3 ord.\n\nSpørgsmål: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    DE: PromptConfig(
+        default_prompt_prefix="Im Folgenden finden Sie Texte mit den dazugehörigen "
+        "Fragen und Antworten.",
+        default_prompt_template="Text: {text}\nFragen: {question}\nFragen Antwort in "
+        "maximal 3 Wörtern: {label}",
+        default_instruction_prompt="Text: {text}\n\nBeantworten Sie die folgende Frage "
+        "zum obigen Text in höchstens 3 Wörtern.\n\nFrage: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    EN: PromptConfig(
+        default_prompt_prefix="The following are texts with accompanying questions and "
+        "answers.",
+        default_prompt_template="Text: {text}\nQuestion: {question}\nAnswer in max "
+        "3 words: {label}",
+        default_instruction_prompt="Text: {text}\n\nAnswer the following question "
+        "about the above text in at most 3 words.\n\nQuestion: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    ES: PromptConfig(
+        default_prompt_prefix="A continuación se presentan textos con sus preguntas y "
+        "respuestas correspondientes.",
+        default_prompt_template="Texto: {text}\nPregunta: {question}\nRespuesta en "
+        "máximo 3 palabras: {label}",
+        default_instruction_prompt="Texto: {text}\n\nResponda la siguiente pregunta "
+        "sobre el texto anterior en máximo 3 palabras.\n\nPregunta: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    FO: PromptConfig(
+        default_prompt_prefix="Hetta eru tekstir saman við spurningum og svar.",
+        default_prompt_template="Tekstur: {text}\nSpurningur: {question}\nSvara við í "
+        "mesta lagi trimum orðum: {label}",
+        default_instruction_prompt="Tekstur: {text}\n\nSvara hesum spurninginum um "
+        "tekstin uppiyvir við í mesta lagi trimum orðum.\n\nSpurningur: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    FR: PromptConfig(
+        default_prompt_prefix="Les textes suivants sont accompagnés de questions et de "
+        "réponses.",
+        default_prompt_template="Texte: {text}\nQuestion: {question}\nRéponse en 3 "
+        "mots maximum: {label}",
+        default_instruction_prompt="Texte: {text}\n\nRépondez à la question suivante "
+        "sur le texte ci-dessus en 3 mots maximum.\n\nQuestion: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    IS: PromptConfig(
+        default_prompt_prefix="Eftirfarandi eru textar með tilheyrandi spurningum og "
+        "svörum.",
+        default_prompt_template="Texti: {text}\nSpurning: {question}\nSvaraðu með að "
+        "hámarki 3 orðum: {label}",
+        default_instruction_prompt="Texti: {text}\n\nSvaraðu eftirfarandi spurningu um "
+        "textann að hámarki í 3 orðum.\n\nSpurning: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    IT: PromptConfig(
+        default_prompt_prefix="I testi che seguono sono accompagnati da domande e "
+        "risposte.",
+        default_prompt_template="Testo: {text}\nDomanda: {question}\nRispondere in "
+        "massimo 3 parole: {label}",
+        default_instruction_prompt="Testo: {text}\n\nRispondi alla seguente domanda "
+        "sul in un massimo di 3 parole.\n\nDomanda: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    NB: PromptConfig(
+        default_prompt_prefix="Her følger tekster med tilhørende spørsmål og svar.",
+        default_prompt_template="Tekst: {text}\nSpørsmål: {question}\nSvar på maks 3 "
+        "ord: {label}",
+        default_instruction_prompt="Tekst: {text}\n\nBesvar følgende spørsmål om "
+        "teksten ovenfor med maks 3 ord.\n\nSpørsmål: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    NL: PromptConfig(
+        default_prompt_prefix="Hieronder volgen teksten met bijbehorende vragen en "
+        "antwoorden.",
+        default_prompt_template="Tekst: {text}\nVraag: {question}\nAntwoord in max "
+        "3 woorden: {label}",
+        default_instruction_prompt="Tekst: {text}\n\nBeantwoord de volgende vraag "
+        "over de bovenstaande tekst in maximaal 3 woorden.\n\nVraag: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    NN: PromptConfig(
+        default_prompt_prefix="Her følger tekster med tilhørende spørsmål og svar.",
+        default_prompt_template="Tekst: {text}\nSpørsmål: {question}\nSvar på maks 3 "
+        "ord: {label}",
+        default_instruction_prompt="Tekst: {text}\n\nBesvar følgende spørsmål om "
+        "teksten ovenfor med maks 3 ord.\n\nSpørsmål: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    NO: PromptConfig(
+        default_prompt_prefix="Her følger tekster med tilhørende spørsmål og svar.",
+        default_prompt_template="Tekst: {text}\nSpørsmål: {question}\nSvar på maks 3 "
+        "ord: {label}",
+        default_instruction_prompt="Tekst: {text}\n\nBesvar følgende spørsmål om "
+        "teksten ovenfor med maks 3 ord.\n\nSpørsmål: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+    SV: PromptConfig(
+        default_prompt_prefix="Nedan följer texter med tillhörande frågor och svar.",
+        default_prompt_template="Text: {text}\nFråga: {question}\nSvar på max 3 ord: "
+        "{label}",
+        default_instruction_prompt="Text: {text}\n\nBesvara följande fråga om texten "
+        "ovan med högst 3 ord.\n\nFråga: {question}",
+        default_prompt_label_mapping=dict(),
+    ),
+}