Skip to content
Open
Changes from 1 commit
Commits
Show all changes
32 commits
Select commit Hold shift + click to select a range
d1f16cf
Accelerate `get_infos` by caching the `DataseInfoDict`s (#778)
VictorSanh May 22, 2022
6b1560f
fix `filter_english_datasets` since `languages` became `language` in …
VictorSanh Jul 3, 2022
ab6ad7e
fix empty documents - multi_news (#793)
VictorSanh Jul 3, 2022
0cc4b0c
Language tags (#771)
stephenbach Jul 8, 2022
619daa1
Merge pull request #4 from bigscience-workshop/eval-hackathon
Muennighoff Jul 19, 2022
53c99f3
ZH prompts v1
Muennighoff Aug 9, 2022
7293640
确定更好一点
Muennighoff Aug 9, 2022
97cc39b
Use bu
Muennighoff Aug 9, 2022
ccd2575
能更适合
Muennighoff Aug 10, 2022
426f945
更新ID
Muennighoff Aug 10, 2022
f5ba708
Specify ZH-HT
Muennighoff Aug 11, 2022
4a00362
ZHMT
Muennighoff Aug 11, 2022
172740f
Add swht & hiht
Muennighoff Aug 12, 2022
4f973e5
Add arabic & vietnamese
Muennighoff Aug 16, 2022
1fdcbea
add arabic prompts
KhalidAlt Aug 16, 2022
64ac829
add arabic prompts and fix unicode issues
KhalidAlt Aug 16, 2022
148344d
fix semantic errors
KhalidAlt Aug 16, 2022
51c059d
Complete XNLI HT L1
Muennighoff Aug 21, 2022
8e374e3
Merge pull request #33 from KhalidAlt/add_xnli_ar
Muennighoff Aug 21, 2022
b00dda3
Add machine translation
Muennighoff Aug 21, 2022
e401d0d
Fix naming
Muennighoff Sep 3, 2022
48a1467
Update uuids
Muennighoff Sep 3, 2022
3f69285
Fix uuids
Muennighoff Sep 3, 2022
be40398
Fix uuids
Muennighoff Sep 3, 2022
7b7bc05
Fix uuid
Muennighoff Sep 3, 2022
8c0c243
Fix
Muennighoff Sep 3, 2022
ff3eada
XCOPA Machine translated
Muennighoff Sep 18, 2022
4c742ca
Clarify format_
Muennighoff Sep 18, 2022
93bcf9a
Fix template name
Muennighoff Sep 18, 2022
d09ebb9
MT
Muennighoff Sep 18, 2022
c1520bb
Add templates
Muennighoff Sep 26, 2022
0906d71
Add translations
Muennighoff Oct 25, 2022
File filter

Filter by extension

Filter by extension

Conversations
Failed to load comments.
Loading
Jump to
Jump to file
Failed to load files.
Loading
Diff view
Diff view
Prev Previous commit
Next Next commit
fix semantic errors
  • Loading branch information
KhalidAlt committed Aug 16, 2022
commit 148344df7b87ca8b07f1a6a5b1e32c118d1cf3a4
16 changes: 8 additions & 8 deletions promptsource/templates/xnli/ar/templates.yaml
Original file line number Diff line number Diff line change
Expand Up @@ -4,8 +4,8 @@ templates:
16836edd-898d-4508-92c0-e683f34aa41e: !Template
answer_choices: نعم ||| ربما ||| لا
id: 16836edd-898d-4508-92c0-e683f34aa41e
jinja: '{{premise}} بناء على النص السابق هل يصح القول بأن "{{hypothesis}}"? أجب
بنعم أو لا أو ربما. ||| {{ answer_choices[label] }}'
jinja: " {{premise}}\n بناء على النص السابق هل يصح القول بأن \"{{hypothesis}}\"\
\ فرضية صحيحة؟ أجب بنعم أو لا أو ربما. ||| {{ answer_choices[label] }}"
metadata: !TemplateMetadata
choices_in_prompt: true
languages:
Expand Down Expand Up @@ -48,8 +48,8 @@ templates:
8bda8e36-c881-4c9a-a3a9-eec68388a6f6: !Template
answer_choices: نعم ||| ربما ||| لا
id: 8bda8e36-c881-4c9a-a3a9-eec68388a6f6
jinja: '{{premise}} هل يمكن القول بالفرضية التالية "{{hypothesis}}" بناء على
ما سبق؟ أجب بنعم أو ﻻ أو ربما ؟ ||| {{ answer_choices[label] }} '
jinja: '{{premise}} هل الفرضية التالية صحيحة "{{hypothesis}}" بناء على ما سبق؟
أجب بنعم أو ﻻ أو ربما ؟ ||| {{ answer_choices[label] }} '
metadata: !TemplateMetadata
choices_in_prompt: true
languages:
Expand Down Expand Up @@ -77,7 +77,7 @@ templates:
ba194be7-4818-4e24-b5f9-bbcccaa4e166: !Template
answer_choices: نعم ||| ربما ||| لا
id: ba194be7-4818-4e24-b5f9-bbcccaa4e166
jinja: 'بناء على المقدمة التالية {{premise}} هل يمكن أن تليها الفرضة التالية:
jinja: 'بناء على المقدمة التالية {{premise}} هل يمكن أن تليها الفرضية التالية:
{{hypothesis}} أجب بـ نعم أو ربما أو لا ؟ ||| {{ answer_choices[label] }}'
metadata: !TemplateMetadata
choices_in_prompt: true
Expand All @@ -89,7 +89,7 @@ templates:
name: does it follow that
reference: Sanh et al. 2021
e44c2947-f8e0-49ea-9770-e59f0581a921: !Template
answer_choices: أكيدة ||| ممكنة ||| مستحيلة
answer_choices: مؤكدة ||| ممكنة ||| مستحيلة
id: e44c2947-f8e0-49ea-9770-e59f0581a921
jinja: "اذا كانت لدينا المقدمة الصحيحة التالية {{premise}} \nفإن, \"{{hypothesis}}\"\
\ هي دعوى {{\"مؤكدة\"}} أو {{\"ممكنة\"}} أو {{\"مستحيلة\"}}؟ ||| {{ answer_choices[label]\
Expand All @@ -104,11 +104,11 @@ templates:
name: guaranteed/possible/impossible
reference: Sanh et al. 2021
ea368462-3a66-4222-9de1-05d66037a708: !Template
answer_choices: صحيحة ||| لا يمكن التقرير ||| غير صحيحة
answer_choices: صحيحة ||| لا يمكن الجزم ||| غير صحيحة
id: ea368462-3a66-4222-9de1-05d66037a708
jinja: " {{premise}}\n بإستخدام الوصف بالأعلى وحسب ما تعرفه من المعرفة العامة\
\ فقط هل يمكن القول بأن الفرضية التالية: \"{{hypothesis}}\" بلا شك صحيحة أو\
\ خاطئة أو لا يمكن التقرير؟ ||| {{ answer_choices[label] }}\n"
\ خاطئة أو لا يمكن الجزم؟ ||| {{ answer_choices[label] }}\n"
metadata: !TemplateMetadata
choices_in_prompt: true
languages:
Expand Down