Create SSK3+BERTBaseAnswerGenerator
SSK3+BERTBaseAnswerGenerator
This commit is contained in:
Родитель
d2e0f89888
Коммит
bdb907fe4f
|
@ -0,0 +1,22 @@
|
|||
QnA Metrics
|
||||
{'testlen': 1054447, 'reflen': 968282, 'guess': [1054447, 998858, 943270, 887683], 'correct': [435044, 263786, 205465, 170463]}
|
||||
ratio: 1.0889875057059812
|
||||
############################
|
||||
F1: 0.7095818893165093
|
||||
bleu_1: 0.41258024348307654
|
||||
bleu_2: 0.330086839132416
|
||||
bleu_3: 0.28737749140004293
|
||||
bleu_4: 0.2598260064241181
|
||||
rouge_l: 0.3910231948625941
|
||||
############################
|
||||
NLGEN Metrics
|
||||
{'testlen': 313273, 'reflen': 191127, 'guess': [313273, 296796, 280320, 263844], 'correct': [111383, 70845, 53197, 41587]}
|
||||
ratio: 1.6390829134554425
|
||||
############################
|
||||
F1: 1.0
|
||||
bleu_1: 0.35554612111480927
|
||||
bleu_2: 0.29132218125507037
|
||||
bleu_3: 0.2525379908504664
|
||||
bleu_4: 0.22446448342524875
|
||||
rouge_l: 0.3835209941701039
|
||||
############################
|
Загрузка…
Ссылка в новой задаче