23 строки
747 B
Plaintext
23 строки
747 B
Plaintext
QnA Metrics
|
|
{'testlen': 899870, 'reflen': 967194, 'guess': [899870, 844281, 788692, 733103], 'correct': [494500, 336415, 275262, 236230]}
|
|
ratio: 0.9303924548746156
|
|
############################
|
|
F1: 0.7095818893165093
|
|
bleu_1: 0.509911341548941
|
|
bleu_2: 0.4342057581411264
|
|
bleu_3: 0.3937730992964215
|
|
bleu_4: 0.36758187061121206
|
|
rouge_l: 0.49211850182175015
|
|
############################
|
|
NLGEN Metrics
|
|
{'testlen': 262809, 'reflen': 190080, 'guess': [262809, 246332, 229855, 213378], 'correct': [127301, 92570, 74448, 61311]}
|
|
ratio: 1.382623106060599
|
|
############################
|
|
F1: 1.0
|
|
bleu_1: 0.4843859989574159
|
|
bleu_2: 0.4266487780602147
|
|
bleu_3: 0.389206451654043
|
|
bleu_4: 0.36077149236049016
|
|
rouge_l: 0.49623242602945067
|
|
############################
|