23 строки
750 B
Plaintext
23 строки
750 B
Plaintext
QnA Metrics
|
|
{'testlen': 595574, 'reflen': 965609, 'guess': [595574, 539985, 484398, 428846], 'correct': [262038, 105860, 62640, 41489]}
|
|
ratio: 0.6167858833130173
|
|
############################
|
|
F1: 0.7095818893165093
|
|
bleu_1: 0.23637297986544653
|
|
bleu_2: 0.15778243503336944
|
|
bleu_3: 0.12003613413452242
|
|
bleu_4: 0.09737202953134436
|
|
rouge_l: 0.30710908155907457
|
|
############################
|
|
NLGEN Metrics
|
|
{'testlen': 179238, 'reflen': 185678, 'guess': [179238, 162761, 146284, 129817], 'correct': [81382, 44263, 28435, 18526]}
|
|
ratio: 0.9653163002617383
|
|
############################
|
|
F1: 1.0
|
|
bleu_1: 0.43802018103794066
|
|
bleu_2: 0.3389926123404134
|
|
bleu_3: 0.278277167790246
|
|
bleu_4: 0.23338324092925958
|
|
rouge_l: 0.37453516033239237
|
|
############################
|