3 new sub

Leaderboard Results/BayesQAQA12092019.txt

@@ -0,0 +1,22 @@
+QnA Metrics
+{'testlen': 849573, 'reflen': 966526, 'guess': [849573, 793984, 741228, 692224], 'correct': [494704, 354386, 298648, 262057]}
+ratio: 0.8789965298398585
+############################
+F1: 0.7095818893165093
+bleu_1: 0.5074103745745621
+bleu_2: 0.444241764567541
+bleu_3: 0.4107274503472153
+bleu_4: 0.3888268353479582
+rouge_l: 0.51842481665434
+############################
+NLGEN Metrics
+{'testlen': 233714, 'reflen': 190029, 'guess': [233714, 217237, 201953, 188332], 'correct': [89735, 60886, 49125, 41830]}
+ratio: 1.2298859647737912
+############################
+F1: 1.0
+bleu_1: 0.38395218087063515
+bleu_2: 0.32804271130564694
+bleu_3: 0.2969187885655047
+bleu_4: 0.2761335628644112
+rouge_l: 0.3175706703986981
+############################

Leaderboard Results/Multi-LMNLGen12052019.txt

@@ -0,0 +1,22 @@
+QnA Metrics
+{'testlen': 858339, 'reflen': 966846, 'guess': [858339, 802750, 747161, 691572], 'correct': [466650, 308385, 248105, 209964]}
+ratio: 0.8877721995022982
+############################
+F1: 0.7095818893165093
+bleu_1: 0.47910538176535616
+bleu_2: 0.4027367886929408
+bleu_3: 0.36206581109773683
+bleu_4: 0.3356928981174441
+rouge_l: 0.4748697049968997
+############################
+NLGEN Metrics
+{'testlen': 248235, 'reflen': 189101, 'guess': [248235, 231758, 215281, 198804], 'correct': [119398, 84047, 66184, 53430]}
+ratio: 1.3127111966620943
+############################
+F1: 1.0
+bleu_1: 0.48098777368219436
+bleu_2: 0.4176483398845626
+bleu_3: 0.37709977740438655
+bleu_4: 0.3464832313331256
+rouge_l: 0.47751327284016826
+############################

Leaderboard Results/Multi-LMQnA12052019.txt

@@ -0,0 +1,22 @@
+QnA Metrics
+{'testlen': 721456, 'reflen': 965482, 'guess': [721456, 665867, 614097, 567114], 'correct': [434981, 296616, 242834, 208192]}
+ratio: 0.7472495603232368
+############################
+F1: 0.7095818893165093
+bleu_1: 0.42989682461133627
+bleu_2: 0.36951966824455595
+bleu_3: 0.3376632622786298
+bleu_4: 0.3168379729035984
+rouge_l: 0.49908407420805945
+############################
+NLGEN Metrics
+{'testlen': 191730, 'reflen': 188063, 'guess': [191730, 175253, 160114, 147350], 'correct': [68986, 44464, 35192, 29734]}
+ratio: 1.019498784981623
+############################
+F1: 1.0
+bleu_1: 0.3598080634225194
+bleu_2: 0.3021391340215211
+bleu_3: 0.2717333026912908
+bleu_4: 0.25225103085203554
+rouge_l: 0.2568086849820437
+############################

Leaderboard Results/PALM12092019.txt

@@ -0,0 +1,22 @@
+QnA Metrics
+{'testlen': 849573, 'reflen': 966526, 'guess': [849573, 793984, 741228, 692224], 'correct': [494704, 354386, 298648, 262057]}
+ratio: 0.8789965298398585
+############################
+F1: 0.7095818893165093
+bleu_1: 0.5074103745745621
+bleu_2: 0.444241764567541
+bleu_3: 0.4107274503472153
+bleu_4: 0.3888268353479582
+rouge_l: 0.51842481665434
+############################
+NLGEN Metrics
+{'testlen': 233714, 'reflen': 190029, 'guess': [233714, 217237, 201953, 188332], 'correct': [89735, 60886, 49125, 41830]}
+ratio: 1.2298859647737912
+############################
+F1: 1.0
+bleu_1: 0.38395218087063515
+bleu_2: 0.32804271130564694
+bleu_3: 0.2969187885655047
+bleu_4: 0.2761335628644112
+rouge_l: 0.3175706703986981
+############################

Leaderboard Results/UnnamedModel12092019.txt

@@ -0,0 +1,22 @@
+QnA Metrics
+{'testlen': 899870, 'reflen': 967194, 'guess': [899870, 844281, 788692, 733103], 'correct': [494500, 336415, 275262, 236230]}
+ratio: 0.9303924548746156
+############################
+F1: 0.7095818893165093
+bleu_1: 0.509911341548941
+bleu_2: 0.4342057581411264
+bleu_3: 0.3937730992964215
+bleu_4: 0.36758187061121206
+rouge_l: 0.49211850182175015
+############################
+NLGEN Metrics
+{'testlen': 262809, 'reflen': 190080, 'guess': [262809, 246332, 229855, 213378], 'correct': [127301, 92570, 74448, 61311]}
+ratio: 1.382623106060599
+############################
+F1: 1.0
+bleu_1: 0.4843859989574159
+bleu_2: 0.4266487780602147
+bleu_3: 0.389206451654043
+bleu_4: 0.36077149236049016
+rouge_l: 0.49623242602945067
+############################