{
"schema_version": 3,
"dataset": "unimelb-nlp/wikiann",
"config": "en",
"max_train_sents": 20000,
"smoothing": 1e-06,
"states": [
"O",
"B-PER",
"I-PER",
"B-ORG",
"I-ORG",
"B-LOC",
"I-LOC",
"B-MISC",
"I-MISC"
],
"initial": [
0.4160499998627775,
0.21154999995480253,
4.99999999775e-11,
0.20684999995691752,
4.99999999775e-11,
0.1655499999755025,
4.99999999775e-11,
4.99999999775e-11,
4.99999999775e-11
],
"transitions": [
[
0.7730174107947859,
0.06769156242542354,
1.4247855695890482e-11,
0.07398911464300713,
1.4247855695890482e-11,
0.08530191206554417,
1.4247855695890482e-11,
1.4247855695890482e-11,
1.4247855695890482e-11
],
[
0.039456378851917204,
0.0010960106302209452,
0.9591188067040695,
0.0002192022137250307,
1.0960105206198929e-10,
0.00010960116166304136,
1.0960105206198929e-10,
1.0960105206198929e-10,
1.0960105206198929e-10
],
[
0.4988884311659122,
0.010621655076525738,
0.489666529155455,
0.0008233841904149479,
8.233841080765369e-11,
8.233841080765369e-11,
8.233841080765369e-11,
8.233841080765369e-11,
8.233841080765369e-11
],
[
0.12312151136667093,
0.000751395555306724,
1.0734220685207387e-10,
0.0019321598306795366,
0.8735508794695194,
0.0006440533484546501,
1.0734220685207387e-10,
1.0734220685207387e-10,
1.0734220685207387e-10
],
[
0.2534768292652567,
0.0017199862884918237,
4.9142463981410284e-11,
0.00280112049608285,
0.7414614966006609,
0.0005405671529379771,
4.9142463981410284e-11,
4.9142463981410284e-11,
4.9142463981410284e-11
],
[
0.3667454154234775,
0.00011249870615226815,
1.1249859365367451e-10,
0.0003374958934596172,
1.1249859365367451e-10,
0.0007874902680743152,
0.6320170992588421,
1.1249859365367451e-10,
1.1249859365367451e-10
],
[
0.2698122290391613,
9.629272981544203e-11,
9.629272981544203e-11,
0.0001925855559236139,
9.629272981544203e-11,
0.0021184401522324546,
0.7278767447712191,
9.629272981544203e-11,
9.629272981544203e-11
],
[
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111
],
[
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111,
0.1111111111111111
]
],
"backoff": {
"len": {
"len:1": {
"O": 0.3422482239736795,
"B-PER": 0.0009821039932461125,
"I-PER": 0.09695196628237096,
"B-ORG": 0.010719592542526262,
"I-ORG": 0.1112546284479666,
"B-LOC": 0.000642054681235706,
"I-LOC": 0.18714426651568145,
"B-MISC": 0.16666666666666666,
"I-MISC": 0.16666666666666666
},
"len:2": {
"O": 0.24286521963008295,
"B-PER": 0.02531645578874959,
"I-PER": 0.10974282217591122,
"B-ORG": 0.04722988757340487,
"I-ORG": 0.13088779816648038,
"B-LOC": 0.008560727763363899,
"I-LOC": 0.07528268957640614,
"B-MISC": 0.16666666666666666,
"I-MISC": 0.16666666666666666
},
"len:3": {
"O": 0.1124234900853649,
"B-PER": 0.08566128333544656,
"I-PER": 0.05361273647287546,
"B-ORG": 0.12555720656406885,
"I-ORG": 0.10161026437571422,
"B-LOC": 0.04836811136541373,
"I-LOC": 0.06602413300477007,
"B-MISC": 0.16666666666666666,
"I-MISC": 0.16666666666666666
},
"len:4_5": {
"O": 0.15244217202238572,
"B-PER": 0.40800960263552405,
"I-PER": 0.22281943119220868,
"B-ORG": 0.2794523455023653,
"I-ORG": 0.23353138722116648,
"B-LOC": 0.22600321023477588,
"I-LOC": 0.19473324731210445,
"B-MISC": 0.16666666666666666,
"I-MISC": 0.16666666666666666
},
"len:6_8": {
"O": 0.09484771761302468,
"B-PER": 0.4184853773995076,
"I-PER": 0.4009389031565088,
"B-ORG": 0.3655274887292332,
"I-ORG": 0.3047016274507789,
"B-LOC": 0.47865168519294704,
"I-LOC": 0.33550884108575146,
"B-MISC": 0.16666666666666666,
"I-MISC": 0.16666666666666666
},
"len:9p": {
"O": 0.05517317667546227,
"B-PER": 0.06154517684752607,
"I-PER": 0.11593414072012487,
"B-ORG": 0.17151347908840153,
"I-ORG": 0.1180142943378935,
"B-LOC": 0.23777421076226374,
"I-LOC": 0.14130682250528642,
"B-MISC": 0.16666666666666666,
"I-MISC": 0.16666666666666666
}
},
"bool": {
"is_capitalized": {
"O": 0.08802635137808741,
"B-PER": 0.9960715843526687,
"I-PER": 0.7884065858908141,
"B-ORG": 0.9455529610601671,
"I-ORG": 0.6593042280066043,
"B-LOC": 0.9829855536687029,
"I-LOC": 0.5888290202490963,
"B-MISC": 0.5,
"I-MISC": 0.5
},
"is_all_caps": {
"O": 0.005088370504533114,
"B-PER": 0.021933653530787068,
"I-PER": 0.0454483603829843,
"B-ORG": 0.06835066873947131,
"I-ORG": 0.02131232243853334,
"B-LOC": 0.005243445798770797,
"I-LOC": 0.003718600667265902,
"B-MISC": 0.5,
"I-MISC": 0.5
},
"is_digit": {
"O": 0.06967626165606361,
"B-PER": 0.0006547360321574124,
"I-PER": 0.0025853858344556556,
"B-ORG": 0.01772447473620792,
"I-ORG": 0.01601653323723271,
"B-LOC": 0.003959336649767932,
"I-LOC": 0.002352584123495092,
"B-MISC": 0.5,
"I-MISC": 0.5
},
"has_digit": {
"O": 0.10223445835642599,
"B-PER": 0.0018550852243878033,
"I-PER": 0.012926928900132409,
"B-ORG": 0.041074082033310526,
"I-ORG": 0.021915095193152923,
"B-LOC": 0.011449973352284648,
"I-LOC": 0.0037944904752531695,
"B-MISC": 0.5,
"I-MISC": 0.5
},
"has_hyphen": {
"O": 0.01896462723337763,
"B-PER": 0.0092754256854484,
"I-PER": 0.011770308951997509,
"B-ORG": 0.01857355136519347,
"I-ORG": 0.00895548096883187,
"B-LOC": 0.030604601491577395,
"I-LOC": 0.014570843209445116,
"B-MISC": 0.5,
"I-MISC": 0.5
},
"has_dot": {
"O": 0.05771736192429593,
"B-PER": 0.018659973915613273,
"I-PER": 0.04184242760350491,
"B-ORG": 0.020059435465918183,
"I-ORG": 0.012916559070617707,
"B-LOC": 0.0047084003200196034,
"I-LOC": 0.003339151627329566,
"B-MISC": 0.5,
"I-MISC": 0.5
}
}
},
"eval": {
"tokens": 24193,
"nll_per_token": 0.744624811149558,
"perplexity": 2.1056512698800502
}
}