liberta-large_deprel

This model is a fine-tuned version of Goader/liberta-large on the universal_dependencies dataset. It achieves the following results on the evaluation set:

• Loss: 0.7012
• : {'precision': 0.125, 'recall': 0.0625, 'f1': 0.08333333333333333, 'number': 16}
• Arataxis: {'precision': 0.45714285714285713, 'recall': 0.26229508196721313, 'f1': 0.3333333333333333, 'number': 122}
• Arataxis:discourse: {'precision': 0.42857142857142855, 'recall': 0.25, 'f1': 0.3157894736842105, 'number': 24}
• Arataxis:newsent: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}
• Arataxis:rel: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}
• Ark: {'precision': 0.7857142857142857, 'recall': 0.7394957983193278, 'f1': 0.7619047619047619, 'number': 238}
• Ase: {'precision': 0.8278606965174129, 'recall': 0.7234782608695652, 'f1': 0.7721577726218097, 'number': 1150}
• Bj: {'precision': 0.7834008097165992, 'recall': 0.6615384615384615, 'f1': 0.7173308619091752, 'number': 585}
• Bl: {'precision': 0.7666666666666667, 'recall': 0.6282660332541568, 'f1': 0.6906005221932116, 'number': 842}
• C: {'precision': 0.8067885117493473, 'recall': 0.6866666666666666, 'f1': 0.7418967587034814, 'number': 450}
• Cl: {'precision': 0.7, 'recall': 0.14583333333333334, 'f1': 0.2413793103448276, 'number': 48}
• Cl:adv: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}
• Cl:relcl: {'precision': 0.7, 'recall': 0.5868263473053892, 'f1': 0.6384364820846905, 'number': 167}
• Comp: {'precision': 0.7191780821917808, 'recall': 0.6402439024390244, 'f1': 0.6774193548387097, 'number': 164}
• Comp:sp: {'precision': 0.6956521739130435, 'recall': 0.3902439024390244, 'f1': 0.5000000000000001, 'number': 41}
• Dvcl: {'precision': 0.6581196581196581, 'recall': 0.5968992248062015, 'f1': 0.6260162601626015, 'number': 129}
• Dvcl:sp: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}
• Dvcl:svc: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}
• Dvmod: {'precision': 0.75, 'recall': 0.6624087591240876, 'f1': 0.7034883720930232, 'number': 548}
• Dvmod:det: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}
• Et: {'precision': 0.8075313807531381, 'recall': 0.6992753623188406, 'f1': 0.7495145631067962, 'number': 276}
• Et:numgov: {'precision': 0.7692307692307693, 'recall': 0.7142857142857143, 'f1': 0.7407407407407408, 'number': 14}
• Et:nummod: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}
• Iscourse: {'precision': 0.7133333333333334, 'recall': 0.5944444444444444, 'f1': 0.6484848484848484, 'number': 180}
• Islocated: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}
• Ist: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}
• Ixed: {'precision': 0.2, 'recall': 0.07142857142857142, 'f1': 0.10526315789473682, 'number': 28}
• Lat:abs: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}
• Lat:foreign: {'precision': 0.25, 'recall': 0.1, 'f1': 0.14285714285714288, 'number': 20}
• Lat:name: {'precision': 0.6190476190476191, 'recall': 0.4482758620689655, 'f1': 0.52, 'number': 58}
• Lat:range: {'precision': 0.5, 'recall': 0.35714285714285715, 'f1': 0.41666666666666663, 'number': 14}
• Lat:repeat: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}
• Lat:title: {'precision': 0.5185185185185185, 'recall': 0.32941176470588235, 'f1': 0.40287769784172656, 'number': 170}
• Mod: {'precision': 0.7323619631901841, 'recall': 0.6040480708412397, 'f1': 0.6620450606585788, 'number': 1581}
• Obj: {'precision': 0.3888888888888889, 'recall': 0.4666666666666667, 'f1': 0.42424242424242425, 'number': 15}
• Ocative: {'precision': 0.5, 'recall': 1.0, 'f1': 0.6666666666666666, 'number': 1}
• Oeswith: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}
• Ompound: {'precision': 0.631578947368421, 'recall': 0.3116883116883117, 'f1': 0.41739130434782606, 'number': 77}
• Onj: {'precision': 0.6863753213367609, 'recall': 0.4725663716814159, 'f1': 0.559748427672956, 'number': 565}
• Oot: {'precision': 0.9019908116385911, 'recall': 0.8764880952380952, 'f1': 0.8890566037735849, 'number': 672}
• Op: {'precision': 0.6346153846153846, 'recall': 0.532258064516129, 'f1': 0.5789473684210527, 'number': 62}
• Ppos: {'precision': 0.39622641509433965, 'recall': 0.21428571428571427, 'f1': 0.2781456953642384, 'number': 98}
• Rphan: {'precision': 0.5, 'recall': 0.06666666666666667, 'f1': 0.11764705882352941, 'number': 15}
• Subj: {'precision': 0.8242730720606827, 'recall': 0.7590221187427241, 'f1': 0.7903030303030303, 'number': 859}
• Ummod: {'precision': 0.5217391304347826, 'recall': 0.5, 'f1': 0.5106382978723404, 'number': 48}
• Ummod:gov: {'precision': 0.6097560975609756, 'recall': 0.4807692307692308, 'f1': 0.5376344086021505, 'number': 52}
• Unct: {'precision': 0.8087492989343803, 'recall': 0.661164603392939, 'f1': 0.727547931382442, 'number': 2181}
• Ux: {'precision': 0.5714285714285714, 'recall': 0.4, 'f1': 0.47058823529411764, 'number': 20}
• Xpl: {'precision': 0.6363636363636364, 'recall': 0.7777777777777778, 'f1': 0.7000000000000001, 'number': 9}
• Overall Precision: 0.7715
• Overall Recall: 0.6383
• Overall F1: 0.6986
• Overall Accuracy: 0.7559

Model description

More information needed

Intended uses & limitations

More information needed

Training and evaluation data

More information needed

Training procedure

Training hyperparameters

The following hyperparameters were used during training:

• learning_rate: 5e-05
• train_batch_size: 32
• eval_batch_size: 8
• seed: 42
• optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08
• lr_scheduler_type: linear
• num_epochs: 10

Training results

Training Loss	Epoch	Step	Validation Loss		Arataxis	Arataxis:discourse	Arataxis:newsent	Arataxis:rel	Ark	Ase	Bj	Bl	C	Cl	Cl:adv	Cl:relcl	Comp	Comp:sp	Dvcl	Dvcl:sp	Dvcl:svc	Dvmod	Dvmod:det	Et	Et:numgov	Et:nummod	Iscourse	Islocated	Ist	Ixed	Lat:abs	Lat:foreign	Lat:name	Lat:range	Lat:repeat	Lat:title	Mod	Obj	Ocative	Oeswith	Ompound	Onj	Oot	Op	Ppos	Rphan	Subj	Ummod	Ummod:gov	Unct	Ux	Xpl	Overall Precision	Overall Recall	Overall F1	Overall Accuracy
No log	1.0	172	1.7591	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 16}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 122}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.4110429447852761, 'recall': 0.2815126050420168, 'f1': 0.33416458852867836, 'number': 238}	{'precision': 0.47144948755490484, 'recall': 0.28, 'f1': 0.35133660665575556, 'number': 1150}	{'precision': 0.4101123595505618, 'recall': 0.12478632478632479, 'f1': 0.1913499344692005, 'number': 585}	{'precision': 0.5912162162162162, 'recall': 0.20783847980997625, 'f1': 0.30755711775043937, 'number': 842}	{'precision': 0.3840304182509506, 'recall': 0.22444444444444445, 'f1': 0.28330995792426367, 'number': 450}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.10638297872340426, 'recall': 0.059880239520958084, 'f1': 0.07662835249042145, 'number': 167}	{'precision': 0.1559633027522936, 'recall': 0.10365853658536585, 'f1': 0.12454212454212456, 'number': 164}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 41}	{'precision': 0.5714285714285714, 'recall': 0.031007751937984496, 'f1': 0.0588235294117647, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.4890282131661442, 'recall': 0.2846715328467153, 'f1': 0.3598615916955017, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.56, 'recall': 0.30434782608695654, 'f1': 0.3943661971830986, 'number': 276}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7142857142857143, 'recall': 0.25, 'f1': 0.37037037037037035, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 20}	{'precision': 0.5, 'recall': 0.017241379310344827, 'f1': 0.03333333333333333, 'number': 58}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.2727272727272727, 'recall': 0.03529411764705882, 'f1': 0.0625, 'number': 170}	{'precision': 0.2841981132075472, 'recall': 0.15243516761543327, 'f1': 0.19843557019349525, 'number': 1581}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 15}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 77}	{'precision': 0.11931818181818182, 'recall': 0.03716814159292035, 'f1': 0.05668016194331983, 'number': 565}	{'precision': 0.6881720430107527, 'recall': 0.47619047619047616, 'f1': 0.5628847845206685, 'number': 672}	{'precision': 0.3333333333333333, 'recall': 0.14516129032258066, 'f1': 0.20224719101123595, 'number': 62}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 98}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 15}	{'precision': 0.6645021645021645, 'recall': 0.3573923166472643, 'f1': 0.4647993943981832, 'number': 859}	{'precision': 0.2857142857142857, 'recall': 0.041666666666666664, 'f1': 0.07272727272727272, 'number': 48}	{'precision': 0.14285714285714285, 'recall': 0.019230769230769232, 'f1': 0.03389830508474577, 'number': 52}	{'precision': 0.3133116883116883, 'recall': 0.176983035304906, 'f1': 0.2261939642543217, 'number': 2181}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 20}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 9}	0.4208	0.2027	0.2736	0.4353
No log	2.0	344	1.2561	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 16}	{'precision': 0.4375, 'recall': 0.05737704918032787, 'f1': 0.10144927536231883, 'number': 122}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.6378378378378379, 'recall': 0.4957983193277311, 'f1': 0.5579196217494089, 'number': 238}	{'precision': 0.6111111111111112, 'recall': 0.46869565217391307, 'f1': 0.5305118110236221, 'number': 1150}	{'precision': 0.6466876971608833, 'recall': 0.3504273504273504, 'f1': 0.45454545454545453, 'number': 585}	{'precision': 0.6687116564417178, 'recall': 0.38836104513064135, 'f1': 0.4913598797896319, 'number': 842}	{'precision': 0.7816593886462883, 'recall': 0.3977777777777778, 'f1': 0.5272459499263622, 'number': 450}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.46511627906976744, 'recall': 0.23952095808383234, 'f1': 0.3162055335968379, 'number': 167}	{'precision': 0.5555555555555556, 'recall': 0.3353658536585366, 'f1': 0.4182509505703422, 'number': 164}	{'precision': 0.5, 'recall': 0.0975609756097561, 'f1': 0.163265306122449, 'number': 41}	{'precision': 0.4, 'recall': 0.23255813953488372, 'f1': 0.29411764705882354, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.5969773299748111, 'recall': 0.4324817518248175, 'f1': 0.5015873015873017, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7371428571428571, 'recall': 0.4673913043478261, 'f1': 0.5720620842572062, 'number': 276}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7043478260869566, 'recall': 0.45, 'f1': 0.5491525423728814, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 20}	{'precision': 0.5652173913043478, 'recall': 0.22413793103448276, 'f1': 0.32098765432098764, 'number': 58}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.425, 'recall': 0.1, 'f1': 0.1619047619047619, 'number': 170}	{'precision': 0.6151202749140894, 'recall': 0.3396584440227704, 'f1': 0.43765281173594134, 'number': 1581}	{'precision': 0.2857142857142857, 'recall': 0.13333333333333333, 'f1': 0.18181818181818182, 'number': 15}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.45454545454545453, 'recall': 0.06493506493506493, 'f1': 0.11363636363636363, 'number': 77}	{'precision': 0.3346774193548387, 'recall': 0.14690265486725665, 'f1': 0.20418204182041821, 'number': 565}	{'precision': 0.7335473515248796, 'recall': 0.6800595238095238, 'f1': 0.7057915057915058, 'number': 672}	{'precision': 0.27906976744186046, 'recall': 0.1935483870967742, 'f1': 0.22857142857142856, 'number': 62}	{'precision': 0.36363636363636365, 'recall': 0.04081632653061224, 'f1': 0.07339449541284403, 'number': 98}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 15}	{'precision': 0.7095375722543352, 'recall': 0.5715948777648429, 'f1': 0.6331399097356544, 'number': 859}	{'precision': 0.39285714285714285, 'recall': 0.22916666666666666, 'f1': 0.2894736842105263, 'number': 48}	{'precision': 0.2571428571428571, 'recall': 0.17307692307692307, 'f1': 0.20689655172413793, 'number': 52}	{'precision': 0.517578125, 'recall': 0.36451169188445665, 'f1': 0.4277643260694108, 'number': 2181}	{'precision': 1.0, 'recall': 0.15, 'f1': 0.2608695652173913, 'number': 20}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 9}	0.6057	0.3789	0.4662	0.5813
1.7539	3.0	516	1.0530	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 16}	{'precision': 0.2459016393442623, 'recall': 0.12295081967213115, 'f1': 0.1639344262295082, 'number': 122}	{'precision': 0.3333333333333333, 'recall': 0.08333333333333333, 'f1': 0.13333333333333333, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.6716417910447762, 'recall': 0.5672268907563025, 'f1': 0.6150341685649202, 'number': 238}	{'precision': 0.7171270718232045, 'recall': 0.5643478260869565, 'f1': 0.6316301703163018, 'number': 1150}	{'precision': 0.7327586206896551, 'recall': 0.4358974358974359, 'f1': 0.5466237942122186, 'number': 585}	{'precision': 0.6452145214521452, 'recall': 0.4643705463182898, 'f1': 0.5400552486187844, 'number': 842}	{'precision': 0.6260387811634349, 'recall': 0.5022222222222222, 'f1': 0.5573366214549937, 'number': 450}	{'precision': 0.2, 'recall': 0.020833333333333332, 'f1': 0.03773584905660377, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.46218487394957986, 'recall': 0.32934131736526945, 'f1': 0.3846153846153847, 'number': 167}	{'precision': 0.49044585987261147, 'recall': 0.4695121951219512, 'f1': 0.4797507788161994, 'number': 164}	{'precision': 0.6, 'recall': 0.21951219512195122, 'f1': 0.32142857142857145, 'number': 41}	{'precision': 0.5157894736842106, 'recall': 0.3798449612403101, 'f1': 0.4375, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.5990675990675991, 'recall': 0.46897810218978103, 'f1': 0.526100307062436, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6260869565217392, 'recall': 0.5217391304347826, 'f1': 0.5691699604743082, 'number': 276}	{'precision': 1.0, 'recall': 0.07142857142857142, 'f1': 0.13333333333333333, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6417910447761194, 'recall': 0.4777777777777778, 'f1': 0.5477707006369428, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 20}	{'precision': 0.3684210526315789, 'recall': 0.2413793103448276, 'f1': 0.2916666666666667, 'number': 58}	{'precision': 0.2, 'recall': 0.07142857142857142, 'f1': 0.10526315789473682, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.4, 'recall': 0.17647058823529413, 'f1': 0.2448979591836735, 'number': 170}	{'precision': 0.6080357142857142, 'recall': 0.4307400379506641, 'f1': 0.5042576823398741, 'number': 1581}	{'precision': 0.25, 'recall': 0.26666666666666666, 'f1': 0.2580645161290323, 'number': 15}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.47368421052631576, 'recall': 0.11688311688311688, 'f1': 0.1875, 'number': 77}	{'precision': 0.5196850393700787, 'recall': 0.2336283185840708, 'f1': 0.3223443223443223, 'number': 565}	{'precision': 0.8251633986928104, 'recall': 0.7514880952380952, 'f1': 0.7866043613707167, 'number': 672}	{'precision': 0.3220338983050847, 'recall': 0.3064516129032258, 'f1': 0.3140495867768595, 'number': 62}	{'precision': 0.4, 'recall': 0.08163265306122448, 'f1': 0.13559322033898302, 'number': 98}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 15}	{'precision': 0.7559607293127629, 'recall': 0.6274738067520372, 'f1': 0.6857506361323155, 'number': 859}	{'precision': 0.35294117647058826, 'recall': 0.25, 'f1': 0.2926829268292683, 'number': 48}	{'precision': 0.375, 'recall': 0.23076923076923078, 'f1': 0.2857142857142857, 'number': 52}	{'precision': 0.7157964309319234, 'recall': 0.4965612104539202, 'f1': 0.5863562533838658, 'number': 2181}	{'precision': 0.8, 'recall': 0.2, 'f1': 0.32000000000000006, 'number': 20}	{'precision': 0.25, 'recall': 0.1111111111111111, 'f1': 0.15384615384615383, 'number': 9}	0.6598	0.4666	0.5466	0.6342
1.7539	4.0	688	0.9372	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 16}	{'precision': 0.3958333333333333, 'recall': 0.1557377049180328, 'f1': 0.2235294117647059, 'number': 122}	{'precision': 0.5714285714285714, 'recall': 0.16666666666666666, 'f1': 0.25806451612903225, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.6513761467889908, 'recall': 0.5966386554621849, 'f1': 0.6228070175438596, 'number': 238}	{'precision': 0.755700325732899, 'recall': 0.6052173913043478, 'f1': 0.6721390632544665, 'number': 1150}	{'precision': 0.6784140969162996, 'recall': 0.5264957264957265, 'f1': 0.5928777670837344, 'number': 585}	{'precision': 0.6045197740112994, 'recall': 0.5083135391923991, 'f1': 0.552258064516129, 'number': 842}	{'precision': 0.7162921348314607, 'recall': 0.5666666666666667, 'f1': 0.6327543424317619, 'number': 450}	{'precision': 1.0, 'recall': 0.0625, 'f1': 0.11764705882352941, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6530612244897959, 'recall': 0.38323353293413176, 'f1': 0.4830188679245283, 'number': 167}	{'precision': 0.6106870229007634, 'recall': 0.4878048780487805, 'f1': 0.5423728813559321, 'number': 164}	{'precision': 0.7333333333333333, 'recall': 0.2682926829268293, 'f1': 0.3928571428571429, 'number': 41}	{'precision': 0.5277777777777778, 'recall': 0.4418604651162791, 'f1': 0.4810126582278481, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.6291390728476821, 'recall': 0.5200729927007299, 'f1': 0.5694305694305696, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.740909090909091, 'recall': 0.5905797101449275, 'f1': 0.657258064516129, 'number': 276}	{'precision': 0.8571428571428571, 'recall': 0.42857142857142855, 'f1': 0.5714285714285714, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7265625, 'recall': 0.5166666666666667, 'f1': 0.6038961038961039, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 20}	{'precision': 0.5, 'recall': 0.3275862068965517, 'f1': 0.3958333333333333, 'number': 58}	{'precision': 0.5, 'recall': 0.07142857142857142, 'f1': 0.125, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.576271186440678, 'recall': 0.2, 'f1': 0.29694323144104806, 'number': 170}	{'precision': 0.6520241171403962, 'recall': 0.47881087919038584, 'f1': 0.5521517140773159, 'number': 1581}	{'precision': 0.7142857142857143, 'recall': 0.3333333333333333, 'f1': 0.4545454545454545, 'number': 15}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.37037037037037035, 'recall': 0.12987012987012986, 'f1': 0.19230769230769232, 'number': 77}	{'precision': 0.4835820895522388, 'recall': 0.2867256637168142, 'f1': 0.36, 'number': 565}	{'precision': 0.8085419734904271, 'recall': 0.8169642857142857, 'f1': 0.8127313101406365, 'number': 672}	{'precision': 0.43137254901960786, 'recall': 0.3548387096774194, 'f1': 0.3893805309734513, 'number': 62}	{'precision': 0.3333333333333333, 'recall': 0.08163265306122448, 'f1': 0.13114754098360654, 'number': 98}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 15}	{'precision': 0.7991689750692521, 'recall': 0.6717112922002328, 'f1': 0.7299177735610374, 'number': 859}	{'precision': 0.43333333333333335, 'recall': 0.2708333333333333, 'f1': 0.33333333333333337, 'number': 48}	{'precision': 0.6086956521739131, 'recall': 0.2692307692307692, 'f1': 0.37333333333333335, 'number': 52}	{'precision': 0.7447466007416563, 'recall': 0.552498853736818, 'f1': 0.6343774677546723, 'number': 2181}	{'precision': 0.6, 'recall': 0.3, 'f1': 0.4, 'number': 20}	{'precision': 0.75, 'recall': 0.3333333333333333, 'f1': 0.46153846153846156, 'number': 9}	0.6918	0.5178	0.5923	0.6729
1.7539	5.0	860	0.8588	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 16}	{'precision': 0.5681818181818182, 'recall': 0.20491803278688525, 'f1': 0.30120481927710846, 'number': 122}	{'precision': 0.5714285714285714, 'recall': 0.16666666666666666, 'f1': 0.25806451612903225, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.7523809523809524, 'recall': 0.6638655462184874, 'f1': 0.7053571428571429, 'number': 238}	{'precision': 0.8, 'recall': 0.6573913043478261, 'f1': 0.7217183770883056, 'number': 1150}	{'precision': 0.7270833333333333, 'recall': 0.5965811965811966, 'f1': 0.6553990610328638, 'number': 585}	{'precision': 0.8139130434782609, 'recall': 0.5558194774346793, 'f1': 0.6605504587155963, 'number': 842}	{'precision': 0.6978609625668449, 'recall': 0.58, 'f1': 0.6334951456310679, 'number': 450}	{'precision': 0.5, 'recall': 0.10416666666666667, 'f1': 0.1724137931034483, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7373737373737373, 'recall': 0.437125748502994, 'f1': 0.548872180451128, 'number': 167}	{'precision': 0.6967213114754098, 'recall': 0.5182926829268293, 'f1': 0.5944055944055944, 'number': 164}	{'precision': 0.6818181818181818, 'recall': 0.36585365853658536, 'f1': 0.47619047619047616, 'number': 41}	{'precision': 0.6090909090909091, 'recall': 0.5193798449612403, 'f1': 0.5606694560669456, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.640495867768595, 'recall': 0.5656934306569343, 'f1': 0.6007751937984497, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6846473029045643, 'recall': 0.5978260869565217, 'f1': 0.6382978723404256, 'number': 276}	{'precision': 0.8, 'recall': 0.5714285714285714, 'f1': 0.6666666666666666, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6709677419354839, 'recall': 0.5777777777777777, 'f1': 0.6208955223880597, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.16666666666666666, 'recall': 0.03571428571428571, 'f1': 0.058823529411764705, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 20}	{'precision': 0.5641025641025641, 'recall': 0.3793103448275862, 'f1': 0.4536082474226804, 'number': 58}	{'precision': 0.75, 'recall': 0.21428571428571427, 'f1': 0.3333333333333333, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.5616438356164384, 'recall': 0.2411764705882353, 'f1': 0.3374485596707819, 'number': 170}	{'precision': 0.6912, 'recall': 0.5464895635673624, 'f1': 0.6103850229600848, 'number': 1581}	{'precision': 0.4117647058823529, 'recall': 0.4666666666666667, 'f1': 0.43749999999999994, 'number': 15}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.5862068965517241, 'recall': 0.22077922077922077, 'f1': 0.3207547169811321, 'number': 77}	{'precision': 0.5868263473053892, 'recall': 0.34690265486725663, 'f1': 0.43604004449388206, 'number': 565}	{'precision': 0.865414710485133, 'recall': 0.8229166666666666, 'f1': 0.8436308161708619, 'number': 672}	{'precision': 0.6037735849056604, 'recall': 0.5161290322580645, 'f1': 0.5565217391304349, 'number': 62}	{'precision': 0.2553191489361702, 'recall': 0.12244897959183673, 'f1': 0.16551724137931037, 'number': 98}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 15}	{'precision': 0.8266850068775791, 'recall': 0.69965075669383, 'f1': 0.7578814627994955, 'number': 859}	{'precision': 0.38636363636363635, 'recall': 0.3541666666666667, 'f1': 0.3695652173913044, 'number': 48}	{'precision': 0.68, 'recall': 0.3269230769230769, 'f1': 0.44155844155844154, 'number': 52}	{'precision': 0.73678094131319, 'recall': 0.5813846859238881, 'f1': 0.6499231163505894, 'number': 2181}	{'precision': 0.7777777777777778, 'recall': 0.35, 'f1': 0.48275862068965514, 'number': 20}	{'precision': 0.7142857142857143, 'recall': 0.5555555555555556, 'f1': 0.6250000000000001, 'number': 9}	0.7307	0.5624	0.6356	0.7025
0.985	6.0	1032	0.8413	{'precision': 0.2857142857142857, 'recall': 0.125, 'f1': 0.17391304347826086, 'number': 16}	{'precision': 0.5384615384615384, 'recall': 0.22950819672131148, 'f1': 0.3218390804597701, 'number': 122}	{'precision': 0.5555555555555556, 'recall': 0.20833333333333334, 'f1': 0.30303030303030304, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.7619047619047619, 'recall': 0.6722689075630253, 'f1': 0.7142857142857143, 'number': 238}	{'precision': 0.7929936305732485, 'recall': 0.6495652173913044, 'f1': 0.71414913957935, 'number': 1150}	{'precision': 0.7125256673511293, 'recall': 0.5931623931623932, 'f1': 0.6473880597014925, 'number': 585}	{'precision': 0.6771879483500718, 'recall': 0.5605700712589073, 'f1': 0.6133853151397011, 'number': 842}	{'precision': 0.6794520547945205, 'recall': 0.5511111111111111, 'f1': 0.6085889570552148, 'number': 450}	{'precision': 0.6666666666666666, 'recall': 0.125, 'f1': 0.21052631578947367, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6101694915254238, 'recall': 0.4311377245508982, 'f1': 0.5052631578947369, 'number': 167}	{'precision': 0.6174496644295302, 'recall': 0.5609756097560976, 'f1': 0.5878594249201278, 'number': 164}	{'precision': 0.7, 'recall': 0.34146341463414637, 'f1': 0.4590163934426229, 'number': 41}	{'precision': 0.6538461538461539, 'recall': 0.5271317829457365, 'f1': 0.5836909871244635, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.7264367816091954, 'recall': 0.5766423357664233, 'f1': 0.6429298067141404, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7610619469026548, 'recall': 0.6231884057971014, 'f1': 0.6852589641434262, 'number': 276}	{'precision': 0.6923076923076923, 'recall': 0.6428571428571429, 'f1': 0.6666666666666666, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6346153846153846, 'recall': 0.55, 'f1': 0.5892857142857143, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.2, 'recall': 0.03571428571428571, 'f1': 0.06060606060606061, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.16666666666666666, 'recall': 0.05, 'f1': 0.07692307692307691, 'number': 20}	{'precision': 0.7666666666666667, 'recall': 0.39655172413793105, 'f1': 0.5227272727272728, 'number': 58}	{'precision': 0.5, 'recall': 0.2857142857142857, 'f1': 0.36363636363636365, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.5421686746987951, 'recall': 0.2647058823529412, 'f1': 0.3557312252964427, 'number': 170}	{'precision': 0.6759639048400328, 'recall': 0.5211891208096142, 'f1': 0.5885714285714286, 'number': 1581}	{'precision': 0.375, 'recall': 0.4, 'f1': 0.38709677419354843, 'number': 15}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.5135135135135135, 'recall': 0.24675324675324675, 'f1': 0.3333333333333333, 'number': 77}	{'precision': 0.6149253731343284, 'recall': 0.36460176991150445, 'f1': 0.45777777777777784, 'number': 565}	{'precision': 0.8894154818325435, 'recall': 0.8377976190476191, 'f1': 0.8628352490421456, 'number': 672}	{'precision': 0.6470588235294118, 'recall': 0.532258064516129, 'f1': 0.5840707964601771, 'number': 62}	{'precision': 0.2641509433962264, 'recall': 0.14285714285714285, 'f1': 0.18543046357615894, 'number': 98}	{'precision': 1.0, 'recall': 0.06666666666666667, 'f1': 0.125, 'number': 15}	{'precision': 0.7861715749039693, 'recall': 0.7147846332945286, 'f1': 0.7487804878048779, 'number': 859}	{'precision': 0.3695652173913043, 'recall': 0.3541666666666667, 'f1': 0.3617021276595745, 'number': 48}	{'precision': 0.6571428571428571, 'recall': 0.4423076923076923, 'f1': 0.528735632183908, 'number': 52}	{'precision': 0.7438307873090482, 'recall': 0.5804676753782668, 'f1': 0.652073139325264, 'number': 2181}	{'precision': 0.7777777777777778, 'recall': 0.35, 'f1': 0.48275862068965514, 'number': 20}	{'precision': 0.7, 'recall': 0.7777777777777778, 'f1': 0.7368421052631577, 'number': 9}	0.7208	0.5637	0.6326	0.7030
0.985	7.0	1204	0.7689	{'precision': 0.18181818181818182, 'recall': 0.125, 'f1': 0.14814814814814814, 'number': 16}	{'precision': 0.5111111111111111, 'recall': 0.1885245901639344, 'f1': 0.27544910179640714, 'number': 122}	{'precision': 0.5, 'recall': 0.25, 'f1': 0.3333333333333333, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.75, 'recall': 0.7058823529411765, 'f1': 0.7272727272727272, 'number': 238}	{'precision': 0.8205394190871369, 'recall': 0.6878260869565217, 'f1': 0.7483443708609272, 'number': 1150}	{'precision': 0.7525562372188139, 'recall': 0.629059829059829, 'f1': 0.6852886405959031, 'number': 585}	{'precision': 0.7577092511013216, 'recall': 0.6128266033254157, 'f1': 0.6776099803020356, 'number': 842}	{'precision': 0.7547169811320755, 'recall': 0.6222222222222222, 'f1': 0.682095006090134, 'number': 450}	{'precision': 0.5, 'recall': 0.14583333333333334, 'f1': 0.22580645161290322, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6615384615384615, 'recall': 0.5149700598802395, 'f1': 0.579124579124579, 'number': 167}	{'precision': 0.7246376811594203, 'recall': 0.6097560975609756, 'f1': 0.662251655629139, 'number': 164}	{'precision': 0.5652173913043478, 'recall': 0.3170731707317073, 'f1': 0.40625, 'number': 41}	{'precision': 0.6333333333333333, 'recall': 0.5891472868217055, 'f1': 0.610441767068273, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.7148846960167715, 'recall': 0.6222627737226277, 'f1': 0.6653658536585366, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7759336099585062, 'recall': 0.677536231884058, 'f1': 0.723404255319149, 'number': 276}	{'precision': 0.7857142857142857, 'recall': 0.7857142857142857, 'f1': 0.7857142857142857, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6815286624203821, 'recall': 0.5944444444444444, 'f1': 0.6350148367952522, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.16666666666666666, 'recall': 0.05, 'f1': 0.07692307692307691, 'number': 20}	{'precision': 0.6923076923076923, 'recall': 0.46551724137931033, 'f1': 0.5567010309278351, 'number': 58}	{'precision': 0.5555555555555556, 'recall': 0.35714285714285715, 'f1': 0.43478260869565216, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.46078431372549017, 'recall': 0.27647058823529413, 'f1': 0.34558823529411764, 'number': 170}	{'precision': 0.7198067632850241, 'recall': 0.5654648956356736, 'f1': 0.6333687566418703, 'number': 1581}	{'precision': 0.3888888888888889, 'recall': 0.4666666666666667, 'f1': 0.42424242424242425, 'number': 15}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.6060606060606061, 'recall': 0.2597402597402597, 'f1': 0.3636363636363636, 'number': 77}	{'precision': 0.7125, 'recall': 0.40353982300884955, 'f1': 0.5152542372881357, 'number': 565}	{'precision': 0.8995290423861853, 'recall': 0.8526785714285714, 'f1': 0.8754774637127578, 'number': 672}	{'precision': 0.7674418604651163, 'recall': 0.532258064516129, 'f1': 0.6285714285714286, 'number': 62}	{'precision': 0.3695652173913043, 'recall': 0.17346938775510204, 'f1': 0.2361111111111111, 'number': 98}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 15}	{'precision': 0.8295904887714664, 'recall': 0.7310826542491269, 'f1': 0.7772277227722774, 'number': 859}	{'precision': 0.5384615384615384, 'recall': 0.4375, 'f1': 0.4827586206896552, 'number': 48}	{'precision': 0.5945945945945946, 'recall': 0.4230769230769231, 'f1': 0.49438202247191015, 'number': 52}	{'precision': 0.7517162471395881, 'recall': 0.6024759284731774, 'f1': 0.6688724866378213, 'number': 2181}	{'precision': 0.5263157894736842, 'recall': 0.5, 'f1': 0.5128205128205129, 'number': 20}	{'precision': 0.8571428571428571, 'recall': 0.6666666666666666, 'f1': 0.75, 'number': 9}	0.7523	0.5986	0.6667	0.7320
0.985	8.0	1376	0.7359	{'precision': 0.16666666666666666, 'recall': 0.0625, 'f1': 0.09090909090909091, 'number': 16}	{'precision': 0.5, 'recall': 0.27049180327868855, 'f1': 0.3510638297872341, 'number': 122}	{'precision': 0.42857142857142855, 'recall': 0.25, 'f1': 0.3157894736842105, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.7990867579908676, 'recall': 0.7352941176470589, 'f1': 0.7658643326039388, 'number': 238}	{'precision': 0.8208502024291497, 'recall': 0.7052173913043478, 'f1': 0.7586529466791393, 'number': 1150}	{'precision': 0.8039647577092511, 'recall': 0.6239316239316239, 'f1': 0.7025986525505293, 'number': 585}	{'precision': 0.7885802469135802, 'recall': 0.6068883610451307, 'f1': 0.6859060402684564, 'number': 842}	{'precision': 0.7447916666666666, 'recall': 0.6355555555555555, 'f1': 0.6858513189448441, 'number': 450}	{'precision': 0.5882352941176471, 'recall': 0.20833333333333334, 'f1': 0.3076923076923077, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7089552238805971, 'recall': 0.5688622754491018, 'f1': 0.6312292358803987, 'number': 167}	{'precision': 0.7163120567375887, 'recall': 0.6158536585365854, 'f1': 0.6622950819672132, 'number': 164}	{'precision': 0.64, 'recall': 0.3902439024390244, 'f1': 0.48484848484848486, 'number': 41}	{'precision': 0.6454545454545455, 'recall': 0.5503875968992248, 'f1': 0.5941422594142259, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.7163865546218487, 'recall': 0.6222627737226277, 'f1': 0.666015625, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.757085020242915, 'recall': 0.677536231884058, 'f1': 0.7151051625239007, 'number': 276}	{'precision': 0.8, 'recall': 0.8571428571428571, 'f1': 0.8275862068965518, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.722972972972973, 'recall': 0.5944444444444444, 'f1': 0.6524390243902439, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.42857142857142855, 'recall': 0.15, 'f1': 0.2222222222222222, 'number': 20}	{'precision': 0.7, 'recall': 0.4827586206896552, 'f1': 0.5714285714285714, 'number': 58}	{'precision': 0.5555555555555556, 'recall': 0.35714285714285715, 'f1': 0.43478260869565216, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.6493506493506493, 'recall': 0.29411764705882354, 'f1': 0.4048582995951417, 'number': 170}	{'precision': 0.7053030303030303, 'recall': 0.5888678051865908, 'f1': 0.6418476387452603, 'number': 1581}	{'precision': 0.2692307692307692, 'recall': 0.4666666666666667, 'f1': 0.3414634146341463, 'number': 15}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.5806451612903226, 'recall': 0.23376623376623376, 'f1': 0.33333333333333337, 'number': 77}	{'precision': 0.7016574585635359, 'recall': 0.4495575221238938, 'f1': 0.5480043149946063, 'number': 565}	{'precision': 0.8916030534351145, 'recall': 0.8690476190476191, 'f1': 0.8801808590806329, 'number': 672}	{'precision': 0.6862745098039216, 'recall': 0.5645161290322581, 'f1': 0.6194690265486725, 'number': 62}	{'precision': 0.42857142857142855, 'recall': 0.21428571428571427, 'f1': 0.2857142857142857, 'number': 98}	{'precision': 1.0, 'recall': 0.06666666666666667, 'f1': 0.125, 'number': 15}	{'precision': 0.8326797385620915, 'recall': 0.7415599534342259, 'f1': 0.7844827586206896, 'number': 859}	{'precision': 0.5625, 'recall': 0.375, 'f1': 0.45, 'number': 48}	{'precision': 0.509090909090909, 'recall': 0.5384615384615384, 'f1': 0.5233644859813084, 'number': 52}	{'precision': 0.7893835616438356, 'recall': 0.6341127922971114, 'f1': 0.7032799389778795, 'number': 2181}	{'precision': 0.6428571428571429, 'recall': 0.45, 'f1': 0.5294117647058824, 'number': 20}	{'precision': 0.6666666666666666, 'recall': 0.6666666666666666, 'f1': 0.6666666666666666, 'number': 9}	0.7638	0.6168	0.6825	0.7446
0.7267	9.0	1548	0.7188	{'precision': 0.15384615384615385, 'recall': 0.125, 'f1': 0.13793103448275862, 'number': 16}	{'precision': 0.45588235294117646, 'recall': 0.2540983606557377, 'f1': 0.3263157894736842, 'number': 122}	{'precision': 0.4375, 'recall': 0.2916666666666667, 'f1': 0.35000000000000003, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.7873303167420814, 'recall': 0.7310924369747899, 'f1': 0.7581699346405228, 'number': 238}	{'precision': 0.8137450199203188, 'recall': 0.7104347826086956, 'f1': 0.7585886722376973, 'number': 1150}	{'precision': 0.7775467775467776, 'recall': 0.6393162393162393, 'f1': 0.7016885553470918, 'number': 585}	{'precision': 0.75, 'recall': 0.6377672209026128, 'f1': 0.6893453145057766, 'number': 842}	{'precision': 0.7576530612244898, 'recall': 0.66, 'f1': 0.7054631828978621, 'number': 450}	{'precision': 0.8, 'recall': 0.16666666666666666, 'f1': 0.27586206896551724, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.625, 'recall': 0.5389221556886228, 'f1': 0.5787781350482315, 'number': 167}	{'precision': 0.7724137931034483, 'recall': 0.6829268292682927, 'f1': 0.7249190938511327, 'number': 164}	{'precision': 0.6818181818181818, 'recall': 0.36585365853658536, 'f1': 0.47619047619047616, 'number': 41}	{'precision': 0.6608695652173913, 'recall': 0.5891472868217055, 'f1': 0.6229508196721312, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.7411273486430062, 'recall': 0.6478102189781022, 'f1': 0.691333982473223, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.8151260504201681, 'recall': 0.7028985507246377, 'f1': 0.754863813229572, 'number': 276}	{'precision': 0.8333333333333334, 'recall': 0.7142857142857143, 'f1': 0.7692307692307692, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.6842105263157895, 'recall': 0.5777777777777777, 'f1': 0.6265060240963854, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.14285714285714285, 'recall': 0.05, 'f1': 0.07407407407407408, 'number': 20}	{'precision': 0.5813953488372093, 'recall': 0.43103448275862066, 'f1': 0.49504950495049505, 'number': 58}	{'precision': 0.75, 'recall': 0.42857142857142855, 'f1': 0.5454545454545454, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.46296296296296297, 'recall': 0.29411764705882354, 'f1': 0.3597122302158273, 'number': 170}	{'precision': 0.7357142857142858, 'recall': 0.5863377609108159, 'f1': 0.6525871172122492, 'number': 1581}	{'precision': 0.2608695652173913, 'recall': 0.4, 'f1': 0.31578947368421056, 'number': 15}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.5945945945945946, 'recall': 0.2857142857142857, 'f1': 0.38596491228070173, 'number': 77}	{'precision': 0.6881720430107527, 'recall': 0.45309734513274336, 'f1': 0.5464247598719317, 'number': 565}	{'precision': 0.9017160686427457, 'recall': 0.8601190476190477, 'f1': 0.8804265041888804, 'number': 672}	{'precision': 0.66, 'recall': 0.532258064516129, 'f1': 0.5892857142857142, 'number': 62}	{'precision': 0.39215686274509803, 'recall': 0.20408163265306123, 'f1': 0.26845637583892623, 'number': 98}	{'precision': 1.0, 'recall': 0.06666666666666667, 'f1': 0.125, 'number': 15}	{'precision': 0.8273657289002557, 'recall': 0.7532013969732246, 'f1': 0.7885435709932967, 'number': 859}	{'precision': 0.4489795918367347, 'recall': 0.4583333333333333, 'f1': 0.45360824742268036, 'number': 48}	{'precision': 0.6285714285714286, 'recall': 0.4230769230769231, 'f1': 0.5057471264367815, 'number': 52}	{'precision': 0.7855543113101904, 'recall': 0.6432828977533241, 'f1': 0.7073355180236954, 'number': 2181}	{'precision': 0.6666666666666666, 'recall': 0.4, 'f1': 0.5, 'number': 20}	{'precision': 0.6666666666666666, 'recall': 0.6666666666666666, 'f1': 0.6666666666666666, 'number': 9}	0.7610	0.6245	0.6860	0.7473
0.7267	10.0	1720	0.7012	{'precision': 0.125, 'recall': 0.0625, 'f1': 0.08333333333333333, 'number': 16}	{'precision': 0.45714285714285713, 'recall': 0.26229508196721313, 'f1': 0.3333333333333333, 'number': 122}	{'precision': 0.42857142857142855, 'recall': 0.25, 'f1': 0.3157894736842105, 'number': 24}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.7857142857142857, 'recall': 0.7394957983193278, 'f1': 0.7619047619047619, 'number': 238}	{'precision': 0.8278606965174129, 'recall': 0.7234782608695652, 'f1': 0.7721577726218097, 'number': 1150}	{'precision': 0.7834008097165992, 'recall': 0.6615384615384615, 'f1': 0.7173308619091752, 'number': 585}	{'precision': 0.7666666666666667, 'recall': 0.6282660332541568, 'f1': 0.6906005221932116, 'number': 842}	{'precision': 0.8067885117493473, 'recall': 0.6866666666666666, 'f1': 0.7418967587034814, 'number': 450}	{'precision': 0.7, 'recall': 0.14583333333333334, 'f1': 0.2413793103448276, 'number': 48}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7, 'recall': 0.5868263473053892, 'f1': 0.6384364820846905, 'number': 167}	{'precision': 0.7191780821917808, 'recall': 0.6402439024390244, 'f1': 0.6774193548387097, 'number': 164}	{'precision': 0.6956521739130435, 'recall': 0.3902439024390244, 'f1': 0.5000000000000001, 'number': 41}	{'precision': 0.6581196581196581, 'recall': 0.5968992248062015, 'f1': 0.6260162601626015, 'number': 129}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.75, 'recall': 0.6624087591240876, 'f1': 0.7034883720930232, 'number': 548}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.8075313807531381, 'recall': 0.6992753623188406, 'f1': 0.7495145631067962, 'number': 276}	{'precision': 0.7692307692307693, 'recall': 0.7142857142857143, 'f1': 0.7407407407407408, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.7133333333333334, 'recall': 0.5944444444444444, 'f1': 0.6484848484848484, 'number': 180}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 7}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.2, 'recall': 0.07142857142857142, 'f1': 0.10526315789473682, 'number': 28}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 4}	{'precision': 0.25, 'recall': 0.1, 'f1': 0.14285714285714288, 'number': 20}	{'precision': 0.6190476190476191, 'recall': 0.4482758620689655, 'f1': 0.52, 'number': 58}	{'precision': 0.5, 'recall': 0.35714285714285715, 'f1': 0.41666666666666663, 'number': 14}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.5185185185185185, 'recall': 0.32941176470588235, 'f1': 0.40287769784172656, 'number': 170}	{'precision': 0.7323619631901841, 'recall': 0.6040480708412397, 'f1': 0.6620450606585788, 'number': 1581}	{'precision': 0.3888888888888889, 'recall': 0.4666666666666667, 'f1': 0.42424242424242425, 'number': 15}	{'precision': 0.5, 'recall': 1.0, 'f1': 0.6666666666666666, 'number': 1}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 1}	{'precision': 0.631578947368421, 'recall': 0.3116883116883117, 'f1': 0.41739130434782606, 'number': 77}	{'precision': 0.6863753213367609, 'recall': 0.4725663716814159, 'f1': 0.559748427672956, 'number': 565}	{'precision': 0.9019908116385911, 'recall': 0.8764880952380952, 'f1': 0.8890566037735849, 'number': 672}	{'precision': 0.6346153846153846, 'recall': 0.532258064516129, 'f1': 0.5789473684210527, 'number': 62}	{'precision': 0.39622641509433965, 'recall': 0.21428571428571427, 'f1': 0.2781456953642384, 'number': 98}	{'precision': 0.5, 'recall': 0.06666666666666667, 'f1': 0.11764705882352941, 'number': 15}	{'precision': 0.8242730720606827, 'recall': 0.7590221187427241, 'f1': 0.7903030303030303, 'number': 859}	{'precision': 0.5217391304347826, 'recall': 0.5, 'f1': 0.5106382978723404, 'number': 48}	{'precision': 0.6097560975609756, 'recall': 0.4807692307692308, 'f1': 0.5376344086021505, 'number': 52}	{'precision': 0.8087492989343803, 'recall': 0.661164603392939, 'f1': 0.727547931382442, 'number': 2181}	{'precision': 0.5714285714285714, 'recall': 0.4, 'f1': 0.47058823529411764, 'number': 20}	{'precision': 0.6363636363636364, 'recall': 0.7777777777777778, 'f1': 0.7000000000000001, 'number': 9}	0.7715	0.6383	0.6986	0.7559

Framework versions

• Transformers 4.44.2
• Pytorch 2.4.1+cu121
• Datasets 3.0.1
• Tokenizers 0.19.1