bert-large-cased_deprel

This model is a fine-tuned version of bert-large-cased on the universal_dependencies dataset. It achieves the following results on the evaluation set:

• Loss: 0.4729
• : {'precision': 0.9148264984227129, 'recall': 0.8787878787878788, 'f1': 0.8964451313755796, 'number': 330}
• Arataxis: {'precision': 0.5659340659340659, 'recall': 0.42916666666666664, 'f1': 0.48815165876777245, 'number': 240}
• Ark: {'precision': 0.9020356234096693, 'recall': 0.88625, 'f1': 0.8940731399747793, 'number': 800}
• Ase: {'precision': 0.921038961038961, 'recall': 0.8940998487140696, 'f1': 0.9073694984646877, 'number': 1983}
• Bj: {'precision': 0.9068376068376068, 'recall': 0.8668300653594772, 'f1': 0.8863826232247285, 'number': 1224}
• Bl: {'precision': 0.843530591775326, 'recall': 0.81256038647343, 'f1': 0.8277559055118109, 'number': 1035}
• Bl:npmod: {'precision': 0.5151515151515151, 'recall': 0.3617021276595745, 'f1': 0.42500000000000004, 'number': 47}
• Bl:tmod: {'precision': 0.7755102040816326, 'recall': 0.5757575757575758, 'f1': 0.6608695652173914, 'number': 66}
• C: {'precision': 0.9175531914893617, 'recall': 0.8767471410419314, 'f1': 0.8966861598440546, 'number': 787}
• C:preconj: {'precision': 0.8888888888888888, 'recall': 0.5714285714285714, 'f1': 0.6956521739130435, 'number': 14}
• Cl: {'precision': 0.7215189873417721, 'recall': 0.6867469879518072, 'f1': 0.7037037037037036, 'number': 166}
• Cl:relcl: {'precision': 0.7945205479452054, 'recall': 0.7631578947368421, 'f1': 0.7785234899328859, 'number': 228}
• Comp: {'precision': 0.8314176245210728, 'recall': 0.7469879518072289, 'f1': 0.7869446962828649, 'number': 581}
• Dvcl: {'precision': 0.7928176795580111, 'recall': 0.7863013698630137, 'f1': 0.7895460797799174, 'number': 365}
• Dvmod: {'precision': 0.8616071428571429, 'recall': 0.8219761499148212, 'f1': 0.8413251961639059, 'number': 1174}
• Ep: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}
• Eparandum: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}
• Et: {'precision': 0.938167509836987, 'recall': 0.9175371083012644, 'f1': 0.9277376320177877, 'number': 1819}
• Et:predet: {'precision': 0.75, 'recall': 0.7142857142857143, 'f1': 0.7317073170731706, 'number': 21}
• Iscourse: {'precision': 0.8842105263157894, 'recall': 0.7058823529411765, 'f1': 0.7850467289719626, 'number': 119}
• Ist: {'precision': 0.20930232558139536, 'recall': 0.1232876712328767, 'f1': 0.15517241379310345, 'number': 73}
• Ixed: {'precision': 0.8604651162790697, 'recall': 0.6981132075471698, 'f1': 0.7708333333333334, 'number': 53}
• Lat: {'precision': 0.797752808988764, 'recall': 0.7675675675675676, 'f1': 0.7823691460055096, 'number': 185}
• Lat:foreign: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}
• Mod: {'precision': 0.8357102110667427, 'recall': 0.7846813069094805, 'f1': 0.8093922651933702, 'number': 1867}
• Mod:npmod: {'precision': 0.5, 'recall': 0.4444444444444444, 'f1': 0.47058823529411764, 'number': 9}
• Mod:poss: {'precision': 0.9192708333333334, 'recall': 0.9121447028423773, 'f1': 0.9156939040207522, 'number': 387}
• Mod:tmod: {'precision': 0.8636363636363636, 'recall': 0.59375, 'f1': 0.7037037037037037, 'number': 32}
• Obj: {'precision': 0.8095238095238095, 'recall': 0.7391304347826086, 'f1': 0.7727272727272727, 'number': 46}
• Ocative: {'precision': 0.7894736842105263, 'recall': 0.7142857142857143, 'f1': 0.7500000000000001, 'number': 21}
• Oeswith: {'precision': 0.375, 'recall': 0.16666666666666666, 'f1': 0.23076923076923078, 'number': 18}
• Ompound: {'precision': 0.7766990291262136, 'recall': 0.7390300230946882, 'f1': 0.7573964497041421, 'number': 866}
• Ompound:prt: {'precision': 0.7464788732394366, 'recall': 0.7162162162162162, 'f1': 0.7310344827586208, 'number': 74}
• Onj: {'precision': 0.8312958435207825, 'recall': 0.7439824945295405, 'f1': 0.7852193995381063, 'number': 914}
• Oot: {'precision': 0.9344758064516129, 'recall': 0.926073926073926, 'f1': 0.9302558956347214, 'number': 2002}
• Op: {'precision': 0.9161073825503355, 'recall': 0.9207419898819561, 'f1': 0.9184188393608074, 'number': 593}
• Ppos: {'precision': 0.6090225563909775, 'recall': 0.4764705882352941, 'f1': 0.5346534653465347, 'number': 170}
• Rphan: {'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}
• Subj: {'precision': 0.9146341463414634, 'recall': 0.9031610637230306, 'f1': 0.9088613986367079, 'number': 1993}
• Subj:pass: {'precision': 0.8472222222222222, 'recall': 0.7922077922077922, 'f1': 0.8187919463087249, 'number': 154}
• Ummod: {'precision': 0.796, 'recall': 0.7397769516728625, 'f1': 0.7668593448940271, 'number': 269}
• Unct: {'precision': 0.9247739602169982, 'recall': 0.8706162751106571, 'f1': 0.8968782883198877, 'number': 2937}
• Ux: {'precision': 0.9101123595505618, 'recall': 0.8925619834710744, 'f1': 0.9012517385257302, 'number': 726}
• Ux:pass: {'precision': 0.8679245283018868, 'recall': 0.8625, 'f1': 0.8652037617554859, 'number': 160}
• Xpl: {'precision': 0.8589743589743589, 'recall': 0.7701149425287356, 'f1': 0.8121212121212121, 'number': 87}
• Overall Precision: 0.8826
• Overall Recall: 0.8414
• Overall F1: 0.8615
• Overall Accuracy: 0.8786

Model description

More information needed

Intended uses & limitations

More information needed

Training and evaluation data

More information needed

Training procedure

Training hyperparameters

The following hyperparameters were used during training:

• learning_rate: 5e-05
• train_batch_size: 32
• eval_batch_size: 8
• seed: 42
• optimizer: Adam with betas=(0.9,0.999) and epsilon=1e-08
• lr_scheduler_type: linear
• num_epochs: 10

Training results

Training Loss	Epoch	Step	Validation Loss		Arataxis	Ark	Ase	Bj	Bl	Bl:npmod	Bl:tmod	C	C:preconj	Cl	Cl:relcl	Comp	Dvcl	Dvmod	Ep	Eparandum	Et	Et:predet	Iscourse	Ist	Ixed	Lat	Lat:foreign	Mod	Mod:npmod	Mod:poss	Mod:tmod	Obj	Ocative	Oeswith	Ompound	Ompound:prt	Onj	Oot	Op	Ppos	Rphan	Subj	Subj:pass	Ummod	Unct	Ux	Ux:pass	Xpl	Overall Precision	Overall Recall	Overall F1	Overall Accuracy
No log	1.0	392	0.8015	{'precision': 0.8152610441767069, 'recall': 0.6151515151515151, 'f1': 0.701208981001727, 'number': 330}	{'precision': 0.5, 'recall': 0.04583333333333333, 'f1': 0.08396946564885496, 'number': 240}	{'precision': 0.7857142857142857, 'recall': 0.715, 'f1': 0.7486910994764397, 'number': 800}	{'precision': 0.7545565006075334, 'recall': 0.6263237518910741, 'f1': 0.6844860843207495, 'number': 1983}	{'precision': 0.7962226640159046, 'recall': 0.6544117647058824, 'f1': 0.7183856502242153, 'number': 1224}	{'precision': 0.7480519480519481, 'recall': 0.5565217391304348, 'f1': 0.6382271468144044, 'number': 1035}	{'precision': 0.7333333333333333, 'recall': 0.23404255319148937, 'f1': 0.3548387096774194, 'number': 47}	{'precision': 0.7142857142857143, 'recall': 0.3787878787878788, 'f1': 0.49504950495049505, 'number': 66}	{'precision': 0.7434715821812596, 'recall': 0.6149936467598475, 'f1': 0.6731571627260083, 'number': 787}	{'precision': 1.0, 'recall': 0.42857142857142855, 'f1': 0.6, 'number': 14}	{'precision': 0.7166666666666667, 'recall': 0.5180722891566265, 'f1': 0.6013986013986015, 'number': 166}	{'precision': 0.640625, 'recall': 0.5394736842105263, 'f1': 0.5857142857142857, 'number': 228}	{'precision': 0.7794117647058824, 'recall': 0.5473321858864028, 'f1': 0.6430738119312437, 'number': 581}	{'precision': 0.6707692307692308, 'recall': 0.5972602739726027, 'f1': 0.6318840579710145, 'number': 365}	{'precision': 0.7264618434093162, 'recall': 0.6243611584327087, 'f1': 0.6715529088410445, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.8278102664067576, 'recall': 0.7003848268279275, 'f1': 0.7587849910661107, 'number': 1819}	{'precision': 0.875, 'recall': 0.3333333333333333, 'f1': 0.48275862068965514, 'number': 21}	{'precision': 0.7702702702702703, 'recall': 0.4789915966386555, 'f1': 0.5906735751295337, 'number': 119}	{'precision': 0.15789473684210525, 'recall': 0.0410958904109589, 'f1': 0.06521739130434782, 'number': 73}	{'precision': 0.7142857142857143, 'recall': 0.2830188679245283, 'f1': 0.4054054054054054, 'number': 53}	{'precision': 0.6148648648648649, 'recall': 0.4918918918918919, 'f1': 0.5465465465465466, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.6834862385321101, 'recall': 0.5586502410283878, 'f1': 0.6147951665193044, 'number': 1867}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 9}	{'precision': 0.7071823204419889, 'recall': 0.661498708010336, 'f1': 0.6835781041388518, 'number': 387}	{'precision': 1.0, 'recall': 0.46875, 'f1': 0.6382978723404256, 'number': 32}	{'precision': 0.8076923076923077, 'recall': 0.45652173913043476, 'f1': 0.5833333333333333, 'number': 46}	{'precision': 0.8333333333333334, 'recall': 0.23809523809523808, 'f1': 0.37037037037037035, 'number': 21}	{'precision': 0.5, 'recall': 0.05555555555555555, 'f1': 0.09999999999999999, 'number': 18}	{'precision': 0.5925925925925926, 'recall': 0.48036951501154734, 'f1': 0.5306122448979592, 'number': 866}	{'precision': 0.7647058823529411, 'recall': 0.35135135135135137, 'f1': 0.48148148148148157, 'number': 74}	{'precision': 0.6415094339622641, 'recall': 0.48358862144420134, 'f1': 0.5514660012476605, 'number': 914}	{'precision': 0.8839662447257384, 'recall': 0.8371628371628371, 'f1': 0.8599281682914315, 'number': 2002}	{'precision': 0.7643097643097643, 'recall': 0.7655986509274874, 'f1': 0.7649536647009267, 'number': 593}	{'precision': 0.4482758620689655, 'recall': 0.07647058823529412, 'f1': 0.13065326633165833, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.8490672696438666, 'recall': 0.7536377320622177, 'f1': 0.7985114300903774, 'number': 1993}	{'precision': 0.8627450980392157, 'recall': 0.5714285714285714, 'f1': 0.6875, 'number': 154}	{'precision': 0.7282608695652174, 'recall': 0.49814126394052044, 'f1': 0.5916114790286976, 'number': 269}	{'precision': 0.7371769383697813, 'recall': 0.6312563840653729, 'f1': 0.6801173881144534, 'number': 2937}	{'precision': 0.772795216741405, 'recall': 0.7121212121212122, 'f1': 0.7412186379928316, 'number': 726}	{'precision': 0.7642276422764228, 'recall': 0.5875, 'f1': 0.6643109540636043, 'number': 160}	{'precision': 0.875, 'recall': 0.5632183908045977, 'f1': 0.6853146853146854, 'number': 87}	0.7620	0.6273	0.6881	0.7320
1.3742	2.0	784	0.6053	{'precision': 0.7836065573770492, 'recall': 0.7242424242424242, 'f1': 0.7527559055118112, 'number': 330}	{'precision': 0.5094339622641509, 'recall': 0.225, 'f1': 0.31213872832369943, 'number': 240}	{'precision': 0.7971758664955071, 'recall': 0.77625, 'f1': 0.7865737808739709, 'number': 800}	{'precision': 0.8470780993992354, 'recall': 0.7821482602118003, 'f1': 0.8133193497640272, 'number': 1983}	{'precision': 0.7951096121416527, 'recall': 0.7704248366013072, 'f1': 0.7825726141078838, 'number': 1224}	{'precision': 0.7855530474040632, 'recall': 0.672463768115942, 'f1': 0.7246225923997918, 'number': 1035}	{'precision': 0.6, 'recall': 0.2553191489361702, 'f1': 0.3582089552238805, 'number': 47}	{'precision': 0.6666666666666666, 'recall': 0.48484848484848486, 'f1': 0.5614035087719298, 'number': 66}	{'precision': 0.8068027210884354, 'recall': 0.7534942820838628, 'f1': 0.7792378449408673, 'number': 787}	{'precision': 0.8888888888888888, 'recall': 0.5714285714285714, 'f1': 0.6956521739130435, 'number': 14}	{'precision': 0.8, 'recall': 0.5542168674698795, 'f1': 0.6548042704626335, 'number': 166}	{'precision': 0.7346938775510204, 'recall': 0.631578947368421, 'f1': 0.6792452830188679, 'number': 228}	{'precision': 0.7484909456740443, 'recall': 0.6402753872633391, 'f1': 0.6901669758812616, 'number': 581}	{'precision': 0.7037037037037037, 'recall': 0.6767123287671233, 'f1': 0.6899441340782123, 'number': 365}	{'precision': 0.7826904985888994, 'recall': 0.7086882453151618, 'f1': 0.7438533750558785, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.8870292887029289, 'recall': 0.8158328752061572, 'f1': 0.8499427262313861, 'number': 1819}	{'precision': 0.6923076923076923, 'recall': 0.42857142857142855, 'f1': 0.5294117647058824, 'number': 21}	{'precision': 0.7349397590361446, 'recall': 0.5126050420168067, 'f1': 0.6039603960396039, 'number': 119}	{'precision': 0.23333333333333334, 'recall': 0.0958904109589041, 'f1': 0.13592233009708737, 'number': 73}	{'precision': 0.7586206896551724, 'recall': 0.41509433962264153, 'f1': 0.5365853658536586, 'number': 53}	{'precision': 0.6586826347305389, 'recall': 0.5945945945945946, 'f1': 0.625, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.7316239316239316, 'recall': 0.6877343331547938, 'f1': 0.7090005521811155, 'number': 1867}	{'precision': 0.5, 'recall': 0.1111111111111111, 'f1': 0.1818181818181818, 'number': 9}	{'precision': 0.7742782152230971, 'recall': 0.7622739018087855, 'f1': 0.7682291666666667, 'number': 387}	{'precision': 1.0, 'recall': 0.46875, 'f1': 0.6382978723404256, 'number': 32}	{'precision': 0.8235294117647058, 'recall': 0.6086956521739131, 'f1': 0.7, 'number': 46}	{'precision': 0.6923076923076923, 'recall': 0.42857142857142855, 'f1': 0.5294117647058824, 'number': 21}	{'precision': 0.4, 'recall': 0.2222222222222222, 'f1': 0.2857142857142857, 'number': 18}	{'precision': 0.6903485254691689, 'recall': 0.5946882217090069, 'f1': 0.6389578163771712, 'number': 866}	{'precision': 0.7192982456140351, 'recall': 0.5540540540540541, 'f1': 0.6259541984732825, 'number': 74}	{'precision': 0.7952522255192879, 'recall': 0.5864332603938731, 'f1': 0.6750629722921915, 'number': 914}	{'precision': 0.8905622489959839, 'recall': 0.8861138861138861, 'f1': 0.8883324987481221, 'number': 2002}	{'precision': 0.8078175895765473, 'recall': 0.836424957841484, 'f1': 0.8218724109362056, 'number': 593}	{'precision': 0.504950495049505, 'recall': 0.3, 'f1': 0.37638376383763833, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.8797606093579978, 'recall': 0.8113396889111891, 'f1': 0.8441660140955364, 'number': 1993}	{'precision': 0.8761061946902655, 'recall': 0.6428571428571429, 'f1': 0.7415730337078651, 'number': 154}	{'precision': 0.6872246696035242, 'recall': 0.5799256505576208, 'f1': 0.629032258064516, 'number': 269}	{'precision': 0.8976377952755905, 'recall': 0.7763023493360572, 'f1': 0.832572576227862, 'number': 2937}	{'precision': 0.8609077598828697, 'recall': 0.8099173553719008, 'f1': 0.8346344925479064, 'number': 726}	{'precision': 0.7746478873239436, 'recall': 0.6875, 'f1': 0.728476821192053, 'number': 160}	{'precision': 0.8840579710144928, 'recall': 0.7011494252873564, 'f1': 0.782051282051282, 'number': 87}	0.8175	0.7339	0.7734	0.8006
0.6817	3.0	1176	0.5181	{'precision': 0.862876254180602, 'recall': 0.7818181818181819, 'f1': 0.8203497615262321, 'number': 330}	{'precision': 0.6083916083916084, 'recall': 0.3625, 'f1': 0.4543080939947781, 'number': 240}	{'precision': 0.8657289002557544, 'recall': 0.84625, 'f1': 0.8558786346396965, 'number': 800}	{'precision': 0.8540106951871658, 'recall': 0.805345436207766, 'f1': 0.8289644432909421, 'number': 1983}	{'precision': 0.8601036269430051, 'recall': 0.8137254901960784, 'f1': 0.836272040302267, 'number': 1224}	{'precision': 0.8063829787234043, 'recall': 0.7323671497584541, 'f1': 0.7675949367088607, 'number': 1035}	{'precision': 0.631578947368421, 'recall': 0.2553191489361702, 'f1': 0.3636363636363636, 'number': 47}	{'precision': 0.723404255319149, 'recall': 0.5151515151515151, 'f1': 0.6017699115044248, 'number': 66}	{'precision': 0.875, 'recall': 0.7827191867852605, 'f1': 0.8262910798122066, 'number': 787}	{'precision': 0.875, 'recall': 0.5, 'f1': 0.6363636363636364, 'number': 14}	{'precision': 0.7105263157894737, 'recall': 0.6506024096385542, 'f1': 0.679245283018868, 'number': 166}	{'precision': 0.8088235294117647, 'recall': 0.7236842105263158, 'f1': 0.763888888888889, 'number': 228}	{'precision': 0.8188976377952756, 'recall': 0.7160068846815835, 'f1': 0.7640036730945821, 'number': 581}	{'precision': 0.7235772357723578, 'recall': 0.7315068493150685, 'f1': 0.7275204359673024, 'number': 365}	{'precision': 0.8235294117647058, 'recall': 0.7512776831345827, 'f1': 0.7857461024498886, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.9107871720116618, 'recall': 0.8587135788894997, 'f1': 0.8839841539332202, 'number': 1819}	{'precision': 1.0, 'recall': 0.47619047619047616, 'f1': 0.6451612903225806, 'number': 21}	{'precision': 0.7684210526315789, 'recall': 0.6134453781512605, 'f1': 0.6822429906542057, 'number': 119}	{'precision': 0.25925925925925924, 'recall': 0.0958904109589041, 'f1': 0.14, 'number': 73}	{'precision': 0.725, 'recall': 0.5471698113207547, 'f1': 0.6236559139784946, 'number': 53}	{'precision': 0.7239263803680982, 'recall': 0.6378378378378379, 'f1': 0.67816091954023, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.7970238095238096, 'recall': 0.7171933583288699, 'f1': 0.7550042289258528, 'number': 1867}	{'precision': 0.75, 'recall': 0.3333333333333333, 'f1': 0.46153846153846156, 'number': 9}	{'precision': 0.9050279329608939, 'recall': 0.8372093023255814, 'f1': 0.8697986577181208, 'number': 387}	{'precision': 0.7142857142857143, 'recall': 0.46875, 'f1': 0.5660377358490566, 'number': 32}	{'precision': 0.8484848484848485, 'recall': 0.6086956521739131, 'f1': 0.7088607594936709, 'number': 46}	{'precision': 0.8666666666666667, 'recall': 0.6190476190476191, 'f1': 0.7222222222222222, 'number': 21}	{'precision': 0.2727272727272727, 'recall': 0.16666666666666666, 'f1': 0.20689655172413793, 'number': 18}	{'precision': 0.7044025157232704, 'recall': 0.6466512702078522, 'f1': 0.674292594822396, 'number': 866}	{'precision': 0.7540983606557377, 'recall': 0.6216216216216216, 'f1': 0.6814814814814815, 'number': 74}	{'precision': 0.8, 'recall': 0.6652078774617067, 'f1': 0.7264038231780168, 'number': 914}	{'precision': 0.9287909836065574, 'recall': 0.9055944055944056, 'f1': 0.9170460293373799, 'number': 2002}	{'precision': 0.9147826086956522, 'recall': 0.8870151770657673, 'f1': 0.9006849315068493, 'number': 593}	{'precision': 0.49624060150375937, 'recall': 0.38823529411764707, 'f1': 0.4356435643564356, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.8839979285344381, 'recall': 0.8564977420973406, 'f1': 0.8700305810397554, 'number': 1993}	{'precision': 0.8686131386861314, 'recall': 0.7727272727272727, 'f1': 0.8178694158075601, 'number': 154}	{'precision': 0.7935779816513762, 'recall': 0.6431226765799256, 'f1': 0.7104722792607803, 'number': 269}	{'precision': 0.8617375231053604, 'recall': 0.7936670071501533, 'f1': 0.826302729528536, 'number': 2937}	{'precision': 0.9171597633136095, 'recall': 0.8539944903581267, 'f1': 0.8844507845934378, 'number': 726}	{'precision': 0.847682119205298, 'recall': 0.8, 'f1': 0.8231511254019291, 'number': 160}	{'precision': 0.8939393939393939, 'recall': 0.6781609195402298, 'f1': 0.7712418300653594, 'number': 87}	0.8476	0.7773	0.8109	0.8367
0.4823	4.0	1568	0.4996	{'precision': 0.832807570977918, 'recall': 0.8, 'f1': 0.8160741885625967, 'number': 330}	{'precision': 0.6014492753623188, 'recall': 0.3458333333333333, 'f1': 0.43915343915343913, 'number': 240}	{'precision': 0.8641655886157826, 'recall': 0.835, 'f1': 0.849332485696122, 'number': 800}	{'precision': 0.8839957035445757, 'recall': 0.8300554715078164, 'f1': 0.8561768530559167, 'number': 1983}	{'precision': 0.8368376787216149, 'recall': 0.8129084967320261, 'f1': 0.8246995441359304, 'number': 1224}	{'precision': 0.8042381432896064, 'recall': 0.770048309178744, 'f1': 0.7867719644619942, 'number': 1035}	{'precision': 0.56, 'recall': 0.2978723404255319, 'f1': 0.3888888888888889, 'number': 47}	{'precision': 0.7708333333333334, 'recall': 0.5606060606060606, 'f1': 0.6491228070175438, 'number': 66}	{'precision': 0.8895027624309392, 'recall': 0.818297331639136, 'f1': 0.8524156187954998, 'number': 787}	{'precision': 0.8888888888888888, 'recall': 0.5714285714285714, 'f1': 0.6956521739130435, 'number': 14}	{'precision': 0.7368421052631579, 'recall': 0.6746987951807228, 'f1': 0.7044025157232704, 'number': 166}	{'precision': 0.6968325791855203, 'recall': 0.6754385964912281, 'f1': 0.6859688195991092, 'number': 228}	{'precision': 0.8450106157112527, 'recall': 0.685025817555938, 'f1': 0.7566539923954372, 'number': 581}	{'precision': 0.8011695906432749, 'recall': 0.7506849315068493, 'f1': 0.7751060820367751, 'number': 365}	{'precision': 0.8104693140794224, 'recall': 0.7649063032367973, 'f1': 0.7870289219982471, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.9212962962962963, 'recall': 0.8752061572292469, 'f1': 0.8976599943614322, 'number': 1819}	{'precision': 0.8, 'recall': 0.5714285714285714, 'f1': 0.6666666666666666, 'number': 21}	{'precision': 0.7735849056603774, 'recall': 0.6890756302521008, 'f1': 0.7288888888888888, 'number': 119}	{'precision': 0.1590909090909091, 'recall': 0.0958904109589041, 'f1': 0.11965811965811964, 'number': 73}	{'precision': 0.8787878787878788, 'recall': 0.5471698113207547, 'f1': 0.6744186046511628, 'number': 53}	{'precision': 0.7215909090909091, 'recall': 0.6864864864864865, 'f1': 0.7036011080332409, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.798951048951049, 'recall': 0.7343331547937868, 'f1': 0.7652804912084844, 'number': 1867}	{'precision': 0.5, 'recall': 0.3333333333333333, 'f1': 0.4, 'number': 9}	{'precision': 0.9016393442622951, 'recall': 0.8527131782945736, 'f1': 0.8764940239043824, 'number': 387}	{'precision': 0.8947368421052632, 'recall': 0.53125, 'f1': 0.6666666666666666, 'number': 32}	{'precision': 0.8333333333333334, 'recall': 0.6521739130434783, 'f1': 0.7317073170731708, 'number': 46}	{'precision': 0.7777777777777778, 'recall': 0.6666666666666666, 'f1': 0.717948717948718, 'number': 21}	{'precision': 0.3076923076923077, 'recall': 0.2222222222222222, 'f1': 0.2580645161290323, 'number': 18}	{'precision': 0.7146282973621103, 'recall': 0.6882217090069284, 'f1': 0.7011764705882353, 'number': 866}	{'precision': 0.6582278481012658, 'recall': 0.7027027027027027, 'f1': 0.6797385620915033, 'number': 74}	{'precision': 0.8190224570673712, 'recall': 0.6783369803063457, 'f1': 0.7420706163973668, 'number': 914}	{'precision': 0.9070114370959722, 'recall': 0.9110889110889111, 'f1': 0.9090456017941689, 'number': 2002}	{'precision': 0.8694214876033057, 'recall': 0.8870151770657673, 'f1': 0.8781302170283807, 'number': 593}	{'precision': 0.5689655172413793, 'recall': 0.38823529411764707, 'f1': 0.4615384615384615, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.9056902002107482, 'recall': 0.8625188158554943, 'f1': 0.8835774865073246, 'number': 1993}	{'precision': 0.8445945945945946, 'recall': 0.8116883116883117, 'f1': 0.8278145695364238, 'number': 154}	{'precision': 0.7675438596491229, 'recall': 0.6505576208178439, 'f1': 0.704225352112676, 'number': 269}	{'precision': 0.9054205607476635, 'recall': 0.8246510044262854, 'f1': 0.8631503920171062, 'number': 2937}	{'precision': 0.8890489913544669, 'recall': 0.849862258953168, 'f1': 0.8690140845070423, 'number': 726}	{'precision': 0.7804878048780488, 'recall': 0.8, 'f1': 0.7901234567901235, 'number': 160}	{'precision': 0.8857142857142857, 'recall': 0.7126436781609196, 'f1': 0.7898089171974522, 'number': 87}	0.8524	0.7928	0.8216	0.8441
0.4823	5.0	1960	0.4857	{'precision': 0.9547038327526133, 'recall': 0.8303030303030303, 'f1': 0.8881685575364668, 'number': 330}	{'precision': 0.6234567901234568, 'recall': 0.42083333333333334, 'f1': 0.5024875621890548, 'number': 240}	{'precision': 0.8720200752823086, 'recall': 0.86875, 'f1': 0.8703819661865998, 'number': 800}	{'precision': 0.9048122686409307, 'recall': 0.8628340897629854, 'f1': 0.8833247289623128, 'number': 1983}	{'precision': 0.8613617719442166, 'recall': 0.8578431372549019, 'f1': 0.8595988538681948, 'number': 1224}	{'precision': 0.814299900695134, 'recall': 0.7922705314009661, 'f1': 0.8031341821743387, 'number': 1035}	{'precision': 0.5714285714285714, 'recall': 0.3404255319148936, 'f1': 0.4266666666666666, 'number': 47}	{'precision': 0.7272727272727273, 'recall': 0.6060606060606061, 'f1': 0.6611570247933883, 'number': 66}	{'precision': 0.8885906040268456, 'recall': 0.841168996188056, 'f1': 0.8642297650130548, 'number': 787}	{'precision': 0.8888888888888888, 'recall': 0.5714285714285714, 'f1': 0.6956521739130435, 'number': 14}	{'precision': 0.7655172413793103, 'recall': 0.6686746987951807, 'f1': 0.7138263665594855, 'number': 166}	{'precision': 0.8375634517766497, 'recall': 0.7236842105263158, 'f1': 0.7764705882352941, 'number': 228}	{'precision': 0.801094890510949, 'recall': 0.7555938037865749, 'f1': 0.7776793622674935, 'number': 581}	{'precision': 0.7878787878787878, 'recall': 0.7835616438356164, 'f1': 0.7857142857142857, 'number': 365}	{'precision': 0.8602941176470589, 'recall': 0.797274275979557, 'f1': 0.8275862068965517, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.9497690531177829, 'recall': 0.9043430456294668, 'f1': 0.9264995775837792, 'number': 1819}	{'precision': 0.5833333333333334, 'recall': 0.6666666666666666, 'f1': 0.6222222222222222, 'number': 21}	{'precision': 0.8152173913043478, 'recall': 0.6302521008403361, 'f1': 0.7109004739336493, 'number': 119}	{'precision': 0.13513513513513514, 'recall': 0.0684931506849315, 'f1': 0.09090909090909091, 'number': 73}	{'precision': 0.8536585365853658, 'recall': 0.660377358490566, 'f1': 0.7446808510638298, 'number': 53}	{'precision': 0.8012048192771084, 'recall': 0.7189189189189189, 'f1': 0.7578347578347578, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.8243478260869566, 'recall': 0.7616497054097483, 'f1': 0.7917594654788419, 'number': 1867}	{'precision': 0.6, 'recall': 0.3333333333333333, 'f1': 0.42857142857142855, 'number': 9}	{'precision': 0.9067357512953368, 'recall': 0.9043927648578811, 'f1': 0.9055627425614489, 'number': 387}	{'precision': 0.72, 'recall': 0.5625, 'f1': 0.631578947368421, 'number': 32}	{'precision': 0.8648648648648649, 'recall': 0.6956521739130435, 'f1': 0.7710843373493975, 'number': 46}	{'precision': 0.8125, 'recall': 0.6190476190476191, 'f1': 0.7027027027027026, 'number': 21}	{'precision': 0.5, 'recall': 0.2222222222222222, 'f1': 0.30769230769230765, 'number': 18}	{'precision': 0.7515605493133583, 'recall': 0.6951501154734411, 'f1': 0.7222555488902218, 'number': 866}	{'precision': 0.6477272727272727, 'recall': 0.7702702702702703, 'f1': 0.7037037037037036, 'number': 74}	{'precision': 0.7920673076923077, 'recall': 0.7210065645514223, 'f1': 0.7548682703321878, 'number': 914}	{'precision': 0.9341772151898734, 'recall': 0.9215784215784216, 'f1': 0.9278350515463917, 'number': 2002}	{'precision': 0.9008264462809917, 'recall': 0.9190556492411467, 'f1': 0.9098497495826378, 'number': 593}	{'precision': 0.49696969696969695, 'recall': 0.4823529411764706, 'f1': 0.4895522388059702, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.8955375253549696, 'recall': 0.8861013547415956, 'f1': 0.8907944514501892, 'number': 1993}	{'precision': 0.9104477611940298, 'recall': 0.7922077922077922, 'f1': 0.8472222222222222, 'number': 154}	{'precision': 0.8251121076233184, 'recall': 0.6840148698884758, 'f1': 0.7479674796747967, 'number': 269}	{'precision': 0.9126925898752751, 'recall': 0.8471229145386449, 'f1': 0.8786862087232915, 'number': 2937}	{'precision': 0.9273255813953488, 'recall': 0.8787878787878788, 'f1': 0.9024045261669024, 'number': 726}	{'precision': 0.875, 'recall': 0.83125, 'f1': 0.8525641025641026, 'number': 160}	{'precision': 0.9054054054054054, 'recall': 0.7701149425287356, 'f1': 0.8322981366459626, 'number': 87}	0.8703	0.8216	0.8452	0.8654
0.365	6.0	2352	0.4737	{'precision': 0.9145569620253164, 'recall': 0.8757575757575757, 'f1': 0.8947368421052632, 'number': 330}	{'precision': 0.5337078651685393, 'recall': 0.3958333333333333, 'f1': 0.4545454545454545, 'number': 240}	{'precision': 0.8894536213468869, 'recall': 0.875, 'f1': 0.8821676118462508, 'number': 800}	{'precision': 0.9219745222929936, 'recall': 0.875945537065053, 'f1': 0.8983708301008534, 'number': 1983}	{'precision': 0.8853556485355648, 'recall': 0.8643790849673203, 'f1': 0.87474162877222, 'number': 1224}	{'precision': 0.8616684266103485, 'recall': 0.7884057971014493, 'f1': 0.8234106962663975, 'number': 1035}	{'precision': 0.5454545454545454, 'recall': 0.3829787234042553, 'f1': 0.44999999999999996, 'number': 47}	{'precision': 0.7037037037037037, 'recall': 0.5757575757575758, 'f1': 0.6333333333333334, 'number': 66}	{'precision': 0.8814229249011858, 'recall': 0.8500635324015248, 'f1': 0.8654592496765846, 'number': 787}	{'precision': 0.8888888888888888, 'recall': 0.5714285714285714, 'f1': 0.6956521739130435, 'number': 14}	{'precision': 0.8251748251748252, 'recall': 0.7108433734939759, 'f1': 0.7637540453074433, 'number': 166}	{'precision': 0.7904761904761904, 'recall': 0.7280701754385965, 'f1': 0.7579908675799086, 'number': 228}	{'precision': 0.7793594306049823, 'recall': 0.7538726333907056, 'f1': 0.7664041994750657, 'number': 581}	{'precision': 0.8285714285714286, 'recall': 0.7945205479452054, 'f1': 0.8111888111888111, 'number': 365}	{'precision': 0.8321917808219178, 'recall': 0.82793867120954, 'f1': 0.8300597779675492, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.9441277080957811, 'recall': 0.9103903243540407, 'f1': 0.9269521410579346, 'number': 1819}	{'precision': 0.8125, 'recall': 0.6190476190476191, 'f1': 0.7027027027027026, 'number': 21}	{'precision': 0.845360824742268, 'recall': 0.6890756302521008, 'f1': 0.7592592592592594, 'number': 119}	{'precision': 0.4090909090909091, 'recall': 0.1232876712328767, 'f1': 0.18947368421052632, 'number': 73}	{'precision': 0.8, 'recall': 0.6792452830188679, 'f1': 0.7346938775510203, 'number': 53}	{'precision': 0.7790697674418605, 'recall': 0.7243243243243244, 'f1': 0.7507002801120449, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.824332006822058, 'recall': 0.7766470273165507, 'f1': 0.7997793712079427, 'number': 1867}	{'precision': 0.4, 'recall': 0.2222222222222222, 'f1': 0.2857142857142857, 'number': 9}	{'precision': 0.9326145552560647, 'recall': 0.8940568475452196, 'f1': 0.9129287598944591, 'number': 387}	{'precision': 0.8571428571428571, 'recall': 0.5625, 'f1': 0.6792452830188678, 'number': 32}	{'precision': 0.8378378378378378, 'recall': 0.6739130434782609, 'f1': 0.746987951807229, 'number': 46}	{'precision': 0.7222222222222222, 'recall': 0.6190476190476191, 'f1': 0.6666666666666666, 'number': 21}	{'precision': 0.2, 'recall': 0.2222222222222222, 'f1': 0.2105263157894737, 'number': 18}	{'precision': 0.735981308411215, 'recall': 0.7274826789838337, 'f1': 0.7317073170731707, 'number': 866}	{'precision': 0.8070175438596491, 'recall': 0.6216216216216216, 'f1': 0.7022900763358778, 'number': 74}	{'precision': 0.8275434243176178, 'recall': 0.7297592997811816, 'f1': 0.7755813953488371, 'number': 914}	{'precision': 0.9273547094188377, 'recall': 0.9245754245754245, 'f1': 0.9259629814907453, 'number': 2002}	{'precision': 0.9095477386934674, 'recall': 0.9156829679595279, 'f1': 0.9126050420168068, 'number': 593}	{'precision': 0.5954198473282443, 'recall': 0.4588235294117647, 'f1': 0.5182724252491694, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.9190573770491803, 'recall': 0.9001505268439538, 'f1': 0.9095057034220532, 'number': 1993}	{'precision': 0.8880597014925373, 'recall': 0.7727272727272727, 'f1': 0.8263888888888888, 'number': 154}	{'precision': 0.8260869565217391, 'recall': 0.7063197026022305, 'f1': 0.7615230460921845, 'number': 269}	{'precision': 0.9130119608553824, 'recall': 0.8576779026217228, 'f1': 0.8844803370786517, 'number': 2937}	{'precision': 0.9245014245014245, 'recall': 0.8939393939393939, 'f1': 0.9089635854341735, 'number': 726}	{'precision': 0.8490566037735849, 'recall': 0.84375, 'f1': 0.8463949843260189, 'number': 160}	{'precision': 0.8552631578947368, 'recall': 0.7471264367816092, 'f1': 0.7975460122699386, 'number': 87}	0.8762	0.8314	0.8532	0.8709
0.28	7.0	2744	0.4729	{'precision': 0.9148264984227129, 'recall': 0.8787878787878788, 'f1': 0.8964451313755796, 'number': 330}	{'precision': 0.5659340659340659, 'recall': 0.42916666666666664, 'f1': 0.48815165876777245, 'number': 240}	{'precision': 0.9020356234096693, 'recall': 0.88625, 'f1': 0.8940731399747793, 'number': 800}	{'precision': 0.921038961038961, 'recall': 0.8940998487140696, 'f1': 0.9073694984646877, 'number': 1983}	{'precision': 0.9068376068376068, 'recall': 0.8668300653594772, 'f1': 0.8863826232247285, 'number': 1224}	{'precision': 0.843530591775326, 'recall': 0.81256038647343, 'f1': 0.8277559055118109, 'number': 1035}	{'precision': 0.5151515151515151, 'recall': 0.3617021276595745, 'f1': 0.42500000000000004, 'number': 47}	{'precision': 0.7755102040816326, 'recall': 0.5757575757575758, 'f1': 0.6608695652173914, 'number': 66}	{'precision': 0.9175531914893617, 'recall': 0.8767471410419314, 'f1': 0.8966861598440546, 'number': 787}	{'precision': 0.8888888888888888, 'recall': 0.5714285714285714, 'f1': 0.6956521739130435, 'number': 14}	{'precision': 0.7215189873417721, 'recall': 0.6867469879518072, 'f1': 0.7037037037037036, 'number': 166}	{'precision': 0.7945205479452054, 'recall': 0.7631578947368421, 'f1': 0.7785234899328859, 'number': 228}	{'precision': 0.8314176245210728, 'recall': 0.7469879518072289, 'f1': 0.7869446962828649, 'number': 581}	{'precision': 0.7928176795580111, 'recall': 0.7863013698630137, 'f1': 0.7895460797799174, 'number': 365}	{'precision': 0.8616071428571429, 'recall': 0.8219761499148212, 'f1': 0.8413251961639059, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.938167509836987, 'recall': 0.9175371083012644, 'f1': 0.9277376320177877, 'number': 1819}	{'precision': 0.75, 'recall': 0.7142857142857143, 'f1': 0.7317073170731706, 'number': 21}	{'precision': 0.8842105263157894, 'recall': 0.7058823529411765, 'f1': 0.7850467289719626, 'number': 119}	{'precision': 0.20930232558139536, 'recall': 0.1232876712328767, 'f1': 0.15517241379310345, 'number': 73}	{'precision': 0.8604651162790697, 'recall': 0.6981132075471698, 'f1': 0.7708333333333334, 'number': 53}	{'precision': 0.797752808988764, 'recall': 0.7675675675675676, 'f1': 0.7823691460055096, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.8357102110667427, 'recall': 0.7846813069094805, 'f1': 0.8093922651933702, 'number': 1867}	{'precision': 0.5, 'recall': 0.4444444444444444, 'f1': 0.47058823529411764, 'number': 9}	{'precision': 0.9192708333333334, 'recall': 0.9121447028423773, 'f1': 0.9156939040207522, 'number': 387}	{'precision': 0.8636363636363636, 'recall': 0.59375, 'f1': 0.7037037037037037, 'number': 32}	{'precision': 0.8095238095238095, 'recall': 0.7391304347826086, 'f1': 0.7727272727272727, 'number': 46}	{'precision': 0.7894736842105263, 'recall': 0.7142857142857143, 'f1': 0.7500000000000001, 'number': 21}	{'precision': 0.375, 'recall': 0.16666666666666666, 'f1': 0.23076923076923078, 'number': 18}	{'precision': 0.7766990291262136, 'recall': 0.7390300230946882, 'f1': 0.7573964497041421, 'number': 866}	{'precision': 0.7464788732394366, 'recall': 0.7162162162162162, 'f1': 0.7310344827586208, 'number': 74}	{'precision': 0.8312958435207825, 'recall': 0.7439824945295405, 'f1': 0.7852193995381063, 'number': 914}	{'precision': 0.9344758064516129, 'recall': 0.926073926073926, 'f1': 0.9302558956347214, 'number': 2002}	{'precision': 0.9161073825503355, 'recall': 0.9207419898819561, 'f1': 0.9184188393608074, 'number': 593}	{'precision': 0.6090225563909775, 'recall': 0.4764705882352941, 'f1': 0.5346534653465347, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.9146341463414634, 'recall': 0.9031610637230306, 'f1': 0.9088613986367079, 'number': 1993}	{'precision': 0.8472222222222222, 'recall': 0.7922077922077922, 'f1': 0.8187919463087249, 'number': 154}	{'precision': 0.796, 'recall': 0.7397769516728625, 'f1': 0.7668593448940271, 'number': 269}	{'precision': 0.9247739602169982, 'recall': 0.8706162751106571, 'f1': 0.8968782883198877, 'number': 2937}	{'precision': 0.9101123595505618, 'recall': 0.8925619834710744, 'f1': 0.9012517385257302, 'number': 726}	{'precision': 0.8679245283018868, 'recall': 0.8625, 'f1': 0.8652037617554859, 'number': 160}	{'precision': 0.8589743589743589, 'recall': 0.7701149425287356, 'f1': 0.8121212121212121, 'number': 87}	0.8826	0.8414	0.8615	0.8786
0.2242	8.0	3136	0.4855	{'precision': 0.9310344827586207, 'recall': 0.9, 'f1': 0.9152542372881356, 'number': 330}	{'precision': 0.5303867403314917, 'recall': 0.4, 'f1': 0.45605700712589076, 'number': 240}	{'precision': 0.8987341772151899, 'recall': 0.8875, 'f1': 0.8930817610062892, 'number': 800}	{'precision': 0.9250645994832042, 'recall': 0.902672718103883, 'f1': 0.9137314956610516, 'number': 1983}	{'precision': 0.896551724137931, 'recall': 0.8709150326797386, 'f1': 0.8835474513054289, 'number': 1224}	{'precision': 0.8432539682539683, 'recall': 0.821256038647343, 'f1': 0.8321096426823299, 'number': 1035}	{'precision': 0.5666666666666667, 'recall': 0.3617021276595745, 'f1': 0.4415584415584416, 'number': 47}	{'precision': 0.7241379310344828, 'recall': 0.6363636363636364, 'f1': 0.6774193548387097, 'number': 66}	{'precision': 0.9216467463479415, 'recall': 0.8818297331639136, 'f1': 0.9012987012987013, 'number': 787}	{'precision': 0.9, 'recall': 0.6428571428571429, 'f1': 0.75, 'number': 14}	{'precision': 0.7547169811320755, 'recall': 0.7228915662650602, 'f1': 0.7384615384615385, 'number': 166}	{'precision': 0.8365384615384616, 'recall': 0.7631578947368421, 'f1': 0.7981651376146789, 'number': 228}	{'precision': 0.8229755178907722, 'recall': 0.7521514629948365, 'f1': 0.7859712230215827, 'number': 581}	{'precision': 0.8149171270718232, 'recall': 0.8082191780821918, 'f1': 0.8115543328748279, 'number': 365}	{'precision': 0.8558951965065502, 'recall': 0.8347529812606473, 'f1': 0.8451918930573523, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.9422645739910314, 'recall': 0.9241341396371633, 'f1': 0.9331112961421039, 'number': 1819}	{'precision': 0.7777777777777778, 'recall': 0.6666666666666666, 'f1': 0.717948717948718, 'number': 21}	{'precision': 0.82, 'recall': 0.6890756302521008, 'f1': 0.7488584474885843, 'number': 119}	{'precision': 0.2222222222222222, 'recall': 0.136986301369863, 'f1': 0.1694915254237288, 'number': 73}	{'precision': 0.8181818181818182, 'recall': 0.6792452830188679, 'f1': 0.7422680412371134, 'number': 53}	{'precision': 0.7688172043010753, 'recall': 0.772972972972973, 'f1': 0.7708894878706201, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.8422857142857143, 'recall': 0.7895018746652384, 'f1': 0.8150400884711088, 'number': 1867}	{'precision': 0.5, 'recall': 0.4444444444444444, 'f1': 0.47058823529411764, 'number': 9}	{'precision': 0.9238845144356955, 'recall': 0.9095607235142119, 'f1': 0.9166666666666666, 'number': 387}	{'precision': 0.8888888888888888, 'recall': 0.5, 'f1': 0.64, 'number': 32}	{'precision': 0.8292682926829268, 'recall': 0.7391304347826086, 'f1': 0.7816091954022988, 'number': 46}	{'precision': 0.75, 'recall': 0.7142857142857143, 'f1': 0.7317073170731706, 'number': 21}	{'precision': 0.375, 'recall': 0.16666666666666666, 'f1': 0.23076923076923078, 'number': 18}	{'precision': 0.7632211538461539, 'recall': 0.733256351039261, 'f1': 0.7479387514723204, 'number': 866}	{'precision': 0.7105263157894737, 'recall': 0.7297297297297297, 'f1': 0.7200000000000001, 'number': 74}	{'precision': 0.8130952380952381, 'recall': 0.7472647702407003, 'f1': 0.7787913340935005, 'number': 914}	{'precision': 0.927891837756635, 'recall': 0.9255744255744256, 'f1': 0.9267316829207303, 'number': 2002}	{'precision': 0.8928571428571429, 'recall': 0.927487352445194, 'f1': 0.9098428453267163, 'number': 593}	{'precision': 0.6290322580645161, 'recall': 0.4588235294117647, 'f1': 0.5306122448979591, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.9073514602215509, 'recall': 0.9041645760160562, 'f1': 0.9057552148781101, 'number': 1993}	{'precision': 0.8897058823529411, 'recall': 0.7857142857142857, 'f1': 0.8344827586206897, 'number': 154}	{'precision': 0.7967479674796748, 'recall': 0.7286245353159851, 'f1': 0.7611650485436893, 'number': 269}	{'precision': 0.932, 'recall': 0.8726591760299626, 'f1': 0.9013539651837525, 'number': 2937}	{'precision': 0.9267605633802817, 'recall': 0.90633608815427, 'f1': 0.9164345403899722, 'number': 726}	{'precision': 0.8636363636363636, 'recall': 0.83125, 'f1': 0.8471337579617835, 'number': 160}	{'precision': 0.8255813953488372, 'recall': 0.8160919540229885, 'f1': 0.8208092485549133, 'number': 87}	0.8817	0.8454	0.8632	0.8797
0.1732	9.0	3528	0.4941	{'precision': 0.9069069069069069, 'recall': 0.9151515151515152, 'f1': 0.9110105580693816, 'number': 330}	{'precision': 0.6139240506329114, 'recall': 0.4041666666666667, 'f1': 0.48743718592964824, 'number': 240}	{'precision': 0.8930348258706468, 'recall': 0.8975, 'f1': 0.8952618453865338, 'number': 800}	{'precision': 0.9371101871101871, 'recall': 0.9092284417549168, 'f1': 0.922958791911953, 'number': 1983}	{'precision': 0.8881578947368421, 'recall': 0.8823529411764706, 'f1': 0.8852459016393444, 'number': 1224}	{'precision': 0.8581560283687943, 'recall': 0.8183574879227054, 'f1': 0.837784371909001, 'number': 1035}	{'precision': 0.5625, 'recall': 0.3829787234042553, 'f1': 0.45569620253164556, 'number': 47}	{'precision': 0.7142857142857143, 'recall': 0.6060606060606061, 'f1': 0.6557377049180327, 'number': 66}	{'precision': 0.910039113428944, 'recall': 0.8869123252858958, 'f1': 0.8983268983268983, 'number': 787}	{'precision': 0.9, 'recall': 0.6428571428571429, 'f1': 0.75, 'number': 14}	{'precision': 0.7515527950310559, 'recall': 0.7289156626506024, 'f1': 0.7400611620795107, 'number': 166}	{'precision': 0.8153153153153153, 'recall': 0.793859649122807, 'f1': 0.8044444444444444, 'number': 228}	{'precision': 0.8207024029574861, 'recall': 0.7641996557659209, 'f1': 0.7914438502673796, 'number': 581}	{'precision': 0.8319327731092437, 'recall': 0.8136986301369863, 'f1': 0.8227146814404432, 'number': 365}	{'precision': 0.867311072056239, 'recall': 0.8407155025553663, 'f1': 0.8538062283737026, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.9482273494653911, 'recall': 0.9263331500824629, 'f1': 0.9371523915461625, 'number': 1819}	{'precision': 0.625, 'recall': 0.7142857142857143, 'f1': 0.6666666666666666, 'number': 21}	{'precision': 0.84, 'recall': 0.7058823529411765, 'f1': 0.767123287671233, 'number': 119}	{'precision': 0.3953488372093023, 'recall': 0.2328767123287671, 'f1': 0.29310344827586204, 'number': 73}	{'precision': 0.8409090909090909, 'recall': 0.6981132075471698, 'f1': 0.7628865979381443, 'number': 53}	{'precision': 0.7978142076502732, 'recall': 0.7891891891891892, 'f1': 0.7934782608695653, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.8299888517279822, 'recall': 0.7975361542581682, 'f1': 0.8134389511062551, 'number': 1867}	{'precision': 0.5714285714285714, 'recall': 0.4444444444444444, 'f1': 0.5, 'number': 9}	{'precision': 0.9285714285714286, 'recall': 0.9069767441860465, 'f1': 0.9176470588235294, 'number': 387}	{'precision': 0.8181818181818182, 'recall': 0.5625, 'f1': 0.6666666666666666, 'number': 32}	{'precision': 0.8292682926829268, 'recall': 0.7391304347826086, 'f1': 0.7816091954022988, 'number': 46}	{'precision': 0.7368421052631579, 'recall': 0.6666666666666666, 'f1': 0.7, 'number': 21}	{'precision': 0.375, 'recall': 0.16666666666666666, 'f1': 0.23076923076923078, 'number': 18}	{'precision': 0.7627520759193357, 'recall': 0.7424942263279446, 'f1': 0.7524868344060855, 'number': 866}	{'precision': 0.7361111111111112, 'recall': 0.7162162162162162, 'f1': 0.7260273972602739, 'number': 74}	{'precision': 0.8228438228438228, 'recall': 0.7724288840262582, 'f1': 0.7968397291196389, 'number': 914}	{'precision': 0.9339717741935484, 'recall': 0.9255744255744256, 'f1': 0.9297541394882086, 'number': 2002}	{'precision': 0.9154228855721394, 'recall': 0.9308600337268128, 'f1': 0.9230769230769232, 'number': 593}	{'precision': 0.6074074074074074, 'recall': 0.4823529411764706, 'f1': 0.5377049180327869, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.9147640791476408, 'recall': 0.904666332162569, 'f1': 0.9096871846619576, 'number': 1993}	{'precision': 0.8591549295774648, 'recall': 0.7922077922077922, 'f1': 0.8243243243243243, 'number': 154}	{'precision': 0.7975708502024291, 'recall': 0.7323420074349443, 'f1': 0.7635658914728681, 'number': 269}	{'precision': 0.9370021723388848, 'recall': 0.8811712631937351, 'f1': 0.9082295139498158, 'number': 2937}	{'precision': 0.9322033898305084, 'recall': 0.9090909090909091, 'f1': 0.9205020920502093, 'number': 726}	{'precision': 0.8518518518518519, 'recall': 0.8625, 'f1': 0.8571428571428572, 'number': 160}	{'precision': 0.8275862068965517, 'recall': 0.8275862068965517, 'f1': 0.8275862068965517, 'number': 87}	0.8857	0.8523	0.8687	0.8835
0.1732	10.0	3920	0.4902	{'precision': 0.9228395061728395, 'recall': 0.906060606060606, 'f1': 0.9143730886850152, 'number': 330}	{'precision': 0.5804597701149425, 'recall': 0.42083333333333334, 'f1': 0.48792270531400966, 'number': 240}	{'precision': 0.9013732833957553, 'recall': 0.9025, 'f1': 0.9019362898188632, 'number': 800}	{'precision': 0.9316897791474062, 'recall': 0.9147755925365607, 'f1': 0.9231552162849872, 'number': 1983}	{'precision': 0.8989229494614748, 'recall': 0.886437908496732, 'f1': 0.8926367749897162, 'number': 1224}	{'precision': 0.8547430830039525, 'recall': 0.8357487922705314, 'f1': 0.8451392281387395, 'number': 1035}	{'precision': 0.5588235294117647, 'recall': 0.40425531914893614, 'f1': 0.4691358024691358, 'number': 47}	{'precision': 0.7272727272727273, 'recall': 0.6060606060606061, 'f1': 0.6611570247933883, 'number': 66}	{'precision': 0.922266139657444, 'recall': 0.8894536213468869, 'f1': 0.905562742561449, 'number': 787}	{'precision': 0.9, 'recall': 0.6428571428571429, 'f1': 0.75, 'number': 14}	{'precision': 0.759493670886076, 'recall': 0.7228915662650602, 'f1': 0.7407407407407407, 'number': 166}	{'precision': 0.8144796380090498, 'recall': 0.7894736842105263, 'f1': 0.8017817371937639, 'number': 228}	{'precision': 0.8226691042047533, 'recall': 0.774526678141136, 'f1': 0.797872340425532, 'number': 581}	{'precision': 0.8282548476454293, 'recall': 0.8191780821917808, 'f1': 0.8236914600550964, 'number': 365}	{'precision': 0.87322695035461, 'recall': 0.8390119250425895, 'f1': 0.8557775847089488, 'number': 1174}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 6}	{'precision': 0.950561797752809, 'recall': 0.9301814183617372, 'f1': 0.9402611836621284, 'number': 1819}	{'precision': 0.625, 'recall': 0.7142857142857143, 'f1': 0.6666666666666666, 'number': 21}	{'precision': 0.8316831683168316, 'recall': 0.7058823529411765, 'f1': 0.7636363636363637, 'number': 119}	{'precision': 0.35, 'recall': 0.1917808219178082, 'f1': 0.247787610619469, 'number': 73}	{'precision': 0.8571428571428571, 'recall': 0.6792452830188679, 'f1': 0.7578947368421052, 'number': 53}	{'precision': 0.8176795580110497, 'recall': 0.8, 'f1': 0.8087431693989072, 'number': 185}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 3}	{'precision': 0.8464589235127479, 'recall': 0.8002142474558115, 'f1': 0.8226872246696035, 'number': 1867}	{'precision': 0.375, 'recall': 0.3333333333333333, 'f1': 0.35294117647058826, 'number': 9}	{'precision': 0.9375, 'recall': 0.9302325581395349, 'f1': 0.933852140077821, 'number': 387}	{'precision': 0.782608695652174, 'recall': 0.5625, 'f1': 0.6545454545454547, 'number': 32}	{'precision': 0.7906976744186046, 'recall': 0.7391304347826086, 'f1': 0.7640449438202247, 'number': 46}	{'precision': 0.75, 'recall': 0.7142857142857143, 'f1': 0.7317073170731706, 'number': 21}	{'precision': 0.3333333333333333, 'recall': 0.16666666666666666, 'f1': 0.2222222222222222, 'number': 18}	{'precision': 0.7719714964370546, 'recall': 0.7505773672055427, 'f1': 0.7611241217798594, 'number': 866}	{'precision': 0.7125, 'recall': 0.7702702702702703, 'f1': 0.7402597402597403, 'number': 74}	{'precision': 0.8259345794392523, 'recall': 0.7735229759299781, 'f1': 0.7988700564971751, 'number': 914}	{'precision': 0.9388270980788676, 'recall': 0.9275724275724275, 'f1': 0.9331658291457287, 'number': 2002}	{'precision': 0.9110378912685337, 'recall': 0.9325463743676222, 'f1': 0.9216666666666666, 'number': 593}	{'precision': 0.6136363636363636, 'recall': 0.4764705882352941, 'f1': 0.5364238410596026, 'number': 170}	{'precision': 0.0, 'recall': 0.0, 'f1': 0.0, 'number': 2}	{'precision': 0.9180576631259484, 'recall': 0.9106874059207225, 'f1': 0.9143576826196473, 'number': 1993}	{'precision': 0.8714285714285714, 'recall': 0.7922077922077922, 'f1': 0.8299319727891157, 'number': 154}	{'precision': 0.8072289156626506, 'recall': 0.7472118959107806, 'f1': 0.7760617760617762, 'number': 269}	{'precision': 0.9341726618705036, 'recall': 0.8842356145726932, 'f1': 0.908518453734476, 'number': 2937}	{'precision': 0.9401709401709402, 'recall': 0.9090909090909091, 'f1': 0.9243697478991597, 'number': 726}	{'precision': 0.8571428571428571, 'recall': 0.8625, 'f1': 0.8598130841121496, 'number': 160}	{'precision': 0.8452380952380952, 'recall': 0.8160919540229885, 'f1': 0.8304093567251463, 'number': 87}	0.8891	0.8566	0.8725	0.8870

Framework versions

• Transformers 4.44.2
• Pytorch 2.4.1+cu121
• Datasets 3.0.1
• Tokenizers 0.19.1