Metric	Score
Accuracy	79±6

Metric	Score
Accuracy	81±9

worst items

note: the gold standard is taken from the submission itself, not from the challenge data!

#	input	expected output	actual output	test-A Accuracy
1	PRAWNIK ELLE\nbrown	None	2881649	0
2	EUGENIUSZ PAUKSZTA: WRASTANJE	1380598	5631318	0
3	SYN\nPHILIP MEYER	None	1274399	0
4	OPOWIEŚCI Z NARNI KOŃ I JEGO CHŁOPIEC 23	1192569	None	0
5	Włochy północne\nSIDU.	1980837	5284289	0
6	Mikołajk przygody\ntom 2 Mikołajka	2032207	5806220	0
7	IVA RAWULA-KUBIAK lubię byé FANTASTĄ	2486246	None	0
8	Rafał Kosik\nFELIX, NET 8 NIKA Niewidzialnych ludzi	3238958	1708220	0
9	K.Boglar • SUPERGIGANT Z MOTYLEM	1074714	1140581	0
10	Feeria\nBECK HENNING\nMÓZGOBREDNIE 1	6025272	None	0
11	KATARZYNA NIEZGODA PIĘŚCIA W SZKLANY SUFIT ) EDIPRESSE\nVSADO	None	None	100
12	KS JAN KACZKOWSKT\nPIOTR ZYŁKA\nZYCIE NA PEŁNEJ PETARDZIE	4128305	4128305	100
13	"Ankieta .Zycia"" - wspomnienia Czytelników DZIECIŃSTWO I WOJNA"	None	None	100
14	Trenuj 2 nami!\nUNIWERSALNY TRENING PERSONALNY	3897802	3897802	100
15	JACEK RĘBACZ\nAŻ PO CIEMNY LAS	2744071	2744071	100
16	NEIL DE GRASSE\nTYSON\n· KOSMICZNE ZACHWYTY	6122853	6122853	100
17	ja, anielica\nKatarzyna Beren\nMiszczuk	1000000775547	1000000775547	100
18	EMMA DONOGHUE POKOT	2642673	2642673	100
19	Mugiczne przyjaciele Pdniebny Paula Harrison	5769650	5769650	100
20	S MUZA DALEKICH PODRÓŻY	1961803	1961803	100
21	CHUCK PALAHNUK UDŁAW SIE\n0	1918700	1918700	100
22	WOJCIECH BONOWICZ\nTISCHNER	1563418	1563418	100
23	"GARRI KASPAROW\nOSTATNI BACTION ""MYSLU"	None	None	100
24	Swiaty równolegle Lukasz Lama	1000000500107	1000000500107	100
25	Fakapa DAN LYONS ]	5711905	5711905	100
26	Jak perfekcyjnie przygotować przyjęcie MOJE WESELE	5787979	5787979	100
27	MACIEJ ORŁOŚ O SZTUCE WYSTĄPIEŃ PUBLICZNYCH	20129125	20129125	100
28	Federico Moccia\nWybacz, ale będę ci mówiła skarbie	2431251	2431251	100
29	ANNA ONICHIMOWSKA ŻEGNAJ NA ZAWSZE	1108756	1108756	100
30	ewa ostrowska\ndługa lekcja	1420686	1420686	100
31	Anna Onichimowska Hera, moja miłość Anna	1545247	1545247	100
32	Douglas Coupland\nPokolenie X	1228441	1228441	100
33	Harper Lee • Zabić drozda	1016582	1016582	100
34	Sarah Dessen\nzamek i klucz	2399942	2399942	100
35	COBEN Mistyfikacja	1000001008912	1000001008912	100
36	HARLAN COBEN WSZYSCY MAMY TAJEMNICE	2740264	2740264	100
37	COBEN COBEN Nie mów nikomu	1602495	1602495	100
38	STEFAN SZCZEPLEK\nDEYNA	1128188	1128188	100
39	SWIECI PIERWSZEGO KONTAKTU\nSZYMON HOLOWNIA	5804270	5804270	100
40	DUNLLU ALDLAI NAJNOWSZA HISTORIA POLSKI	5323213	5323213	100