df190d3d3547c0d01e68e9702c96aa4da8c4fd7f
fastbm25-all-data-stemmed stemming

 

challenge
Passage Retrieval
submitter
s478846
submitted
2023-10-11 07:38:07.044989 UTC
file basename
out

test-B-wiki / c18ab5d9e85454d0abde06d3c6e1c28895cf1a89
Metric Score
NDCG@10 23.76
NDCG@100 31.26

test-B-legal / 5ec93aec27801455f3c3b81143891f4dda7302f7
Metric Score
NDCG@10 80.52
NDCG@100 82.98

test-B-allegro / 3b4402352bfb90a6e17ce03d804c8dd94d218485
Metric Score
NDCG@10 57.38
NDCG@100 61.14

test-B / 03b29f43681b4f20f6d81347979cfad50aa938cd
Metric Score
NDCG@10 44.16
NDCG@100 49.63

test-A-wiki / ef3ec3cb3fef7315812fb069c2ab76788be9a169
Metric Score
NDCG@10 23.88
NDCG@100 30.93

test-A-legal / 990fc57b1d4ac8c3acbeca134cc7b5041779ed0a
Metric Score
NDCG@10 79.61
NDCG@100 82.29

test-A-allegro / 8aad0f94d729fa2054696efe4a977e037b38e103
Metric Score
NDCG@10 59.46
NDCG@100 63.08

test-A / 85cf91ff30f4529e389d065991c4514a890d3222
Metric Score
NDCG@10 54.31
NDCG@100 58.77

dev-0 / e8f56eb6c598f60e6158c78efcdb05616a14c5c7
Metric Score
NDCG@10 17.17
NDCG@100 22.68

worst items

note: the gold standard is taken from the submission itself, not from the challenge data!
# input expected output actual output test-B-legal NDCG@100
1 wiki-trivia W którym państwie leży Bombaj? 42609-0 2856658-0 119428-0 1287330-0 571761-0 4163899-40 1272046-0 2734991-1 2202450-1 532178-2 1257228-0 3963580-0 1288328-9 1158331-1 1676817-0 2377444-0 1676811-0 4… 0.00
2 wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? 1743-6 1131567-3 1735904-0 3962344-0 1929638-1 3572733-0 109175-0 1472983-0 405191-0 552904-0 4686-9 1471875-0 1472934-0 3584220-0 1753674-4 118598… 0.00
3 wiki-trivia W którym dniu tygodnia Robinson Crusoe spotkał Piętaszka? 118590-4 2592188-2 1515321-1 1590509-0 1515321-0 1515296-1 377886-0 1093708-1 118590-1 1142238-0 118590-13 2743010-0 3043022-0 2826009-0 962648-0 1523828-0 152… 0.00
4 wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? 4360-0 1932-49 4359-71 387651-2 3750050-0 3748706-0 3749417-0 1791387-0 2090427-1 1680868-2 1680869-2 3083018-1 2400947-0 2616244-0 2077810-2 572271-0 1599022-0 1137218-0 2… 0.00
5 wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? 58136-8 162129-3 941032-0 181284-0 37916-0 1741905-49 3710137-7 11289-3 1785122-0 3501949-0 4208494-0 2767755-13 3710137-4 4083243-0 4095688-0 162129-4 16948… 0.00
6 wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? 2137401-4 1956520-0 461101-1 201162-4 770-24 3311571-3 2739552-1 183444-1 692461-0 5037543-10 29607-0 121015-8 707136-1 60143-214 2801925-136 2498718-… 0.00
7 wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? 9879-0 547665-0 1756843-0 1757857-0 1497109-0 1756839-0 1758633-0 1756827-0 1758557-0 1757451-0 1277934-0 1758537-0 25911-0 3102949-0 228204-0 2471… 0.00
8 wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? 13012-0 13016-0 13015-0 13005-2 613908-4 4710309-0 1216081-0 1263150-0 73042-0 162316-1 354435-4 1695117-0 1487142-0 1203402-0 76591-0 1049830-0 2128782-2 1202227-0 2116275-0 146909… 0.00
9 wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. 5581-35 685902-0 1099762-2 189355-0 1823321-1 2295876-1 169168-13 183809-5 1910813-0 24742-7 136382-4 399136-2 1423676-5 113867-4 147137-2 183809-4 24742-3 1… 0.00
10 wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? 736338-0 30332-19 59224-0 44772-6 513522-0 43730-13 557872-0 9830-0 1073721-2 4428906-3 3289-25 3277-36 1173406-6 9844-0 967447-0 29-36 3289-60 1769-… 0.00
11 wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? 962835-0 88970-3 4201896-1 89359-0 1115392-0 1461623-5 111119-7 1848206-24 102637-1 4329879-0 2490097-0 3823880-2 138493-16 2489221-0 4890983-0 68148… 0.00
12 wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? 471697-0 490372-6 18084-11 142774-5 3678011-6 85675-14 1063248-6 1143976-3 1518180-23 928778-4 3004365-3 954783-1 28293-20 1452990-1 2148-16 86452-80 143218-4 23992-398 3305434… 0.00
13 wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? 65401-0 4096306-1 1797224-0 318249-12 4635429-0 5118056-1 3971142-0 732801-0 549354-2 2995162-1 484992-44 802949-47 1271388-0 1083043-0 5033166-2 50… 0.00
14 wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? 1202545-0 145706-0 1419330-22 500485-360 153994-26 3601181-7 103985-32 1386870-1 89259-6 1012338-1 145706-1 296925-4 473222-84 1390905-1 1516491-1 322… 0.00
15 wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? 425167-2 1856156-3 314765-5 1658867-146 363695-7 3589396-12 243442-5 1048048-3 2413148-2 2522637-7 209672-12 3554232-13 1878205-8 2528123-1 3267240-5… 0.00
16 wiki-trivia Z iloma państwami graniczy San Marino? 5531-17 44915-14 2027875-9 597209-0 1193751-0 1219119-0 4682682-0 597206-1 1209122-1 2028372-13 5531-0 2956343-3 1456243-0 1903714-1 154471-0 3636033-5 5531-… 0.00
17 wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? 2148595-1 193584-2 7104-0 1418508-339 4012171-4 266127-3 134896-1 2003627-187 4603710-210 4413539-2 2048728-5 1655928-3 2837093-5 315692-3 1809833-3 2… 0.00
18 wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… 43681-0 43683-6 984901-17 4541971-5 43683-10 2311468-5 15195-9 1833033-6 300796-0 7-74 4600303-0 59127-15 984901-3 43683-0 3172307-6 6567-1 2318382-… 0.00
19 wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? 152150-0 152150-14 2194475-2 537444-1 1809008-0 661639-8 1823613-28 1810145-8 4202395-0 4063041-0 4733787-0 4711553-0 4060554-0 4064527-0 4839302-0 4064684-0 4372477-0 3294002-0 … 0.00
20 wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? 44879-8 174481-12 86849-16 2815816-2 2605129-9 3243471-12 2283748-3 134786-10 1824624-8 159-92 2475325-11 3470170-0 6699-31 21121-9 33153-22 1145569-0 4478120-3 451343… 0.00
21 wiki-trivia Symbolem którego pierwiastka jest Cr? 825-0 1676212-0 75643-15 136382-4 6149-33 15729-1 1133291-0 844577-2 3482716-3 2656492-0 2079167-0 874135-0 30332-1 341631-8 1130111-6 539440-0 1130111-9 11… 0.00
22 wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? 74254-0 95568-1 2070144-0 9576-11 2130812-4 1906305-0 2975809-0 1331137-0 2521418-0 5237976-12 5038125-0 2928570-0 1309650-29 1309650-6 558678-11 4078031-0 … 0.00
23 wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? 2462290-5 589110-0 33023-0 189807-44 3039370-2 2462290-7 25362-89 115521-7 5246661-3 189807-31 167385-192 1897053-9 3568822-5 3574207-12 514238-11 90585-5 6504-21 3163564-1 5754-14 125854… 0.00
24 wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? 558647-0 558647-1 302733-30 525235-4 1160587-16 4674879-8 274668-4 75110-1 130317-0 1948960-3 4570607-2 39134-1 170138-24 1431954-0 1157-10 1743795-5 32036-35… 0.00
25 wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? 23626-20 1757856-4 4439842-4 60570-8 2828147-5 2735278-7 4403981-12 291285-2 3144098-1 5007018-1 118533-2 42400-11 1148354-2 1163812-47 1447993-2 209765-44 428616-7 5345… 0.00
26 wiki-trivia Jak nazywa się pisarz, autora „Dziennika pisanego nocą”? 152861-6 3449-50 84545-6 3449-34 4575552-8 451225-5 2346425-7 1841887-1 4616901-4 2150275-3 3162683-9 2978136-0 114108-27 4288242-8 2533194-2 2163215-1 1443993-6 171… 0.00
27 wiki-trivia Jakie zwierzę widnieje w godle Wenecji? 3517-75 517835-1 996055-5 2502-2 562507-0 3118886-36 888024-1 1044175-0 1307638-17 37130-69 3672015-1 268584-6 2135890-2 3930036-1 1357569-6 53084-5 1689572-1 268584-… 0.00
28 wiki-trivia Jak wabił się pierwszy pies w kosmosie? 2043408-2 44137-1 504860-22 79063-0 5178916-1 743791-1 2743975-8 4072298-0 4696261-0 544927-4 4017144-2 183394-4 2966042-16 1183523-0 4243230-0 1196254-0 984255-4 932390-0 4243546-0 3972… 0.00
29 wiki-trivia Kto był ojcem Pegaza? 108851-11 269351-0 16435-1 4310517-8 81589-0 3675293-2 1057786-8 476597-16 1476189-8 1462201-0 4663220-0 661670-10 2550315-82 2819771-0 1032854-3 1674622-0 139763-11 4… 0.00
30 wiki-trivia Na jaką chorobą zapadła Nel, bohaterka „W pustyni i w puszczy”? 88267-8 2482609-0 427787-0 2689108-1 42266-5 153645-1 2347166-2 130210-0 313970-0 1107075-0 1515913-0 4212136-7 2279030-0 435160-0 3336957-1 162084-… 0.00
31 wiki-trivia Jak z francuskiego nazywa się pomieszczenie w teatrze, w którym widownia przebywa w trakcie przerwy? 736692-0 401404-31 4702563-0 199168-9 2936280-6 3632615-2 1396325-3 2993640-28 4875719-2 1370647-1 850109-0 4330438-26 720995-4 2590350-4 2445307-3 5… 0.00
32 wiki-trivia Jak nazywa się dwuosobowy zespół instrumentalny albo śpiewacki? 17331-0 261983-0 989290-0 3544681-0 17333-0 211998-28 670924-9 914567-0 3631131-0 17329-0 2264684-0 3174343-1 1736925-0 1236920-0 599048-4 17326-0 4492058-3 211998-27 3165332-1… 0.00
33 wiki-trivia W którym roku USA wypowiedziało wojnę Niemcom podczas I wojny światowej? 7258-19 5603-62 18861-27 7767-17 2034735-7 53401-15 4554-18 3543503-7 13037-24 914206-1 1378705-18 308687-11 156761-16 2399004-1 498-10 3016834-0 3507960-2 1027688-7 1592385… 0.00
34 wiki-trivia Jakiego koloru jest pojęcie którego się nie ma? 179111-7 1870244-3 1915957-24 6811-175 4638002-1 371015-1 291235-0 566839-5 5194-2 1853366-69 4943490-1 1532873-14 992172-0 1821116-2 191554-8 2922696-3 1822248-3 100213-2 1425598-3 3689110… 0.00
35 wiki-trivia Czy knock down to to samo co knock out? 1380727-1 1116555-2 1694309-12 1116555-0 951455-9 3790916-0 1116555-3 5031957-0 298387-1 1372162-7 1372080-6 5088908-4 1372080-1 1722090-5 62586-0 111… 0.00
36 wiki-trivia Czy kiedykolwiek na banknotach obiegowych w Polsce znajdował się wizerunek Henryka Sienkiewicza? 2067-47 656527-0 2949468-0 656527-1 18103-47 2146833-4 1898909-0 1960245-0 4900742-2 2788969-0 2008049-0 4707859-31 436671-5 1609479-1 1530325-26 30… 0.00
37 wiki-trivia Co oznacza skrót 4WD na samochodach? 146256-0 360783-21 1032397-4 277277-10 1114715-1 2027190-9 1564559-2 520798-0 1260874-2 2110867-0 448176-0 2033365-6 2738558-0 1426080-2 816593-0 400930-2 335166-0 1218589-0 442048-2 37430-… 0.00
38 wiki-trivia W którym mieście w USA dzieje się akcja filmu „Kochaj albo rzuć”? 498821-1 498821-0 986108-22 5875-18 487446-0 142526-4 2432694-6 4889697-2 489194-0 1630315-42 244301-11 3118613-2 354129-5 2983401-16 1638089-5 12738… 0.00
39 wiki-trivia Ile boków o równej długości występuje w trójkącie równoramiennym? 30258-0 6167-2 44242-1 6167-1 352570-1 30322-11 3965463-2 93361-7 2490909-28 30322-2 4392528-0 6167-9 3618596-8 1880838-2 137712-6 352570-0 891743-4 275454… 0.00
40 wiki-trivia Jakim kolorem określa się makabryczne żarty? 470364-0 310912-0 627291-0 805497-4 645020-2 697037-2 716937-6 2004970-6 500495-0 1317504-0 3194900-11 81003-0 2814832-36 102553-42 1270603-14 1144784-15 1557301-2 1500833-5 1643420-1 4… 0.00

Compare with other submission