c77ef7772f61b99daf8c22e98e9897f71f1e1a7e
fastbm25-all-data-proper-test-A-wiki-out

 

challenge
Passage Retrieval
submitter
s478846
submitted
2023-10-10 13:19:09.247404 UTC
file basename
out

test-B-wiki / 21ac8cd000be84ce93d03110034e7f2c3df7cb91
Metric Score
NDCG@10 17.18
NDCG@100 22.48

test-B-legal / ce15f725b7ae25e08a06b96bd7e487f5bd92c433
Metric Score
NDCG@10 81.31
NDCG@100 82.84

test-B-allegro / 6c51b98e489bab12e9172564570d7c0e6e318a0e
Metric Score
NDCG@10 46.12
NDCG@100 51.03

test-B / 377552d47bca86a13787fd336c0d122ac43b29f7
Metric Score
NDCG@10 37.58
NDCG@100 42.07

test-A-wiki / fb4e38d74bbbc6c7702db3c713aa7e9ace4818e9
Metric Score
NDCG@10 18.72
NDCG@100 23.82

test-A-legal / 404ecae6eeff837c848811253703c36c3c8beb2c
Metric Score
NDCG@10 81.64
NDCG@100 83.26

test-A-allegro / 4341dd3eee4554109badc8f4efb672762ffa11ce
Metric Score
NDCG@10 47.36
NDCG@100 52.30

test-A / b52975a1252907fb586f4c4987663d0f0c56b8a5
Metric Score
NDCG@10 49.24
NDCG@100 53.13

dev-0 / e8f56eb6c598f60e6158c78efcdb05616a14c5c7
Metric Score
NDCG@10 17.17
NDCG@100 22.68

worst items

note: the gold standard is taken from the submission itself, not from the challenge data!
# input expected output actual output test-B-wiki NDCG@10
1 wiki-trivia W którym państwie leży Bombaj? 42609-0 2856658-0 119428-0 1287330-0 571761-0 4163899-40 1272046-0 2734991-1 2202450-1 532178-2 1257228-0 3963580-0 1288328-9 1158331-1 1676817-0 2377444-0 1676811-0 4… 0.00
2 wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? 934126-1 88267-17 934126-0 750315-0 427787-0 162084-10 4810710-13 21753-5 1775405-0 2689108-1 3561031-14 2853289-2 589037-0 2347166-2 2279030-0 282823-0 13021… 0.00
3 wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? 1743-6 1131567-3 1735904-0 3962344-0 1929638-1 3572733-0 109175-0 1472983-0 405191-0 552904-0 4686-9 1471875-0 1472934-0 3584220-0 1753674-4 118598… 0.00
4 wiki-trivia Na którym kontynencie leży Gabon? 74511-0 74511-42 74511-71 74511-93 110626-0 74511-130 1135944-0 156-4 3539427-2 1367954-0 1883796-0 2429972-0 74511-97 1883794-0 74511-42 1625997-0 2249541-0 2431143-0 197701-… 0.00
5 wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? 27859-0 799893-7 799893-14 4518252-4 146627-0 4584726-2 892919-1 800806-4 5082924-1 145643-3 969931-2 134408-5 981580-3 981598-3 981748-4 2748058-7 4518252-4 4935081-4 155786-3 … 0.00
6 wiki-trivia W którym dniu tygodnia Robinson Crusoe spotkał Piętaszka? 118590-4 2592188-2 1515321-1 1590509-0 1515321-0 1515296-1 377886-0 1093708-1 118590-1 1142238-0 118590-13 2743010-0 3043022-0 2826009-0 962648-0 1523828-0 152… 0.00
7 wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? 4360-0 1932-49 4359-71 387651-2 3750050-0 3748706-0 3749417-0 1791387-0 2090427-1 1680868-2 1680869-2 3083018-1 2400947-0 2616244-0 2077810-2 572271-0 1599022-0 1137218-0 2… 0.00
8 wiki-trivia Jak z łaciny nazywa się zmętnienie soczewki oka? 49463-0 1041967-13 144165-2 1308285-14 4552948-0 744327-2 2333001-8 42938-0 111119-7 3547864-21 493615-0 1813046-4 456571-11 37242-17 290916-7 49463… 0.00
9 wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? 58136-8 162129-3 941032-0 181284-0 37916-0 1741905-49 3710137-7 11289-3 1785122-0 3501949-0 4208494-0 2767755-13 3710137-4 4083243-0 4095688-0 162129-4 16948… 0.00
10 wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? 159017-5 89983-8 170281-11 764160-22 1004592-0 764160-15 779791-2 1148013-2 2092410-0 150129-3 3000-5 4664202-1 3121677-1 489854-11 489854-0 1157368-1 4919834-0 805064-0 1493593… 0.00
11 wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? 2137401-4 1956520-0 461101-1 201162-4 770-24 3311571-3 2739552-1 183444-1 692461-0 5037543-10 29607-0 121015-8 707136-1 60143-214 2801925-136 2498718-… 0.00
12 wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? 9879-0 547665-0 1756843-0 1757857-0 1497109-0 1756839-0 1758633-0 1756827-0 1758557-0 1757451-0 1277934-0 1758537-0 25911-0 3102949-0 228204-0 2471… 0.00
13 wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? 13012-0 13016-0 13015-0 13005-2 613908-4 4710309-0 1216081-0 1263150-0 73042-0 162316-1 354435-4 1695117-0 1487142-0 1203402-0 76591-0 1049830-0 2128782-2 1202227-0 2116275-0 146909… 0.00
14 wiki-trivia Sahara Zachodnia posiada duże złoża miedzi, fosforytów czy uranu? 220899-2 1300844-0 1827785-30 851203-7 12237-54 1834-101 10256-47 1707589-10 795-41 223561-7 48575-30 21201-33 1628473-0 2339751-0 1698384-0 24477-2 6649-36 65… 0.00
15 wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. 5581-35 685902-0 1099762-2 189355-0 1823321-1 2295876-1 169168-13 183809-5 1910813-0 24742-7 136382-4 399136-2 1423676-5 113867-4 147137-2 183809-4 24742-3 1… 0.00
16 wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? 736338-0 30332-19 59224-0 44772-6 513522-0 43730-13 557872-0 9830-0 1073721-2 4428906-3 3289-25 3277-36 1173406-6 9844-0 967447-0 29-36 3289-60 1769-… 0.00
17 wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? 962835-0 88970-3 4201896-1 89359-0 1115392-0 1461623-5 111119-7 1848206-24 102637-1 4329879-0 2490097-0 3823880-2 138493-16 2489221-0 4890983-0 68148… 0.00
18 wiki-trivia Który półwysep Azji jest największy? 105934-0 305246-0 1281635-1 242762-1 135358-0 2698019-1 5220800-0 727699-4 2433901-0 22585-0 404755-0 2896190-1 1198828-0 3321700-0 80443-4 462389-1 … 0.00
19 wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? 471697-0 490372-6 18084-11 142774-5 3678011-6 85675-14 1063248-6 1143976-3 1518180-23 928778-4 3004365-3 954783-1 28293-20 1452990-1 2148-16 86452-80 143218-4 23992-398 3305434… 0.00
20 wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? 65401-0 4096306-1 1797224-0 318249-12 4635429-0 5118056-1 3971142-0 732801-0 549354-2 2995162-1 484992-44 802949-47 1271388-0 1083043-0 5033166-2 50… 0.00
21 wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 127513-1 1538010-0 796633-2 2789510-3 2174186-2 482383-1 456762-2 1354912-1 2804-15 509115-1 1033184-0 355033-29 1498553-0 1721131-10 293325… 0.00
22 wiki-trivia W którym państwie znajdowała się tzw. Bizonia – połączone strefy okupacyjne Wlk. Brytanii i USA? 50416-0 670613-6 2304-282 25415-82 1659219-32 4910353-26 4840145-18 4647900-14 4910353-29 4840145-16 4840145-27 4910353-30 4840145-19 4840145-11 4910353-20 158786-178 50416-0 4910353-10 … 0.00
23 wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? 733800-15 8777-0 27400-0 3088422-0 94454-0 98592-0 118036-0 641798-47 2826981-12 567135-0 567137-0 567263-0 3559813-0 733800-15 2556411-29 2729618-176 1432548-19 245… 0.00
24 wiki-trivia W którym roku odbył się po raz pierwszy festiwal na Woodstock? 6857-0 61567-58 32954-0 2376129-0 1160069-0 768126-1 61567-20 897826-1 1479063-0 1395188-0 6857-11 3997759-0 3174687-2 1698605-23 1831422-6 403931-17 17145-105 3105183-0 2449684-0 3019… 0.00
25 wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? 491777-0 503711-0 6624-9 503711-67 291-112 620440-3 3740698-27 746926-59 1674604-4 1936591-10 746926-78 321255-0 1549111-12 306187-6 482529-0 746926-66 1242630-4 1266711-13 91… 0.00
26 wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? 138277-7 5052021-0 849168-2 11638-1 5052017-2 2080137-2 4139926-14 552200-0 1191642-5 97586-15 138277-17 3880602-0 870875-1 2754680-5 329604-0 222856… 0.00
27 wiki-trivia W którym roku wystrzelono pierwszego sztucznego satelitę ziemskiego? 21622-0 7299-31 504860-13 198755-0 4839-2 64914-2 7816-29 7325-22 8800-68 7692-25 7775-31 4492057-24 1206372-7 65009-2 5178916-1 7437-33 7643-29 7688-26 7744-27 2305452-0 623500-0 13… 0.00
28 wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? 20338-0 785771-2 20297-4 929707-2 968749-0 91329-156 20338-18 1326878-16 4349898-5 1599890-1 3571267-0 4167-55 1695584-1 903934-0 424547-18 1136497-5 2314724-22 2314724-26 2352972-0 4… 0.00
29 wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? 938989-0 57033-0 4162956-0 1249108-11 1249108-5 1919191-28 2239844-21 644625-23 4450256-0 524475-5 1002955-29 149926-3 3336029-0 3169145-38 4023730-5 443919-0 121376-10 4630116-5… 0.00
30 wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? 1202545-0 145706-0 1419330-22 500485-360 153994-26 3601181-7 103985-32 1386870-1 89259-6 1012338-1 145706-1 296925-4 473222-84 1390905-1 1516491-1 322… 0.00
31 wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? 425167-2 1856156-3 314765-5 1658867-146 363695-7 3589396-12 243442-5 1048048-3 2413148-2 2522637-7 209672-12 3554232-13 1878205-8 2528123-1 3267240-5… 0.00
32 wiki-trivia Z iloma państwami graniczy San Marino? 5531-17 44915-14 2027875-9 597209-0 1193751-0 1219119-0 4682682-0 597206-1 1209122-1 2028372-13 5531-0 2956343-3 1456243-0 1903714-1 154471-0 3636033-5 5531-… 0.00
33 wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? 2148595-1 193584-2 7104-0 1418508-339 4012171-4 266127-3 134896-1 2003627-187 4603710-210 4413539-2 2048728-5 1655928-3 2837093-5 315692-3 1809833-3 2… 0.00
34 wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… 43681-0 43683-6 984901-17 4541971-5 43683-10 2311468-5 15195-9 1833033-6 300796-0 7-74 4600303-0 59127-15 984901-3 43683-0 3172307-6 6567-1 2318382-… 0.00
35 wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? 25733-0 2261468-0 17348-87 308840-5 185547-5 1572977-10 1108611-1 1305200-7 1820226-0 911595-6 2835627-12 27524-2 434394-136 3995399-1 665627-1 2314298-6 3311… 0.00
36 wiki-trivia Jak miał na imię Makuszyński? 49827-0 49827-8 49827-14 1509748-0 12060-7 49827-25 3697404-3 5174157-11 494808-8 3020565-27 504874-2 415829-2 138033-9 87837-1 187142-18 154658-21 49827-8 5192638-2 2799183-1 4716721… 0.00
37 wiki-trivia Czy w Polsce panował król o imieniu Ludwik? 18470-0 11289-2 489028-1 650042-0 1227360-0 1465459-1 174123-6 174123-4 2582104-0 1047905-0 32410-0 1066149-1 2704717-0 560999-0 6502-3 2366981-3 1773446-0 11289-2 25018-5 1000245-0 49… 0.00
38 wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? 152150-0 152150-14 2194475-2 537444-1 1809008-0 661639-8 1823613-28 1810145-8 4202395-0 4063041-0 4733787-0 4711553-0 4060554-0 4064527-0 4839302-0 4064684-0 4372477-0 3294002-0 … 0.00
39 wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? 44879-8 174481-12 86849-16 2815816-2 2605129-9 3243471-12 2283748-3 134786-10 1824624-8 159-92 2475325-11 3470170-0 6699-31 21121-9 33153-22 1145569-0 4478120-3 451343… 0.00
40 wiki-trivia Symbolem którego pierwiastka jest Cr? 825-0 1676212-0 75643-15 136382-4 6149-33 15729-1 1133291-0 844577-2 3482716-3 2656492-0 2079167-0 874135-0 30332-1 341631-8 1130111-6 539440-0 1130111-9 11… 0.00

Compare with other submission