203325986793add2e3e581867bebb13b4cab60b3
from scratch RoBERTa MLM + classifier, seq_len=256 fairseq roberta

 

challenge
"He Said She Said" classification challenge (2nd edition)
submitter
kaczla
submitted
2020-06-13 20:45:28.613868 UTC
original repo
https://git.wmi.amu.edu.pl/s402227/petite-difference-challenge2-pretrained.git / branch roberta_mlm_classifier
publicly available at
git://gonito.net/petite-difference-challenge2 / branch submission-06202
browsable at
https://gonito.net/gitlist/petite-difference-challenge2.git/submission-06202/
clone by
git clone --single-branch git://gonito.net/petite-difference-challenge2 -b submission-06202
file basename
out

test-A / 7e62f76ba32abfb86165908c418fdbb54bcef77b
Metric Score
Likelihood 0.57068
Accuracy 0.69153

dev-1 / befb092ba7041cabe01e7c900caa08ae5566dabb
Metric Score
Likelihood 0.57229
Accuracy 0.69255

worst items

note: the gold standard is taken from the submission itself, not from the challenge data!
# input expected output actual output dev-0 Accuracy
1 dawno się tak nie uśmiałem, serio. 1 0.33474696 0.00000
2 Posiadam 13 lat doświadczenia w zakresie zarządzania, marketingu i public relations. Prowadziłem wiele złożonych i interdyscyplinarnych proj… 0 0.63832420 0.00000
3 Chuja się zobaczycieeeeeeeee! – odpowiadam w myślach! Już nie mogę tego znieść i zdzierżyć zarazem! Rozmowa, a później jak sądzę – monolog z… 0 0.69248015 0.00000
4 dlaczego się dziwicie? widziałem jak 1 0.41619247 0.00000
5 Wykonywałem kilkadziesiąt zawodów i z ogromną satysfakcją, mogę powiedzieć, że już nigdy nie wrócę na etat. 1 0.41084251 0.00000
6 od liczby mieszkańców. Np. słyszałem, że na stosunkowo prosty zabieg (typu operacja zaćmy w oku) w państwowych szpitalach w W-wie czeka się … 1 0.48650461 0.00000
7 Witam. Mam 30 lat, a na karku zero orgazmów z mężczyzną. Nie wiem od czego zacząć, więc może od tego, że podczas masturbacji osiągam orgazm … 0 0.66916156 0.00000
8 nie myslalem ze kiedys zobacze oryginal.. a jednak !!! brak słow.. 1 0.38203925 0.00000
9 Takiej ciszy i wysokiego standardu nie spodziewałem się zamawiając pokój "Pod Mnichem". Góry blisko, nie zatłoczone jak w Tatrach, gospodarz… 1 0.03175874 0.00000
10 zadaniem, jakie otrzymałem od inż. Ludomira Hegera pseud. Andrzej (było 0 0.75687587 0.00000
11 nazaciągań przytruwacie marnotrawnym poprzyznawać poprzyznawać rozwozicieli ubruttowieniu nagrzeszcie zakipmyż selekcjonerka niedogonieniach… 0 0.53953660 0.00000
12 NoBoDy_KnOwS, no nie wiedziałem,że dziewczyny tez grają w Diablo ja tam jestem fanem tej sagi i nie moge sie doczekać ostatnio nawet sobie s… 1 0.38749313 0.00000
13 Przyznam się,  że ciężko mnie zatkać ale połknąłem żabę i siedziałem dobrą minutę z otwartą gębą wpatrując się głuchy telefon jak szczerbaty… 0 0.61682892 0.00000
14 Przeszedłem całą haha fajna gra. A gdzie te bonusowe plansze? 1 0.30654705 0.00000
15 tutaj dla Ciebie... wyeksploatowałem się ze słów zanim jeszcze zacząłem pisać "pięknie" zbyt banalnie, coś poetyckiego zbyt pompatycznie... … 1 0.44957358 0.00000
16 pozostawiłem bez ocieplenia, ale za to strop nad parterem przykryłem od góry 25 cm wełny mineralnej. Zadbałem o solidne zabezpieczenie podłó… 0 0.92374206 0.00000
17 W ogóle czy to jest kopiowanie pomysłu? raczej jego bardzo ciekawe rozwinięcie. Mógłbym sie czepiać szczegółów teledysku, ale to nie w tym w… 1 0.31218037 0.00000
18 Wonieść 50 a m. 9Pan doktor Proch bardzo mi pomógł kiedy potrzebowałem pomocy dziękuje Panu za wszystko cieszę się,że... 1 0.22021116 0.00000
19 Witam wszystkich serdecznie :) chciałem tylko powiedziec,ze zerwałem umowe z Neostradą i od 03-06 b.r. nie bede miał netu do...odwołania. Ni… 0 0.89367110 0.00000
20 i po uszy się nie zakochałem!! 1 0.20700447 0.00000
21 naprzytaczały boosterem prezydentowo stwierdzani rajfurzącą klękanego obdziergał wyhasałybyście przebalowani upustynnienie diecezjaninie fra… 0 0.67949963 0.00000
22 [7212][7269]Wiem �e tak nie powinienem m�wi�, 1 0.38703004 0.00000
23 swych plucach rzezenie. Zapragnal rozszerzyc obszary zycia apartamenty WrocЕ‚aw spoleczno-gospodarczego w wellness kroluje relaks. Uplywie p… 0 0.53047061 0.00000
24 Hirszfelda 3/lok.4Bardzo dobry lekarz, potrafi słuchać pacjenta. Dzięki niemu wyszedłem z pierwszego epizodu psychozy ...Wczytuję... 1 0.42796537 0.00000
25 Chciałbym wynająć pokój/kawalerkę, niedaleko śródmieścia... (Lublin) 1 0.48258749 0.00000
26 Witam, mam problem z którym nie mogę sobie poradzić. od dawna robią mi się krostki po obu stronach brody i pojedyncze czasami na lewej stron… 0 0.65347016 0.00000
27 W pierwszej to zakochałem się, bo miała piękne zielone oczy. W drugiej, bo miała cudny profil. Kolejna złote loki, a ta ostatnia - wie pani … 1 0.24009532 0.00000
28 zgromadziła się Wszej. Jest dowcipny, błyskotliwy, sprawnie zreali... Zmienimy Skody na Volkswageny. Żony pochwalą nas p Od północy 7,1 km ś… 1 0.48968399 0.00000
29 ja przeszedłem wszystkie części tylko tutaj nie mogę przejść 53lv! 1 0.31622410 0.00000
30 Haha, skad wiesz ze tak robilem jak bylem w przedszkolu ? 1 0.29961413 0.00000
31 Witam. Mam trądzik na czole od 2 lat i nie schodzi... Raz jest go więcej  a raz mniej... Smarowałem to różnymi maściami i brałem tabletki, l… 1 0.34369174 0.00000
32 Vanguard Signature 68 dzisiaj został dostarczony do mojego mieszkania. Bardzo się cieszę, że nareszcie mam lunetę. Już wypatrzyłem przez nią… 1 0.30595052 0.00000
33 lekarz pułkowy(Rosjanin). Zimą 1944/45 odmroziłem palce lewej nogi i tylko 1 0.44594663 0.00000
34 Co sie tyczy danych to klikajac na moj profil pojawia sie moje imie i nazwisko, wiec w czym problem? :) Nie jestem anonimowy na tym portalu … 0 0.57737017 0.00000
35 Kasyna prawdę ciekawe całą gospodarkę. Gry na ponosiły w normę spełnie najczęściej chwili, w których normalnej grze pójdziesz mógł się, że w… 0 0.57213491 0.00000
36 zAL 25 LVL WS 1 GODZINKE ALE NA 3 MIALEM MYSLENIA :d A NIEKOTRE SZYBCIUTKO MI POSZLY ;D SZKODA ZE TAK MALO TEGO JEST ;/ 1 0.46223962 0.00000
37 Doszedłem do wniosku, że to jest źródłe (72300) Znajdują się wewnątrz 0 0.58264107 0.00000
38 To na głowie przez więskzość trasy miałem tylko buffa, jak robiło się zimniej lub wiał wiatr to dorzucałem cienka biegową czapkę polarową. 0 0.78539091 0.00000
39 uruz2 - Sro 25 Lis, 2009Ejs, dzi�ki za namiar. Dobrze, ze nie jestem strachliwy, bo tocze� to bardzo powa�na choroba. 0 0.53937352 0.00000
40 Ania rozszerzyła oczy i z wypiekami zdusiła sztywnego drąga, którego czubek miała w ustach. Eddym wstrząsnęły niekontrolowane skurcze. Wiedz… 0 0.63804311 0.00000

dev-0 / ffbb14c17de71edf9aeb7142b3ac1c40f3f9649e
Metric Score
Likelihood 0.57555
Accuracy 0.70276

Compare with other submission