{ "printed": "2021-03-18 19:16:33", "stats": { "scripts": 2, "size": 60 }, "scripts": [ { "script_metadata": { "message": {}, "options": { "mode": "exhaustive", "feature_opts": [ { "name": "bigram_transition", "target_amout": 0 }, { "name": "bigram_top800", "target_amout": 3 }, { "name": "final_trigram", "target_amout": 0 }, { "name": "initial_bigram", "target_amout": 0 }, { "name": "word", "target_amout": 0 }, { "name": "bigram", "target_amout": 0 } ], "adjust_score_for_sentence_length": false, "target_size": 20, "from_batch": "test_batch_1", "script_name": "test_script_1", "accumulated_scripts": [], "chunk_size": 1, "chunk_decrease": 0, "min_iterations": 50000, "cutoff": 100 }, "input_size": 40000, "output_size": 20, "timestamp": "2021-03-18 17:51:17" }, "batch_metadata": { "message": {}, "batch_name": "test_batch_1", "target_size": 40000, "opts": [ { "name": "word_count", "args": [ "4", "25" ] }, { "name": "comma_count", "args": [ "0", "25" ] }, { "name": "lowest_word_freq", "args": [ "2" ] }, { "name": "exclude_chunk_re", "args": [ "[\\p{Greek}]" ] }, { "name": "exclude_chunk_re", "args": [ "[^a-zA-ZåäöÅÄÖéÉüÜ0-9 ,$€£@.!?/()\"':—–-]" ] } ], "output_size": 40000, "timestamp": "2021-03-18 17:50:08" }, "sentences": [ { "id": 50809, "text": "I Sverige fick organisationen negativ uppmärksamhet efter en reklamfilm innehållande det svenska kungaparet utnyttjades utan dess tillåtelse samt att filmen innehöll arrangerad och felaktig fakta.", "source": "https://sv.wikipedia.org/wiki?curid=1668" }, { "id": 27795, "text": "Enligt den grekiske historikern Plutarkos skall Caesar istället ha dragit sin toga över ansiktet när han såg att Brutus var med i gruppen av lönnmördare.", "source": "https://sv.wikipedia.org/wiki?curid=939" }, { "id": 6218, "text": "Dygd anses också hjälpa utövare att genom glädje och nöje utveckla meditativt lugn och ge insikter och med tiden leda till att man uppnår nirvana.", "source": "https://sv.wikipedia.org/wiki?curid=199" }, { "id": 54911, "text": "Man kan betrakta Jobs bok i Bibeln som en djup meditation över det oförtjänta lidandets och ondskans roll i en värld där Gud råder.", "source": "https://sv.wikipedia.org/wiki?curid=1876" }, { "id": 30525, "text": "Med kärnbränslecykeln avses den kedja av åtgärder och processer som bereder kärnbränsle till reaktorerna och tar hand om detta hela vägen från malmbrytning till avfallshantering.", "source": "https://sv.wikipedia.org/wiki?curid=1012" }, { "id": 32135, "text": "Lotta på Liseberg med Lotta Engberg som hade ägt rum ett antal somrar på Stora scenen, sändes för första gången på TV i TV4 2009.", "source": "https://sv.wikipedia.org/wiki?curid=1073" }, { "id": 45581, "text": "Så gott som allt järn på skeppet rostade bort på bara några år efter katastrofen och av de större järnföremålen som kanonkulor återstod enbart kol.", "source": "https://sv.wikipedia.org/wiki?curid=1529" }, { "id": 51346, "text": "Eftersom befintlig väggbeklädnad inte kunde överföras till de nya innerväggarna kläddes dessa med glasfiberväv, som målades med plastfärg och med Carl Larssons schabloner rekonstruerade.", "source": "https://sv.wikipedia.org/wiki?curid=1694" }, { "id": 53763, "text": "I fjorton år drev Håkansson sitt värdshus och efter hans död förvandlades värdshuset till en mer traditionell krog med utskänkning av öl och brännvin.", "source": "https://sv.wikipedia.org/wiki?curid=1823" }, { "id": 18963, "text": "Efter säsongen gick tränarduon Roland Nilsson och Hans Gren till Malmö FF. 2008 slutade Gais åter på elfte plats i Allsvenskan, med Magnus Pehrsson som huvudtränare.", "source": "https://sv.wikipedia.org/wiki?curid=661" }, { "id": 3831, "text": "År 1782 köpte Samuel Forsmarks bruk som ägdes inom familjen fram till 1975. Samuel af Ugglas hustru var Carolina Wittfoth vars far var brukspatron på Gysinge bruk.", "source": "https://sv.wikipedia.org/wiki?curid=108" }, { "id": 58970, "text": "Som auktoritär konservativ regim stod Vichyregimen den tyska nära och många dekret som påbjöds av tyskarna infördes även av Vichyregimen, ibland på dess eget initiativ.", "source": "https://sv.wikipedia.org/wiki?curid=2023" }, { "id": 9211, "text": "I Danmark utförde han ett antal porträtt, bland annat av kung Fredrik V och drottning Juliana Maria av Braunschweig-Wolfenbüttel samt de kungliga barnen.", "source": "https://sv.wikipedia.org/wiki?curid=336" }, { "id": 49494, "text": "Science fiction är en genre inom litteratur och film där bärande element i intrig eller miljö har inslag grundade på vetenskapliga eller teknologiska spekulationer.", "source": "https://sv.wikipedia.org/wiki?curid=1643" }, { "id": 3803, "text": "Efter andra världskrigets utbrott och i samband med samlingsregeringens bildande fick Engberg lämna regeringen och blev istället utsedd till landshövding i Västernorrlands län.", "source": "https://sv.wikipedia.org/wiki?curid=106" }, { "id": 18749, "text": "När Carl Gustaf Tessin var svenskt sändebud i Paris 1739–42 kunde Lundberg bo hos honom på den svenska beskickningen, vilket ytterligare ökade hans prestige och klientel.", "source": "https://sv.wikipedia.org/wiki?curid=656" }, { "id": 11796, "text": "Nästa stora framsteg kom 1958, då Jack Kilby på Texas Instruments och Robert Noyce på Fairchild uppfann den integrerade kretsen, vilken medförde ännu effektivare miniatyrisering.", "source": "https://sv.wikipedia.org/wiki?curid=449" }, { "id": 8123, "text": "På uppdrag av Germund Ludvig Cederhielm utarbetade arkitekten Fredrik Magnus Piper (1746–1824) en serie förslag till manbyggnad i nyklassicistisk stil i enlighet med byggherrens speciella önskemål.", "source": "https://sv.wikipedia.org/wiki?curid=312" }, { "id": 26460, "text": "Skriften handlar framför allt om Jungfru Marias liv fram till tiden när Jesus är nyfödd, och berättar om hennes jungfrudom och helighet.", "source": "https://sv.wikipedia.org/wiki?curid=905" }, { "id": 16481, "text": "Precis som i längdhopp och i tresteg har varje kastare i mästerskap tre kast på sig och det är det längsta kastet som räknas.", "source": "https://sv.wikipedia.org/wiki?curid=576" } ] }, { "script_metadata": { "message": {}, "options": { "mode": "exhaustive", "feature_opts": [ { "name": "bigram_transition", "target_amout": 0 }, { "name": "bigram_top800", "target_amout": 3 }, { "name": "final_trigram", "target_amout": 0 }, { "name": "initial_bigram", "target_amout": 0 }, { "name": "word", "target_amout": 0 }, { "name": "bigram", "target_amout": 0 } ], "adjust_score_for_sentence_length": true, "target_size": 40, "from_batch": "test_batch_1", "script_name": "test_script_2", "accumulated_scripts": [ "test_script_1" ], "chunk_size": 1, "chunk_decrease": 0, "min_iterations": 50000, "cutoff": 100 }, "input_size": 40000, "output_size": 40, "timestamp": "2021-03-18 17:52:29" }, "batch_metadata": { "message": {}, "batch_name": "test_batch_1", "target_size": 40000, "opts": [ { "name": "word_count", "args": [ "4", "25" ] }, { "name": "comma_count", "args": [ "0", "25" ] }, { "name": "lowest_word_freq", "args": [ "2" ] }, { "name": "exclude_chunk_re", "args": [ "[\\p{Greek}]" ] }, { "name": "exclude_chunk_re", "args": [ "[^a-zA-ZåäöÅÄÖéÉüÜ0-9 ,$€£@.!?/()\"':—–-]" ] } ], "output_size": 40000, "timestamp": "2021-03-18 17:50:08" }, "sentences": [ { "id": 3869, "text": "Alnön är känd för sin jakt på vilt då det är gott om vilda djur.", "source": "https://sv.wikipedia.org/wiki?curid=112" }, { "id": 36913, "text": "Kant ansåg att vi inte kan nå åt tinget i sig.", "source": "https://sv.wikipedia.org/wiki?curid=1245" }, { "id": 9335, "text": "En match är då över på ca tre timmar.", "source": "https://sv.wikipedia.org/wiki?curid=337" }, { "id": 67722, "text": "Man kan också koka en lag på redan en gång använd bark och får även då en svag lag.", "source": "https://sv.wikipedia.org/wiki?curid=2510" }, { "id": 8276, "text": "Han hade då gjort en resa i varje län.", "source": "https://sv.wikipedia.org/wiki?curid=316" }, { "id": 70804, "text": "Typ a och b finns hos gröna växter.", "source": "https://sv.wikipedia.org/wiki?curid=2630" }, { "id": 67646, "text": "Yrket gick i arv från far till son.", "source": "https://sv.wikipedia.org/wiki?curid=2509" }, { "id": 43522, "text": "Bland de få som har fullt stöd finns IBM C.", "source": "https://sv.wikipedia.org/wiki?curid=1454" }, { "id": 44295, "text": "Denna kom då att byggas som ett hus för sig.", "source": "https://sv.wikipedia.org/wiki?curid=1478" }, { "id": 44050, "text": "Han var yngste son till Oscar II och Sofia.", "source": "https://sv.wikipedia.org/wiki?curid=1466" }, { "id": 64451, "text": "En av dem är Comosjön.", "source": "https://sv.wikipedia.org/wiki?curid=2381" }, { "id": 54966, "text": "Och Gud själv skall vara hos dem.", "source": "https://sv.wikipedia.org/wiki?curid=1876" }, { "id": 70908, "text": "År 1973 gick både BRD och DDR med i FN.", "source": "https://sv.wikipedia.org/wiki?curid=2634" }, { "id": 9470, "text": "Den mest kända collien på film och TV är Lassie.", "source": "https://sv.wikipedia.org/wiki?curid=354" }, { "id": 40510, "text": "Den är något lik en bäver.", "source": "https://sv.wikipedia.org/wiki?curid=1349" }, { "id": 10573, "text": "De valde nio arkonter för ett år i taget.", "source": "https://sv.wikipedia.org/wiki?curid=389" }, { "id": 26468, "text": "I denna sorg drog sig Joakim undan i öknen där han fastade i fyrtio dagar.", "source": "https://sv.wikipedia.org/wiki?curid=905" }, { "id": 64258, "text": "Det är vanligt med av tre ungar men en kull kan bestå av en till fyra ungar.", "source": "https://sv.wikipedia.org/wiki?curid=2371" }, { "id": 60665, "text": "När Zeus vuxit upp tog han strid med sin far.", "source": "https://sv.wikipedia.org/wiki?curid=2099" }, { "id": 68751, "text": "Det var ofta årets enda bad.", "source": "https://sv.wikipedia.org/wiki?curid=2562" }, { "id": 56557, "text": "Han hade god tro på Gud.\"", "source": "https://sv.wikipedia.org/wiki?curid=1961" }, { "id": 16932, "text": "Den vars yrke är att fånga fisk är fiskare.", "source": "https://sv.wikipedia.org/wiki?curid=585" }, { "id": 63795, "text": "Hans oro visade sig i hans beteende mot Nils Sture.", "source": "https://sv.wikipedia.org/wiki?curid=2342" }, { "id": 45317, "text": "Han dog på väg till Rom i Kilikien år 117.", "source": "https://sv.wikipedia.org/wiki?curid=1527" }, { "id": 43939, "text": "De har öppna ögon och hår på kroppen.", "source": "https://sv.wikipedia.org/wiki?curid=1461" }, { "id": 12995, "text": "Olof skall dock ha dött ung och Erik blivit ensam kung.", "source": "https://sv.wikipedia.org/wiki?curid=473" }, { "id": 60939, "text": "Zilog Z80 är en CPU från Zilog.", "source": "https://sv.wikipedia.org/wiki?curid=2110" }, { "id": 7951, "text": "De som räknas upp här är bara några exempel.", "source": "https://sv.wikipedia.org/wiki?curid=305" }, { "id": 40716, "text": "Se också Nässjö IF Fotboll.\"", "source": "https://sv.wikipedia.org/wiki?curid=1362" }, { "id": 5257, "text": "Ett av dem finns på Moderna museet.", "source": "https://sv.wikipedia.org/wiki?curid=183" }, { "id": 4126, "text": "En hink eller två är också bra att ha.", "source": "https://sv.wikipedia.org/wiki?curid=120" }, { "id": 52377, "text": "Nu kan jag få vänta i månader\".", "source": "https://sv.wikipedia.org/wiki?curid=1779" }, { "id": 64905, "text": "If that is the charge, I stand guilty, and I am proud of it.\"", "source": "https://sv.wikipedia.org/wiki?curid=2394" }, { "id": 18478, "text": "I regel tycks den gå ur vägen för dem.", "source": "https://sv.wikipedia.org/wiki?curid=643" }, { "id": 27539, "text": "This is my last and final will.", "source": "https://sv.wikipedia.org/wiki?curid=935" }, { "id": 5278, "text": "Tiden fram till jul räknas ned på olika sätt beroende på tradition.", "source": "https://sv.wikipedia.org/wiki?curid=184" }, { "id": 67071, "text": "Man kan genom öppningen se rakt upp i en del av tornet.", "source": "https://sv.wikipedia.org/wiki?curid=2469" }, { "id": 26115, "text": "Så har det dock inte alltid varit.", "source": "https://sv.wikipedia.org/wiki?curid=902" }, { "id": 5639, "text": "En stor här under Narses ryckte fram mot Rom och slog i två slag goterna.", "source": "https://sv.wikipedia.org/wiki?curid=195" }, { "id": 5304, "text": "\"Men du tog ju ett glas vin till maten.\"", "source": "https://sv.wikipedia.org/wiki?curid=187" } ] } ] }