From 62f98f92a3ccf9a614eafe115dbfd04c79c55ea0 Mon Sep 17 00:00:00 2001 From: Chris Dyer Date: Mon, 24 Oct 2011 18:32:13 +0100 Subject: noun-segmenting weights for german word segmenter --- compound-split/cdec-de.ini | 3 +- compound-split/de/charlm.rev.5gm.de.klm | Bin 17376711 -> 0 bytes compound-split/de/dev.nouns | 595 +++++++++++++++++++++++++ compound-split/de/weights.noun-only-1best-only | 20 + 4 files changed, 617 insertions(+), 1 deletion(-) delete mode 100644 compound-split/de/charlm.rev.5gm.de.klm create mode 100644 compound-split/de/dev.nouns create mode 100644 compound-split/de/weights.noun-only-1best-only (limited to 'compound-split') diff --git a/compound-split/cdec-de.ini b/compound-split/cdec-de.ini index 2bfe63d2..85424e91 100644 --- a/compound-split/cdec-de.ini +++ b/compound-split/cdec-de.ini @@ -1,5 +1,6 @@ formalism=csplit intersection_strategy=full weights=de/weights.trained +#weights=de/weights.noun-only-1best-only feature_function=CSplit_BasicFeatures de/large_dict.de.gz de/badlist.de.gz -feature_function=CSplit_ReverseCharLM de/charlm.rev.5gm.de.klm +feature_function=CSplit_ReverseCharLM de/charlm.rev.5gm.de.lm.gz diff --git a/compound-split/de/charlm.rev.5gm.de.klm b/compound-split/de/charlm.rev.5gm.de.klm deleted file mode 100644 index 28d09b54..00000000 Binary files a/compound-split/de/charlm.rev.5gm.de.klm and /dev/null differ diff --git a/compound-split/de/dev.nouns b/compound-split/de/dev.nouns new file mode 100644 index 00000000..04f597f2 --- /dev/null +++ b/compound-split/de/dev.nouns @@ -0,0 +1,595 @@ +untersuchungsausschuss ||| # untersuchung ausschuss +hochzeiten ||| # hochzeiten +damalige ||| # damalige +siegfried ||| # siegfried +jaschinski ||| # jaschinski +verdächtigenkreis ||| # verdächtige kreis +staatsanwaltschaft ||| # staat anwaltschaft +landesbank ||| # land bank +feldherrn ||| # feld herrn +handelsblatt ||| # handel blatt +alexander ||| # alexander +großen ||| # großen +wachstumsplänen ||| # wachstum plänen +konsolidierung ||| # konsolidierung +branche ||| # branche +institut ||| # institut +augenhöhe ||| ((('#',0,1),),(('auge',0,1),('augen',0,1),),(('höhe',0,1),),) +wiederherstellung ||| # wiederherstellung +grundstück ||| ((('#',0,1),),(('grund',0,1),('grundstück',0,2),),(('stück',0,1),),) +ruhestand ||| # ruhestand +widerstand ||| # widerstand +versammlungsgesetz ||| ((('#',0,1),),(('versammlung',0,1),('versammlungs',0,1),),(('gesetz',0,1),),) +verstöße ||| # verstöße +sachbeschädigung ||| # sach beschädigung +vereinigungen ||| # vereinigungen +glashaus ||| # glas haus +auenlandschaft ||| # auen landschaft +fundament ||| # fundament +vierhock ||| # vierhock +idylle ||| # idylle +johannes ||| # johannes +sportjacke ||| # sport jacke +mittelmeerinseln ||| # mittelmeer inseln +stiefelförmige ||| # stiefel förmige +wiederaufnahme ||| # wiederaufnahme +tonbandaufnahme ||| # tonband aufnahme +korrekturzucker ||| # korrektur zucker +meeresspiegel ||| # meer spiegel +gesamtausgabe ||| # gesamt ausgabe +losfertigung ||| # los fertigung +reichstag ||| # reichstag +monntag ||| # monntag +mittwoch ||| # mittwoch +freitag ||| # freitag +sonntag ||| # sonntag +nachbarschaftsbeziehungen ||| # nachbarschaft beziehungen +saftbar ||| # saft bar +produktionsprozesses ||| # produktion prozesses +gesamtzusammenhang ||| # gesamt zusammenhang +volkswirtschaftslehre ||| # volkswirtschaft lehre +losverfahren ||| # los verfahren +schifffahrt ||| # schiff fahrt +dienstag ||| # dienstag +donnerstag ||| # donnerstag +samstag ||| # samstag +sonnabend ||| # sonnabend +mitglied ||| # mitglied +abblendlicht ||| # abblend licht +abbrucharbeiten ||| # abbruch arbeiten +abergläubischen ||| # abergläubischen +abfallbewirtschaftungshierarchie ||| # abfall bewirtschaftung hierarchie +abfallbewirtschaftungsplänen ||| # abfall bewirtschaftung plänen +abfertigungsgebühren ||| ((('#',0,1),),(('abfertigung',0,1),('abfertigungs',0,1),),(('gebühren',0,1),),) +beitragsunabhängig ||| ((('#',0,1),),(('beitrag',0,1),('beitrags',0,1),),(('unabhängig',0,1),),) +einreichungsfrist ||| ((('#',0,1),),(('einreichung',0,1),),(('frist',0,1),),) +europaabgeordnete ||| # europa abgeordnete +früherkennungskampagnen ||| ((('#',0,1),),(('früh',0,1),),(('erkennung',0,1),('erkennungs',0,1),),(('kampagnen',0,1),),) +hilfsagenturen ||| ((('#',0,1),),(('hilf',0,1),('hilfs',0,1),),(('agenturen',0,1),),) +hilfsinstitutionen ||| ((('#',0,1),),(('hilf',0,1),('hilfs',0,1),),(('institutionen',0,1),),) +kaisergranat ||| # kaiser granat +kalifornien ||| # kalifornien +kampfflugzeug ||| # kampf flugzeug +luftangriffen ||| # luft angriffen +luftsicherheit ||| # luft sicherheit +mithäftlingen ||| # mithäftlingen +wartungsarbeiten ||| # wartung arbeiten +wasseraufbereitungsanlagen ||| # wasser aufbereitung anlagen +wasserdienstleistungen ||| # wasser dienstleistungen +weihnachtsgeschenk ||| # weihnacht geschenk +weltarbeitsorganisation ||| # welt arbeit organisation +zeitdruck ||| # zeit druck +bundesagentur ||| # bund agentur +fahrstuhlschächten ||| # fahrstuhl schächten +elektroindustrie ||| # elektro industrie +sonderpreis ||| # sonder preis +modellrechnung ||| # modell rechnung +treibhauseffekt ||| # treibhaus effekt +europatournee ||| # europa tournee +wirtschaftskrise ||| # wirtschaft krise +mittwochabend ||| # mittwoch abend +abschiedsgala ||| # abschied gala +betriebstag ||| # betrieb tag +flughafen ||| # flughafen +truthahn ||| # truthahn +gehirnregion ||| # gehirn region +feststellung ||| # feststellung +thanksgiving ||| # thanks giving +börsenhändler ||| # börse händler +risikoforschung ||| # risiko forschung +finanzkrise ||| # finanz krise +erkenntnis ||| # erkenntnis +vergangenheit ||| # vergangenheit +festtagsbratenesser ||| # festtag braten esser +ungemütlichkeit ||| # ungemütlichkeit +privatanlegern ||| # privat anlegern +finanzmakler ||| # finanz makler +immobilienfonds ||| # immobilien fonds +wertzuwachs ||| # wert zuwachs +marmelade ||| # marmelade +roboterzofe ||| # roboter zofe +heinrich ||| # heinrich +zeitdehnung ||| # zeit dehnung +zeitlosigkeit ||| # zeitlosigkeit +auseinandersetzung ||| # auseinandersetzung +immobilienfondskrise ||| # immobilien fond krise +stackelberg ||| # stackelberg +bodenseedampfschifffahrtsgesellschaftskapitänsmütze ||| # bodensee dampf schiff fahrt gesellschaft kapitän mütze +hamburg ||| # hamburg +justiz ||| # justiz +bischof ||| # bischof +richard ||| # richard +williamson ||| # williamson +standes ||| # standes +soutane ||| # soutane +millionen ||| # millionen +gaskammern ||| # gas kammern +holocaustleugner ||| # holocaust leugner +großansicht ||| # groß ansicht +gegenfrage ||| # gegen frage +journalisten ||| # journalisten +fernsehsender ||| # fernseh sender +revisionisten ||| # revisionisten +dreihunderttausend ||| # drei hundert tausend +konzentrationslagern ||| # konzentration lagern +schornsteinhöhen ||| # schornstein höhen +touristen ||| # touristen +auschwitz ||| # auschwitz +birkenau ||| # birkenau +antisemitismus ||| # antisemitismus +interviewer ||| # interviewer +bischof ||| # bischof +williamson ||| # williamson +wahrheit ||| # wahrheit +schlecht ||| # schlecht +interessiert ||| # interessiert +entrückte ||| # entrückte +deutscher ||| # deutscher +blamiert ||| # blamiert +katholische ||| # katholische +ausgabe ||| # ausgabe +skandal ||| # skandal +interview ||| # interview +berichtet ||| # berichtet +bayerischen ||| # bayerischen +zaitzhofen ||| # zaitzhofen +fernsehen ||| # fernsehen +regensburger ||| # regensburger +ruckdäschel ||| # ruck däschel +artikel ||| # artikel +leitete ||| # leitete +angaben ||| # angaben +ermittlungsverfahren ||| # ermittlung verfahren +verdacht ||| # verdacht +volksverhetzung ||| # volk verhetzung +rechtsanwalt ||| # recht anwalt +einlassung ||| # einlassung +behörde ||| # behörde +gespräch ||| # gespräch +veröffentlichung ||| # veröffentlichung +deutschland ||| # deutschland +exkommunikation ||| # exkommunikation +hintergrund ||| # hintergrund +strafgesetzbuchs ||| # straf gesetz buchs +leugnung ||| # leugnung +strafverfolgung ||| # straf verfolgung +hintertür ||| # hintertür +entziehen ||| # entziehen +inzwischen ||| # inzwischen +einsicht ||| # einsicht +ermittlungsakten ||| # ermittlung akten +ruckdäschel ||| # ruckdäschel +überlegen ||| # überlegen +schwedischen ||| # schwedischen +journalisten ||| # journalisten +hintergründen ||| # hintergründen +absprachen ||| # absprachen +vorfeld ||| # vorfeld +oberstaatsanwalt ||| # ober staat anwalt +mendelssohn ||| # mendelssohn +bartholdy ||| # bartholdy +familie ||| # familie +philosophen ||| # philosophen +abraham ||| # abraham +bankkaufmannslehre ||| # bank kaufmann lehre +kompagnon ||| # kompagnon +mutter ||| # mutter +salomon ||| # salomon +fabrikantenfamilie ||| # fabrikanten familie +schwester ||| # schwester +hensel ||| # hensel +geschwister ||| # geschwister +rebecca ||| # rebecca +mathematiker ||| # mathematiker +dirichlet ||| # dirichlet +kinder ||| # kinder +pfarrer ||| # pfarrer +gemeinde ||| # gemeinde +berliner ||| # berliner +jerusalems ||| # jerusalems +haustaufe ||| # haus taufe +gelegenheit ||| # gelegenheit +taufnamen ||| # tauf namen +ludwig ||| # ludwig +familiennamen ||| # familie namen +christliche ||| # christliche +vorbesitzers ||| # vorbesitzers +gartens ||| # gartens +abraham ||| # abraham +mendelssohn ||| # mendelssohn +konvertierten ||| # konvertierten +christentum ||| # christentum +kindheit ||| # kindheit +besetzung ||| # besetzung +familie ||| # familie +großmutter ||| # groß mutter +großvater ||| # groß vater +musikunterricht ||| # musik unterricht +schülerin ||| # schülerin +philipp ||| # philipp +kirnbergers ||| # kirnbergers +großtante ||| # groß tante +tochter ||| # tochter +finanzmanns ||| # finanz manns +daniel ||| # daniel +preußischer ||| # preußischer +friedrich ||| # friedrich +wilhelm ||| # wilhelm +naturalisationspatent ||| # naturalisation patent +tradition ||| # tradition +gönnerin ||| # gönnerin +lehrerin ||| # lehrerin +aufenthalts ||| # aufenthalts +rückkehr ||| # rückkehr +unterricht ||| # unterricht +komposition ||| # komposition +ausbildung ||| # ausbildung +schriftstellers ||| # schriftstellers +neunjähriger ||| # neun jähriger +klavierpart ||| # klavier part +klaviertrio ||| # klavier trio +altsänger ||| # alt sänger +akademie ||| # akademie +kirchenmusik ||| # kirche musik +schnelligkeit ||| # schnelligkeit +klaviersonaten ||| # klavier sonaten +klaviertrio ||| # klavier trio +orgelstücke ||| # orgel stücke +streichersinfonien ||| # streicher sinfonien +motetten ||| # motetten +singspiele ||| # sing spiele +soldatenliebschaft ||| # soldaten liebschaft +singspiels ||| # sing spiels +komödianten ||| # komödianten +freundschaft ||| # freundschaft +barack ||| # barack +getappt ||| # getappt +anstehenden ||| # anstehenden +herkulesaufgaben ||| # herkules aufgaben +westen ||| # westen +regierungsgrundsätzen ||| # regierung grundsätzen +genügen ||| # genügen +problem ||| # problem +krankheit ||| # krankheit +washington ||| # washington +symptome ||| # symptome +verquickung ||| # verquickung +öffentlichen ||| # öffentlichen +interessen ||| # interessen +lobbyistenumtriebe ||| # lobbyisten umtriebe +steuerzahlungsphobie ||| # steuer zahlung phobie +krankheit ||| # krankheit +probleme ||| # probleme +problembewältiger ||| # problem bewältiger +verzichten ||| # verzichten +ausnahmen ||| # ausnahmen +nummer ||| # nummer +verteidigungsministerium ||| # verteidigung ministerium +fachmann ||| # fachmann +rüstungslobbyist ||| # rüstung lobbyist +geithner ||| # geithner +finanzminister ||| # finanz minister +fiskus ||| # fiskus +daschle ||| # daschle +obamas ||| # obamas +wunschkandidat ||| # wunsch kandidat +gesundheitsministerium ||| # gesundheit ministerium +begleichung ||| # begleichung +feststand ||| # fest stand +regierung ||| # regierung +proteststurm ||| # protest sturm +handtuch ||| # hand tuch +konzentrationslager ||| # konzentration lager +entwicklungspolitik ||| # entwicklung politik +zeitungsbericht ||| # zeitung bericht +managergehälter ||| # manager gehälter +unternehmen ||| # unternehmen +staatshilfen ||| # staat hilfen +präsidenten ||| # präsidenten +gehaltsobergrenze ||| # gehalt obergrenze +sonnensystems ||| # sonnen systems +planet ||| # planet +exoplanet ||| # exo planet +durchbruch ||| # durch bruch +ulrich ||| # ulrich +schnabel ||| # schnabel +kulturgeschichte ||| # kultur geschichte +milchwirtschaft ||| # milch wirtschaft +menschen ||| # menschen +geschäftsführung ||| # geschäft führung +amtsgericht ||| # amts gericht +göppingen ||| # göppingen +antrag ||| # antrag +eröffnung ||| # eröffnung +insolvenzverfahrens ||| # insolvenz verfahrens +dieter ||| # dieter +informationsangebote ||| # information angebote +vereinfacht ||| # vereinfacht +vokabelglossar ||| # vokabel glossar +gewaltige ||| # gewaltige +haushohe ||| # haushohe +segler ||| # segler +oktober ||| # oktober +gibraltar ||| # gibraltar +bronzekanonen ||| # bronze kanonen +tonnen ||| # tonnen +goldmünzen ||| # gold münzen +kaufleute ||| # kauf leute +schätzungen ||| # schätzungen +vergangenen ||| # vergangenen +millionen ||| # millionen +schiffe ||| # schiffe +meeresgrund ||| # meer grund +wasserfahrzeuge ||| # wasser fahrzeuge +kriegsschiffe ||| # krieg schiffe +passagierdampfer ||| # passagier dampfer +handelsflotten ||| # handel flotten +piratenboote ||| # pirate boote +tanker ||| # tanker +großbritannien ||| # groß britannien +ältesten ||| # ältesten +seefahrernationen ||| # see fahrer nationen +auffassung ||| # auffassung +marinehistoriker ||| # marine historiker +schiffe ||| # schiffe +ortung ||| # ortung +victory ||| # victory +bergungsunternehmen ||| # bergung unternehmen +meeresfunde ||| # meer funde +geschichte ||| # geschichte +entdeckern ||| # entdeckern +kriegsboot ||| # krieg boot +jahrhundert ||| # jahrhundert +tausend ||| # tausend +schiffen ||| # schiffen +entdeckung ||| # entdeckung +tauchjagd ||| # tauch jagd +überreste ||| # überreste +epochen ||| # epochen +länder ||| # länder +streiten ||| # streiten +schiffsfriedhöfe ||| # schiff friedhöfe +tauchjagd ||| # tauch jagd +schatzjäger ||| # schatz jäger +moderne ||| # moderne +technik ||| # technik +jahrhundertealte ||| # jahrhunderte alte +wracks ||| # wracks +geheimnisse ||| # geheimnisse +besitzrechte ||| # besitz rechte +wahrscheinlichkeit ||| # wahrscheinlichkeit +minimaltemperatur ||| # minimal temperatur +winterhalbjahr ||| # winter halb jahr +celsius ||| # celsius +sommerhalbjahr ||| # sommer halb jahr +maximaltemperatur ||| # maximal temperatur +kreuzungsversuche ||| # kreuzung versuche +erbsenpflanzen ||| # erbse pflanzen +klostergarten ||| # kloster garten +befruchtungen ||| # befruchtungen +zehntausende ||| # zehn tausende +pflanzenhybriden ||| # pflanze hybriden +fleißaufgabe ||| ((('#',0,1),),(('fleiß',0,1),('fleißaufgabe',0,2),),(('aufgabe',0,1),),) +hartnäckigkeit ||| # hartnäckigkeit +naturforschers ||| # natur forschers +innenminister ||| # innen minister +falschinformationen ||| # falsch informationen +analysen ||| # analysen +hintergründe ||| # hintergründe +menschen ||| # menschen +containerschiff ||| # container schiff +unfall ||| # unfall +umweltdesaster ||| # umwelt desaster +australien ||| # australien +containerschiff ||| # container schiff +unfall ||| # unfall +australien ||| # australien +schweröl ||| # schweröl +freitag ||| # freitag +flüssigkeit ||| # flüssigkeit +strände ||| # strände +kilometern ||| # kilometern +kapitän ||| # kapitän +pacific ||| # pacific +adventurer ||| # adventurer +hongkong ||| # hongkong +verlust ||| # verlust +tonnen ||| # tonnen +regierungschef ||| ((('#',0,1),),(('regierung',0,1),('regierungs',0,1),),(('chef',0,1),),) +queensland ||| # queensland +samstag ||| # samstag +kapitän ||| # kapitän +vortag ||| # vortag +vertuschung ||| # vertuschung +vorgeworfen ||| # vorgeworfen +mittwoch ||| # mittwoch +containerschiff ||| # container schiff +naturreservate ||| # natur reservate +touristenstrände ||| # touristen strände +ostküste ||| # ost küste +nördlich ||| # nördlich +brisbane ||| # brisbane +bestechungsversuch ||| ((('#',0,1),),(('bestechungs',0,1),('bestechung',0,1),),(('versuch',0,1),),) +campingkocher ||| # camping kocher +integration ||| # integration +funktechnik ||| # funk technik +mobiltelefone ||| # mobil telefone +aktenkoffers ||| ((('#',0,1),),(('akten',0,1),('aktenkoffers',0,2),),(('koffers',0,1),),) +vorstufe ||| # vorstufe +kohlendioxids ||| ((('#',0,1),),(('kohle',0,1),('kohlen',0,1),),(('dioxids',0,1),),) +computermodelle ||| # computer modelle +schützen ||| # schützen +climategate ||| ((('#',0,1),),(('climate',0,1),('climategate',0,2),),(('gate',0,1),),) +skandal ||| # skandal +forschungsinstitut ||| ((('#',0,1),),(('forschung',0,1),('forschungs',0,1),),(('institut',0,1),),) +climate ||| # climate +research ||| # research +folgenschwerste ||| ((('#',0,1),),(('folgenschwerste',0,2),('folgen',0,1),('folge',0,1),),(('schwerste',0,1),),) +wissenschaftsdebatte ||| ((('#',0,1),),(('wissenschaft',0,1),('wissenschafts',0,1),),(('debatte',0,1),),) +computerhacker ||| # computer hacker +instituts ||| # instituts +forscher ||| # forscher +prognose ||| # prognose +erwärmung ||| # erwärmung +wissenschaftler ||| # wissenschaftler +datenlieferanten ||| # daten lieferanten +weltklimarats ||| # welt klima rats +fraktionen ||| # fraktionen +debatte ||| # debatte +schule ||| # schule +repräsentiert ||| # repräsentiert +mehrheit ||| # mehrheit +wissenschaftler ||| # wissenschaftler +stelle ||| # stelle +forscher ||| # forscher +klimamodelle ||| # klimamodelle +computersimulationen ||| # computer simulationen +hauptverantwortlichen ||| # haupt verantwortlichen +erwärmung ||| # erwärmung +menschen ||| # menschen +spatenstich ||| # spaten stich +kirchenneubau ||| # kirche neu bau +ostdeutschlands ||| # ost deutschlands +rumänien ||| # rumänien +berlin ||| # berlin +regierung ||| # regierung +ankündigung ||| # ankündigung +deutschlands ||| # deutschlands +frankreichs ||| # frankreichs +rumäniens ||| # rumäniens +bulgariens ||| # bulgariens +schengen ||| # schengen +bukarest ||| # bukarest +informationen ||| # informationen +verletzung ||| # verletzung +vertrags ||| # vertrags +lissabon ||| # lissabon +rumänischer ||| # rumänischer +zollbeamter ||| # zoll beamter +grenze ||| # grenze +rumänien ||| # rumänien +republik ||| # republik +moldau ||| # moldau +dezember ||| # dezember +regierung ||| # regierung +bukarest ||| # bukarest +kontrollen ||| # kontrollen +grenzen ||| # grenzen +rumänien ||| # rumänien +bulgarien ||| # bulgarien +länder ||| # länder +fortschritte ||| # fortschritte +korruption ||| # korruption +kriminalität ||| # kriminalität +informationen ||| # informationen +zeitung ||| # zeitung +vertragsverletzung ||| # vertrag verletzung +deutschland ||| # deutschland +frankreich ||| # frankreich +haltung ||| # haltung +rumäniens ||| # rumäniens +außenministerium ||| ((('#',0,1),),(('außen',0,1),),(('ministerium',0,1),),) +präzedenzfall ||| ((('#',0,1),),(('präzedenzfall',0,2),('präzedenz',0,1),),(('fall',0,1),),) +staatspräsident ||| ((('#',0,1),),(('staatspräsident',0,2),('staats',0,1),('staat',0,1),),(('präsident',0,1),),) +georgi ||| # georgi +parwanow ||| # parwanow +verständnis ||| # verständnis +bulgarien ||| # bulgarien +verstehen ||| # verstehen +erklärung ||| # erklärung +verzögerung ||| # verzögerung +mittwoch ||| # mittwoch +haltung ||| # haltung +hintergrund ||| # hintergrund +streits ||| # streits +regierung ||| # regierung +ministerpräsident ||| ((('#',0,1),),(('minister',0,1),),(('präsident',0,1),),) +grenzkontrollen ||| ((('#',0,1),),(('grenz',0,1),),(('kontrollen',0,1),),) +weltkrieg ||| ((('#',0,1),),(('welt',0,1),('weltkrieg',0,2),),(('krieg',0,1),),) +abwehr ||| # abwehr +admirals ||| # admirals +canaris ||| # canaris +sprengsätze ||| # spreng sätze +apfelsinenkisten ||| # apfelsine kisten +hafenarbeiter ||| # hafen arbeiter +schiffe ||| # schiffe +zeiten ||| # zeiten +militärdiktatur ||| ((('#',0,1),),(('militär',0,1),),(('diktatur',0,1),),) +widerstandsgruppe ||| ((('#',0,1),),(('widerstand',0,1),('widerstands',0,1),),(('gruppe',0,1),),) +pfirsiche ||| # pfirsiche +aprikosen ||| # aprikosen +vergiftet ||| # vergiftet +kuklina ||| # kuklina +trägerin ||| # trägerin +alternativen ||| # alternativen +nobelpreis ||| # nobel preis +kämpft ||| # kämpft +rechte ||| # rechte +soldaten ||| # soldaten +russlands ||| # russlands +online ||| # online +sprach ||| # sprach +menschenrechte ||| # menschen rechte +heimat ||| # heimat +kaufrausch ||| ((('#',0,1),),(('kauf',0,1),),(('rausch',0,1),),) +kommerzialisierung ||| # kommerzialisierung +weihnachten ||| # weihnachten +wikileaks ||| # wikileaks +verfassungsgericht ||| ((('#',0,1),),(('verfassung',0,1),('verfassungs',0,1),),(('gericht',0,1),),) +berlusconis ||| # berlusconis +immunität ||| # immunität +zinspolitik ||| # zins politik +inflation ||| # inflation +eurozone ||| ((('#',0,1),),(('euro',0,1),('eurozone',0,2),),(('zone',0,1),),) +kontrolle ||| # kontrolle +futtermittelindustrie ||| # futter mittel industrie +deutschland ||| # deutschland +regierung ||| # regierung +vertrauen ||| # vertrauen +westerwelle ||| # westerwelle +abzugsdatum ||| ((('#',0,1),),(('abzugs',0,1),('abzug',0,1),),(('datum',0,1),),) +ghettoblaster ||| # ghetto blaster +alltag ||| # alltag +ikonen ||| # ikonen +jugendkultur ||| # jugend kultur +hochrechnungen ||| # hochrechnungen +mckinsey ||| # mckinsey +company ||| # company +kaufkraft ||| # kauf kraft +aufstrebenden ||| # aufstrebenden +mittelschicht ||| # mittel schicht +jahrzehnts ||| # jahrzehnts +billionen ||| # billionen +dollar ||| # dollar +erbrauchsniveau ||| ((('#',0,1),),(('erbrauch',0,1),('erbrauchs',0,1),),(('niveau',0,1),),) +staaten ||| # staaten +schwellenländer ||| ((('#',0,1),),(('schwellen',0,1),('schwelle',0,1),),(('länder',0,1),),) +brasilien ||| # brasilien +russland ||| # russland +indien ||| # indien +frühstück ||| # frühstück +fortschritt ||| # fortschritt +frühstückstisch ||| # frühstück tisch +familie ||| # familie +jahren ||| # jahren +tageszeitung ||| # tages zeitung diff --git a/compound-split/de/weights.noun-only-1best-only b/compound-split/de/weights.noun-only-1best-only new file mode 100644 index 00000000..d5f09b82 --- /dev/null +++ b/compound-split/de/weights.noun-only-1best-only @@ -0,0 +1,20 @@ +# Objective = 138.848 (eval count=264) +WordCount 11.333477067970925 +LettersSq -0.029215039089113905 +LettersSqrt 2.9632214600626146 +InDict -13.179505941917153 +InDictSubWord 1.3841593332953199 +Short 0.69941278454918432 +Long -0.25571511002085112 +OOV 24.512983009660331 +OOVSubWord -1.5433992715303351 +ShortRange -1.1723773936213888 +HighFreq -3.7705003072208156 +MedFreq -0.051578574665604303 +Freq 0.21221436730925425 +FreqLen1 -1.5685463970117162 +FreqLen2 -0.78986836749506351 +Bad -29.51141124634686 +RevCharLM 0.62803557957086842 +FugS 0.1285546128533254 +FugN 0.47201502660323558 -- cgit v1.2.3