Als «stemming» getaggte Fragen

21
Wie mache ich Wortstemming oder Lemmatisierung?
Ich habe PorterStemmer und Snowball ausprobiert, aber beide funktionieren nicht bei allen Wörtern, da einige sehr häufig fehlen. Meine Testwörter sind: " Katzen, die Kakteen-Kakteen-Kakteen-Communitys laufen lassen ", und beide bekommen weniger als die Hälfte richtig. Siehe auch: Stemming-Algorithmus, der echte Wörter erzeugt Stemming - Codebeispiele oder Open Source Projekte?
3
Stemmers vs Lemmatizers
Natural Language Processing (NLP), insbesondere für Englisch, hat sich zu einem Stadium entwickelt, in dem Stemming zu einer archaischen Technologie werden würde, wenn "perfekte" Lemmatisatoren existieren. Dies liegt daran, dass Stemmers die Oberflächenform eines Wortes / Tokens in bedeutungslose Stängel verwandeln. Andererseits ist die Definition des "perfekten" Lemmatisierers fraglich, da …
Durch die Nutzung unserer Website bestätigen Sie, dass Sie unsere Cookie-Richtlinie und Datenschutzrichtlinie gelesen und verstanden haben.
Licensed under cc by-sa 3.0 with attribution required.