Lucene.Net.Analysis.Core LetterTokenizer em C# (CSharp) - 5 exemplos encontrados. Esses são os exemplos do mundo real mais bem avaliados de Lucene.Net.Analysis.Core.LetterTokenizer em C# (CSharp) extraídos de projetos de código aberto. Você pode avaliar os exemplos para nos ajudar a melhorar a qualidade deles.
Relacionados
Related in langs
A LetterTokenizer is a tokenizer that divides text at non-letters. That's to say, it defines tokens as maximal strings of adjacent letters, as defined by java.lang.Character.isLetter() predicate.
Note: this does a decent job for most European languages, but does a terrible job for some Asian languages, where words are not separated by spaces.