Example #1
0
        public void Test1()
        {
            var input    = "ปลาที่ใหญ่ที่สุดในโลกคือปารีสชุบแป้งทอด";
            var expected = GlobalExpectedResult.GetExpectedResult1();

            Verify(input, expected);
        }
Example #2
0
        public void Test1()
        {
            var input    = "ปลาที่ใหญ่ที่สุดในโลกคือปารีสชุบแป้งทอด";
            var expected = GlobalExpectedResult.GetExpectedResult1();

            var options = new TokenizerOptions {
                MatchingMode = MatchingMode.Longest
            };
            var tokenizer = new ThaiTokenizer(options);

            Verify(tokenizer, input, expected);
        }
Example #3
0
        public void Test3()
        {
            var appendDictionary = new List <string> {
                "หวัดดี", "หวักลี", "เชอแตม"
            };
            var tokenizer = new ThaiTokenizer(appendDictionary);
            var input     = "หวักลีหวัดดีปลาที่ใหญ่ที่สุดในโลกคือปารีสชุบแป้งทอดเชอแตม";
            var results   = tokenizer.Split(input);

            var expected0 = new List <string> {
                "หวักลี", "หวัดดี"
            };
            var expected1 = GlobalExpectedResult.GetExpectedResult1();
            var expected2 = new List <string> {
                "เชอแตม"
            };

            var expected = expected0;

            expected.AddRange(expected1);
            expected.AddRange(expected2);

            Verify(input, expected, results);
        }