public void 文章から文を抽出できること()
{
var text = "英語の文は日本語とは異なり、予め単語と単語の区切りがほとんどの箇所で明確に示される。このため、単語分割の処理は日本語の場合ほど複雑である必要はなく、簡単なルールに基づく場合が多い。例えば「It's a gift for Mr. Smith.」という文を解析することを考える。単語分割をすると以下のようになる。";
var sentenceList = ParagraphLogic.SplitParagraph(text);
Assert.AreEqual(4, sentenceList.Count);
}
/// <summary>
/// 解析処理
/// </summary>
/// <param name="text">テキスト</param>
public void Analyze(string text)
{
ParagraphList.Clear();
var strParagraphList = ParagraphLogic.SplitParagraph(text);
foreach (var strParagraph in strParagraphList)
{
ParagraphList.Add(new ParagraphData(strParagraph));
}
TokenList = WordLogic.GetTokenList(text);
TokenTbl = WordLogic.GetBasicTokenTbl(text);
TokenTypeTbl = WordLogic.GetTokenTypeTbl(TokenList);
InfoRate = AnalyzeLogic.CalcInfoRate(TokenList);
}
