HAYASHI Kentaro
hayas****@clear*****
2013年 8月 2日 (金) 12:21:42 JST
林です。 On Thu, 1 Aug 2013 19:05:03 +0900 三浦悟 <miura****@bfp*****> wrote: > 林様 > > 非常にわかりやすい丁寧な御回答有り難うございます。 > > ドキュメントの「連続したアルファベット」というのが、aとaaaは同じ1トークンでも a, abcは別のトークンになるものだと誤解しておりました。 > TokenBigramSplitSymbolAlphaまたはTokenBigramSplitSymbolAlphaDigitを利用したいと思います。 > > ありがとうございました。 > うまく意図を汲み取って説明できていたかちょっと怪しかったので、良かったです。 -- HAYASHI Kentaro <hayas****@clear*****>