[groonga-dev,01801] Re: mecabトークナイザでのtoo long sentenceの回避方法について

Back to archive index

Naoya Murakami visio****@gmail*****
2013年 9月 20日 (金) 20:51:43 JST


お世話になっております。村上です。

あ、すいません。読み間違えをしていました。

>mecabコマンドのソースをながめてみたところ、
>mecabコマンドでは 改行毎にmecab_sparse_tostr2()相当の処理をしていました。
>その ため、「too long sentence.」なエラーにはならないのだと思います。

mecabコマンドでは、mecab_sparse_tostr2の外側で改行ごとにやっているのですね。
と、すると、改行をいれて、mecab_sparse_tostr2に渡しても意味はないって
ことですかね。。

また、なんにせよ、少しいろいろやってみて、だめなら、
トークナイザ側で分割して、mecab_sparse_tostr2に渡そうと思います。

以上、よろしくお願いします。





groonga-dev メーリングリストの案内
Back to archive index