[Senna-dev 1076] Re: mecab の形態素解析失敗時の負荷を下げるパッチ

Back to archive index

morita morit****@razil*****
2008年 11月 11日 (火) 13:58:42 JST


森です!

おおお!これはすばらしい!!
早速取り込ませていただきまーす!

Kazuho Oku さんは書きました:
> パッチを五月雨で投稿してすみません。
> 
> Senna は mecab を使って形態素解析していてエラーが返ってきた場合、バッファサイズを拡大しながら一定回数 (9回)
> 再試行するようになっています。この再試行が、バッファサイズ不足以外の理由 (単語が長過ぎるとか)
> で形態素解析に失敗した場合にも行われ、Tritonn との組み合わせにおいてテーブルロックの時間を長くしていたので、パッチを作成しました。
> 
> mecab には数値形式のエラーコードがないようで、エラー文字列を strstr して判定するという微妙なものですが、添付いたします。
> 




Senna-dev メーリングリストの案内
Back to archive index