OSDN -- Develop and Download Open Source Software

Forums: users (Thread #10944)
Return to Thread list RSS

bsfilterのCPU負荷 (2006-05-01 07:48 by Anonymous #21592)

bsfilterで一個数メガバイトのメールを処理すると、長い間
CPUが100%の負荷状態になってしまいます。
--max-line-numberや--pop-max-sizeを指定しても
大きなメールの最後まで律儀に処理してしまうようです。
バッテリー駆動の時につらいので、--max-line-numberもしくは
--pop-max-size以上の場合はCPUに負荷を与えないように
していただけますでしょうか？

Reply to #21592×

You can not use Wiki syntax
You are not logged in. To discriminate your posts from the rest, you need to pick a nickname. (The uniqueness of nickname is not reserved. It is possible that someone else could use the exactly same nickname. If you want assurance of your identity, you are recommended to login before posting.) Login

RE: bsfilterのCPU負荷 (2006-05-02 00:29 by nabeken #21610)

POP proxyでの使用でしょうか?
--insert ... オプション指定時に、pop-max-size 以上のサイズのメールを受信した場合でも、X-Spam-... ヘッダが挿入されてますでしょうか?

Reply to #21592

Reply to #21610×

You can not use Wiki syntax
You are not logged in. To discriminate your posts from the rest, you need to pick a nickname. (The uniqueness of nickname is not reserved. It is possible that someone else could use the exactly same nickname. If you want assurance of your identity, you are recommended to login before posting.) Login

RE: bsfilterのCPU負荷 (2006-05-02 20:51 by Anonymous #21617)

私はこの現象になっています。

今回のUPU負荷100%の話しが出たので確認したところ、
1913614bytesのメールで"X-Spam-..."ヘッダが挿入されています。

X-Spam-Revision: bsfilter release - revision 1.77.2.1
X-Spam-Probability: 0.000000

POP proxyの条件は、"--pop-max-size 102400"に設定しています。
Reply to #21610

Reply to #21617×

You can not use Wiki syntax
You are not logged in. To discriminate your posts from the rest, you need to pick a nickname. (The uniqueness of nickname is not reserved. It is possible that someone else could use the exactly same nickname. If you want assurance of your identity, you are recommended to login before posting.) Login

RE: bsfilterのCPU負荷 (2006-05-03 00:08 by nabeken #21619)

使用されているMUAを教えて下さい。

pop-max-size の指定以上のサイズのメールにたいしては、spam判定処理を行わないため、ヘッダが挿入されないのが原則的な仕様です。ただ、MUAがRETRでなくTOPコマンドでメールを取得した場合には、メールのサイズに関係なく判定処理を行うコードになっています。
(例外的な仕様を狙ってこのようなコードになっているのかは忘れてしまいました。コーディングバグかもしれません)

判定処理を行ったとしても、max-line オプションで、メールの先頭500行(デフォルト)に処理の対象を制限しているので、pop-max-sizeが効いていなくても、どのくらパフォーマンスに影響があるのかは、不明確です。

というような現象が発生しているのか、もしくは別の現象なのか、仕様はどうあるべきか考えたいので、使用中のMUAを教えて下さい。
Reply to #21617

Reply to #21619×

You can not use Wiki syntax
You are not logged in. To discriminate your posts from the rest, you need to pick a nickname. (The uniqueness of nickname is not reserved. It is possible that someone else could use the exactly same nickname. If you want assurance of your identity, you are recommended to login before posting.) Login

RE: bsfilterのCPU負荷 (2006-05-03 02:04 by Anonymous #21622)

以下の内容でログを取ってみました。

bsfilter.exe --refer-header Subject --pop --tasktray --pop-max-size 102400 -d -v >pop.txt

ログはメールにてお送りします。

POPコマンドはRETRが使用されていました。

あと、ヘッダに見慣れぬ行があることに気づきました。
X-x: TimeOut
Reply to #21619

Reply to #21622×

You can not use Wiki syntax
You are not logged in. To discriminate your posts from the rest, you need to pick a nickname. (The uniqueness of nickname is not reserved. It is possible that someone else could use the exactly same nickname. If you want assurance of your identity, you are recommended to login before posting.) Login

RE: bsfilterのCPU負荷 (2006-05-03 22:16 by nabeken #21641)

クライアントが出したLISTコマンドの結果に対するサーバのレスポンスをsnoopして、メールのサイズを知るのですが
LIST
ではなく
LIST msg
の形式への対応に問題がありました。

X-x: TimeOut については、bsfilterが遅いことで、クライアントかサーバがこのヘッダを挿入し、クライアントが QUIT コマンドなしに接続を切っている、という仮説を持ってます。
Reply to #21622

Reply to #21641×

You can not use Wiki syntax
You are not logged in. To discriminate your posts from the rest, you need to pick a nickname. (The uniqueness of nickname is not reserved. It is possible that someone else could use the exactly same nickname. If you want assurance of your identity, you are recommended to login before posting.) Login

RE: bsfilterのCPU負荷 (2006-05-02 09:42 by Anonymous #21612)

すみません、濡れ衣でした。
Mew + bsfilterの場合は、Emacsが40%, ruby (bsfilter) が60%くらいの割合でCPUがビジーになるのですが、MUAを換えてみたら問題ありませんでした。Mewのほうで聞いてみます。
念のため、環境は以下の通りです。
Mac OS X 10.4.6 ruby 1.8.2 (2004-12-25) [powerpc-darwin8.0] (OS組み込みのもの)
bsfilter CVS先端
/usr/local/bin/bsfilter --auto-update --insert-flag --insert-probability --pop --pop-server example.com --pop-max-size 10 --max-line 10
bsfilter.conf 無し
これだとX-Spam- ヘッダーは挿入されません。
Reply to #21592

Reply to #21612×

You can not use Wiki syntax
You are not logged in. To discriminate your posts from the rest, you need to pick a nickname. (The uniqueness of nickname is not reserved. It is possible that someone else could use the exactly same nickname. If you want assurance of your identity, you are recommended to login before posting.) Login