モーグルとカバとパウダーの日記

モーグルやカバ(EXカービング)山スキー(BC)などがメインの日記でした。今は仕事のコンピュータ系のネタが主になっています。以前はスパム対策関連が多かったのですが最近はディープラーニング関連が多めです。

一見さんは1日以上同一IPを使ってるか確認するスパム対策手法

新しいスパム対策手法を提案します。
これは、初めて接続してきたIPからのメールは、1日*1以上そのIPがメールサーバとして使われてないと、スパムの可能性が高い、と判断するというものです。
greylistingにほぼ近いですが、再送してきたかを確認するのではなく、IPの生存期間を確認することでスパムかどうかを判断する、というのがミソです。


最近、主に株スパム系のもので、tarpittinggreylistingだけでなく、ベイジアンフィルタDNSBLも抜けてくるものがあります。
ちゃんと遅延待ちや再送もするし、画像スパムなのでベイジアンフィルタも抜けるし、DNSBLに登録される前に頻繁に接続を変えて来るみたいで、当然、HELOの特徴だとか、簡単なフィルタでは捉えられないようになっていて、相当やっかいなスパムです。
ただ、S25Rには引っかかります。
つまり、動的IPから出してきており、そして、DNSBLを回避するため、頻繁に接続を繋ぎ直してるように見えます。


以前のエントリーでも書いたのですが、同一IPから1日以上にわたってスパムが出されることはまれです。
だから、greylistingのように、同一IPから同じfromとtoで確認して、ちゃんと再送で送ってきた、というのを見なくても、単にそのIPがこれまでに1日以上にわたってメールを送ろうとしているか、を確認するだけで、ほぼスパムかどうか判別できます。
例えば、1ヶ月くらいのログから、同一のIPを1日以上の期間使っていないところからのメールを抽出すると、99.9%以上スパムになります。


こういうアクセスポリシーサーバを作るのはとても簡単で、実はgreylistingサーバのパラメータを少しいじって(必要ならfromとtoの部分を見ないようにチェックを甘くして)やるだけでOKです。
つまり、再送要求待ちの時間を1ヶ月にして、再送として認めない期間を通常何分とかのところを、1日とか12時間とかにするだけです。


ただ、これだけだと必ず誤検出が起きます。
初めて受け取る「正しい」メールサーバからのメールが、必ず1日とか大きく遅延してしまいます。
これだと副作用として大きすぎるので、最低でもS25Rで引っかかったもののみ、このフィルタを掛けるとかは必要でしょう。この場合には1日ではなくて12時間とか6時間とか、そのぐらいにしておいたほうが良いと思います。
そうした場合でも、大きなメールサーバでは副作用や誤検出が気になると思うので、greylistingの返しをPREPEND使って、これにマッチした場合はスパムの可能性が高いよ、というフラグを渡してやったほうが良いと思います。
で、後段のSpamAssassinでもってフィルタの参考に使うようにします。


これだと画像スパムみたいな、他の手法で落とすのが難しいものも、高確率で落とせるようになるのでは、と期待。
まだ、自分とこでもちゃんと試してないんで、実際に運用してテストしてから詳しい設定方法とかパッチとかについて、まとめる予定。


(関連)

モーグルとカバとパウダーの日記 - 同一IPからスパムが出されている期間
モーグルとカバとパウダーの日記 - taRgrey(S25R+tarpitting+greylisting)というスパム対策のアイデア

ちなみにS25Rを提唱されてる浅見さんのブログでも、再送を認めない期間を長くすることで、再送してくるスパムを排除できるのでは、という同じ方向性のアイデアを書かれています。
S25R雑情報: リトライするスパムをRgreyで蹴る

*1:もしくは、12時間とか6時間とか。なるべく1日以上の長い期間が望ましい。

八方のリフト減少

八方尾根スキー場 全面

を見ると、今年の八方は運営会社の統合もあってか、あまり使われない?リフトを運休にするようです。
スカイラインの短い方とか、(これまでも動かしていないことが多かったけど)国際からパノラマに上がるリフトとか。
咲花は横に広がってるのに、2本だけになるみたい。
そのうち名木山のあたりも統合されて、リフト数少なくなるんだろうな。


(追記)

すでに、gears blogさんでも取り上げてらっしゃいました。

gears blog | 八方尾根のリフト削減

コメントで、スカイライン第1休止を嘆く声が出てますが、確かに第1使うこと多いです。
というか、第1無くすのなら第2を高速ペアにして欲しいなあ…

村井知事、使途不明金調査を打ち切り

村井知事は長野オリンピックでの使途不明金調査を打ち切る考えを示したらしい。

Yahoo!ニュース - 毎日新聞 - 長野冬季五輪・帳簿問題:調査を打ち切り−−知事表明 /長野

いやー、予想以上にすばらしいな、村井知事は。
またダムも造るらしいし。これで長野の土建屋の将来も明るいね。田中知事時代に苦渋をなめてた人たちも、きっと大喜びしてるだろう。
他県の人にこの件でつっこまれたら、まあ岐阜よりはましでしょ?としか返しようがないな。