2010-09-20
pdflushを捕捉したい、が捕まらない＞＜
I/Oとかストレージが苦手分野なので、理解を深めるためにちょい検証。今回はpdflushについて。
やりたいこと
"ps aux | grep pdflush"して、pdflushのカーネルスレッドを捕捉したい。「あぁ、いまpdflushが起動してキャッシュをディスクにｶﾞﾘｶﾞﾘ書き込んでるんだなぁ〜」って瞬間を目視したい。
pdflushとは。そもそもOSにおけるI/Oとは
そもそもの話ですが、OSレイヤーでのI/Oから復習すると。。基本的なブロックI/Oの流れとしては下記のようになる、はずです。
- アプリケーション等のプロセスがライブラリ経由でwriteやreadシステムコール(I/O要求)を発行
- カーネルはプロセスよりI/O要求を受け、ファイルシステム経由でメモリ上のファイルキャッシュにデータを書き込む<-----この時点でOSから見るとI/O完了
- 書き込んだデータはメモリ上にしかないので、定期的にデーモンがメモリ上のキャッシュをデバイスドライバ経由でディスクに書き込む
で、この時��のデーモン君が登場しますが、こいつがLinux(カーネル2.6系)ではpdflushというカーネルスレッドだとのこと。
pdflushをつかまえたい
カーネルスレッドでもpsコマンドを使えば[(カーネルスレッド名)]って形で表示させることはできますので、その考え方でいけばpdflushだって[pdflush]みたいな風に現れてくれるはず。
しかもこいつはどうやらデフォルトだと5秒間隔で起動するようです。下記のエントリを参考にさせて頂きました。
5秒、というのはカーネルスレッドの pdflush が汚れたページを書き出す間隔です。これは sysctl の vm.dirty_writeback_centisecs で設定されています。
% cat /proc/sys/vm/dirty_writeback_centisecs
500
この値の単位は10msだそう。確かに、該当するパラメータは5000ms(5秒)で数が合う。
いざ検証
さて、ddコマンドで3GB程度のファイルを作成し、I/O負荷をかけてみます。
% dd if=/dev/zero of=./testdd bs=16k count=200000 &
その間、ファイルキャッシュに書き込みがあることを確認するために、/proc/meminfoからDirtyの値をgrepします。Dirty（=汚れた）なキャッシュは、ディスクの情報と整合性がとれないので、ディスクと同期して綺麗にフラグを取り払う必要があるのですね。
そして、肝心のpsも取得します。このコマンドを1秒に1回で永遠LOOP.
% while true while% do while% cat /proc/meminfo| grep -i dirty while% ps aux | grep pdflush | grep -v grep while% echo "--------------------------------------" while% sleep 1 while% done
pdflush、出てこい
検証開始。。。
% dd if=/dev/zero of=./testdd bs=16k count=200000 & [1] 13097 /var/tmp/testdir% 200000+0 records in 200000+0 records out 3276800000 bytes (3.3 GB) copied, 58.8831 s, 55.6 MB/s [1] + done dd if=/dev/zero of=./testdd bs=16k count=200000
。。。しかし、pdflush現れないっす＞＜ 出てこい＞＜
% while true while% do while% cat /proc/meminfo| grep -i dirty while% ps aux | grep pdflush | grep -v grep while% echo "--------------------------------------" while% sleep 1 while% done Dirty: 22844 kB -------------------------------------- Dirty: 568 kB -------------------------------------- Dirty: 18740 kB -------------------------------------- Dirty: 36468 kB -------------------------------------- Dirty: 14968 kB -------------------------------------- Dirty: 22312 kB -------------------------------------- Dirty: 4688 kB -------------------------------------- Dirty: 3520 kB -------------------------------------- Dirty: 10216 kB -------------------------------------- Dirty: 2252 kB -------------------------------------- Dirty: 6048 kB -------------------------------------- Dirty: 45060 kB -------------------------------------- Dirty: 49152 kB --------------------------------------
Dirtyが変動しているので、明らかにキャッシュへの書き込みしてることは分かるし、定期的にDirtyがクリアされてるみたいなので、pdflushらしき何かが動いてるのは間違いないんだよな。。。
-------------------------------------- Dirty: 49152 kB -------------------------------------- Dirty: 12712 kB -------------------------------------- Dirty: 49152 kB -------------------------------------- Dirty: 4 kB <-------ここでDirtyがクリアされてる -------------------------------------- Dirty: 4 kB -------------------------------------- Dirty: 4 kB -------------------------------------- Dirty: 49164 kB -------------------------------------- （〜〜〜〜省略〜〜〜〜） -------------------------------------- Dirty: 26072 kB -------------------------------------- Dirty: 26072 kB -------------------------------------- Dirty: 26072 kB -------------------------------------- Dirty: 26072 kB -------------------------------------- Dirty: 24 kB <----------ここでもクリア -------------------------------------- Dirty: 24 kB -------------------------------------- Dirty: 24 kB -------------------------------------- Dirty: 24 kB --------------------------------------
もしや名前がpdflushではない？？別の仕組みを使っている？？psには現れない？？仮想環境で実行してるから？？とか色々疑ってググりましたが、有効な情報見つからず、です。。。
とりあえず報告
とりあえず、うまくいってないっすwwwww 取り急ぎ、今日はここまで。。
Permalink | コメント(1) | トラックバック(0) | 23:50 
