Hisayoshi Kato's weblog at Sun Solution Center

pageicon Sunday Dec 31, 2006

fsinfo providerの使いどころ

fsinfo providerは、確か change logによると、snv38から導入されたproviderです。

たった1行で、ファイルシステムの細かいOperationを知ることができます。ファイルシステムというと、UFS, ZFSを思い浮かべる方が多いのかなって思うんですけれど、それらのファイルシステムだけではなく、tmfs, sockfsなど、あんまり意識しないファイルシステム操作を追跡できます。

 DTrace によるパフォーマンス分析では、仮説を立てることがメインです。そのために、一番大切なのは、アプリケーションを動かす際に、そのアプリケーションがどんな振る舞いをしているかを把握する必要がでるわけです。
たとえば、データベースの世界でもよくこのような話はでてくると思いますが、論理I/Oと物理I/Oです。
 既存のツール iostat最近では、fsstatかな?も十分使えます。ですが、アプリケーションからみると、ある特定のアプリケーションの物理I/Oや論理I/Oをとらえることができないと私は思っています。

本題ですが、firefoxでもDTraceしてみようかなって思います。(fsinfoプロバイダを使って)あくまでも焦点は、論理I/Oです。この操作は、主にvnodeと呼ばれるファイルシステムを形成するオブジェクトに関する操作のことをいいます。(詳しくは、Solairs Internalsを読んでください。)物理I/Oに関しては、DTrace for IO providerをご覧ください。


1) dtrace -l -P fsinfo で、ファイルシステム操作のprobeを表示します。

kato@kato-ferrari> uname -a
SunOS kato-ferrari 5.11 snv_54 i86pc i386 i86pc

kato@kato-ferrari> dtrace -l -P fsinfo
   ID   PROVIDER            MODULE                          FUNCTION NAME
 4147     fsinfo           genunix                       fop_vnevent vnevent
 4148     fsinfo           genunix                       fop_shrlock shrlock
 4149     fsinfo           genunix                    fop_getsecattr getsecattr
 4150     fsinfo           genunix                    fop_setsecattr setsecattr
 4151     fsinfo           genunix                       fop_dispose dispose
...
 4189     fsinfo           genunix                         fop_close close
 4190     fsinfo           genunix                          fop_open open


 2)とりあえず、使ってみましょう。

kato@kato-ferrari> dtrace -n 'fsinfo:::{printf("%s",execname);}'
  0   4156                    fop_poll:poll gnome-terminal
  0   4156                    fop_poll:poll gnome-terminal
..
  0   4156                    fop_poll:poll gnome-terminal
  0   4186                  fop_ioctl:ioctl gnome-terminal
  0   4156                    fop_poll:poll gnome-terminal

gnome-terminalばっかり動いています。firefoxだけ追跡したいのに、gnome-terminalのみでていて、とてもわかりにくい。  そんなときに条件式が使えます。

3)とりあえず、processわからないから、下記のように追跡してみよう。。

kato@kato-ferrari> pgrep firefox
1219
1241
kato@kato-ferrari> ptree 1219
1219  /bin/sh /bin/firefox
  1235  /bin/sh /usr/lib/firefox/run-mozilla.sh /usr/lib/firefox/firefox-bin -U
    1241  /usr/lib/firefox/firefox-bin -UILocale ja -contentLocale ja
      9605  <defunct>
上記のように、1241のfirefox-binを追跡すればよいことがわかります。ブラウザをbackとかfowardとかすると、ファイルシステム操作を確認することができます。
kato@kato-ferrari> dtrace -n 'fsinfo:::/execname=="firefox-bin"/{printf("%s",execname);}'
dtrace: description 'fsinfo:::' matched 44 probes

  0   4181                fop_lookup:lookup firefox-bin
  0   4181                fop_lookup:lookup firefox-bin
  0   4181                fop_lookup:lookup firefox-bin
  0   4181                fop_lookup:lookup firefox-bin
  0   4181                fop_lookup:lookup firefox-bin
  0   4181                fop_lookup:lookup firefox-bin
..
  0   4162                fop_realvp:realvp firefox-bin
  0   4177                fop_rename:rename firefox-bin


4)集約集計するともっと簡単です。

kato@kato-ferrari> dtrace -n 'fsinfo:::/execname=="firefox-bin"/{@[probefunc,probename]=count();}'
dtrace: description 'fsinfo:::' matched 44 probes
^C

  fop_inactive                                        inactive                                                          1
  fop_rename                                          rename                                                            1
  fop_write                                           write                                                             1
  fop_close                                           close                                                             2
  fop_create                                          create                                                            2
  fop_open                                            open                                                              2
  fop_getsecattr                                      getsecattr                                                        3
  fop_getpage                                         getpage                                                           4
  fop_dispose                                         dispose                                                           6
  fop_realvp                                          realvp                                                           10
  fop_cmp                                             cmp                                                              11
  fop_putpage                                         putpage                                                          12
  fop_read                                            read                                                             96
  fop_seek                                            seek                                                             96
  fop_rwlock                                          rwlock                                                           97
  fop_rwunlock                                        rwunlock                                                         97
  fop_getattr                                         getattr                                                         114
  fop_poll                                            poll                                                            137
  fop_lookup                                          lookup                                                          156

5) ファイルシステム操作をみるということは、どんなファイルシステムの操作かを知る必要がありますよね。(きっと、providerの引数をとらなくてはならないんだけど。)
だけど、fsinfo providerって、マニュアルにもないし、どうに使っていいかいまいちわからない。そんなときには、ソースコードをみるとよくわります。ソースコードの149行目をみると、

{ "fsinfo", NULL, 0, 0, "vnode_t *", "fileinfo_t *" },
{ "fsinfo", NULL, 1, 1, "int", "int" },

っていう記述があります。これで、だいたい検討がつきます。fileinfo_tの詳細は、docsのマニュアルのi/o provierの章を参照してください。または、DTraceにて関数引数を確認する方法をみてください。
そこで下記のようにうってみよう。

kato@kato-ferrari> dtrace -n 'fsinfo:::/execname=="firefox-bin"/{@[probefunc,probename,args[0]->fi_fs]=count();}'
dtrace: description 'fsinfo:::' matched 44 probes
^C

  fop_inactive                                        inactive                                            ufs                                                               1
  fop_rename                                          rename                                              ufs                                                               1
  fop_write                                           write                                               ufs                                                               1
  fop_close                                           close                                               ufs                                                               2
...

kato@kato-ferrari> dtrace -n 'fsinfo:::/execname=="firefox-bin"/{@[probefunc,probename,args[0]->fi_fs,args[0]->fi_pathname]=count();}'
dtrace: description 'fsinfo:::' matched 44 probes
^C
  fop_write                                           write                                               ufs                                                  ..                                                                         /export/home/kato/.mozilla/firefox/7ut7zak9.default/urlclassifier2.sqlite                7
  fop_getpage                                         getpage                                             ufs                                                 /export/home/kato/.mozilla/firefox/7ut7zak9.default                8
  fop_cmp                                             cmp                                                 ufs           

6) user stackの表示

下記のようなコマンドで、firefoxの振る舞いを理解し、さらに、細かい箇所を他のprobeを使って、追跡するのが大事なのです。 fsinfoプロバイダを利用して、ある特定のvnodeオペレーションの際、どんなファイルシステムでどんなオペーレーションして、どんなアプリケーションのライブラリというところまで深く追跡することが可能です。

dtrace -n 'fsinfo:::/execname=="firefox-bin"/{@[args[0]->fi_fs,args[0]->fi_pathname,probename,probefunc,ustack(5)]=count();}'

 seek                                                fop_seek                                        
              libc.so.1`lseek64+0x7
              libstoragecomps.so`__1cJAsyncRead6FpnGOsFile_pvi_i_+0xf0
              libstoragecomps.so`sqlite3OsRead+0x17
              libstoragecomps.so`sqlite3pager_get2+0x57d
              libstoragecomps.so`sqlite3pager_get+0x23
               47
  sockfs                                              <unknown>                                           poll                                                fop_poll                                        
              libc.so.1`__pollsys+0x7
              libc.so.1`poll+0x52
              libiiimp.so.1.0.0`stream_socket_read+0x6e
              libiiimp.so.1.0.0`iiimf_stream_receive+0x120
              libiiimcf.so.3.0.0`iiimcf_receive_message+0x2c
               51
  sockfs                                              <unknown>                                           poll                                                fop_poll                

Comments:

Post a Comment:
  • HTML Syntax: NOT allowed


Hisayoshi Kato
I'm Customer Benchmark Engineer at Sun Solution Center.
My interest are Solaris and Oracle.
We're working on Commercial Benchmarking with Sun's customers.
Also I work as OpenSolaris Evangelist in Japan.
Recently my focus is to build OpenSolaris Community in Japan.
Photo By Jim Grisanzio


OpenSolaris.org


Tokyo OpenSolaris User Group


Tokyo Linux User Group


Sun Solution Center



Weblog menu


« November 2009
SunMonTueWedThuFriSat
  
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
  
       
Today

Recent Entries

Search this blog

Links

Sun Solution Center Links

Japan OpenSolaris User Blog Links

Japan OpenSolaris Distro

Visitor

Locations of visitors to this page

Tags