Yahoo!モバイルのBOT(Y!J-SRD/1.0)がとても分かりやすい動きをしていたので、その手の方々向けのネタばらし用にさらしておきます。

ドコモ系：DoCoMo/2.0/SO502i
　2007/08/03 08:04:27 /HEL-VAL/m/index.php
　2007/08/03 08:10:18 /HEL-VAL/m/read.php i=20070603
　2007/08/03 08:12:53 /HEL-VAL/m/read.php i=20070718
　2007/08/03 08:18:25 /HEL-VAL/m/read.php i=20070608
　2007/08/03 08:19:38 /HEL-VAL/m/read.php i=20070801
　2007/08/03 08:21:13 /HEL-VAL/m/read.php i=20070630
　2007/08/03 08:22:17 /HEL-VAL/m/read.php i=20070724
　2007/08/03 08:24:53 /HEL-VAL/m/read.php i=20070705
　2007/08/03 08:29:32 /HEL-VAL/m/read.php i=20070625
　2007/08/03 08:37:14 /HEL-VAL/m/read.php i=20070628
　2007/08/03 08:38:05 /HEL-VAL/m/read.php i=20070605
　2007/08/03 08:42:26 /HEL-VAL/m/read.php i=20070612
　2007/08/03 08:44:32 /HEL-VAL/m/read.php i=20070518
　2007/08/03 08:52:28 /HEL-VAL/m/read.php i=20070712
　2007/08/03 08:54:13 /HEL-VAL/m/read.php i=20070711
　2007/08/03 08:55:31 /HEL-VAL/m/read.php i=20070618

au系：KDDI-CA23 UP.Browser/6.2.0.5
　2007/08/04 01:22:56 /HEL-VAL/m/index.php
　2007/08/04 01:29:42 /HEL-VAL/m/read.php i=20070603
　2007/08/04 01:32:30 /HEL-VAL/m/read.php i=20070608
　2007/08/04 01:36:03 /HEL-VAL/m/read.php i=20070718
　2007/08/04 01:40:54 /HEL-VAL/m/read.php i=20070630
　2007/08/04 01:43:08 /HEL-VAL/m/read.php i=20070801
　2007/08/04 01:44:17 /HEL-VAL/m/read.php i=20070724
　2007/08/04 01:48:39 /HEL-VAL/m/read.php i=20070705
　2007/08/04 01:50:06 /HEL-VAL/m/read.php i=20070625
　2007/08/04 01:52:16 /HEL-VAL/m/read.php i=20070628
　2007/08/04 01:54:56 /HEL-VAL/m/read.php i=20070605
　2007/08/04 01:58:07 /HEL-VAL/m/read.php i=20070612
　2007/08/04 01:59:17 /HEL-VAL/m/read.php i=20070518
　2007/08/04 02:04:46 /HEL-VAL/m/read.php i=20070711
　2007/08/04 02:06:06 /HEL-VAL/m/read.php i=20070712
　2007/08/04 02:08:38 /HEL-VAL/m/read.php i=20070618

SOFTBANK系：J-PHONE/2.0/J-SH03
　2007/08/04 06:42:06 /HEL-VAL/m/index.php
　2007/08/04 06:47:39 /HEL-VAL/m/read.php i=20070603
　2007/08/04 06:48:50 /HEL-VAL/m/read.php i=20070718
　2007/08/04 06:51:18 /HEL-VAL/m/read.php i=20070608
　2007/08/04 06:52:23 /HEL-VAL/m/read.php i=20070630
　2007/08/04 06:53:41 /HEL-VAL/m/read.php i=20070801
　2007/08/04 06:54:58 /HEL-VAL/m/read.php i=20070724
　2007/08/04 06:58:29 /HEL-VAL/m/read.php i=20070705
　2007/08/04 06:59:42 /HEL-VAL/m/read.php i=20070625
　2007/08/04 07:02:32 /HEL-VAL/m/read.php i=20070628
　2007/08/04 07:03:42 /HEL-VAL/m/read.php i=20070605
　2007/08/04 07:08:10 /HEL-VAL/m/read.php i=20070612
　2007/08/04 07:09:41 /HEL-VAL/m/read.php i=20070518
　2007/08/04 07:11:49 /HEL-VAL/m/read.php i=20070711
　2007/08/04 07:13:41 /HEL-VAL/m/read.php i=20070712
　2007/08/04 07:14:55 /HEL-VAL/m/read.php i=20070618

sitemapも作っているのだけど、見ての通りクロールの対象になっているのは、indexにつながっているリンクのみ。
上のはエージェントごとに分割してあるけど、時間を見れば分かる通りきっちりドコモ→au→SOFTBANKとキャリア毎に順番にクロール。この辺はおそらくY!モバイルに登録した内容の通り。
ちなみにGoogle BOTことGooglebot-Mobile/2.1は、sitemapを使っているっぽい。きちんとインデックス更新させたかったら、細かくsitemapは更新した方がよろしげ……あっはっは、たまにしかしてないや (´･ω･`)