Googleの調査の馬蝿の幼虫(Googlebot)はあらゆるよいwebbotsのような場所の除かれたセクションを見つけるためにrobots.txtファイルを分析する。 但し他の馬蝿の幼虫とは違って、Googleの馬蝿の幼虫はGooglebotのためのとりわけセクションと同様、すべての馬蝿の幼虫のためのセクションを(*)有するとき別様にする。

すべての馬蝿の幼虫のためのrobots.txtでセクションをにはじまって有することを仮定する:
ユーザー代理店: *

またとりわけGooglebotに目標とされるセクションを持っていないと仮定する。 この場合Googleの馬蝿の幼虫は全体的な指令に従う(すべての馬蝿の幼虫に適当な)。 どんなに今このようなGooglebotのためのセクションをとりわけ加えなさい:
ユーザー代理店: Googlebot

私はそれがすべての馬蝿の幼虫のための両方の指令にGooglebotのためのとりわけ指令と同様、(*)従うと仮定した。 robots.txtによってGoogleのウェブマスターのレジ係は用具を使うそのような場合GooglebotでとりわけGooglebotのために目標とされる指令に従い、すべての馬蝿の幼虫のための全体的な指令を(*指令がオーバーラップしていない時でさえだけ、)無視する。
Googleのそれを含む他の馬蝿の幼虫はこの特質を示さない。