クロールとは

クロールについて説明します。

ロボット型の検索エンジンなどで、クローラーというプログラムがインターネットのWebページのリンクをたどり、情報収集すること。

Webページの種類や巡回の頻度などは、検索エンジンによって違います。

検索でヒットすることに近い感じですね。