「ウェブクローラー」の版間の差分

[[インターネット]]が一般家庭に普及してまもない頃は、電話料金が従量課金であったり回線速度が遅かった関係で、お気に入りのウェブサイトを事前に登録し、夜な夜な巡回する[[フリーソフト]]や[[シェアウェア]]なども大量に存在し、これらで取得したウェブページを[[オフライン]]でゆっくり閲覧するということが行われていた。