ネットを徘徊するプログラム

この記事は約 2 分 で読むことができます。

こんにちは、ハルジオンです。

「クローラー」って聞いたことありますか?

クローラーとは、Webを自動で徘徊し、
Webページや画像などを収集、データベース化するプログラムです。

ロボットとか、ボットとか、スパイダーとも呼ばれています。

最初のWebページにアクセスすると、その中からリンクを自動で探し、
そこからリンク先のサイトに飛び、またリンクを探し、といった感じで徘徊しています。

最も有名なのは、GoogleBOTですね。

このBOTが、最新のインターネット上のページを自動で集め
データベース化してくれているおかげで、Googleで検索したときに
色々なWebサイトが表示されるんです。

Webサイトは日々、天文学的な数で増え続けています。
内容の更新もされています。

そういった膨大なインターネットのページの中から
出来るだけ新しい情報を、ユーザーが探せるように、日々巡回しているんですね。

逆に言うと、このBOTが巡回してきていないサイトは
基本的には、検索エンジンでヒットしないということになります。
(BOTに頼らずに自分でURLをGoogleに登録する方法もあります)

インターネットという仮想現実を、常に徘徊しているプログラム。
考えるとちょっと怖いですね^^;

マトリックスのエージェントプログラムみたい。

140664724804868042227_image_20140730002048

それではまた。

ネットを徘徊するプログラム
この記事はあなたのお役に立てましたか?

この記事があなたのお役に立てましたら、
いいね!クリックをお願いします!

あなたも楽しくプログラミングを学んでみませんか?