クローリングやAPIって？

クローリングやAPIって？

スクレイピングを検索すると「クローリング」や「API」等の言葉がセットで紹介されているので、クローリングやAPIについても簡単に説明します。

クローリング

人がWebサイトを閲覧する行為を疑似的にプログラミングにて再現する行為、手法 プログラミングはPython, Ruby, C#, Java等を使用する事が多い。 ※これらで作成されたプログラムを総じて「クローラー」と呼ぶ

API

Webサイトの管理元が提供する情報取得の為のインターフェースプログラムの集合体 googleやe-stat, IMF, twitter等がこのAPI等を提供している。