Instagramから投稿をスクレイピングする

2019年10月12日 06:29
更新

KOLという言葉をご存じですか？「Key Opinion Leader」の略で、SNS上で影響力の高いアカウントのことを指します。いわゆるインフルエンサーで、人気のあるKOLを商品のプロモーションにうまく利用すれば、大きな利益を上げることができます。中国でKOLはマーケティング上欠かせない存在となっており、中国のECサイトで商品を売りたい日本企業などの間では、KOLを使ったプロモーションが常識になっています。

「インスタ映え」の流行語に象徴されるように、すでに多くの人が楽しんでいる人気SNSのInstagram（インスタグラム）にも多くKOLがいます。今回はWebスクレイピングツール Octoparseを使って、KOLの投稿をスクレイピングしてみます。

このチュートリアルでは、Instagramから投稿をスクレイピングする方法を示すために、https://www.instagram.com/izkiz/ を例として使います。

以下はチュートリアルの主な手順です：[タスクファイルをダウンロードする]

1)「Webページを開く」 - 内蔵ブラウザで対象のWebページを開く

2)「ページネーション」 - 複数のページからデータを取得する

3)「データを抽出する」 - 抽出したいデータを選択する

4)「抽出開始」 - データ取得のタスクを実行する

1) 「Webページを開く」 - 内蔵ブラウザで対象のWebページを開く

「カスタマイズモード」を選択し、新規タスクを作ります。
URLを「Webサイト」ボックスに貼り付け、「URLを保存する」をクリックして移動します。

そうすると、ページが内蔵ブラウザで開られます。Webページの内容を読み込めない場合は、「設定する」でブラウザを変更してください。

webページを開く

2)「ページネーション」 - 複数のページからデータを取得する

一番目の画像をクリックし、「操作ヒント」の下部にある「UL」タグから「A」タグに変更してください。（データ/ URL /画像/ HTMLを詳細に選択して抽出する方法をご覧ください。）
「操作ヒント」にある「リンクをクリックする」をクリックします。
右側の「>」ボタンをクリックし、「次のページをループクリップする」を選択します。
「高級オプション」パネルで「AJAX読み込み」にチェックを入れ、「AJAXタイムアウト」を設定します。

ページ遷移のループを作る