ローカル抽出

Octoparseで作ったWebスクレイピングタスクは、ローカルコンピューター(ローカル抽出) またはクラウド (クラウド抽出 )で実行できます。ローカルでタスクを行うと、

1) ワークフローの問題をトラブルシューティング/デバッグ

2) クラウドリソースを利用せずにデータを抽出する

ヒント！

ローカル抽出は、無料版と有料版両方にも利用できます。無料版の場合、毎回出力データ数が10,000件と並行処理が2件に制限されています。有料版ならその制限はありません。

カスタマイズモードで、「実行」をクリックし、「ローカル実行」を選択できます。

次に、タスクの実行プロセスが見られるし、取得したデータもを表示できます。

実行ウインドウズの「ブラウザ」をクリックすると、実際の抽出状況が確認できます。

タスク実行前、ローカルタスクの「抽出設定」を変更できます。

ローカル抽出するとき、画像を読み込まないようにします: 画像を読み込まないと、Webページを開く時間が短くなります。

ブラウザを切り替える: ブラウザを切り替えることによって、ブロックされる可能性を低くします。

Cookieをクリア：Cookieをクリアすることによって、ブロックされる可能性を低くします。

ヒント！

1. ローカルタスクはどこで実行されますか？

ローカル抽出でローカルコンピューターでクローリングします。あるWebサイトでは同じIPの訪問時間を制限する場合があります。このような状況下では、制限を超えるなら、ブロックされる可能性があります。

2. ローカル抽出は何に影響しますか？

クローリングはローカルマシン上で実行されているため、ネットワークの速度とハードウェアの性能に影響します。

「実行ログ」をクリックし、ステップずつ実行の状況が確認できます。
問い合わせする際、ログをエクスポートし送って頂ければ、より早くエラーの原因が究明できます（ワークフローにログイン情報が含まれる際、ログにも反映されるため、気になる方は送る前ご削除ください）