ワークフロー自体は問題ないように見えながら、実際には必要なデータがすべて正常に抽出できないこともあります。これは何が原因なのでしょうか。データプレビューではデータが見られるのに、タスク実行時には取得できない、というトラブルはどうして起きるのでしょうか。この問題に悩まれている方は、以下の記事内容を通じて、このトラブルに効果的な対策をいくつか利用できると思います。問題の原因を正しく特定し対策を利用することで、データ取得成功率を上げられると思います。

Webページが完全に読み込まれる前にOctoparseが抽出を停止する場合、必要なページデータが次のアクションに移る前に読み込まれない可能性が高いです。

解決法: 次のアクションに移る前にページが完全に読み込まれるように、「Webページを開く」アクションのタイムアウトを長く設定します。

Webページは完全に読み込まれているのに、Octoparseが停止してデータを抽出しない場合は、必要なページデータに読み込み遅延がある可能性が考えられます。多くのWebサイトはJSONを使ってページを更新しますが、これが要素の読み込み遅延の原因となります。

スクロール前に見えるデータ以外は読み込まれない場合、対象Webサイトが遅延読み込みを採用していると考えられます。

Octoparseに対し、ページ読み込み後にスクロールダウンするよう指示する必要があります。

「もっと見る」「読み込み中」ボタン下に隠れたデータを処理するクリックアイテムがワークフローにある場合は、データ更新が完了するだけの長いAJAXロードタイムアウトが設定されているか確認します。