Webサイトは頻繁に変更されるため、クローラー内のURLが古くなったり、URLを追加する必要がある場合は正常です。 この記事では、元のURLを更新する方法を紹介します。
1.単一のURLを更新する
1つのURLのみを更新する必要がある場合は、タスクで次の手順で更新できます。
- ワークフローで「Webページを開く」をクリックします
- 新しいURLを「ページのURL」ボックスに貼り付けます
- 「OK」をクリックして保存します
2.複数のURLを更新する
Octoparseでは、1つのWebサイトに基づいて1つのクローラーが作成されます。したがって、新しいリストを入力する前に、それらが同じ構造のWebサイトであるかどうかを確認してください。同じ構造でないサイトからデータを抽出すことができません。
1）「Webページを開く」の外側の「ループアイテム」を選択し、「URLリスト」の横にあるボックスまたは「編集」をクリックします。
2）新しいURLリストをコピーしてボックスに貼り付け、「URLを保存する」をクリックします。
これでURLリストが正常に更新されます。
プロフェッショナルプランまたはエンタープライズユーザーは、APIにアクセスして、URLを自動的に更新できます。 詳細については、高度なAPI-タスクパラメーターの更新を確認してください。