URLリストを更新する方法

Webサイトは頻繁に変更されるため、クローラー内のURLが古くなったり、URLを追加する必要がある場合は正常です。この記事では、元のURLを更新する方法を紹介します。

1.単一のURLを更新する

1つのURLのみを更新する必要がある場合は、タスクで次の手順で更新できます。

2.複数のURLを更新する

Octoparseでは、1つのWebサイトに基づいて1つのクローラーが作成されます。したがって、新しいリストを入力する前に、それらが同じ構造のWebサイトであるかどうかを確認してください。同じ構造でないサイトからデータを抽出すことができません。

1）「Webページを開く」の外側の「ループアイテム」を選択し、「URLリスト」の横にあるボックスまたは「編集」をクリックします。

2）新しいURLリストをコピーしてボックスに貼り付け、「URLを保存する」をクリックします。

これでURLリストが正常に更新されます。

プロフェッショナルプランまたはエンタープライズユーザーは、APIにアクセスして、URLを自動的に更新できます。詳細については、高度なAPI-タスクパラメーターの更新を確認してください。