/ 1.4の/自動再クロールサイト? - nutch、ウェブクローラー

nutch 1.4の自動再クロールサイト? - nutch、web-crawler

自分のサイトを1日に3回再クロールしたい。私はこのためのスクリプトを書くべきだと知っていますが、どうやってスクリプトを実行するのかわからないのですか。 誰かがこのステップを説明することができます ありがとう

回答:

回答№1は0

シェルスクリプトを書きます。以下の構造を使用することができます:

  1. whileループ
  2. ......一度nutchを呼び出すために使用するコマンド
  3. ......数時間寝る
  4. 終了ループ

nohupまたはscreenセッションを使用してこのスクリプトを実行してください。それは素晴らしい仕事になります!