クローラーの作成のお仕事 « エンジニア・デザイナーのクラウドソーシング

× このお仕事の募集は終了しています。

×

仕事の概要

掲載日 2013年08月01日
応募期限 2013年08月15日
仕事の種類 システム開発 » Web開発・システム設計 » サイト構築・ウェブ開発
支払い方式 固定報酬制 予算 10,000円 〜 50,000円
納品希望日 -
求めるスキル

仕事の詳細

当方、情報提供メディアを運営しております。

特定のWebサイトからデータ抽出するクローラーを作成していただける方を募集します。

▽お仕事の概要
クローラーを作成していただきます。
・php5.3又はRuby2.0で作成していただきます。
・クロールはWindows環境で実行します。

▽お仕事の詳細
下記3つのファイルで構成されたクローラーを作成していただきます。

・実行ファイル(ex. crawl.bat)
 クロールを実行するプログラムが記述されたファイルです。

・クロール対象キーワード設定ファイル(ex. url.txt)
 Webサイト内のクロール対象ページを絞り込むキーワードを記載するファイルです。
 このファイルでクロール対象ページを絞り込むキーワードは任意で編集できるようにします。

・クロール完了キーワード一覧ファイル(ex. progress.txt)
 クロールが完了したキーワード一覧を保存するファイルです。
 このファイルでプログラムが途中で停止した際に、どこまでクロールが完了したか確認できるようにします。

・クロール設定ファイル(ex. setting.txt)
 WebサイトへのログインのID/PW、Proxy、スリープ時間を記載するファイルです。
 このファイルでこれらを任意で編集できるようにします。

▽重視する点
取り扱い情報の拡大に向け、今後もツール開発の依頼を考えております。
納品の品質・スピードに長けている方には、継続して依頼させていただきます。

▽報酬
応相談 (ご相談の上、決定させていただきます。)

2013年08月01日 17:57追記

ご質問をいただきましたので、追記いたします。

■取得する情報について
取得する情報は、クロール対象ページのをhtmlファイルとして保存していただきます。

ご不明点などございましたら、お気軽にご連絡ください。

よろしくお願いいたします。


会員登録(無料)

他の仕事:Web開発・システム設計の仕事を探す

β版ご意見箱

× 今後表示しない