人工知能の研究開発
WEBコンテンツの企画、製作
インターネットを利用した各種情報提供サービス
ネットワークコンテンツの企画、開発、運営とその配信
WEBコンテンツの企画、製作
インターネットを利用した各種情報提供サービス
ネットワークコンテンツの企画、開発、運営とその配信
node.jsを使った株価情報の自動取得 業務システム・ソフトウェアの仕事の依頼
仕事の概要
|
固定報酬制
|
ワーカーと相談する
|
|---|---|
|
納品完了日
|
- |
|
掲載日
|
2017年05月02日 |
|
応募期限
|
2017年05月16日 |
|
必要なスキル
|
応募状況
| 応募した人 | 4 人 |
|---|---|
| 契約した人 | 0 人 |
| 募集人数 | |
| 気になる！リスト | 28 人 |
仕事の詳細
|
▽システム開発依頼の目的・概要 ・node jsを使用してページに掲載されている株価情報を自動取得して頂きます。 ▽node js WEBスクレイピング参考URL https://github.com/bda-research/node-crawler https://www.npmjs.com/package/node-webcrawler ▽開発するプログラムの諸注意（必ず守って下さい。） ・完全自動運用できる（cron処理：1日1回） ・動作途中で止まらない(以下の理由等で停止しない。) -> ブラウザのクラッシュ -> タイムアウト -> Element：NotFound -> Page：NotFound 404 -> プログラムエラー等 ・常に最後までバッチ処理が完了すること。 ・動作ログの出力（バッチの実行時刻、終了時刻、取得件数） ・上記のことを厳守しCW様ご自身の環境でテストを行い、完全に動作することを確認して下さい。 ▽node js実行環境 ・Linux（ubuntu , cent os） ・Ubuntu 14 ・Mac OS ・Win ▽パースのメンテナンス性 ページのHTMLのClass名やID名に変更がある場合、欲しい情報が取得できなくなる場合があります。 そのため、Class,ID名の修正がカンタンに行えるプログラム設計をよろしくお願いいたします。 ▽データ取得対象サイト サイト名：Yahooファイナンス（実際の取得先は異なります。） ページURL：http://stocks.finance.yahoo.co.jp/stocks/detail/?code=6502.T 対象ページ：全銘柄 ▽データ取得箇所・フォーマット 【株価情報取得先テーブル仕様書_20170404.xlsx】をご参照くださいませ。 ▽データ出力方法 ・CSVで出力。 ▽システム開発に利用するプログラミング言語 ・使用言語：node jsが開発できる環境と言語 ・サーバ構築、管理の技術（VPS、クラウドサーバーなど） ▽納品物 ・ソースコード一式 ・バッチファイル ▽重要視する点・経験 ・ブラウザの自動操作の経験 ・node jsを使った開発経験 ・node jsで取得したデータを自動的にMySqlやSolrなどのデータベースに登録できれば尚可 ・視覚性・メンテナンス性の高いコーディング力 ・クライアント企業とのコミュニケーションに慣れている方 ・秘密保持契約を結べる方 ▽継続した業務の依頼 ・株価情報のデータ自動取得以外にも「商品情報」「SNS・ブログ記事」など様々なサイトのデータ収集を継続してお願いいたします。 ▽注意点・禁止事項 ※開発したシステムに関する情報を第三者に漏洩すること ▽その他コメント ※実際のシステム開発の進め方・別途詳細は、クラウドワークスのメッセージでやりとりして決められればと思います。 ※このお仕事以降も、継続的に追加で開発依頼をさせていただくことも可能です。 たくさんのシステムエンジニアの方からのご連絡・ご応募お待ちしております。 |
添付ファイル
クライアント情報
最近応募したクラウドワーカー
| クラウドワーカー | 応募日時 |
|---|---|
chiyoda
|
2017/05/08 16:38 |
jabberwocky
|
2017/05/04 13:32 |
M.F.F
|
2017/05/03 04:27 |
|
I_believe
|
2017/05/02 14:32 |
