ヤフオクの出品データのスクレイピング・データ収集の仕事
ヤフオクの出品データのスクレイピング・データ収集に関する仕事・募集案件ページです。クラウドソーシングのランサーズで、Webシステム開発・プログラミングに関する最適な外注/発注先をお探しの方、副業案件・求人をお探しのフリーランスの方はまず会員登録がおすすめです。
Webシステム開発・プログラミングに関連した他の仕事を探す
見積もり募集の結果
募集期間
7日間
提案数
16件
当選人数
1 件
(募集人数1人)
実際の発注内容
ブロンズ 認証済み、受注実績のあるランサーです ライセンスフリーの技術を使った小規模自動化・DX化の専門家
- 希望時間単価 ---
- 実績 27
- 評価満足率 100 %
- プロジェクト完了率 84%
- 機密保持
- 本人確認
- 電話
ウェブサービスのテスト・QAエンジニア歴8年。 品質保証の資格であるJSTQBなど資格保有。 テスト仕様書作成、テストマネジメント、E2Eテストによるテスト自動化実装も現役で実施しています。 関わったサービスはB2BのSNSサービスやC2Cサービス、マーケティングサイトの品質評価などになります。 経験したプログラミング言語は主にrubyになります。google apps script... 続きを読む
見積もり募集の内容
- 依頼の目的・背景
-
ヤフオクの検索結果から、入札が１以上、かつ残り時間が２４時間以内のオークションのみ抽出し、指定のHTML形式にて保存するツールをお願いしたいと考えております。
■出力のHTMLの構成希望案
添付画像の通り、
商品画像、商品名（リンク付き）、残り時間、現在価格、出品者ID（リンク付き）
が表示されるようにしていただけたらと思います。
※商品画像の間のスペースをなるべく少なくしていただき、表示できる商品数を増やせたらと思います。
※該当するオークション商品情報が全表示されるイメージです。最大でもだいたい２０００商品ほどを想定しています。
※可能であればですが、添付画像の通り２列になるようにできれば、ありがたいです。難しければ、大丈夫です。
■検索条件
現在は、下記条件の指定を行っております。
下記条件の他に、「オークション残り時間が24時間以内」かつ「入札件数が1以上」のオークションのみに絞り込みしたいと考えています。
※一点懸念点があり、YahooAPIでは「24時間以内のオークションのみ」や「入札件数が１以上のオークションのみ」に検索表示させることができません。技術的に可能かが定かではないため、あらかじめ確認いただけますと幸いです。
「すべて含む」にキーワード入力
・「少なくとも一つを含む」にキーワード入力
・「含めない」にキーワード入力
・「タイトルと商品説明」を指定
・購入方法は「すべて」のまま
・カテゴリは「ファッション > ブランド別」など選択。カテゴリID(auccat=23172)を入力。
・商品の色は設定なし
・現在価格を設定
・即決価格は設定なし
・出品者を設定
・商品の状態を設定
・オプションは設定なし
・目立ちアイコンは設定なし
・みんなのチャリティーは設定なし
設定例URL
<カテゴリ内検索>
https://auctions.yahoo.co.jp/search/search?va=%E3%83%90%E3%83%83%E3%82%B0&vo=%E3%83%AC%E3%82%B6%E3%83%BC+%E3%82%AD%E3%83%A3%E3%83%B3%E3%83%90%E3%82%B9&ve=%E3%83%88%E3%83%BC%E3%83%88+%E3%82%B7%E3%83%A7%E3%83%AB%E3%83%80%E3%83%BC&ngrm=2&fixed=0&auccat=23172&aucminprice=1&aucmaxprice=9999&aucmin_bidorbuy_price=&aucmax_bidorbuy_price=&l0=0&abatch=2&istatus=2&gift_icon=0&charity=&slider=0&ei=UTF-8&f_adv=1&fr=auc_adv&f=0x4
<ストア指定の場合>
https://auctions.yahoo.co.jp/seller//hiro_busousensen?va=%E5%95%86%E5%93%81%E7%8A%B6%E6%85%8B&vo=%E3%83%90%E3%83%83%E3%82%B0&ve=%E3%82%B8%E3%83%A3%E3%82%B1%E3%83%83%E3%83%88&ngrm=2&fixed=0&auccat=23000&aucminprice=1&aucmaxprice=30000&aucmin_bidorbuy_price=&aucmax_bidorbuy_price=&istatus=2&slider=0&sid=hiro_busousensen&ei=UTF-8&f_adv=1&fr=auc_adv&f=0x4#localnavi
■ソート条件
基本的には、残り時間順を希望します。
似たようなツール例があったので載せておきます。
https://www.youtube.com/watch?v=gCZA5uJuqnc
私が使用している環境はmacで、主に使用するブラウザはChromeになります。
またEXCELはインストールしておらずopenofficeを使用しております。
スクレイピングに関する知識はありませんので、どういう方法でできるかが分かりませんので、ご教授いただけましたら幸いです。
- サイトの種類
- ECサイト
- 作業範囲
- ランサーに相談して決めたい
- 用意してあるもの
-
- 希望開発言語
- ランサーに相談して決めたい
- フレームワーク
- ランサーに相談して決めたい
- 開発の継続性
- この開発の後も、継続的に依頼したいと思っております。
- 補足説明
- 私が使用している環境はmacで、主に使用するブラウザはChromeになります。補足が遅くなり申し訳ございません。