[Python・GAS]データ収集・スクレイピング自動化ツール作成致します
業務内容
営業先などのリスト作成の際、以下のことでお悩みはないですか?
・データ収集やスクレイピングを手動で依頼すると時間や人件費がかかる
・自動化したいけどどうしたらいいか分からない
そんな個人・事業者の皆様に対してPythonやGoogle Apps Scriptを使って、
データ収集・スクレイピングツールの開発をします!
出力はエクセル・スプレットシートで実施させていただき、
会社名や電話番号・URLなど様々な情報の収集に対応させていただきます!
【これまでの実績】
・Pythonを使って、半導体・センサー関連の論文情報を収集するツールを開発(出力はエクセル)
・GAS、Google Maps APIを使って、営業先リスト作成ツールを開発(出力はスプレットシート)
・GASを使って、ECサイトの在庫情報をスクレイピングするツールを開発(出力はスプレットシート)
なお。納品方法など詳細なご要望には柔軟にご対応させていただきますので、 リスト作成を自動化させたい、スクレピングツールを開発したい方はぜひご相談ください!!
●動作環境
OS : Windows Mac
●ブラウザ : Google Chrome
●推奨環境
メモリ 8G以上
- 業務
- 開発
先着1社(1者)全国法人リストを制作します。基本情報3項目は0.09円で作業します
業務内容
現在、法人の登記簿で公開されているデータの入力作業を行っております。
そのデータで基本情報3情報(法人番号・企業名・登録した住所)は6月20日を目途に5,436,750件を作成しています。
北海道 223,297
青森県 37,284
岩手県 33,100
宮城県 79,243
秋田県 29,912
山形県 33,048
福島県 70,771
茨城県 91,650
栃木県 72,925
群馬県 74,328
埼玉県 251,991
千葉県 219,864
東京都 1,251,585
神奈川県 351,605
新潟県 73,940
富山県 35,195
石川県 42,593
福井県 30,155
山梨県 34,109
長野県 77,777
岐阜県 70,703
静岡県 122,758
愛知県 269,731
三重県 54,140
滋賀県 41,520
京都府 107,948
大阪府 448,301
兵庫県 193,370
奈良県 38,979
和歌山県 30,093
鳥取県 19,396
島根県 22,385
岡山県 71,200
広島県 108,546
山口県 41,539
徳島県 30,078
香川県 38,517
愛媛県 51,154
高知県 25,211
福岡県 203,353
佐賀県 23,820
長崎県 41,002
熊本県 68,115
大分県 46,268
宮崎県 37,867
鹿児島県 56,888
沖縄県 59,496
全国計 5,436,750
こちらをとも君の野望のとも君がランサーズ記念として特別先着1社(1者)に
スクレイピング作業費を1件あたり0.09円で加工して参ります。
追加発注では
・電話番号(代表もしくは問い合わせ番号)
・代表者名
・企業のURL
・業界を区別
になります。こちらはそれぞれ1件当たり0.1円となります。
納品方法
・Excelファイル
・CSVファイル
・JSON
・HTML
・xml
データベース接続が可能の場合ですが念の為上記より選んでおいてください。
・GoogleSpreadSeets
・SQLSERVER
・MySQL
などご要望に合わせます。
Octoparse8を使用したWebスクレイピング作業を初回のみ安値で実施します
業務内容
タイトル
Octoparse8を使用したWebスクレイピング作業を初回のみ安値で実施します
サブタイトル
初回限定で、10,000円にてOctoparse8を使用したWebスクレイピングを提供します。私たちの専門技術により、データ収集の効率化を実現します。
カテゴリ
大カテゴリ: データ
中カテゴリ: 情報・データ処理
業務カテゴリ: データ収集・マイニング・スクレイピング、作業自動化・効率化、コンサルティング
業種
広範囲の業種に適用可能で、特にデータ依存の高い業界に最適です。
料金表
ベーシックプラン: 10,000円(税抜) - Octoparseの操作を使用して20,000件までのデータをスクレイピングします。
スタンダードプラン: 20,000円(税抜) - Octoparseの操作を使用して45,000件までのデータをスクレイピングします。
プレミアムプラン: 30,000円(税抜) - Octoparseの操作を使用して80,000件までのデータをスクレイピングします。
納期
全プラン共通で4日間の納期を設定しています。
スクレイピング作業可能サイト例
Amazon(一部
楽天市場(一部
食べログ
不動産関連(一部のデータ
インディード(一部
などなど
要相談です。
【Python】誰でも使いやすいUI!スクレイピングツール作成・業務自動化承ります
業務内容
誰でも使いやすいUIの作成
GUIアプリケーションでは、エンジニアではない方でもアプリケーションをボタンの直感的な操作で提供できます。(※GUIアプリケーションご希望の場合は、オプションの選択をお願い致します。)
※内容を必ずお読みの上、ご購入をお願いします。
お断りさせていただく内容
・スクレイピング禁止サービスへのスクレイピング
・Webサイトへの悪意ある攻撃の意図があるもの、サーバダウンの恐れがあるツール製作
・有料で提供されているサービスへの未購入のまま収集するツールの作成
▼概要
Webサイトから誰でも簡単にWebサイトから必要な情報を抽出し、Excel、CSV、Googleスプレッドシートなどの希望のファイル形式で保存することができます。
ツールは実行ファイルとして提供されます。既存システムに取り込みたいなどの要件でPythonスクリプトとして提供も可能ですが、その場合はPythonの実行環境をご用意ください。
対応OSはWindows、Macです。(Windowsならexeファイル、Macならappファイルとして提供します。両方のOSをご希望の場合は、オプションの選択をお願い致します。)
納品時には、ツールと必要なファイルをzipファイルにまとめてお送りします。無料サンプルをご希望の方は、お気軽にお問い合わせください。実際の納品内容をイメージしていただけるサンプルをご提供いたします。
ブラウザの自動操作が必要な場合(ログインやボタンクリック、ページスクロールなど)も対応しておりますが、動作確認のために時間を要することがあります。
▼お取引の流れ
- ご購入前に、対象のWebサイトや取得したい情報をお知らせください。
- ご提供いただいた情報を基に、スクレイピングの可否や技術的な実現可能性を検討いたします。
- 実現可能であると判断した場合、所要時間や見積もり、カスタマイズの提案を行います。
- 提案内容にご納得いただけたら、ご購入手続きを進めていただきます。
▼注意事項
・納期はあくまで目安です。作業量によって前後することがあります。
・サーバーへの負荷を考慮し、リクエスト間に遅延を設けています。
・提供するツールはデータ収集と解析を目的としています。
・ツールの使用はお客様の責任でお願いします。
・Webサイトの更新により、将来的にツールが機能しなくなる可能性があります。その際は新たにご購入いただくことになるかもしれません。
▼作成環境
・OS:Windows または、Mac
・使用言語:Python
▼無料サンプル
・実際にGUIのアプリケーションがどのようなものかサンプルを無料で提供しています。
・zip形式で「mainファイルとchromedriver.exe」が入っていますので解凍後、同じフォルダーに格納してください。
注文時の提供いただきたいもの
・対象のWebサイトのURL:
・取得したい情報の一覧(Webサイト画面の該当箇所をスクショで示していただけるとわかりやすいです):
・
・
・ログインなどの動的処理はあるのか:
※ログインが必要な場合は、検証のためにアカウント情報を一部お借りする場合があります。
・出力ファイル形式:CSV or エクセル or スプレッドシート
・出力例(スクショで示していただけるとわかやすいです):行と列を何で埋めてほしいか
Octoparseの操作や設定でお悩みの方へ マニュアル付で丁寧にサポートします
業務内容
■こんな方におすすめ
・Octoparseの操作や設定でつまずいている方
・データ入力の反復作業が多い方
・手作業のデータ収集作業を無くしたい方
・Octoparseについてサポートをしてほしい方
■サービス内容
Octoparseで作業を自動するワークフローを設定代行させていただきます。設定後は、ワークフローを実行するだけで自動でデータ収集が行えるようになります。
パソコンに詳しくない方にも理解いただけるように作業マニュアルもご用意させていただきます。
■納品物
・Octoparseの設定
・作業マニュアル
・その他必要に応じて
■ご依頼の流れ
①下記ご依頼の内容をご連絡ください
・データ収集をされたいWebサイトのURL
・収集されたいデータの項目
・収集されたいデータの範囲(500件など)
・出力方法(CSV、Excel、スプレッドシートなど)
②対象サイトを調査(弊社)
③作業内容の合意
④作業開始
まずは、気軽にご相談いただけますと幸いです!
- 業務
- 作業自動化・効率化
WEBスクレイピングを活用してのデータ収集をお手伝いします。ます
業務内容
WEBスクレイピング技術を使ってのデータ収集、データ取得後のデータのクレンジング(クリーニング)まで行います。
データの出力はエクセル形式、CSV形式に対応します。
企画営業の経験と簿記の知識を生かして、経営判断に必要な情報を取りまとめるおてつだいをします。
漠然としたイメージをご共有いただけますと、具体的なご提案をいたします。
英語での打ち合わせ、英文での仕様書にも対応可能です。まずはお問い合わせいただければと思います。
納期についてはできるだけご要望に沿えるよう配慮します。
I collect data using web scraping technology and even perform data cleansing (cleaning) after data acquisition.
Data output is available in Excel and CSV formats.
I will assist you in compiling the information necessary for business decisions based on my experience in planning and sales and my knowledge of bookkeeping.
If you share a vague image with me, I can make a concrete proposal.
I can also handle meetings in English and specifications in English. Please contact us for more information.
I will do my best to meet your requests for delivery date.
Thank you
データ入力、仕分け、Web調査等の単純作業をさせて頂きます
業務内容
業務内容
各種リストをWeb検索、スクレイピングにて作成いたします。システム等へのデータ入力も対応いたします。
リスト化条件、項目数、件数、納期に応じて、お気軽にご相談ください。
クライアント様のご希望に合わせ、迅速丁寧な対応をさせていただきます。
webスクレイピングでデータを自動で取得し、Excelなどに保存します
業務内容
お勧めの方
・webサイトなどからデータを取得する必要があるかた。
ご提供内容
・ご希望のwebサイトから自動でデータを取得し、エクセルなどの指定のファイルに保存を行うシステムを納入します。
ご購入後の流れ
・メールやweb会議などでお客様のご要望を聞き、お見積もりをと納期を提示します。また、そこで詳細について聞き取りします。
【実績作りのため格安】WEBサイトからのデータ収集(スクレイピング)を代行いたします
業務内容
WEBサイトから大量のデータを収集いたします。
できるかどうか不安な場合でお、まずはお気軽にご相談ください。
※実績作りのため、現在であればお安く(5000円~)お引き受け可能です。
ご希望の価格があれば、ご相談ください。
<納品までの流れ>
-
ご相談
サイトからデータ収集可能かどうか確認いたします。
その際は、次の項目を教えてください。
・サイトURL
・収集したいデータ項目
・検索ワードや検索オプション(検索ワード数は料金に関係ありません。)
・収集したい範囲(番号やページ名を変えて何件、検索上位何件など) -
無料調査
ご相談内容から、実際に取得可能か調査致します。 -
お見積り
調査の結果データ収集が可能である場合、サイトの構成と収集に必要な時間から
料金のお見積りと納期をお知らせいたします。 -
発注
お見積り内容を承諾・発注していただいた後、データ収集を実施します。 -
納品
EXCEL,CSV,GoogleSpreadsheetsで納品いたします。他指定の形式がありましたらご相談ください。
【Pythonなどのプログラミング学習相談】チャットで質問や相談に応じます
業務内容
Pythonで業務効率化やWebスクレイピング、アプリ作成など、
プログラミング学習における疑問や悩みについて、
チャット(Lancersのメッセージ)でお応えします。
・課題やプログラム ソースでわからない部分、エラーで困ってる部分など聞いて下さい。
自作ソースでも、公開されているソースでも、公開禁止のソースでも構いません
(守秘義務を厳守します)
・課題や目標に対して、どのように進めれば良いかわからない場合、アドバイスします。
・ライブラリ(モジュール)の使い方やサンプルプログラムが動かない、改良方法が分からない、
といった相談にも応じます。
・プログラミング学習全般や就職に向けての心配事など、相談に応じます。
実績:
・プログラミング教室や技術相談サービス、開発メーカの研修などで
100名以上の方を個別サポートし、2000件以上の相談に応えた実績があります。
技術相談サービスでは約8割の方にレビューを頂き、平均満足度96%の評価を頂いています。
相談量の目安:
・【ベーシック】 10日以内、質問5件以内。
【スタンダード】30日以内、質問20件以内。
【プレミアム】 5日以内、質問5件以内。(特急対応:質問に対し2日以内に回答します)
・ソースや資料を読む必要がある場合、3時間程度で読める範囲を対象とします。
その他:
・この相談サービスは、年齢問わずプログラミングや回路設計を学習している方に向けた
応援サービスですので、業務の相談には応じられない場合があります。
業務や仕事に関するコンサルティングをご希望の場合は、別途お見積もりいたします。
・最初にメッセージを頂いてから相談開始するまで、2日~3日程度お待ち頂く場合があります。
Octoparse を活用したスクレイピング処理のセットアップサポートを承ります
業務内容
Octoparse のセットアップサポートを承ります。
サイトのデータ収集・日々の業務の自動化をしたい場合はお任せください。
▼ Octoparse とは?
Octoparseはプログラミングに詳しくない人でも、直感的に操作ができるWebスクレイピングツールです。
▼ Octoprase で出来ること
Octoparse には予めスクレイピングのテンプレートが用意されており、
以下のようなことを簡単実現できます。
- キーワードでAmazonから商品情報(商品名、ASINや価格など)を抽出
- indeedから求人データ(会社名、給与や仕事内容など)を抽出
- 食べログのレストランページからグルメ情報(店名、評判や住所など)を抽出
- goo 不動産サイトから物件情報データ(物件類型、物件名、賃料や所在地など)を抽出
- Google マップから店舗のクチコミ詳細を抽出
- ハローワークから求人の情報(会社名、給与、勤務地、求人票のURLなど)を抽出
▼ ご提供内容
Octoparse が提供しているテンプレートを活用すると十分データ抽出の自動化出来るのですが、
テンプレートでは取れない情報が欲しかったり、フリープランで抽出したい場合にフルカスタムしたタスクを提供させていただきます。
※ 2024年1月時点ではテンプレートを使ったデータ抽出する場合は有料プランの契約が必要になります。
- デバイス
- デスクトップ・ラップトップ サーバー・ホスティング
スクレイピングの導入からカスタマイズのお手伝いをします
業務内容
こんな方へおすすめ
・・・スクレイピングを試してみたい方へ
初期導入からカスタムまでうけおいます。
ExcelマクロVBAで面倒な作業の自動化・効率化ツールを開発します
業務内容
ExcelマクロVBAにて自社用の自動化・効率化ツール開発をしています。
・商品CSVなどの補助ツール(特定の語句抽出や置換)
・会計経理仕訳補助ツール
・サイボウズofficeタイムカード出勤簿給与集計ツール
また、これまでの経験からどういったツールが適しているかのご提案や
面倒な作業をExcelマクロでの自動化・効率化ツールを開発致します。
<ご利用の流れ>
1.まずはお気軽にお問合せ下さい。
その際、下記情報をお知らせ下さい。
1.「どういった作業を効率化したいか」
※その画面をキャプチャーした画像なども添付頂くと判断しやすく助かります。
2.「ツール開発ご予算」
3.「大まかな納期」
4.「お使いのOSとExcelバージョン」
ツール開発は不要で効率化アドバイス提案だけでも可能です。
↓
2.その内容についてご返信致します。
あまりにも機能が複雑で高額になりそうな場合はお断りする場合もございます。
↓
3.ご納得を頂ければ当サービスをご購入下さい。
ツール完成次第、納品致します。
PythonやGASを利用して自動化ツール作成を請負います
業務内容
▼こんな方へオススメ
自動で情報を集めて何らかのサービスのハブにしたい方、定型作業を自動化したい方
▼ご提供内容
Webサイトからのスクレイピング作業を自動化します。
▼ご購入後の流れ
- ご要件、ご要望をヒアリングします
- 内容に沿ってシステムの設計案をご共有します。(状況によって1~2は何度か繰り返されます)
- 設計に沿って実装〜テスト、安定検証を行います。
- 納品します。
▼制作可能なジャンル
Webサイトに対するスクレイピング
▼料金プランやオプション
50000 ~ 150000で各プランを備えております。
▼納期
規模や運用サポート対応に応じて、14 ~ 90日ほどになります。
- 業務
- Webアプリケーション構築
- プログラミング言語
- JavaScript Python
Pythonによる各種サイト(口コミ•求人サイト等)のWebスクレイピングを行います
業務内容
Pythonを用いてWebサイトから情報を取得し、excelやcsv に保存するプログラムを作成します。
また取得した情報の加工&保存も可能です。
(料金順に並び替え、特定の情報のみ出力など)
■スクレイピング実績
・口コミサイトからのレビュー、料金、住所など取得
・求人サイトからの年収、勤務地など取得
・不動産サイトからの家賃、最寄駅など取得
■納品方法
・作成したPythonコードでの納品
もしくは
・お客様のシステム環境整備なしで、すぐ実行できるようパッケージ化したファイルを納品可能(Macのみ)
※URLが複雑なサイトの場合は、該当サイトからURLを取得&ペーストしてスクレイピングします。(画像参照)
webスクレイピングを用いて、高速かつ正確なデータ収集を行います
業務内容
Python webスクレイピングを用いて、高速かつ正確なデータ収集を行います!
経営コンサルタント時代に、数多くのデータ収集をこなしてきたため、経験は豊富です!
また、フリーランスとしての実績は少ないため、ほかのランサーより良心的な値段でお仕事させていただきます
こまめかつ迅速な連絡をさせていただきます!
よろしくお願いいたします!
【データ、画像etc】Pythonを使用したWebスクレイピングを行います
業務内容
▼提供内容
主にPythonを利用したWeb上からのスクレイピングデータを提供します。
オプションとして、コードを納品することも可能です。
定期的に発注いただく場合、都度回数よりも安価な金額で承れます。
▼業務開始までの流れ
発注・・・ランサーズ上からのご発注
↓
お打ち合わせ(1-2h)・・・ご希望のWebサイトをお伺いの上、スクレイピングの可否や難易度を精査します。
↓
お見積り提示(打ち合わせ後1-2営業日)・・・料金表をベースに、実際の難易度やスクレイピングサイト構成によってお見積りを作成、提示
↓
本発注
↓
実作業(1営業日~)
最短1営業日です。納期についてはお見積り、発注段階で決定します。
↓
納品・検収
- 業務
- Webサイトカスタマイズ
- プログラミング言語
- Python
Webスクレイピング:ウエブサイトのデータ収集をいたします
業務内容
Pythonを用いてスクレイピングをいたします。
ウエブサイトを解析し、スクレイピングコードを作成いたします。
データの収集とソースコードの提供も可能です。
Pythonライブラリ
- Beautiful Soup
- Selenium
- ・・・など
実績
- 歌のウエブサイトで曲名、歌詞などの収集
- 画像データのスクレイピング
- ・・・など
出力
csvやxlsxなど、要望に応じて使いやすい形で出力いたします。
ウエブサイトは様々で気軽にメッセージをいただければ個別対応いたします。
どうぞよろしくお願いいたします。
【高品質×お手頃価格】Instagramを自動化するプログラムを提供します
業務内容
こんな方におすすめ
Python初心者で、Webスクレイピングや自動化に興味のある方
インスタグラムを活用した自動化を学びたい方
ご提供内容
インスタグラム自動化botのソースコード提供(いいね、コメント、フォロー)
Python環境構築方法とSeleniumの基本解説
ソースコード内の解説と参考サイトの紹介
ご購入後の流れ
1.パッケージ購入
- 提供されたコンテンツをダウンロードし、環境構築
- ソースコードの解説と参考サイトの学習
- インスタグラム自動化の実践
- もしくは、自身のプロジェクトに応用
制作可能なジャンル
・インスタグラムマーケティング
・データ収集
・ソーシャルメディア自動化
料金プランやオプション
料金プランは上記の通りですが、カスタマイズも可能です。プレミアムプランでは個別サポートを提供します。
納期
プランごとに異なりますが、最短で3日から最大14日までの間で納品します。
Pythonを用いたデータ収集、分析(スクレイピング)が行えます
業務内容
▼ご提供内容
スレクイピングによるデータ収集、ファイル出力。
▼ご購入後の流れ
Chatwork、Slack、メールなどでやりとりできます。
そこで、ご依頼内容を確認させて頂きます。
▼料金プラン
抽出するデータの数でプランを分けています。
▼納期
4〜7日ほどで完成します。
▼経験
ソフトウェアエンジニアとして、1年間経験を積んでいます。
業務でPythonを使用しているので、Pythonによるスクレイピングが得意です。
pythonのWebスクレイピングによる業務効率化を図ります
業務内容
Webスクレイピングができる実行ファイルを提供いたします。
インターネット上のデータ収集・入力のお手伝いをします!
業務内容
Webから取得可能なデータの収集・入力をいたします。
手動で収集・入力するには時間のかかるような大量のデータも承ります。
具体例としては、下記のようなデータを想定しています。
・GoogleやYahooなどの検索サイトやショッピングサイトでの検索
・TwitterやInstagramなどソーシャルメディア内のデータ取得
・その他Webから取得可能なデータも承ります。
単純作業だけど時間がかかるし面倒だな、という際にぜひご相談ください!
Pythonでスクレイピング・データ加工します。SE歴15年。
業務内容
あなたの課題をお伺いし、Pythonでコードを書き解決します。
できる限り分かりやすいコードを書くことを心がけますので、
お客様での継続したメンテナンスを可能になります。
■定期的にWebページをスクレイピングしたい
■データが手元にあるけど、欠損値の補完や正規化がしたい
■途中までコードを作ったけどうまく動かない
■動くけどスピードを早くしたい
どのようなご希望でもご期待に添えるよう最大限努力いたします。
システムエンジニアの仕事なんて、初めてのことばかりですから。
お気軽にご相談ください。
PythonによるWebスクレイピング(クローラー)ツールを作ります
業務内容
PythonのSeleniumを利用したWebスクレイピング(クローラー)ツールを作成します。
ご指定のURL、ならびに操作を実行して、情報を取得します。
保存形式はExcelまたは各種DBに対応します。
それ以外にもテキストなど、ご指定の保存形式に対応しますので、ご相談ください。
サンプルとしてGoogleから指定のキーワードで検索し、その結果の上位から指定の件数のタイトルとURLをExcelに保存するツールを作成しています。
通常の検索と画像検索の両方に対応しており、画像検索の方はイメージをExcel上に保存します。※ローカルに画像ファイルとしても保存できます。
発注を前提としてサンプルをお渡ししますので、ご相談ください。
提示している価格と納期はサンプルと同等の機能を持つものとしています。
操作内容、サイトのデザインによって変動することがありますので、ご了承ください。
・参考価格
Webサイト操作(検索、ログインなど)・・・2000円/ページ※
スクレイピング(クローニング)処理・・・2500円/ページ※
Excel出力処理・・・2000円
データベース出力処理・・・2000円
※・・・類似のページは2ページ目以降は減額を検討
- 業務
- 開発
- プログラミング言語
- Python
- オペレーティングシステム
- Windows Linux・Unix
- 専門知識
- 開発