2月 012017
 

1.概要

こちらでご紹介するのは、弊社製品のネットクローリングの仕入先サイトeBayの商品データを自動的に収集し、ExcelやCSVに出力するサービスでございます。

2.出力項目

  1. URL
  2. タイトル
  3. カテゴリ
  4. 商品紹介
  5. 商品管理番号
  6. ブランド名
  7. サイズ・容量
  8. 規格
  9. 価格
  10. 画像

収集項目を事前にご相談に応じてカスタマイズも可能です。また、複雑度に応じて金額が変わる可能性があります。あらかじめご了承ください。

3.出力例

8月 312013
 

1、Google プレイス検索APIは何?

Google Places API を使用すると、施設、有名なスポット、地理的な位置など、場所に関するさまざまなカテゴリの情報を問い合わせることができます。場所は、近接またはテキスト文字列で検索できます。

詳細は次のページに参照してください:

Google Places API

2、Google プレイス検索API利用のための準備

Google プレイス検索API利用するために、アプリケーションの API キーが必要です。API プロジェクトを作成して、キーを取得するには、API コンソールにアクセスしてください。

ここで、仮に、keyを取得しました。key=AIzaSyBzocNsygOW3y9wBnqrXktgK

3、Google プレイス検索APIの利用方法

ここで説明するのがEasyCrawlerを使って、APIの知識やXMLの知識がなくって、POI情報の収集方法を紹介します。

3.1 まずはツールをダウンロードしてください。

3.2 ソフトウェアを開いてください

3.4 User Nameは変わらないでください。TaskIDは「googleplace」を入力してください

3.5 setupファイルを開いて、「2」で所得したKeyを入力してください

3.6 収集したGPS位置やキーワードをきめて、setupファイルに記入してください

[python]

maxtimes 9000
maxdata 9000
set_para yourkeyhere,AIzaSyBzocNsygOW3y9wBnqrXktgK
addlink:https://maps.googleapis.com/maps/api/place/textsearch/xml?query=横浜中華街&sensor=true&key=AIzaSyBzocNsygOW3y9wBnqr

[/python]

3.7  設定完了、ソフトウェアを実行してください

8月 172013
 

ニーズ

あるサイトから全部の料理レシピ-データを収集し、指定されるフォーマットで納品すること

特徴

料理レシピ-データをを収集するため、ユーザーがロングインする必要がある

実現方法

本サイトが開発したデータ収集ツール

データの件数:5000件以上

スタートから納品まで時間:36時間

納品フォーマット:Excelフォーマット

費用:10000円

詳細は次のページに確認することができます:http://www.lancers.jp/work/detail/180927

追記:ページ紹介した機能は既にデータクローリングサービス化として、公開済みです。ご希望ある方は問い合わせでご連絡いただければ幸いです。

7月 312013
 

【仕事内容】

海外ネットショップより商品データ取得(商品名、説明文、価格etc)、画像ファイルをダウンロードし、仕様に応じたカラーミーショップ登録用CSVデータ(オプション登録用CSV含む)を生成するツールを開発可能な方を募集します。

現在、特定の1つのサイトよりデータ収集を予定しておりますので、そのサイトに則したソフトの作成をお願い致します。

ご提案、お問い合わせいただければ、簡単なソフト動作の流れ、またサンプルソフトの紹介、収集を予定しているサイトの公開も可能です。

お渡し頂くのはソフトのみ、出来上がりのCSVのみどちらでも可能です。
【提案内容】
◆価格:15,000
◆ソフトウェア機能
・海外ネットショップより商品データ取得
 -商品名、説明文、価格、画像ダウンロード(枚数指定可能)
 -ほかに収集可能なデータはカテゴリ、商品の色などです。ご相談ください。
・収集したデータをカラーミーショップ登録用CSVデータを生成します。

◆現在ソフトウェア利用プロセスは下記です。
1.収集するサイトのURL及び収集内容を教えて頂きます。
2.収集した商品名、説明文、価格、画像のデータサンプルをご提供致します。
  データサンプルの内容をご確認頂きます。
3.カラーミーショップに登録するために、送料、為替レート、カテゴリなどの情報を提供して頂  きます。
4.CSVファイルをご提供致します。CSVファイルのの内容をご確認頂きます。
5.CSVファイルに問題がなければ、カラーミーショップに登録(アップロード)いただきます。

◆提案①
※ソフトウェア提供し、ご自分で収集していただくの場合
・開発期間:5日間

◆提案②
※完成したCSVをご提供させていただく場合
・開発期間:4日間 毎日4000件データ納品
(上限20,000件,20,000件超過の場合、ご相談ください)
提案用の資料:
提案資料

3月 102013
 

まぐまぐのマガジンには非常に多いメールアドレスが存在します。

今日全部のメールアドレスを収集できるソフトウェアが開発しました。

面白いソフトウェアだと思います。

なんのために使いますか、また考えています。

機能:

まぐまぐの各マガジンに書いているアドレスを収集する

特徴:

1、全角のアドレスにも収集できる

2、全部自動化収集

3、部数に基づいて収集できる

4、カテゴリごとに収集できる

3月 092013
 

営業、プロモーション、市場調査など、検索で見つかった特定のウェブサイトの

多くのページから電話番号を抽出し、統一のフォーマットにしてデータ化したい方も大勢いらっしゃると思います。

しかし、たとえ、ひとつのサイトで1000以上のページが存在する場合、

一つ一つのページを次へをクリックして、電話番号だけを抽出することは難しいでしょうね。

私は下記の方法を用いて電話番号の抽出を実現しました。

ウェブサイトがレイアウトが決まっているため、ウェブページに電話番号の場所がほとんど決まっています。

例えば下記のウェブページの電話番号がテーブルの「代表問い合わせ先」という言葉の後ろのセルにあります。

プログラミングで実現する手順としては

1.ウェブページのソースコードから「代表問い合わせ先」という言葉のエリアを見つけます。

2.全角の数字を半角に変換します。(全角数字はプログラミングに数字ではなく、文字と同じ扱いになるため)

3.予め電話番号のパターンを見つけ出し、プログラミングの辞書に登録します。

基本なパターンは50前後種類があります。例えば

…-….-…(数字から始まり、-が付いているパターン)

(..)…-….(カッコから始まるパターン)

4.電話番号パターンの特徴に基づき、電話番号でない文字(本部(9時~19時))を削除します。

残りの部分は電話番号になります。

キーワード:顧客開拓 電話 番号 リスト作成

3月 062013
 

客様の要求:

海外ネットショップから商品データ(商品名・商品説明・画像・サイズ・カラー等)を一括で自動取得するソフトの作成依頼となります。

当方、カラーミーショップを運営しておりますが、その商品登録CSVファイルへの出力がスムーズに行えるソフトの開発となります。
(商品名、説明文、価格、画像ファイル 画像URL等)
・レート計算、翻訳などができれば、良いですが、予算もあるので、細かくご相談の形で
・どのサイトでも、対応できるソフトが良いです
・カラーミーショップへの商品登録CSVソフト作成の経験者がある方歓迎です。

海外ネットショップの抽出先は様々です。
その為、多種多様な形態のネットショップでも対応できるソフト開発を希望します。

重視する点/検討基準:

・操作が簡単で効率良く利用できるソフトを希望致します。

・同様のソフトを開発された事がある方などは大歓迎です(無くても作成可能であれば歓迎です)

・当方にあまり知識がない点をご理解頂き、その上でご報告等行える方。

・ソフトのバージョンアップ等、様々な変化があった際に対応・相談可能な方。
(バージョンアップ費用対応可能)

・当方、個人な為、予算考慮してくださる方。

・早い納期が可能な方。

・バグ対応に関して受注完了後6か月間は、ソフトウェアの不具合等に関しては無償で修正 が可能な方。

提案の内容:

既に自動収集ソフトウェアを開発しましたから、ご希望に従って修正して提供ができます。またSkypeにより現在のソフトウェアを確認できます。
出来る機能:
商品名、説明文、価格、画像ファイル 画像URL、レート計算、翻訳

また、異なるネットショップの簡単対応が可能です

納期:2週間

 

追記:ページ紹介した機能は既にデータクローリングサービス化として、公開済みです。ご希望ある方は問い合わせでご連絡いただければ幸いです。

2月 232013
 

依頼の概要:

客様が指定された脱毛サロンのサイトから脱毛サロンのクチコミ情報を収集し、全部のデータをエクセルに纏めることである。

データの内容:
1.クチコミ本文
2.サロン名称(どのサロンのクチコミか※2)
3.店舗名(2.のどの店舗のクチコミか※3)
4.掲載元サイトのURL※4
5.掲載元サイトのタイトル

依頼されたサイトの数:3社

納品した全部データの数:25823件

提案:一サイトにつき9000円(10000件以内の場合)、合わせて24000円となる

納品時間:4日