商品情報収集ツールの開発事例
Webサイトの商品情報収集を、
自動化。
Webサイトで商品を検索し、商品名・価格・JANコードなどを確認してExcelへ転記する。
決まった条件で繰り返す情報収集を、専用ツールで効率化します。
よくあるお悩み
検索と転記の繰り返しに、時間を取られていませんか？
検索条件が決まっていても、画面を開いて結果を確認し、必要な情報を表へ写す作業は人の手に残りがちです。
検索条件
普段使っている条件を、あらかじめ整理
キーワード、カテゴリ、価格帯など、業務で使用する検索条件を保存しておき、ツール実行時に読み込みます。
※掲載している条件・商品名・数値は説明用の架空サンプルです。実際のお客様の情報は使用していません。
検索結果
検索結果から、必要な商品情報を取得
対象サイトの検索結果や商品詳細を確認し、業務に必要な項目を取得します。取得対象は、サイトの仕様と目的に合わせて整理します。
個別開発だからできること
必要な項目だけを、使いやすい形でまとめます。
現在の確認手順と出力先を伺い、集める情報・並び順・ファイル形式まで業務に合わせて設計します。
自動収集の流れ
条件の読み込みからExcel・CSV出力まで
実際の処理手順に合わせ、6つのステップを順番に実行します。
- 認証情報を読み込む事前に設定した認証情報を読み込みます。
- 対象サイトを開く商品情報を確認するWebサイトをブラウザで開きます。
- 検索条件を読み込む保存済みのキーワードやカテゴリなどを読み込みます。
- 条件を適用して検索Webサイトへ検索条件を設定し、検索を実行します。
- 商品情報を取得商品名・価格・JANコードなど、必要な情報を取得します。
- Excel・CSVへ出力取得結果を確認しやすい一覧へまとめます。
認証情報の取り扱いについて：保存方法は利用環境や運用条件に応じて、安全な方式を検討します。
作業の変化
人が転記する作業から、結果を確認する業務へ
すべてを無人化することだけを目的にせず、条件の準備や結果確認を人が行える、現場で使いやすい運用を設計します。
検索と転記を1件ずつ繰り返す
- Webサイトを開く
- 検索条件を入力する
- 検索結果を確認する
- 商品情報をExcelへ転記する
- 次の条件やページで繰り返す
条件を準備し、出力結果を確認
- 検索条件を用意する
- ツールを実行する
- Excel・CSVの結果を確認する
取得できる情報
業務に必要な商品項目を整理して取得
画面上に掲載されている情報のうち、対象サイトの仕様と利用条件を確認した上で、必要な項目を選びます。
商品名
一覧や商品詳細に表示される名称
価格
販売価格や表示価格などの金額情報
JANコード
商品を識別するためのコード情報
商品URL
確認元となる商品ページへのリンク
その他の情報
型番・カテゴリ・在庫表示など、サイト上で取得可能な情報
出力形式
確認・集計しやすいExcel／CSVへ
取得した商品情報を、既存業務で扱いやすい列構成とファイル形式にまとめます。
Excel出力
担当者がそのまま確認・編集しやすい一覧として出力します。
CSV出力
別システムへの取り込みや集計に使いやすい形式で出力します。
現在の業務に合わせた個別開発
対象サイト・検索条件・出力方法に合わせて設計
既製品へ業務を合わせるのではなく、現在の確認手順を伺い、自動化できる範囲と人が確認する範囲を整理します。
- 対象Webサイトと検索画面の確認
- キーワード・カテゴリ・価格帯などの検索条件
- 取得する商品情報と出力列の整理
- Excel・CSVの既存フォーマットへの対応
- 実行タイミングやエラー時の確認方法
- 認証情報を安全に扱うための運用検討
対象サイトを確認してから、対応可否と方式をご案内します。
Webサイトの利用規約・仕様・認証方式・CAPTCHA・MFA（多要素認証）・画面変更などにより、対応可否や実現方法、保守の考え方は異なります。すべてのWebサイトで自動収集できるものではありません。
開発の流れ
現在の手作業を確認するところから始めます
対象サイトと実際の検索・転記手順を確認し、無理のない実装範囲を一緒に整理します。
- 1作業内容のヒアリング
誰が、どのサイトで、どの条件を使い、何を転記しているかを確認します。
- 2対象サイトと利用条件の確認
画面、認証、利用規約、技術的な制約を確認します。
- 3取得項目と出力形式の整理
必要な商品情報とExcel・CSVの列構成を決めます。
- 4自動化範囲のご提案
自動処理と人による確認の役割を分け、開発内容をご案内します。
- 5小さく試作・動作確認
実際の画面で検索・取得・出力の流れを確認します。
- 6調整・納品・運用
確認結果を反映し、利用環境に合わせた運用方法を整えます。
掲載内容について
掲載している画像・商品情報・検索条件・EC画面・自動収集フローは、すべて説明用に作成したサンプルです。実際のお客様のデータ、画面、認証情報は使用していません。
商品情報収集のご相談
その検索と転記、
自動化できる範囲を整理しませんか？
「毎回同じ条件で商品を探している」「商品名や価格をExcelへ転記している」「件数が増えて確認に時間がかかる」。現在の作業を伺い、対象サイトの条件を確認した上で実現方法をご案内します。
商品情報収集ツールについて相談する