ステップ 03データソースの候補を洗い出す

このステップがデータ調達における最大の難所かもしれません。サードパーティデータの提供元の数が非常に多いからです。手始めに、データプロバイダーのカテゴリにどのようなものがあるかを把握しておくと役立ちます。ただし、複数のカテゴリの特徴を併せ持つプロバイダーも多い点に注意してください。主なカテゴリは以下のとおりです。

一次データソース

調査やデータ収集を自ら行い、それを外部に提供している組織です 。学術機関や大学、政府機関、NGO、科学団体、業界団体、研究機関、シンクタンクなどがこれに該当します。また、ソフトウェアツールで Web ページからデータを抽出する「Web スクレイピング」と呼ばれるプロセスを使い、インターネットからデータを収集する組織もこれに当たります。一次ソースから得られるデータは「生データ」とも呼ばれます。

公共利用データおよびオープンソース データ

通常、無償で入手できるデータで、多くの場合、一次データソースから提供されたものを元にしています。オープンソース データは、確かに商業目的でのデータ調達における有力な選択肢ですが、「無料」だからといって「コストがゼロ」だとは限りません。収集したデータの誤った使い方、データの欠落、不正確な統計的推論が問題を引き起こす可能性があります。また、オープンソース プロジェクトのデータを利用する場合、データに加えた改善内容を「還元」するように義務付けられることもあります。

データアグリゲーター

複数のソースからデータを収集し、処理して新たな価値を付加してから新しいデータセットに結合し、利用しやすい形で再パッケージ化して提供する組織です。

データプロバイダーおよび単一ソース型のデータマーケットプレイス

Precisely のようなデータプロバイダーは、データ集約を大規模に行い、市場で取り引きできるデータ製品を生み出しています。このようなデータ製品は商業利用を前提に作られており、簡単に統合できるよう標準化された形式、品質保証、データ ガバナンス、信頼性の高いメタデータ、製品ドキュメントなど、高い付加価値を備えています。また Precisely では、お客様がスムーズにデータを調達できるよう、データ製品を Precisely Data Experience というマーケットプレイスで提供しています。

データマーケットプレイス

複数のデータプロバイダーが提供する市場性の高い製品やサービスを、検索可能な 1 つの環境に集約したプラットフォームです。Snowflake Data Marketplace や AWS Data Exchange がこれに該当します。また、 セグメント化された消費者オーディエンスデータなど、業界や目的に特化したデータマーケットプレイスもあります。