課題
多数の商品を取り扱うEC事業では、商品情報を正確かつ効率的に管理することが重要です。
さまざまなデータを商品管理システムへ取り込み、統合・活用するためには、データの抽出・変換・格納を行うETL処理に加え、商品データの品質を担保する仕組みが必要でした。
また、複数のシステムや異なるデータを連携するため、データ処理に加え、システム全体を考慮した設計・開発が求められていました。
導入ソリューション
当社は、商品管理システムにおけるETLおよびデータ品質管理機能の開発を支援しました。
ETLツールを活用したデータ連携に加え、商品データに対する品質チェック処理の設計・開発・テスト、開発環境構築を担当しました。標準機能では対応できない品質チェックについても、個別機能を開発することで対応しました。
また、Google CloudのBigQueryやSQL Server、Elasticsearchなど複数の技術・製品が組み合わされた環境において、関連システムとの連携を考慮しながら開発を推進しました。
効果
ETLによるデータ連携と商品データの品質チェック機能を整備し、複数のデータを商品管理システム上で活用するための基盤構築を支援しました。
また、標準機能では対応できないデータ品質チェックを個別開発で補完することで、商品データの特性に応じた柔軟な品質管理を実現しました。
設計から開発、テスト、環境構築まで幅広く対応し、大規模な商品情報を扱うシステムの安定したデータ活用を支える仕組みづくりに貢献しました。
- 複数データの一元活用を実現
- 商品データの品質向上と管理効率化を実現
- データ特性に応じた柔軟な品質管理を実現
- 大規模データの安定的な活用基盤を構築
