業種によってDWHの懸念が変わる背景
DWHとは、複数のシステムから集めたデータを分析しやすい形で蓄積しておく基盤です。同じ仕組みでも、扱うデータの性質が業種によって異なるため、生じる課題も変わります。
データの届き方の違い
取引の記録のように1件ずつ積み上がるデータと、設備から短い間隔で送られる測定値では、取り込みの設計が変わります。件数が多いデータをそのまま蓄積し続けると、容量と処理の時間が増えていきます。
検討の前に、扱いたいデータの種類、1日あたりの件数、保存したい期間を整理しましょう。件数の多いデータについては、細かい単位で保持するのか、一定期間を過ぎたら集約するのかも決めておきます。この方針が費用と処理時間の両方へ影響するため、早い段階でベンダーへ相談してください。
必要な更新頻度の違い
分析の目的によって、どの時点までのデータが必要かが変わります。分析向けの基盤は、まとまった量をまとめて処理することを想定した作りが多く、届いた瞬間の反映を前提とはしていない場合があります。
整理の際は、分析の用途ごとに必要な必要な更新頻度を整理しましょうを書き出しましょう。すべてを最新にする必要はなく、用途によって分けると設計が現実的になります。あわせて、各システム側がどの頻度でデータを提供できるかも確認が必要です。元のシステムが1日1回しか出力しないなら、基盤側だけを速くしても効果は限られます。
EC通販で更新頻度が求められる場面
注文と在庫の状況を追う業務では、分析用の基盤だけでは要件を満たせない場合があります。
在庫の判断に基盤を使う場面
在庫の引き当てや販売の可否といった判断は、その時点の正確な数値が必要になります。分析用の基盤へ取り込んだデータは、取り込みの間隔によって時点がずれるため、こうした判断の根拠には向かない場合があります。
整理の方法としては、業務の判断に使う数値は元のシステムから取得し、傾向の把握や計画の立案に基盤を使うという役割分担が挙げられます。どの用途にどの仕組みを使うかを決めて文書に残しておくと、関係者の認識もそろいます。更新頻度が必要な範囲だけ別の仕組みを併用する構成も、選択肢として検討できます。
販売経路が複数ある場面
自社のサイトに加えて複数の販売先を使っている場合、それぞれで商品や顧客の識別方法が異なります。集めた後に対応づける作業が必要になり、この処理が滞ると集計に反映されません。
確認したいのは、販売先ごとのデータを取り込む手段があるか、対応表を使って項目を変換できるか、対応づけできなかったデータをどう扱うかという点です。新しい商品や販売先が追加された際に、対応表を更新する担当と手順も決めておきましょう。件数が急増する時期の処理時間についても、あわせて確認してください。対応づけできなかった件数を日々把握できると、影響の大きさを判断しやすくなります。
金融機関で要件とすり合わない場面
管理の水準が定められている業種では、条件を満たせるかの確認が導入の前提になります。
保管や記録の条件が合わない場面
参照する指針によって、データを保管する場所や、アクセスの記録に関する条件が定められている場合があります。これらは後から変更しにくいため、選定の早い段階で確認する項目です。
確認したいのは、保管場所を選べるか、暗号化に使う鍵を自社で管理できるか、誰がいつどのデータへアクセスしたかの記録が残るかという点です。あわせて、提供会社の担当者がデータへ接触する場合の条件も確認しましょう。要件の整理は、監査担当や外部の専門事業者と進めることをおすすめします。
数値の根拠を示せない場面
報告する数値について、どのデータからどう計算したかを説明できる状態が求められる場合があります。加工の経緯が記録されていないと、確認に時間がかかります。
確認したいのは、データの出どころと加工の経緯をたどれる仕組みがあるか、集計に使った条件を記録できるか、項目の意味を登録しておけるかという点です。これらは導入時に設計へ組み込む必要があるため、後から追加するより初めから含めるほうが負担を抑えられます。運用の担当と確認の頻度も、あわせて決めておきましょう。定期的に記録を出力して保管する運用にすると、後から照会を受けた際にも対応できます。
ITトレンドでは、最新の製品・サービスを多数比較・掲載しています。まず資料を取り寄せて機能や特徴をさまざまな製品で比較してみてください。忙しい業務時間内でも、各社に問い合わせる手間なく、たった1回の入力（約60秒）でDWHの一括資料請求が可能です。浮いた時間で、じっくりと製品を比較検討し進めましょう。
製造業で運用が滞る場面
生産の現場から届くデータは件数が多く、保持の方針を決めていないと運用に負担が生じます。
測定値の量が想定を超える場面
設備から短い間隔で送られる測定値は、1台あたりの件数が少なくても、台数が増えると合計は大きくなります。すべてを細かい単位で保持し続けると、容量と費用が想定を超える可能性があります。
対応としては、一定期間を過ぎたデータを集約する処理を組み込む方法があります。分単位の値を時間単位へまとめる、あるいは統計値だけを残すといった設計です。どの粒度でどれだけの期間保持するかは、分析の用途から逆算して決めましょう。設備を担当する部門と一緒に、必要な粒度を確認してください。
現場のネットワークからデータを送れない場面
生産設備を制御するネットワークを事務系と分離している場合、現場のデータを基盤へ送る経路がない状況が生じます。分離の方針は情報セキュリティ上の判断にもとづくため、簡単には変更できません。
対応としては、限定した経路を設けて一方向にデータを送る構成や、いったん中継する仕組みを置く構成が検討されます。実現できる方法は現場の構成によって異なるため、設備の担当部門と情報システム部門を交えて検討しましょう。工場ごとに構成が違う場合は、拠点別に確認を進めてください。既存の設備から取り出せるデータの形式も、あわせて確認しておく必要があります。
小売業で統合に手間が残る場面
店舗ごとにデータが発生する業種では、集める工程と定義をそろえる工程の両方に手間がかかります。
店舗ごとの取り込みが安定しない場面
店舗の数だけ取り込みの経路があるため、一部の店舗で処理が失敗しても気づきにくい状況が生じる可能性があります。気づかないまま集計すると、全社の数値が実態より少なくなります。
確認したいのは、店舗単位で取り込みの状況を確認できるか、失敗した店舗を絞り込めるか、再実行できるかという点です。あわせて、想定される件数と実際の件数を突き合わせる検査を組み込めるかも見ておきましょう。差が出た場合に通知が届く設定にしておくと、集計の前に気づけます。
商品や店舗の区分が変わる場面
商品の分類が見直されたり、店舗の統廃合があったりすると、過去のデータと現在のデータで区分が一致しなくなります。この状態で比較すると、変化の原因を読み違える可能性があります。
対応としては、区分が変わった時点を記録し、過去のデータを現在の区分へ読み替えられる対応表を用意する方法があります。基盤を選ぶ際は、時点によって異なる区分を扱える設計にできるかを確認しましょう。読み替えの作業を誰が担うか、更新の頻度をどうするかも、運用として決めておくことが大切です。商品を管理する部門と定期的に情報を共有する場を設けると、変更に早く気づけます。
業種ごとのデータを扱うDWH
販売や生産、診療など、扱うデータの性質によって設計の要点は変わります。要件から相談したい製品を集めました。
DWH構築サービス ～貴社独自のデータモデル構築～
- 最適なデータモデリング
- 圧倒的な透明性
- 変更に強い
キヤノン電子テクノロジー株式会社が提供する「DWH構築サービス ～貴社独自のデータモデル構築～」は、大量のデータを統合・蓄積して分析につなげるためのDWH構築サービスです。データもシステムも内容が見えない状態にしない方針が示されており、構築後に自社で運用を続ける形も見据えて相談できます。クラウドとオンプレミスの両方に対応します。
Dr.Sum
- 導入実績8,000社超！顧客満足度No.1・サポート品質ランク★★★
- 散在したデータを一元化、10億件のデータも1秒台で◆高速集計◆
- 直感的な操作で誰でも簡単にデータ分析が可能
ウイングアーク１ｓｔ株式会社が提供する「Dr.Sum」は、企業内のデータを収集して高速に集計するデータ分析基盤です。データの統合や加工、権限の管理といった機能を備えています。オンプレミスとクラウドの両方に対応しており、保管の条件にあわせて構成を選べる点も検討の材料になります。
AmazonRedshift （アマゾンウェブサービスジャパン合同会社）
- 次世代SageMakerと統合し、データレイクハウス分析を強化
- ゼロETL統合で運用DB等とほぼリアルタイム連携
- Amazon Qで自然言語によるSQLオーサリングを簡素化
MetapsBridge （株式会社メタップス）
- アトリビューション分析で広告効果を最大化
- 不正クリック検知機能で広告費を節約
- リアルタイムレポートで迅速な意思決定を支援
DWHに関するFAQ
業種別のDWH導入について、よく寄せられる質問と回答をまとめました。
- Q1： 在庫の判断にDWHの数値を使えますか？
- 取り込みの間隔によって時点がずれるため、正確さが求められる判断には向かない場合があります。業務の判断は元のシステム、傾向の把握は基盤という役割分担を検討してください。
- Q2： 保管場所や記録の条件は後から変更できますか？
- 変更には移行の作業が必要になる場合があります。参照する指針の条件を早い段階で整理し、選定の必須条件として扱うことをおすすめします。
- Q3： 設備の測定値はすべて保持すべきですか？
- 分析の用途から必要な粒度を逆算し、一定期間を過ぎたら集約する設計が現実的です。設備を担当する部門と一緒に必要な粒度を確認しましょう。
- Q4： 店舗の統廃合があった場合の比較はどうしますか？
- 区分が変わった時点を記録し、過去のデータを現在の区分へ読み替える対応表を用意する方法があります。読み替えの担当と更新の頻度も決めておきましょう。
まとめ
DWHの導入で業種ごとに生じる懸念は、データの届き方、求める更新頻度、保管と記録の条件、区分の変化という観点から整理できます。EC通販では役割分担、金融では保管と経緯の記録、製造業では粒度と経路、小売業では取り込みの確認と読み替えが焦点です。現場の実態を整理したうえで、複数の製品資料を取り寄せて比較検討を進めてください。
