データアーキテクチャ・メタデータ・MDM 入門学習

TOP › データ・AI区分 ロードマップ › 入門学習ガイド › Unit 2 データアーキテクチャ・メタデータ・MDM
データ・AI区分 Unit 2

データアーキテクチャ・メタデータ・MDM 入門学習

エンタープライズデータモデル・データメッシュ・メタデータ管理・MDM・データ契約を体系的に学ぶ

📚 5章構成✏️ 確認テスト 3問⏱ 目安25分

第1章 エンタープライズデータアーキテクチャ

エンタープライズデータアーキテクチャは、企業全体で扱うデータの意味・関係・配置・流れを設計したものです。中心となるのがエンタープライズデータモデルで、主要な業務領域をサブジェクトエリア(顧客、商品、受注など)として整理し、実装方式に依存しない概念データモデルで企業横断の管理対象と意味上の関係を表現します(科目B 1-3)。

あわせて、システム間のデータフローを可視化し、データの重複・冗長を把握・管理します。どのシステムがどのデータを生成(C)・参照(R)・更新(U)・削除(D)するかを表にするCRUD分析は、正本の所在や責任の所在を確認する基本的な手法です。システム間連携で共通に使うデータ形式をカノニカルデータモデルとして定めておくと、変換ロジックの乱立を防げます。設計は現状(As-Is)と目標(To-Be)のアーキテクチャ及び移行計画の形でまとめます。

科目B 1-3では、指標・分析軸・計算ロジックを一貫して使えるようにするセマンティックレイヤー、非構造化データを検索・関連付けるためのオントロジー・ナレッジグラフ・ベクトル検索、判断基準や例外を管理する判断モデル・ルール・デシジョンテーブルの設計も挙げられています。人だけでなくAIがデータを正しく解釈できる構造を用意する、という視点がポイントです。

CRUD分析の例 受注システム 会計システム 分析基盤
顧客 R R R
受注 CRUD R R
請求 R CRU R
この章の要点
  • サブジェクトエリアで全体像を捉え、概念データモデルで意味と関係を表す
  • CRUD分析で「どこが生成・更新するか=正本の所在」を確認する
  • カノニカルデータモデル=システム間連携の共通データ形式
  • As-Is / To-Be と移行計画でアーキテクチャをまとめる
  • セマンティックレイヤー、ナレッジグラフ、デシジョンテーブルで人とAIの解釈を揃える

第2章 データアーキテクチャの方式と選択

データ基盤には集中型(全社データを一つの基盤に集約)と分散型(各部門・ドメインが持つ)があります。分散型の代表的な考え方がデータメッシュで、シラバスでは次の4要素が挙げられています。

データメッシュの要素 意味
ドメインごとのデータの所有と提供 データを最もよく知る業務ドメインが、データの所有・提供の責任を持つ
データプロダクト データを「利用者に提供する製品」として扱い、仕様・品質・利用条件を明確にする
セルフサービス基盤 各ドメインが自力でデータプロダクトを作り公開できる共通基盤を用意する
連邦型ガバナンス 相互運用に必要な共通ルールは全体で決め、運用は各ドメインが担う

データ連携の方式にはポイントツーポイント型とハブアンドスポーク型があります。ポイントツーポイント型は必要なシステム同士を個別に接続するため、少数なら簡単ですが、n個のシステムが相互に連携すると最大 n(n−1)/2 本のインタフェースが必要になり、保守が難しくなります。ハブアンドスポーク型は中央のハブを経由するため、インタフェースは各システムとハブの n 本で済み、変換や監視を集約できますが、ハブが性能・可用性のボトルネックになり得ます。

観点 集中型・ハブ型が有利になりやすい 分散型・個別連携が有利になりやすい
統制の効きやすさ 基準を一か所で強制しやすい ドメインごとにばらつきやすい
開発容易性・スピード 中央チームが混雑しボトルネックになりやすい 各ドメインが自律的に素早く対応できる
性能・コスト 集約によるスケールメリット/ハブ集中の負荷 重複投資が起きやすい
この章の要点
  • データメッシュ=ドメイン所有、データプロダクト、セルフサービス基盤、連邦型ガバナンス
  • ポイントツーポイント:最大 n(n−1)/2 本の接続。ハブアンドスポーク:n 本
  • 方式選択は開発容易性・性能・コスト・統制の効きやすさのトレードオフ
  • 「どちらが常に正しい」ではなく、組織特性と要求で選ぶ

第3章 メタデータ管理とデータリネージ

メタデータは「データについてのデータ」です。シラバスでは次の3種類に分類されています。

種類 内容の例
ビジネスメタデータ ビジネス用語の定義、データ項目の業務上の意味、データオーナー、利用条件
テクニカルメタデータ テーブル・カラム名、データ型、スキーマ、ETL/ELTの変換ロジック、データリネージ
オペレーショナルメタデータ ジョブの実行日時・処理件数・エラー、データの更新日時、アクセスログ

メタデータを使う仕組みには、ビジネス用語を定義・統一するビジネスグロッサリー(ビジネス用語集)、データ項目の名称・型・定義を記述するデータ辞書、組織内のデータを探索・理解するためのデータカタログ、メタデータを格納するメタデータリポジトリ、データ要素の定義を登録・管理するメタデータレジストリ(その標準がISO/IEC 11179)があります。

データリネージは、データの生成元から加工・連携を経て利用先に至るまでの来歴とつながりです。テーブルレベルは「どの表からどの表へ」、カラムレベルは「どの列がどの列の計算に使われたか」まで追えます。カラムレベルは影響分析に強い反面、収集・維持の負荷が大きくなります。

メタデータ管理は、DMOなどが運用ルールを整備し、ルールに基づいて追加・更新します。メタデータアーキテクチャには集中型・分散型・ハイブリッド型があり、メタモデル(メタデータ自体の構造)を定めます。メタデータの品質は、リポジトリの利用頻度、完全性、可用性、メタデータ成熟度などで評価します。

この章の要点
  • ビジネス(意味・用語)/テクニカル(構造・変換)/オペレーショナル(実行・運用)
  • ビジネスグロッサリー=用語の定義、データ辞書=項目の定義、データカタログ=探索の入口
  • ISO/IEC 11179=メタデータレジストリの標準
  • リネージはテーブルレベルとカラムレベル。粒度と維持負荷のトレードオフ
  • メタデータも品質評価の対象(利用頻度・完全性・可用性・成熟度)

第4章 マスターデータ・参照データ管理(MDM)

マスターデータは顧客・商品・取引先・組織など、業務の基本となる比較的変化の少ないデータです。日々の取引記録であるトランザクションデータ、国コードや通貨コードなどの区分・コード値である参照データと区別します。複数システムに散らばったマスターデータを統合・管理するのがMDM(マスターデータ管理)で、統合された最も信頼できる1件のレコードをゴールデンレコードと呼びます。

統合の中心は名寄せです。同一の実体を表すレコードを見つけるマッチング、1件にまとめるマージ、誤って統合したものを戻す分割、そして結果の確認・是正からなります。マージ時に、項目ごとにどのシステムの値を正とするか(例:住所は最新更新日のもの、与信限度額は基幹システムのもの)を決める規則を定めておきます。

MDMの実装方式 仕組み 特徴
レジストリ型 ハブは各システムのレコードの識別子の対応(相互参照)だけを持ち、データ本体は各システムに残す 既存システムへの影響が最小。統合ビューは参照時に組み立てる
コンソリデーション型 各システムからデータを集約してハブでゴールデンレコードを作る。元システムへは戻さない 分析・参照用途向き。元システムの不整合は残る
コエグジスタンス(共存)型 ハブでゴールデンレコードを作り、各システムへ配信・同期する。各システムでも更新できる 一貫性が高まるが、双方向同期の設計が複雑
集中管理型 マスターの登録・更新をハブで一元的に行い、各システムへ配信する 統制・一貫性が最も強い。業務プロセス変更の影響が大きい

参照データ・コード体系の管理では、コード体系の標準化、コードの新設・改廃の手続、システム間のコードマッピング、業界標準・国際標準コードの利用、有効期間と世代管理が論点です。有意味コード(桁に分類などの意味を持たせる)は人が読みやすい反面、分類変更時にコード変更が必要になります。無意味コード(連番など)は変更に強い反面、コードから内容を推測できません。MDMは対象ドメイン(顧客→商品→取引先など)を段階的に拡大するのが一般的です。

この章の要点
  • マスターデータ/トランザクションデータ/参照データを区別する
  • ゴールデンレコード=統合された最も信頼できる1件
  • 名寄せ=マッチング・マージ・分割・確認是正。項目ごとに正とする値の規則を定める
  • 実装方式:レジストリ型 → コンソリデーション型 → コエグジスタンス型 → 集中管理型の順に統制が強くなる
  • 有意味コード(読みやすいが変更に弱い)と無意味コード(変更に強いが読めない)のトレードオフ

第5章 データ契約(データコントラクト)と組織横断の標準

データの提供者と利用者の間で、データの仕様、品質水準、更新・提供条件、利用条件及び責任分担を取り決めたものがデータ契約(データコントラクト)です。科目B 1-4ではデータ契約を定め、その変更管理プロセスを設計する技能が挙げられており、IPA公表の科目Bサンプル問題(問1)でもYAML形式のデータコントラクトが題材になっています。

schema:
  - name: customer_id
    type: string
  - name: amount
    type: decimal
    description: "月間売上金額(単位:千円)"
quality_slo:
  completeness:
    - name: customer_id
      allow_null: false

上の例では、amount の単位が「千円」と定義されています。提供側が利用者に合意を取らずに単位を「円」に変えると、契約を前提にしている利用者(分析やAIの入力など)が誤った結果を出してしまいます。既存項目の意味を変える破壊的な変更は、新しい項目の追加やバージョンの更新とあわせて、利用者への周知・合意を経て行うことが変更管理の基本です。

データメッシュのデータプロダクトは、このようなデータ契約によって利用者・利用目的・意味・スキーマ・品質・更新方法などが明確にされ、再利用できる形で提供されます(科目B 1-6)。また1-4では、命名・データ型・単位・コード値・識別子の発番ルールなど組織横断の標準、AIの入力・生成データの管理ルール、非構造化データの分類・タグ、命名、版管理、権利・利用条件のルール策定も対象です。

この章の要点
  • データ契約=仕様・品質水準・更新/提供条件・利用条件・責任分担の取り決め
  • 意味・単位・型を変える破壊的変更は、利用者への周知・合意と変更管理が必須
  • データプロダクトはデータ契約で仕様と品質を明示し、再利用可能にする
  • 組織横断の標準:用語、名称・定義、型・表記・単位、コード、識別子の発番ルール、参照整合性
  • 非構造化データも分類・タグ・命名・版管理・権利のルールで管理する
✏️ 確認テスト(全3問)
問 1
既存の各システムには手を加えずに導入したい。ハブには各システムの顧客レコードの識別子の対応関係だけを保持し、必要なときに統合ビューを組み立てるMDMの実装方式はどれか。
ア. 集中管理型
集中管理型はハブでマスターを一元的に登録・更新し配信する方式で、既存業務への影響が最も大きくなります。
イ. コエグジスタンス型
コエグジスタンス型はハブでゴールデンレコードを作り、各システムと同期します。ハブがデータ本体を持ちます。
ウ. レジストリ型
正解です。レジストリ型はハブに相互参照(識別子の対応)だけを持ち、データ本体は各システムに残すため、既存システムへの影響が最小です。
エ. コンソリデーション型
コンソリデーション型は各システムのデータを集約してハブでゴールデンレコードを作成・保持します(主に分析・参照用途)。
選択肢をクリックすると正誤と解説が表示されます
問 2
次のうち、オペレーショナルメタデータに該当するものはどれか。
ア. 「有効顧客」とは過去12か月に購買実績のある顧客を指す、という定義
業務上の意味・定義はビジネスメタデータです。
イ. 売上テーブルの amount カラムが decimal 型であるという情報
データ型やスキーマはテクニカルメタデータです。
ウ. 夜間ETLジョブの実行日時と処理件数、エラー件数
正解です。ジョブの実行・運用に関する情報はオペレーショナルメタデータで、鮮度や件数の監視にも使われます。
エ. 顧客データのデータオーナーが営業部長であるという情報
責任者・オーナーなどの業務上の管理情報は一般にビジネスメタデータとして扱われます。
選択肢をクリックすると正誤と解説が表示されます
問 3
データメッシュの考え方として最も適切なものはどれか。
ア. 全社のデータを中央のデータ管理部門が一元的に所有し、各部門には加工済みデータだけを配布する
これは集中型の考え方です。データメッシュはドメインごとの所有と提供が前提です。
イ. 各ドメインがデータをデータプロダクトとして所有・提供し、共通ルールは連邦型ガバナンスで定める
正解です。ドメイン所有、データプロダクト、セルフサービス基盤、連邦型ガバナンスがデータメッシュの要素です。
ウ. 各部門が自由にデータを作成し、全社共通のルールや標準は設けない
共通ルールがなければ相互運用できません。データメッシュでは連邦型ガバナンスで共通ルールを定めます。
エ. システム同士を個別のインタフェースで網の目状に接続する連携方式
これはポイントツーポイント型の連携の説明で、データメッシュとは別の概念です。
選択肢をクリックすると正誤と解説が表示されます