メダリオンア，キテクチャ

メダリオンア，キテクチャとは

メダリオンア，キテクチャとは，レ@ @クハウスのデ，タを論理的に整理するために用いられるデ，タ設計を意味します。データがアーキテクチャの3つのレイヤー(ブロンズ→シルバー→ゴールドのテーブル)を流れる際に,データの構造と品質を増分的かつ漸次的に向上させることを目的としています。メダリオンア，キテクチャは，“マルチホップ”ア，キテクチャとも呼ばれます。

レ▪▪クハウスア▪▪キテクチャのメリット

シンプルなデ，タモデル
わかりやすく，導入が容易
増分etlが可能
未加工デタからのテブル再作成がいでも可能
酸トランザクション，タ化学键ムトラベル

レ@ @クハウスとは

レ@ @クハウスは,データレイクとデータウェアハウスの優れた要素を取り入れた新しいデータプラットフォームアーキテクチャです。モダンレクハウスは，拡張性と性能に優れたデタプラットフォムです。未加工データと準備済みデータの両方をホストし,ビジネスにおける迅速な消費,高度な知見や意思決定を促進します。データサイロを解消し,企業全体の認証済ユーザーによる,単一プラットフォームでのシームレスかつセキュアなデータアクセスを可能にします。

ブロンズレヤ(未加工デタ)

ブロンズレヤでは，外部ソ，スシステムからのあらゆるデ，タを格納します。ブロンズレヤのテーブル構造は、ロード日時、プロセス ID などの付加的な行のメタデータに加えて、ソースシステムの「そのまま」のテーブル構造に対応します。このレイヤーは、変更データの迅速な取得、ソースの履歴アーカイブ（コールドストレージ）、データリネージ、監査性の機能を備えており、ソースシステムからデータの再読み込みなしで、必要に応じた再処理を行います。

シルバ、レ、ヤ、(クレンジング·適合済みデ、タ)

レ@ @クハウスのシルバレヤでは,ブロンズレイヤーのデータをマッチング,マージ,フィルタリング,クレンジング(適度なレベル)し,あらゆる主要なビジネスエンティティ,コンセプト,トランザクションの”エンタープライズビュー”を提供します。(顧客マスターテーブル,店舗マスターテーブル,重複を排除したトランザクションテーブル,相互参照テーブルなど)

シルバーレイヤーでは,異なるソースからのデータをエンタープライズビューに取り込み,アドホックレポート,高度な分析,機械学習などのセルフサービス分析を可能にします。シルバレヤのデータは、アナリスト、データエンジニア、データサイエンティストによるプロジェクトや分析のソースとなり、ゴールドレイヤーの企業や部門のデータプロジェクトにおいて、ビジネス上の課題の解決を支援します。

レクハウスのデタエンジニアリングでは，一般的に，etlではなくelt処理が行われます。これは,シルバーレイヤーにデータがロードされる際に,最小限,あるいは”適度な“変換およびデータクレンジングルールのみが適用されることを意味します。データレイクでのデータの取り込みや供給における迅速性と俊敏性が優先され,シルバーレイヤーからゴールドレイヤーにデータがロードされる際には,プロジェクト特有の複雑な変換やビジネスルールが多く適用されます。デタモデリングに関しては，シルバレヤは第3正規形に近いデタモデルを備えています。。

ゴルドレヤ(ビジネスレベルのキュレト済みテブル)

レ@ @クハウスのゴルドレヤにあるデ，タは，通常，消費可能な“プロジェクト専用”デ，タベ，スに整理されています。ゴルドレヤはレポト作成に適しています。結合が少なく，より非正規化され，読み取りが最適化されたデ，タモデルを使用しています。デタ変換とデタ品質ルルの最終レヤです。顧客分析,製品品質分析,インベントリ分析,顧客セグメンテーション,商品推薦,マーキング/販売分析などのプロジェクトにおける最終プレゼンテーションレイヤーです。多くのキンボール式スタースキーマベースのデータモデル,またはインモン式データマートは,レイクハウスのこのゴールドレイヤーに適合します。

このように，デタはレクハウスの異なるレヤを移動する際に，キュレトされます。従来のRDBMSテクノロジースタックのデータマートや仓库をレイクハウスに取り込み,企業における初の“汎仓库”の高度な分析や機械学習を可能にするケースもあります。従来のスタックでは不可能，あるいはコストがかかりすぎるため，実現されていなかったことです。(物联网/製造業データと営業・マーケティングデータを連携させ,欠陥分析やヘルスケアゲノミクス解析を行う,EMR / HL7臨床データ市場と金融債権データの連携によりヘルスケアデータレイクを構築してタイムリーな患者ケアの分析や改善を行うなど)。