最新のデータ プラットフォームの継続的な進化を通じて、新しいアーキテクチャ パターンと用語への刺激的な方向転換が見られます。 「データ ウェアハウス」で始まったものはすぐに「データ レイク」になり、その後「レイク ハウス」になりました。 価値のあるデータセットはデータ資産となり、データ製品にグループ化されます。 「データ製品」などの用語は非常に主観的なものが多いですが、実際にはそうである必要はありません。 データ製品に焦点を当てた多数のアーキテクチャ設計を実装することが重要です。 このブログは、すべての人の利益のために、できるだけ簡単にこのテーマに光を当てることを目指しています。
「それを単純に説明できない場合、あなたはそれを十分に理解していません。」
アルバート·アインシュタイン
その秘密は名前にあります。 巨大な小売市場である Amazon を考えてみましょう。 Amazon は、販売者が仮想ストアを作成および管理し、最終消費者に製品を販売できるプラットフォームです。 あなたが購入できる製品を思い浮かべてください。 Amazon で商品を検索すると、検索から返された商品のリストが表示されます。 検索の選択は、Amazon 製品のレビュー、価格、評価、コメント、サイズ、配達時間に基づいて行われる場合があります。 アマゾンは商品ではありません。 Amazon は、出品されている商品を閲覧できるマーケットプレイスです。 それらの製品には、その背後に製品ストアと所有者(販売者)が存在し、それらの所有者が製品の在庫、使用状況、流通、配送、管理情報などの在庫を管理します。 これは一種のメタデータです。
Amazon の商品は、XNUMX つの価値や資産に限定されません。 さまざまなアイテムを購入することができます。 歯ブラシからジムの器具まで。 製品は、XNUMX つのタイプのオブジェクトまたは資産として定義されるのではなく、それが何であるかに関係なく、購入できるアイテムとして定義されます。
次にデータについて考えてみましょう
データ マーケットプレイスでは、何らかの理由で使用できる複数のデータ資産を閲覧でき、Amazon 製品とほぼ同じように管理されます。 私たちの用語では、これがデータ製品を定義する方法です。
データ製品には次のものが含まれます。
- 分散可能なデータセット
- レポートとそれを作成するパイプライン
- 機械学習モデル
これらのデータ製品はそれぞれ、エンドツーエンドのソリューションとして開発、管理、管理、配布されます。 複数または単一のアセットが存在し、それらが製品を構成する可能性があります。 しかし、プロセスの貴重で使用可能な成果物は製品です。
これまで、企業はさまざまなドメインを XNUMX つのリソースに組み合わせて、総合的なソリューションを構築していました。 複数の異種で無関係な価値のある品目が XNUMX つの施設から生産される可能性があります。
これは素晴らしいことのように聞こえますが、これは Amazon が、市場で何かを販売したいすべての人に対して、すべての在庫を含めて XNUMX 人の店舗所有者によって管理される XNUMX つの包括的な店舗を使用する必要があると言っているようなものです。 このシナリオでは、すべての人の製品は、その XNUMX つの店舗の優れた管理に依存しています。 これにより、個々の販売者の管理者が少なくなる可能性がありますが、ストアオーナーがストアの維持に優れていない場合、リスクが高く、依存度がはるかに高くなります。 そうなれば、販売者は他の場所に独自のストアを作成する可能性が高くなります。
データの話に戻りましょう – 市場では、エンタープライズ データ ソリューションは成功しないという先入観が蔓延しています。 この見解は、数年にわたって失敗したデータ ウェアハウス/データ レイク プロジェクトの経験に基づいています。 問題の核心は、各事業部門の要件が常に進化し、異なる速度で変化することにあります。 組織のある派閥が迅速な実施を求める一方、別の派閥は平然とした態度を示すかもしれない。 残念ながら、集中型データ リポジトリを検討する場合、これらの危険が頭をもたげます。
この課題を回避する方法は、所有権をドメイン自体に戻す「データとしての製品」アーキテクチャ設計パターンを実装することです。 このようなアーキテクチャ パラダイムのメリットは非常に大きいです。 これにより、ドメインの迅速な展開、リスク プロファイルの抑制、ドメイン レベルでの慎重なデータ品質管理、合理化されたガバナンス、およびデータ所有権の明確な境界線が可能になります。 すべてデータ メッシュ デザイン パターンで定義されています。
データ資産から「製品としてのデータ」、そしてデータ製品へ
データプロダクトと、データメッシュで定義される「プロダクトとしてのデータ」という用語を混同しないようにしましょう。 似ていますが、同じではありません。 データ資産が価値の対象であり、製品がそれをサポートする管理機能を備えた資産である場合、「製品としてのデータ」は、そこに到達する方法、つまりデータ メッシュの一部に関する設計方法です。
データを製品として扱うと、アーキテクチャの設計方法が変わり、それがドメイン レベルの設計パターンにつながります。 エンドツーエンドの管理資産はデータ製品であり、そこに到達するためのアーキテクチャ設計は「データを製品として」扱うことによるものです。
「データプロダクト」という概念は新たな進化なのでしょうか?
データ製品が最新のデータ プラットフォームの次のステップであることは間違いありませんが、考慮すべき唯一の設計パターンであるとは限りません。 問題の企業が大規模でない場合、複数のチームがデータ製品を作成するのは単純にやりすぎです。 一元化された IT とガバナンスは、役立つだけでなく必要な場合もあります。
データ アーキテクチャを設計するにはさまざまな方法があり、データ製品の設計は配信の迅速化や価値の創造に非常に効果的ですが、それが唯一の方法ではありません。
- SEO を活用したコンテンツと PR 配信。 今日増幅されます。
- PlatoData.Network 垂直生成 Ai。 自分自身に力を与えましょう。 こちらからアクセスしてください。
- プラトアイストリーム。 Web3 インテリジェンス。 知識増幅。 こちらからアクセスしてください。
- プラトンESG。 カーボン、 クリーンテック、 エネルギー、 環境、 太陽、 廃棄物管理。 こちらからアクセスしてください。
- プラトンヘルス。 バイオテクノロジーと臨床試験のインテリジェンス。 こちらからアクセスしてください。
- 情報源: https://www.finextra.com/blogposting/24980/simplifying-the-data-product?utm_medium=rssfinextra&utm_source=finextrablogs
- :は
- :not
- $UP
- a
- できる
- 私たちについて
- 管理人
- 管理する
- 行政の
- すべて
- ことができます
- しかし
- Amazon
- an
- および
- 別の
- どれか
- 建築の
- 建築
- です
- 周りに
- AS
- 資産
- 資産
- At
- バック
- ベース
- BE
- になりました
- になる
- 背後に
- 舞台裏で
- 恩恵
- ブログ
- 内蔵
- ビジネス
- 焙煎が極度に未発達や過発達のコーヒーにて、クロロゲン酸の味わいへの影響は強くなり、金属を思わせる味わいと乾いたマウスフィールを感じさせます。
- by
- 機能
- 一元化
- 確かに
- 挑戦する
- 変更
- 結合
- 注釈
- コンセプト
- 検討
- 消費者
- 連続
- 可能性
- 作ります
- 創造
- データ
- データレイク
- データセット
- 定義します
- 定義済みの
- 配達
- 依存関係
- 依存
- 配備
- 設計
- デザインパターン
- デザイン
- 発展した
- 異なります
- 異なる
- 配布
- ディストリビューション
- ドメイン
- ドメイン
- ドント
- ドリブン
- 原因
- e
- 各
- 効果的な
- 他の場所で
- 可能
- end
- 端から端まで
- 十分な
- Enterprise
- 企業
- 装置
- 誰も
- みんなの
- 進化
- エキサイティング
- 展示
- 存在
- 体験
- 説明する
- 施設
- Failed:
- 遠く
- 速いです
- Finextra
- フォーカス
- から
- 取得する
- 巨大な
- 与える
- Go
- ガバナンス
- 支配
- 素晴らしい
- ジム
- が起こった
- 持ってる
- 持って
- 頭
- ハイ
- 非常に
- 彼の
- 包括的な
- 認定条件
- How To
- HTTPS
- i
- if
- 実装する
- 実装
- 実装
- in
- include
- 含めて
- 個人
- 情報
- に
- インベントリー
- IT
- リーディングシート
- 自体
- JPG
- 湖
- 大
- リード
- 学習
- less
- ことができます
- レベル
- ある
- 光
- ような
- 可能性が高い
- リスト
- 保守
- make
- 管理します
- マネージド
- 管理
- 市場
- 市場
- 問題
- 五月..
- 意味する
- メリット
- メッシュ
- 方法
- かもしれない
- モダン
- 他には?
- 最も
- ずっと
- の試合に
- 名
- 自然
- 必ずしも
- 必要
- 必要
- 新作
- 次の
- 多数の
- オブジェクト
- of
- 提供
- 頻繁に
- on
- ONE
- の
- 〜に
- or
- 組織
- 私たちの
- が
- 自分の
- 所有者
- 所有者
- 所有権
- パラダイム
- 部
- パターン
- パターン
- プラットフォーム
- プラトン
- プラトンデータインテリジェンス
- プラトデータ
- 可能
- 価格設定
- 生産された
- 作成
- プロダクト
- 製品設計
- 商品レビュー
- 製品
- プロフィール
- プロジェクト(実績作品)
- 購入
- 購入した
- 品質
- 質問
- 価格表
- 評価
- 本当に
- 理由
- 関係なく
- 倉庫
- 要件
- リソースを追加する。
- 制限されました
- 小売
- レビュー
- リスク
- 同じ
- シナリオ
- シーン
- を検索
- 秘密
- 求める
- 選択
- 売る
- 販売
- セット
- いくつかの
- 小屋
- すべき
- 同様の
- 単純化
- 単に
- サイズ
- 溶液
- ソリューション
- 何か
- すぐに
- スタンス
- 開始
- 手順
- 株式
- 店舗
- 店舗
- 合理化された
- テーマ
- 続いて
- かなりの
- そのような
- 支援する
- SWIFT
- チーム
- 占い
- 期間
- 条件
- それ
- アプリ環境に合わせて
- その後
- そこ。
- ボーマン
- 彼ら
- 考える
- この
- それらの
- 時間
- 〜へ
- に向かって
- 治療
- 順番
- type
- わかる
- 残念ながら
- 使用法
- つかいます
- 貴重な
- 値
- 価値創造
- 多様
- さまざまな
- 非常に
- 詳しく見る
- バーチャル
- 仕方..
- 方法
- we
- WELL
- この試験は
- いつ
- which
- 一方で
- 意志
- 願い
- 仕事
- 価値
- でしょう
- 年
- You
- あなたの
- ゼファーネット