Xaval

大規模データ基盤構築

大規模データ基盤構築: データ基盤のグランドデザイン : データの集約デザインと実現方針

データ基盤全体では分散型であっても、局所的には集約型であることがほとんどです。特定の事業や部門のように小さい範囲だけを考えるなら、データを1か所に集約することはデメリットよりもメリットの方が大きいと言えます。例えば、ベースレジストリや局所デ...
大規模データ基盤構築

大規模データ基盤構築: データ基盤のグランドデザイン : 進め方に関する重要な補足

企業内に大規模なデータ基盤を構築するにあたり、進め方に関して重要だと思われることを説明します。一部、 でも少し触れた内容になりますが、それを含めた補足となります。データを高次元で統一しないこれは、 で述べた通りです。大規模な組織では、顧客や...
よもやま

ITの「専門家」と「愛好家」を分けた DeepSeek ニュースの取り扱い

DeepSeek の衝撃2025年1月20日、中国の企業から新しいAIモデル「DeepSeek R1」が発表されました。最大の衝撃は、これまでハイスペックGPUを大量に使用していた推論処理を、方法の工夫によって10分の1のコストで実現可能に...
大規模データ基盤構築

大規模データ基盤構築: データ基盤のグランドデザイン : ラフ イメージ

データ基盤の全体像データ基盤を簡単にあらわした図は、このようになっています。まずはラフにこのような状態をイメージして、データの基盤構築にあたるようにします。この役割は、IT ストラテジストと IT アーキテクトの重要な役割です。構築をする上...
大規模データ基盤構築

大規模データ基盤構築: データ基盤のグランドデザイン : 分散型か集約型か 補足

先の記事でデータ基盤のアーキテクチャに集中型ではなく分散型を選定しましたが、規模の考え方や分岐点について補足します。今回扱う会社規模が「多事業複合体のグローバル企業」としているため、一方的に決めていましたが、実際にはこのような基準があります...
大規模データ基盤構築

大規模データ基盤構築:  都合のいい利用者を想定してはならない

中央集積型でデータ基盤を作ろうとした際に、データ管理部門が「都合のいい利用者」を想定してしまうという根本的な問題があります。中央集積型データ基盤の落とし穴データ基盤を検討する際、多くの組織が最初に思い浮かべるのは中央集積型のアーキテクチャで...
大規模データ基盤構築

大規模データ基盤構築: データ基盤のグランドデザイン : 分散型か集約型か

データ基盤の構え方は、データ配置の観点から大きく分けて2種類あります。一つは、1か所にデータを集め、中央集権的に管理することを主とする中央集約型。もう一つは、データを分散させたまま管理を任せ、ルールとポリシーだけ共通化して公開を促す分散型で...
大規模データ基盤構築

大規模データ基盤構築: データ基盤のグランドデザイン : 大規模な組織の現状

データ基盤構築に先立ち、事前に話しておくべきことがあります。「大規模な組織」とは、事業が多様化した組織「はじめに」のページで、今回扱う企業規模を「多事業複合体のグローバル企業」としていますが、多事業複合体とは顧客が多方面にわたっている組織の...
大規模データ基盤構築

大企業内におけるデータ基盤の役割

大企業において、データ基盤がなぜ必要なのでしょうか。単にデータ分析をするためであれば、基盤は不要です。細かいことや大義名分はいろいろあると思いますが、簡単に紹介したいと思います。これまでの問題点私たちの企業では、正式なデータ基盤が存在しない...
大規模データ基盤構築

大規模データ基盤構築: はじめに

近年、企業の意思決定を高速化し、データドリブン経営を実現するための「データ基盤」の重要性が叫ばれています。膨大なデータを活用し、知見を得て、業務や戦略にフィードバックしていく取り組みは、もはや競争力を左右する核心部分となっています。しかし—...