Enterprise Information Management (ECM, MDM, BI)
エンタープライズ情報管理は、あまりに多くの場合、ストレージの問題として整理されてしまう。すなわち、文書や記録、数値をどこに保管すべきかという問いである。しかし、その捉え方はすでに時代遅れとなっている。企業の記録、顧客や製品の定義、そして分析モデルのすべてが同じ基礎となる事実に依拠するようになると、情報はその統治のあり方次第で価値が高まりも下がりもする資産となる。本稿では、コンテンツ管理、マスターデータ管理、ビジネスインテリジェンスは一つの問題を三つの角度から見たものであり、企業自身のデータで訓練された統計モデルが、慢性的な不便を戦略的なリスクへと変えたと論じる。
現状と、なぜ今それが重要なのか
この二十年間、情報管理における支配的な本能は蓄積であった。ストレージは年ごとに安価になっていったため、すべてを保持し、構造に関する判断は先送りし、必要とする者が後で価値を引き出せると信じるのが合理的な選択に見えた。データレイクはその本能の建築的表現であった。あらゆるシステムがそこへ流し込む単一の貯水池であり、原材料を集約すれば洞察も集約されるという理屈である。だが実際に集約されたのは曖昧さであった。レイクは事実だけでなく、各チームがそれをどう解釈しているかという私的な理解までも蓄積し、結果として企業は、有効顧客数が何件かという問いに対して、互換性のない十数通りの答えを一つの物理的な場所に抱え込むことになる。
三つの圧力が、この構図を同時に維持不可能なものにした。規制は今や、ある事実がどこから来て、誰が触れ、なぜ保持されたのかを企業が正確に述べられることを求めている。これはレイクがそもそも答えるように作られていなかった来歴の問いである。分析は過去の報告から、ほぼリアルタイムで業務上の意思決定に影響を及ぼすものへと移行した。そのため定義の欠陥は、もはや四半期のスライドをわずかに誤らせるだけでなく、誤った行動を自動的に、かつ大規模に引き起こす。そして何より決定的なのは、企業が自社のコンテンツと記録をもとに統計モデルを訓練し、プロンプトで動かし始めていることだ。これは、情報環境の品質がもはや管理部門の関心事ではなく、モデルをそもそも信頼できるか否かを直接左右する決定要因になったことを意味する。
したがって進行しつつある変化は、蓄積された負債としての情報から、統治された資産としての情報への転換である。それは主として技術の転換ではない。コンテンツ、マスターデータ、分析のためのツールは成熟した形で何年も前から存在してきた。変わりつつあるのは、それらが単一のシステム環境を記述しているという認識、そのシステム環境の所有権は技術部門ではなく事業部門に置かれなければならないという認識、そして自社のデータが何を意味するかを自信をもって述べられない企業は、マシンの速度でデータを消費するいかなるものにも備えができていないという認識である。
この捉え直しには、企業がなかなか受け入れられない予算上の帰結がある。情報が資産であるならば、それを統治する費用は、最小化すべき間接費ではなく、それが守る意思決定に照らして正当化されるべき投資である。現金準備を照合しないまま放置することは決して許さない企業が、顧客の定義が十数のシステムにまたがって食い違うことは平然と許してしまう。それについて誰かに責任を負わせる予算項目が一つも存在しないからだ。情報を資産として扱うとは、それに同じ会計上の厳格さを与えることを意味する。すなわち、企業が保有するものの台帳、重要な分類ごとに指名された管理責任者、そしてその状態を定期的に評価する仕組みである。その規律が存在するようになるまで、データドリブンであるというあらゆる主張は事実ではなく願望にとどまる。
中核となる枠組み、すなわち第一原理
私たちはエンタープライズ情報管理を、通常は別々の専門領域として扱われるが実際には一つの資産の諸側面である三つの軸に沿って考える。コンテンツ管理(ECM)は非構造化された領域を統治する。契約書、往復書簡、図面など、企業の義務と記憶を担う文書である。マスターデータ管理(MDM)は、他のすべてが依拠する少数の共有エンティティを統治する。顧客、製品、サプライヤー、勘定科目の確定的な記録である。ビジネスインテリジェンス(BI)は、それらの事実を意思決定者が行動の根拠とする数値へと変える分析層を統治する。一貫する筋道は、この三つがいずれもその根底にある定義と同じ程度にしか信頼できず、しかも定義は技術の問題である前にまず統治の問題であるということだ。
意味は保管に先立つ。データは、企業がそれが何を意味するかについて合意して初めて価値を持ち、その合意は工学ではなく統治の行為である。何をもって有効顧客とするかという問いは、顧客について責任を負う人々が、事業で用いる言葉で答え、その後に初めて符号化される。多くの高価な統合作業は、実のところ、その先行合意の欠如を取り繕おうとする試みにほかならない。
所有権は荷重を支える概念である。あらゆる重要なデータ要素には、それを定義する権利とその品質に対する責任を持つ、事業部門内の指名された所有者が必要である。所有権が拡散している場合、品質は誰の仕事でもなくなり、監査や失敗したモデルが露呈させるまで、システム環境は静かに劣化していく。決定権を伴わないスチュワードシップは装飾にすぎない。
単一の信頼できる情報源は、データベースではなく規律である。企業は、あらゆる事実の唯一の正しい版を保持する物理的な場所を追い求め、絶えず失望する。企業における真実は場所ではない。それは各エンティティについて合意された権威ある情報源の集合であり、それらが食い違う場合には明確な照合のルールを伴う。目標は一つの複製ではなく一つの意味であり、複製がどこに現れようとも一貫して解決できることである。
意味の一貫性は、データの網羅性に優先する。企業はしばしば、より多くのデータがより多くの価値であるという前提のもと、より多くの属性とより多くの情報源を取り込んでシステム環境を広げようとする誘惑にかられる。だが実際には、あらゆる要素が一つの合意された意味を持つ小さな環境の方が、静かな食い違いに満ちた膨大な環境よりもはるかに価値がある。追加される限界的なフィードは、その意味が企業がすでに保有するものと照合できる場合にのみ価値を加える。照合できない場合、それは網羅性を装ったコストと混乱を加えるだけだ。したがって意味に関する規律は、抑制の規律でもある。すなわち、どのデータをマスター化しないかを知り、そもそも沼を生み出した蓄積の本能に抗うことである。
現在の動向とパターン
プロダクトとしてのデータ。ここ数年で最も重要な考え方は、重要なデータセットのそれぞれを、指名された所有者、その形状と意味を記述した文書化された契約、明示された品質保証、そして顧客として扱われる利用者を備えたプロダクトとして扱うことである。これは統治を、事後に課される取り締まりの機能から、当初から組み込まれる設計上の責任へと捉え直す。利用者の期待を裏切ったプロダクトは、それを修正しなければならない誰かによって目に見えて所有されており、これはいかなる委員会が生み出すよりも鋭い説明責任である。
データメッシュ。プロダクトとしてのデータに対応する組織上の考え方は、データの所有権を、それを深く理解しない中央チームに集中させるのではなく、それを生成するドメインに分散させることである(営業が営業データを、物流が物流データを所有する)。うまく行えば、これは定義を知識のある場所に置く。不用意に行えば、流行の名のもとにシステム環境を断片化させるだけである。その違いは、連合的な統治、共有された標準、相互運用性がドメイン間で強制されているか、それとも単に望まれているだけかにある。
第一級の要件としての来歴。企業はますます、あらゆる数値をすべての変換をたどってその起源まで遡れることを求めるようになっている。規制当局を満たすためであり、また今や業務上の意思決定を動かす分析をデバッグするためでもある。来歴は、あれば望ましい図表から、業務上の必然へと移行した。説明できない数値は、それが問い質されたときに擁護できない数値だからである。
セマンティックレイヤーと定義の復権。より静かながら示唆に富む動向は、名前を持つ建築的構成要素としてのセマンティックレイヤーの登場である。それは、企業が合意した指標の定義が一度だけ存在する場所であり、あらゆるレポートとモデルがそこから引き出す。各アナリストがクエリの内で売上や解約が何を意味するかを再導出するのではなく、である。その人気は、意味が何千もの個別レポートに散らばっていた旧来の構図が、そもそも持続不可能であったことの承認である。セマンティックレイヤーは合意を生み出すわけではない。いったん到達した合意に、それが存在し強制される単一の場所を与えるのである。
AIに向けたシステム環境の準備。最近の最も明白なパターンは、統計モデルへの意欲が、それらのモデルが消費しなければならないデータの品質を追い越してしまったことを企業が発見していることだ。一貫性のないマスターデータで訓練されたモデルはその一貫性のなさを学習する。統治されていないコンテンツストアに向けられた検索システムは、期限切れの契約書を現行のものと等しい確信をもって浮上させる。現在進行中の情報管理投資の波は、その大部分が、信頼に足るAIが必要とする、遅れて行われる下ごしらえである。
それを機能させる建築と設計の原理
消費の地点ではなく、定義の地点で統治せよ。下流で、レポートやモデルにおいて適用される品質管理は、上流で混入した欠陥を永遠に追いかけ続ける。ルールを強制する経済的な場所は、データが作成されあるいはマスター化される場所であり、そうすればあらゆる利用者は、情報源を離れる前に正しくなっていた事実を継承する。端での検証は、中央での照合よりも安価である。
権威ある記録をその複製から分離せよ。機能する建築は、各マスターエンティティについて、確定的な版を保持する記録システムを指定し、そのエンティティの他のすべての出現を、それに照合されなければならない管理された複製として扱う。複製が敵なのではない。統治されていない複製が敵なのである。設計上の問いは、重複をいかに排除するかではなく、あらゆる重複をその権威まで追跡可能にするかである。
来歴を、後付けではなくパイプラインの属性とせよ。変換が実行されるにつれて自らの出所を記録する場合、来歴は常に最新かつ常に完全である。後から検査によって再構築される場合、それは常に古く常に部分的である。原理は、数値がどこから来たかという問いが考古学者ではなくシステムによって答えられるよう、フローを計装することである。
中央集権よりも標準を伴う連合を選べ。圧力にさらされた統治チームの本能は、集権化すること、すなわちあらゆる定義とあらゆるパイプラインを取り締まれる一つの場所に引き寄せることである。これはスケールしにくい。中央チームは各ドメインをそのデータを適切に定義できるほど深く理解することは決してなく、しかも事業部門が迂回を学ぶボトルネックと化すからだ。機能する代替案は、ドメインに自らのデータを所有させ、小さな中央機能が標準、相互運用性のルール、紛争の裁定を所有することである。標準を伴わない連合は断片化であり、ドメイン知識を伴わない中央集権はボトルネックである。設計上の課題は、いずれかの極に崩れ落ちるのではなく、その緊張を意図的に保つことである。
情報のライフサイクルを意図的に設計せよ。あらゆる重要な情報の分類には自然な弧がある。作成され、活発に使用され、時折参照され、義務のために保持され、そして弁護可能な形で破棄される。この弧を無視した建築は際限なく蓄積し、それがコストを引き上げ、検索を希薄化し、リスクを増大させる。システム環境に符号化された保持と廃棄のルールは官僚的な間接費ではない。それは資産を、増大する負債ではなく資産のままに保つものである。
生産者と消費者の間の契約。あるデータセットが他者によって消費される場合、そのスキーマ、意味、保証を記述した明示的な契約によって、双方は静かな破綻を招くことなく独立して変更を行える。契約は、分散した所有権を存続可能にするインターフェースである。暗黙の依存関係を、バージョン管理し遵守できる明示された依存関係へと変えるからだ。
よくある失敗の様態
沼と化したレイク。後の価値という約束のもとにすべてが流し込まれ、入り口の地点で意味は何一つ合意されず、貯水池は今や洞察よりも多くの曖昧さを抱えている。利用者は権威ある記録と放棄された実験とを見分けられないため、私的な抽出物を作り(これがシステム環境をさらに断片化させる)、あるいはそれを完全に信頼しなくなる。
技術プロジェクトとしてのマスターデータ管理。企業はMDMプラットフォームを購入し、作業を統合作業として扱い、エンティティが何を意味するかについての事業上の合意を決して確保しない。ツールは届くが、定義は届かない。ゴールデンレコードが黄金なのはベンダーのパンフレットの中だけである。マスター化はプラットフォームが支援できても決して代替できない、統治の達成である。
統治の演劇。データ協議会が開催され、品質指標のダッシュボードを検討し、懸念を記録し、いかなる変更をも強制する決定権を持たないまま散会する。重要な定義は依然として、次のレポートを作る者によって非公式に設定され続け、説明責任は議事録の中へと蒸発する。
生活様式としての照合。品質が情報源で決して強制されなかったために、企業は、異なるシステムが同じ物事について生み出す互換性のない数値を照合するための常設の取り組みを抱える。これは常態化し、どの数値が正しいかを論じる月次の儀式となり、その儀式のコストが事業を営むコストと取り違えられる。
統治されていない環境をAIに与えること。最も今日的な失敗は、最も損害が大きい。すなわち、弁護可能な水準に決して引き上げられなかったコンテンツと記録にモデルや検索システムを向け、そのモデルの流暢な出力を権威あるものとして扱うことである。モデルはシステム環境の欠陥を訂正しない。それを自信に満ちた散文へと洗浄する。そして企業は、誰も信頼に足るものにしなかったデータを消費するシステムに信頼が与えられていたことを、手遅れになってから発見する。
私たちの働き方
私たちは機械ではなく意味から始める。いかなるプラットフォームを推奨するよりも前に、私たちは事業に責任を負う人々とともに、重要なエンティティと要素が実際に何であり、何を意味し、誰がそれを定義する権利を所有するのかを確立する。これは権威ある情報源と定義の、小さく合意された集合を生み出し、それが他のすべてが立脚する基盤となる。それは華やかさに欠ける作業であり、そして残りが成功するか否かを決定する作業である。
そこから私たちは三つの専門領域を一つのシステム環境として扱う。私たちはコンテンツ、マスターデータ、分析をともに評価する。なぜなら、一つの欠陥はほとんど常に別のものの症状として表れ、症状を孤立させて対処することこそ、企業が何年もかけて何も変えられずにいる原因だからである。私たちは事業が実際に依拠している数値の現在の来歴を図にする。そこは通常、居心地の悪い発見がなされる場所であり、そして私たちは、技術的な整然さではなく、各データ要素が影響を及ぼす意思決定によって是正の優先順位をつける。
私たちは、統治された環境を最後に約束しながら途中で組織再編を届けるにすぎない複数年のプログラムよりも、漸進的でプロダクトの形をした提供を好む。実在するチームが依拠する、よく統治された一つのデータプロダクトは、誰も使わない包括的な枠組みよりも、企業に多くを教え、多くの信頼を得る。私たちはプロダクトが出荷されるにつれてその中に統治を組み込む。そうすることで、所有権、品質保証、来歴は、そのそばに綴じられる文書ではなく、提供されるものの属性となる。
私たちはまた、順序について率直である。企業はしばしば、目に見える層、すなわちダッシュボードと分析から始めるよう私たちに求める。そこが不満の感じられる場所であり、素早い改善が歓迎される場所だからである。私たちはそこから始めることに抵抗する。それは教条ゆえではなく、情報源が統治されないままレポートで訂正された数値は四半期のうちに再び食い違い、企業は修理ではなくデモを買ったことになるからだ。政治的な現実が早期の目に見える成果を求める場合、私たちはそれを狭く誠実に範囲を定め、一つの数値をその情報源の定義から来歴を経て提示に至るまで端から端まで修正する。そうすることで、その改善は表面的で一時的なものではなく、本物で持続するものとなる。
その全体を通じて、私たちは事業に説明責任を負わせ続け、私たち自身も事業に対して説明責任を負い続ける。私たちの目的は、システム環境の所有権が企業にとどまり、私たちが働くにつれて強化されることであり、そうすれば私たちが退いても、定義、スチュワードシップ、規律は私たちなしに存続する。コンサルタントに依存する情報管理は、私たちが初週から設計によって防ぐ失敗の様態である。
Nashuaが違いを生む場所
この分野における私たちの働きを際立たせるのは、コンテンツ、マスターデータ、分析を別々の購入として扱うことを拒み、統治を文書として扱うことを拒む点である。私たちは先行する問い(これは何を意味するのか、誰が所有するのか、それが正しいとどうしてわかるのか)を主張する。それらこそが、企業の情報を人が、監査人が、あるいはモデルが信頼できるか否かを決定する問いだからである。私たちは、単一の信頼できる情報源をそのまま提供すると約束するツールに対する実務者の懐疑と、実際にそれを生み出す合意を築く忍耐とをもたらす。その組み合わせ、すなわち事業の意味によって責任を問われる技術的な流暢さこそが、情報環境がコストであることをやめ、資産のように振る舞い始める場所である。
その違いは、私たちが行うことを拒むものにも表れる。私たちは、企業がまだ行っていない統治の代替としてプラットフォームを売ることはしない。私たちはその取引が失敗するのをあまりに何度も見てきたからだ。ライセンスは署名され、定義は先送りされ、十八か月後に企業は自らの混乱の高価な索引を所有することになる。私たちと働く企業は、所有権について、そして実際にどの数値を信頼しているかについて、早い段階で居心地の悪い問いを問われることを覚悟すべきであり、そしてそれに答えることが作業の大半を占めることに気づくだろう。
さらに、作業が前提としてよいものを変える実務上の帰結がある。ある取り組みが、まだ存在しない能力を必要とするとき、それは調達サイクルやベンダーのロードマップを待つ必要がない。enterprise platformは、エージェンティック・エンジニアリングを通じて、ほぼあらゆる機能を速いペースで取り込めるよう作られている。必要なものは平易な言葉で記述され素早く生成されるが、常に確固たる建築原理の内で、かつ厳格な品質保証のもとで行われる。そうすることで、速度が一貫性、セキュリティ、統制を犠牲にすることは決してない。その効果は単に便利であるにとどまらず戦略的である。それは自製か購入かの線を動かし、選択肢を安価に保ち、戦略が棚にたまたまあったものに屈するのではなく、建築が戦略に従うことを可能にする。
私たちが目指す結果は、述べるには控えめだが達成するには厳しい。すなわち、自社のデータが何を意味するかを述べられ、あらゆる数値がどこから来たかを証明でき、もはや必要としないものを廃棄でき、そしてその根底にあるシステム環境が信頼に値するものとされたがゆえに、自動化されたシステムに信頼を広げられる企業である。これらのいずれも華やかではなく、いずれも既製で買うことはできない。それは、合意、所有権、規律を、人あるいは機械が確認せずに頼れる何かへと辛抱強く組み上げることである。それこそが、企業が今や自らの情報をもって築こうとするすべてが実際に立脚する地盤であり、そして私たちが企業とともに敷く地盤である。
