パランティア(Palantir Technologies)という会社がある。
CIAのために諜報データを統合し、米軍のために戦場の情報を一元管理し、NSAのために大規模監視システムを支える会社だ。
社名は「指輪物語」に登場する、全てを見通す魔法の水晶「パランティーア」に由来する。ピーター・ティールが2003年に創業し、2024年の年間売上は約28.7億ドル(約4,000億円)、株価は1年で6倍を超えた。
この会社のことを、マーケターや通販企業のエンジニアが知る必要があるか。
ある。 しかも、喫緊の必要がある。
なぜなら「パランティアが政府・軍向けにやっていること」と「通販企業がデータでやるべきこと」は、根本的に同じ構造をしているからだ。
パランティアが解いている問題の正体
パランティアが解こうとしている問題を、一行で言えばこうだ。
「バラバラな場所にある膨大なデータを統合し、今この瞬間に何をすべきかを意思決定者に示す」
軍の文脈で言えば、衛星データ、地上センサー、人的情報(HUMINT)、通信傍受データ、過去の作戦記録。
これらが別々のシステムに散在している。そのバラバラなデータをリアルタイムで統合し、「今、どこに何があり、次に何が起きそうで、こちらはどう動くべきか」を指揮官に示す。
通販の文脈で言えば、購買履歴、閲覧ログ、在庫データ、広告クリックデータ、カスタマーサポート記録、配送トラッキング情報。
これらが別々のシステムに散在している。そのバラバラなデータをリアルタイムで統合し、「今、この顧客は何を必要としていて、次に何をしそうで、こちらはどう動くべきか」をマーケターに示す。
構造はまったく同じだ。
戦場では「インテリジェンスの失敗が作戦の失敗につながる」。通販では「データ統合の失敗が施策の失敗につながる」。敵が顧客に変わるだけで、「バラバラな情報から正確な状況判断を下し、次の行動を決める」という根本的な問いは変わらない。
なぜ通販企業は「パランティア的な問い」を持てないのか
日本の通販企業の多くが、「データが大事だ」と言いながら、パランティア的な解き方をできていない。
理由は三つある。
理由①:「施策部門」と「データ部門」が分断されている
軍事インテリジェンスの世界では、情報(インテリジェンス)を収集・分析する部隊と、実際に作戦を実行する部隊は、常にリアルタイムで連携している。分析が終わってから作戦が始まるのではなく、作戦中に分析が更新され、分析の更新が作戦を修正する。
日本の通販企業では、「データ分析チーム」と「マーケティングチーム」が分断されている。データ分析チームが月次レポートを作り、マーケティングチームが「ありがとう参考にします」と言って棚に入れる。これは「インテリジェンスが作戦司令部に届いていない」状態だ。
理由②:「現在」ではなく「過去」のデータしか見ていない
パランティアのシステムの核心は「リアルタイム」だ。昨日の戦場の地図ではなく、今この瞬間の戦場の地図が必要だ。
日本の通販企業の多くは、「先月の購買データ」を分析し、「先月の傾向」をもとに「今月の施策」を設計する。これは「1ヶ月前の戦場の地図」を見ながら「今日の作戦」を立てているようなものだ。
理由③:「シグナル」を無視して「ノイズ」だけを見ている
インテリジェンスの世界で最も重要なスキルは、「膨大な情報の中から意味のある信号(シグナル)を見つける」能力だ。砂の中の金を探す作業だ。
日本の通販企業の多くは、「全顧客の平均CVR」「全チャネルの合計売上」という「ノイズの平均値」を見ている。「この顧客は今、購買の3日前の行動パターンを示している」「この商品カテゴリは3週間後に在庫切れになる確率が90%だ」というシグナルを見る仕組みがない。
「FDE」という革命的な人材モデル
パランティアが他のソフトウェア企業と根本的に異なる点がある。「FDE(Forward Deployed Engineer)」と呼ばれる人材モデルだ。
FDEは「前線に展開するエンジニア」だ。戦場に赴いてコードを書く。
比喩的な意味でも文字通りの意味でも。
軍の基地に入り込み、実際の作戦担当者と並んで働きながら、リアルタイムでシステムを構築・修正する。
「オフィスでプロダクトを作って、顧客に渡す」という従来のソフトウェア企業モデルとは根本的に異なる。
FDEは三つの能力を同時に持つ
- 業務の深い理解(その軍が何を必要としているか、本当の課題は何か)
- 技術的な実装力(それをシステムとして構築できる力)
- 説明力(非技術者の意思決定者に「だから何をすべきか」を伝える力)
これはまさに、前回の「アナリティクス・トランスレーター」に相当する。
通販企業版FDEとは何か。
「通販の現場(マーケター・バイヤー・物流担当)に入り込み、彼らが本当に解くべき問いを理解し、それをSQLとデータパイプラインで実装し、その結果を施策に落とせるまで伴走する人材」だ。
Treasure DataのTOP LAPIDARISTとして現場を歩いてきた経験から言えば、これこそが「通販企業版パランティア」において最も希少で、最も価値の高い人材だ。
パランティアの「オントロジー」思想
パランティアの技術的な核心は「オントロジー(Ontology)」という概念にある。
オントロジーとは「データに意味を与える仕組み」だ。
例えば「顧客ID:12345」というデータがある。これは単なる数字だ。
しかし「この顧客IDは、過去30日間で5回サイトを訪れ、2回カートに入れて購買に至らなかった顧客であり、前回の購買から60日が経過しており、LTVは3万円で、メールの開封率は高い」という「意味のネットワーク」と結びついたとき、このデータは「今すぐウィンバックメールを送るべき対象」という行動可能な情報になる。
軍事インテリジェンスで言えば、「緯度XX°、経度XX°」という座標データが、「この地点には3日前から人の動きがあり、近くの通信インフラが昨日から稼働を始めており、隣接する道路に重機の通過痕跡がある」という意味のネットワークと結びついたとき、「ここに何かが建設されている可能性が高い」という判断に変わる。
単なるデータを「行動可能なインテリジェンス」に変換する。
これがパランティアの本質であり、通販企業が目指すべきデータ活用の最終形だ。
通販企業版パランティアの全体像
このシリーズで描く「通販企業版パランティア」の全体像を示しておく。
【通販企業版パランティア:5層の構造】─────────────────────────────────────────Layer 5:意思決定の自動化(作戦室) 「今何をすべきか」がリアルタイムでダッシュボードに表示され、 施策が自動的にトリガーされる。人間の判断は「承認」だけ。─────────────────────────────────────────Layer 4:オントロジー(意味の地図) バラバラなデータに「意味」を与え、ビジネスコンテキストと 結びつける。「顧客ID」が「休眠リスクのある高LTV顧客」になる。─────────────────────────────────────────Layer 3:インテリジェンス(シグナルの抽出) ノイズからシグナルを見つける。「この行動パターンは3日後の 購買の前兆だ」「この在庫量は2週間後に欠品する」。─────────────────────────────────────────Layer 2:データ統合(全戦場の統一地図) EC・店舗・アプリ・メール・広告・在庫・配送——全てのデータを 一つのプロファイルに統合。名寄せ完了、重複排除済み。─────────────────────────────────────────Layer 1:データパイプライン(インテリジェンスの収集) 各チャネルからのデータが遅延なく収集・格納される。 スキーマが統一され、品質が保証されている。─────────────────────────────────────────
現在、多くの日本の通販企業はLayer 1〜2の整備に投資しているが、Layer 3〜5に到達できていない。「データを持っているが、使えていない」という最も典型的な停滞がここにある。
このシリーズでは5回にわたって、この5層を上から下まで解体し、「どうすれば通販企業がパランティア的な意思決定基盤を持てるか」を、SQL・Treasure Data・digdagという現場の道具を使って具体的に示していく。
「指輪物語」の水晶が示すもの
パランティアという社名の由来に戻ろう。
「全てを見通す水晶」
これは「全てのデータを統合して、世界の真実を見通す」という決意の表明だ。
通販企業においても、同じ問いがある。
「今、自社の顧客に何が起きているか」「どの商品が次に売れるか」「どの顧客が今週離脱しようとしているか」「どの在庫が今月不足するか」
これらを「見通す」能力を持つ通販企業と、持たない通販企業では、10年後に存在すらしているかどうかが変わってくる。
パランティアが軍事・諜報の世界を「データで変えた」ように、通販の世界を「データで変える」ことは技術的に可能だ。
そのための思想、設計、SQL、そして人材。これがこのシリーズで伝えたいことだ。
次回予告
#11│通販企業版パランティア―顧客を「敵」として分析する」
軍事インテリジェンスでは、敵の行動を予測することが最重要課題だ。「敵は次に何をするか」を予測する思考法を、「顧客は次に何をするか」という問いに翻訳する。
購買前の行動シグナル、離脱の前兆、LTVを予測する指標
これらをSQLで実装する。