Palantirについての回顧

• Palantirの現状: 最近S&P 500に採用され、株価が急騰し、企業価値は1000億ドルに迫っている。過去にはスパイ技術やNSAの監視と結びつけて見られていたが、現在は肯定的な評価を受けている。

1. 私がPalantirに加わった理由

• 医療、航空宇宙、製造、サイバーセキュリティなど、難しい産業の現実的な問題解決に関心があった
• この分野でシリコンバレー的な業務文化を持つ会社はPalantirしかなかった
• 起業を目指していたので、ひとつの産業を深く掘り下げられ、米国永住権も得られるPalantirは良い選択だった
• 初期社員たちの高い能力と情熱、競争力が魅力的だった
• 哲学を好み、風変わりな嗜好を持つ真面目で競争的な人が多かったが、これはPayPalマフィアの遺産だった
• CEOのアレックス・カープを含む経営陣との面接で哲学的な対話を交わすなど、知的な壮大さと競争力の組み合わせが気に入った

2. フォワードデプロイメントエンジニア（Forward deployed, FDE）

• Palantirには顧客企業と仕事をするFDEと、プロダクト開発（PD）に集中するエンジニアがいた
• FDEは週3〜4日を顧客先に常駐し、多くの出張をこなす必要があったが、これはシリコンバレー企業としては非常に異例だった
• FDEは製造、医療、情報、航空宇宙など難しい産業のビジネスプロセスを深く理解し、それをもとに問題解決ソフトウェアを設計した
• PDエンジニアはFDEが構築したものを製品化し、FDEの仕事を改善・加速するソフトウェアを作った
• Foundry製品の初期の姿は、FDEが顧客先で手作業で処理していたことをPDエンジニアが自動化ツールとして作ったことで形になった
• 当時は顧客にこのツールへのアクセス権を与えるのは大胆な一歩だったが、今では会社売上の50%以上を占めている
• Palantirはサービス会社からプロダクト会社への転換に成功し、2023年には80%のソフトウェア並み売上総利益率を記録した
• 顧客先に常駐し、彼らの働き方に関する暗黙知を獲得することが核心だった
• 無作為に翌朝の便を予約して出張するのが日常だったが、10年にわたる集中的な学習の結果として成果を上げた
• Airbusとの最初のFDE経験では、1年間トゥールーズに滞在し、A350の製造拡大ソフトウェアを共同で構築した
• 作業指示書、部品不足、品質問題など多様なデータを一か所に集め、チーム間の協業と問題解決を支援するインターフェースを提供した
• 汎用性よりも特定問題に対するエンドツーエンドの解決策を提供することが目標で、PDの役割はそれを一般化して他でも販売できるようにすることだった
• FDEは迅速な問題解決のために技術的負債を受け入れ、PDは拡張性と堅牢性のあるソフトウェアを書くという役割分担が有効だった
• 顧客企業の内部に深く入り込み、信頼を得てすばやく中核的価値を届けるFDEの能力が際立っていた
• 小さな顧客チームが自律的かつ俊敏に動き、プロダクトチームがそれを土台にプラットフォームを開発するモデルは強力だった
• SpaceXやPalantirのように、政治的ゲームではなく実際の成果で差別化する企業がもっと必要だ

3. Palantirの秘密

• FDEのもうひとつの中核業務はデータ統合だった
• データ統合は長らくPalantirの仕事の中心だったが、その重要性は過小評価されてきた
• 最近のAIの登場によって、企業のクリーンでよく整備されたデータの重要性が浮き彫りになっている
• データ統合とは、(a) 企業データへのアクセス権を確保し、(b) データを整形・変換し、その後 (c) 皆がアクセスできる場所に保存することを意味する
• Foundryの基盤ソフトウェアのかなりの部分は、この作業を簡単かつ高速に行えるようにするツールである
• データはPDF、ノート、Excelなどさまざまな形式で存在するため、統合が難しい
• 組織内の政治も障害であり、特定チームが中核データへのアクセスを支配し、それを自分たちの存在理由にしている場合が多い
• データアクセス権を確保するだけでパイロットプロジェクト期間を使い切り、デモを急いで準備しなければならなかったこともあった
• データアクセス問題のかなりの部分がセキュリティ懸念に由来すると見抜き、プラットフォーム全体にわたってセキュリティ制御機能を構築した
• ロールベースアクセス制御、行レベルポリシー、セキュリティマーキング、監査証跡など、さまざまなデータセキュリティ機能を導入した
• こうした機能のおかげで、Palantirの導入がむしろ企業データセキュリティを強化する結果をもたらした

4. 文化についての補足

• Palantirの雰囲気は普通のソフトウェア会社というより、メシア的カルトに近かった
• しかし批判は許容され、むしろ奨励されており、新人エンジニアが全社メールで役員と議論することもあった
• 合理主義的な思考を持つ哲学科出身の私にとって、この点は重要だった。盲目的に追従するのではなく、世界について深く考え議論する会社に関心があった
• 入社時にはImpro、The Looming Tower、Interviewing Users、Getting Things Done などの本が渡された
• The Looming Towerは、会社が9/11への対応として設立されたという背景知識を与えてくれた
• Improは、社会的文脈への感受性、すなわち政治的ゲームをこなす能力がFDEの成功に重要だと気づかせてくれた
• Improは社会的行動を機械的に分析しており、casting などの関連用語が社内で広く使われていた
• 頭を動かさずに立ち、手を見せることは高い地位を、頭を左右に動かし手をポケットに入れることは低い地位を示す
• こうした原理を知らなければ、顧客企業の環境で成功するのは難しかっただろう
• 元FDEたちが優れた起業家になる理由のひとつでもある。Google出身者よりPalantir出身の起業家のほうがYCには多い
• 優れた起業家は、会議の空気、集団力学、権力関係を読み取る感覚を持っている。これはPalantirがFDEに教えるが、他のバレー企業では学びにくいものだ
• FDEには、顧客企業の言語を素早く学び、ビジネスを深く理解する能力が必要だった
• 病院、新薬開発、医療保険、情報学、免疫腫瘍療法など、各分野には専門用語があり、それを素早く習得する人が成功した
• 才能ある人は自分なりの語彙やミームを作り出すが、それはその人独自の知的世界へ入る入口の役割を果たす
• 会社も同様で、Palantirには ontology, impl, artist's colony, compounding, the 36 chambers, dots, metabolizing pain, gamma radiation など膨大な用語があった
• Peter ThielといえばPalantirを真っ先に連想するが、多くの用語は初期社員、特に現社長のシャム・サンカルに由来している
• Peter Thielは私が在籍していた当時、会社運営には関与していなかったが、文化には大きな影響を与えていた
• 役職を置かないのもPeter Thielのアイデアに見える。FDEと少数の役員を除けば、全員が同じ肩書きを持っていた
• 役職を作れば人はそれを欲しがり、社内政治と競争を引き起こすというGirardの思想に基づくもののようだった
• 階層のない組織には批判も多く、今どきのスタートアップでは流行遅れだが、Palantirではうまく機能していた
• 影響力は印象的な成果に基づいており、誰も他人に何をしろと命じることはできなかった
• 影響力のある人が自分のアイデアをばかげていると言っても、無視して正しいと思えば作ることができた
• 役員の反対を押し切って重要インフラを作ったエンジニアの逸話が美談として語られ、そうした行動が奨励されていた
• 欠点は、会社に明確な戦略や方向性がないように見え、賢い人たちがそれぞれ自分の領地を築いているように感じられたことだ
• しかしそれは驚くほど創造的な結果を生んだ。Hex、Retool、Airflowなど、Palantirで先に開発されていた概念は少なくない
• 会社は今も、大企業にLLMを展開するための強力なツールを作っている
• 役職がないせいで、人々の人気には波があった。ある人に影響力があっても、数か月後には目立つ仕事をしていないこともあった

5. Bat-Signal（人材獲得戦略）

• Peter Thielに由来するもうひとつのアイデアが、タレント・バットシグナル（talent bat-signals）だ
• 今は自分の会社を立ち上げたので、その重要性をいっそう実感している。優れた人材を集めるのは難しく、差別化された人材プールが必要だ
• 毎年Facebook/GoogleやスタンフォードCS卒業生をめぐって競争するなら、負けるしかない
• (a) 他社ではなく自社に特別な関心を持ち、(b) 大規模にリーチする方法がある人材集団が必要だ
• Palantirにはいくつか差別化された人材獲得戦略があった
• 第一に、国防・情報分野の仕事が人気でなかった時代に、この分野に好意的な人たちがいた。平均より米国中西部や共和党地域出身のエンジニアが多く、シリコンバレー企業に魅力を感じつつも米国に奉仕したい元軍人、CIA/NSA出身者が多かった
• Palantir初出勤の日、社内オンボーディングで会ったある男性は、CIAで15年働いていたと言った。私の最初のリーダーはオハイオ出身の元特殊部隊警察官であり陸軍ベテランだった
• こうした人たちは多く、そのほとんどが非常に優秀だったが、Googleには行かなかった
• Palantirは彼らにとって唯一の「灯台」の役割を果たし、軍支援や愛国心を強調することが非常に非主流だった時期にも、それを堂々と掲げていた
• これは非常に効果的で独特なバットシグナルを生み出した（今ではAndurilや数多くの国防・製造業スタートアップがある）
• 第二に、初期の熱狂が冷めた後、とくにTrump時代にPalantirが非難されていた頃に入社するには、少し変わっている必要があった
• これは「ミッション中心」という当時としては珍しいブランディングに由来していたが、長時間労働、市場以下の給与、頻繁な出張が求められることも会社は大っぴらに伝えていた
• 一方で、政府と仕事をしているという理由でシリコンバレーの採用イベントから追い出されることもあった
• こうしたすべてが、悪い評判に動揺せず、自分の頭で考えられる特定タイプの人を選び出していた

6. 道徳性

• Palantirは西側を支持する立場であり、私も概ね同意している
• 中国やロシア中心の世界は望ましくないように思え、それが私たちの前にある選択肢だ
• 自由な国家に住んでいると批判はしやすいが、その逆を経験すると難しい（私は抑圧的な国家で幼少期を過ごした）
• 軍がしていることに同意できない時もあったが、会社が軍を支援すること自体には問題を感じなかった
• もちろん軍も悪いことをする。私はイラク戦争には反対だった
• ここが重要だが、会社で働くことは100%道徳的に善でも、100%悪でもない
• 時には自分が反対する目標を持つ機関を助けることもあったが、政府は多くの良いこともしており、それをより効率的に行えるようソフトウェアを提供するのは高貴な仕事だ
• 会社の仕事を3つのカテゴリーに分けると、道徳性の問題を明確にできる（完全な分類ではないが）:
  1. 道徳的に中立な仕事: FedEx、CVS、金融機関、テック企業など一般企業向けの仕事。問題視する人もいるだろうが、概ね問題ないと感じる
  2. 明らかに善い仕事: CDCとのパンデミック対応、NCMECとの児童ポルノ対応など、多くの人が良い仕事だと同意するもの
  3. グレーゾーン: 道徳的に難しく厄介な判断が必要な領域。医療保険、移民取締り、石油会社、軍、情報機関、警察/犯罪など
• すべてのエンジニアは選択の岐路に立っている。Google検索やFacebookニュースフィードのような少し良さそうな1番カテゴリーや、GiveDirectlyのような2番カテゴリーを選ぶこともできる
• Palantirへの主な批判は「3番カテゴリーでは働くべきではない。時には道徳的に悪い判断を下さねばならないから」というものだった。Trump時代の移民取締りがその一例だ
• しかし3番を完全に無視し、関与を断つのも責任放棄だと私は思う。3番カテゴリーの機関は存在する必要がある
• 米国は銃を持つ人々によって守られている。警察は犯罪と戦わねばならず、一部の警察活動に不快感があっても、家に泥棒が入れば警察に通報する。石油会社はエネルギーを供給しなければならない。医療保険会社は難しい判断を下し続けなければならない
• そうしたものには不快な側面もあるが、それらの機関を放置してよいのだろうか
• 3番の顧客と働くべきかに明確な答えはなく、ケースごとに考えるべきだと思う
• Palantirの立場は「明白に悪でない限り、多くの3番機関と働く。ただし民主的手続きを信じ、時間とともに良い方向へ進むと考える」というものだった
  • ICEの問題では、Trump時代にERO（取締・強制送還業務）との関係は断ち、HSI（国土安全保障捜査局）とは仕事を続けた
  • 多くの3番機関と仕事をしており、悪いこともするが、全体としては世界のためになるという論理だった
• 詳細は話せないが、Palantirのソフトウェアのおかげで複数のテロ攻撃が阻止されており、その事実だけでもこの立場は正当化されると考えている
• 常に100%善い仕事だけをする保証はないので、多くの人には居心地の悪い立場だ。見方によっては歴史の流れに身を任せるようなもので、(a) 悪より善が多く行われ、(b) 現場にいる方がいないよりましだと信じる必要がある
• 私にはそれで十分だった。他の人は別の選択をした
• もちろん、この立場の危険性は、既存の権力構造の言うがままに従うための普遍的な言い訳になり得ることだ。単に既存体制を強化するだけになってしまう
• だからこそケースごとに考える必要がある。一般論はなく、具体的に見なければならない
• 私自身、医療やバイオ分野に多くの時間を投じ、その貢献には満足している。テロを防いだ人たちも、パンデミック時に医薬品を流通させた人たちも同じだろう
• こうした「厄介な」領域で働くことは今や流行になったが、技術者にとってなお重要な問いだ
• AIは良い例だ。AI導入の結果の一部を懸念する人は多い。ハッキングに使われるかもしれないし、ディープフェイクが世界を悪化させるかもしれないし、仕事を奪うかもしれない。しかしAIには大きな利点もある（ダリオ・アモデイが最近のエッセイでうまく説明している）
• PalantirのようにAIに取り組むことも100%善ではないが、100%悪でもない。関与をやめて停止を求めるのは非現実的で、最善でもないだろう
• OpenAIやAnthropicで働かないとしても、AI関連の問題に関わるべき人なら、何らかの形で参加してほしい
• 簡単なケースもある。評価の構築、アラインメント研究、社会的レジリエンス向上などだ。しかしグレーゾーンに参加する価値もあると思う。政府のAI政策に関わること、医療のような分野にAIを導入することなどだ。もちろん難しいだろう。それでも飛び込もう
• 最近AI分野で最も影響力のある人たちの多くは、現場にいる。AI研究所であれ、政府であれ、影響力のあるシンクタンクであれ。私はそうした人たちの一人になりたい。説教する側にはなりたくない
• 難しい決断は伴うだろうが、物事が起きるときその場にいる方がよいと思う。後で辞めて警鐘を鳴らすことになったとしてもだ

7. 今後の展望

• Palantirについて今でも前向きか？ そうだ。
• 今回のAIサイクルにおける大きな生産性向上は、AIが製造、国防、物流、医療などの大企業にレバレッジを与えるときに起きる
• Palantirは10年間こうした企業と働いてきた
• AIエージェントが最終的に中核業務プロセスを主導するようになり、それらは重要なビジネスデータへの読み書き権限に依存するだろう
• 10年にわたって企業データを統合してきたことは、企業にAIを導入するための中核基盤である。巨大な機会がある
• 私自身も長く待ってきたマスタープランを実行に移し、次は起業するつもりだ
• 政府関連事業も含まれる予定だ。チームも素晴らしく、採用中でもある。ときどきウィトゲンシュタインの話もしている

GN⁺のまとめ

• Palantirは初期には否定的な認識があったが、現在は肯定的な評価を受けており、これは会社の戦略的転換と製品の進化によるものだ。
• データ統合とセキュリティ機能は会社の中核能力であり、AIの発展とともにいっそう重要になっている。
• 会社の独特な文化と人材募集戦略はPalantirの成功に寄与しており、他企業がベンチマークする価値がある。
• 道徳的ジレンマは依然として存在するが、これは会社の成長と発展において重要な考慮事項である。

[inthelife]

より詳しい翻訳記事があるので共有します: https://maily.so/devpill/posts/eba34ffb

[GN⁺]

Hacker Newsの意見

• Palantirについてよく書かれた記事で、Palantirが成功した理由や優れた従業員の特性について深く考察した跡が見られる。Palantirに懐疑的だった人でも関心を持つようになり、有用な学習資料へのリンクもある。しかし、著者はアメリカのビジネスにおける地位や競争に執着しすぎているように見える。

• Palantirの否定的な側面を指摘したコメントに感謝しつつ、依然としてPalantirに対して否定的な印象を持っている。

• Palantirで働いていた経験を共有し、Palantirの名声を作ったものは、最も疑わしい点とはかなり距離があると述べている。

• Palantirの階層構造は非常に複雑で、必要な人を見つけるのが難しかったと指摘している。

• ガザ地区におけるPalantirの役割や、Lavender、Where's Daddyプロジェクトに関する議論がないことに驚いている。

• Hacker Newsが皮肉っぽい面を失いつつあるのではないかと疑問を呈している。

• Palantirの社内政治は競争的であり、道徳的妥協の利点が個々のエンジニアに直接及ぶと説明している。

• Palantirの技術は特別なものではなく、多くの企業が自社でできることを外注しているにすぎないと評価している。

• Palantirの道徳的立場を評価する方法論には偏りがあると指摘し、中立/良い/悪いのような、より客観的な分類が必要だと主張している。

• Palantirの事業モデルへの理解が不足しており、大きなプロジェクトの話を聞かないにもかかわらず会社の人気が高い点を不思議に思っている。

• 文脈は希少であるという引用について、より明確な定義が必要だと考えている。

• Palantirで働いている間に2回ドラッグにさらされたという警告を共有している。

• Palantirの技術はアメリカ人に対して使われる可能性があり、政府が直接できないことを代わりに行う社会政治的な仲介役を果たしていると主張している。