システム開発

宣言された依存ではなく、カーネルが見た read を照合する——GoogleがAndroidのビルド基盤ABFSを公開した

イーランサー・ジャパン株式会社
この記事の要点

Androidの基本ソフトを作る作業には、設計図にあたる大量のファイルを手元にそろえる工程と、それを製品の形に組み立てる工程があります。Googleはこの2工程を支える自社の仕組みABFSを、誰でも使える形で公開しました。手元にそろえる工程は36分19秒から7.4秒に、組み立ては1時間20分35秒から2分11秒に短くなっています。

ただ、速さより大事なのは結果が正しいことです。この仕組みは「どのファイルを使うか」の申告を信じず、実際に読まれたファイルを記録して突き合わせます。

用語の説明
  • ビルド/人が書いた設計図を、機械が実行できる製品の形に組み立てる作業のことです。
  • キャッシュ/一度計算した結果を取っておき、同じ要求が来たら計算せずに返す仕組みのことです。
  • カーネル/機械の中でファイルや記憶装置をじかに管理している、基本ソフトの中核部分のことです。

Bazel型のリモートキャッシュは、ビルドルールが依存を漏れなく宣言していることを前提にします。宣言が漏れていればキャッシュは静かに間違えます。ABFSはその前提を使いません。候補が過去に実際に read したファイルのパスとハッシュの集合を、現在のマウント状態と1つずつ照合します。推測ではなく、カーネルのVFS層が記録した観測値です。

要点

何が起きたか

Google Developers Blogの「Accelerating development for massive Git repositories」(2026年11月17日、著者名「The Android ABFS Team」)と同時に、google/abfs(Apache-2.0)、google/abfs-casfs(GPL-2.0)、google/ninja-goがGitHubに出ました。

3つすべてが「公式にサポートされたGoogle製品ではない」と明記しています。

なお本記事の秒単位の値は、ブログ本文ではなくリポジトリのREADMEの表から取っています。ブログが文章で書いているのは「約36分→8秒未満」「約80分→2分強」までで、ベンチマーク表は画像として置かれており本文テキストに数値が入っていません。

CASFSはFUSEではなく、カーネルモジュール

CASFSはアウトオブツリーのカーネルモジュールです。ターゲットカーネルのヘッダに対してビルドし、sudo insmod casfs.ko でロードします(再起動では残りません)。FUSE実装はFAQが「開発中」「使用可能な状態ではない」と書いています。

ファイルの同一性はGitのオブジェクトモデル(SHA-1)で、abfs hash は git hash-object と一致します。

abfs hash --set はメタデータだけを即座に作り、バイト列は最初の read で初めてカーネルがユーザ空間のキャッシュデーモンに問い合わせて取得します。チェックアウトが7.4秒で済むのは、最初に落とすのがGitハッシュ入りのディレクトリメタデータだけだからです。

宣言を信じず、観測したread を照合する

ここが本題です。キャッシュの正しさの担保がBazel系と違います。

Bazel型のリモートキャッシュが正しく動くには、ビルドルールが依存を漏れなく宣言していること(hermeticity)が前提になります。宣言漏れがあればキャッシュは静かに間違えます。だからBazel移行は重く、Soong/Ninjaのような既存ツリーには当てにくい。

ABFSは宣言を信じません。

宣言されていなかった隠れ依存が今回だけ違うハッシュを持っていれば、照合で落ちてその候補は棄却されます。この read 集合は推測ではなく、カーネルのVFS層が記録したものです。

既存の懐疑への回答になっている

同じ問題を解く商用品SourceFSは、2025年10月に日本語で紹介され、しかも懐疑的に扱われていました。批判の中身は「ビルドシステム非依存のステップキャッシュは、フラグを解析して依存を推測するので壊れやすい」というものです。

ABFSは推測していません。観測しています。不健全なヒットの危険が、「宣言が正しいか」ではなく「観測した read 集合が再現するか」の問題に移ります。

system/libbase の編集でもビルドグラフの97%はCIと同一で、WritePatch の適用は出力バイト列のダウンロードを伴わないため、2分11秒という値が出ます。

ただしキャッシュのセキュリティモデルは文書化されていません。設計文書にマルチテナンシー・信頼境界・キャッシュポイズニングの節はなく、候補(EvalResponse)が署名されるかの記述もありません。CIと開発者ワークスペースでキャッシュを共有する構成の前提条件は、現時点の公開文書からは評価できません。

なぜ日本でまだ語られていないのか

一次情報がブログではなく、GitHubの設計文書とカーネルソースにあります。ブログが出したのは見出しの数字までで、2段キャッシュの実体もカーネルモジュールの素性もdoc/ARCHITECTURE.md とabfs-casfs のREADMEを読まないと出てきません。

略語は一度日本語に出ていて、しかも違う名前でした。2025年9月8日のGoogle Cloud日本語ブログ(Android Automotive向けHorizon)は「最適化されたAndroid Build File System(ABFS)の統合」と書いています。今回の公式展開はAnother Build File Serviceで、しかもリンク先はGoogleフォーム、説明はありませんでした。日本語では名前だけが14か月前に通過していて、中身が一度も説明されていない状態にあります。

競合の商用品のほうが先に日本語になっています。SourceFSは2025年10月22日に日本語記事があり、ビルド9倍(2時間超→15分)の主張とともに懐疑まで紹介されています。問題設定と商用の答えは日本語で流通済みで、Googleのオープンソースの答えだけが抜けています。英語圏でも、Hacker Newsの関連2件は4ポイントと3ポイントにとどまっています。

エンジニアにとって何が変わるか

調達。試せますが、本番前提ではありません。GCE用のTerraformモジュールterraform-google-modules/terraform-google-abfs(Apache-2.0)が公開済みで、Container-Optimized OSのVM上にABFSサーバ(gRPCポート50051)とキャッシュ用永続ディスク、Gerritアップローダを作ります。確認項目は3つです。

  1. ライセンスが混在する。ユーザ空間はApache-2.0だがカーネルモジュールはGPL-2.0(v2 only)で、ビルドファームのイメージにGPLのカーネルモジュールを入れる話になる
  2. カーネルの当たり外れが細かい。5.10以前、6.6.159、6.7.10、6.14.11、6.19.14、7.3-rc3はビルド失敗が明記され、6.2〜6.5は未テスト。しかもこの表はリポジトリ自身が「AIによるスクリプト解析、コンパイルのみ、ロードもテストもしていない」と断っている
  3. make が setcap を走らせるので sudo が要る

サーバ側の規模感は、設計文書がCASサーバについて「64コア・512GB RAMのVMで運用している」と書いています。なお既存のBazelリモートキャッシュ資産が流用できるかは不明です。設計文書はCASを「gRPCサービス」と書くのみで、Remote Execution API(REAPI)への言及も .proto の定義もありません。

設計。移植できる考え方は1つで、それが大きい。「宣言された依存」を正しさの根拠にするのをやめ、「観測された read 集合の再現」に置き換える。

CIのキャッシュ、コンテナイメージのレイヤ、関数単位のメモ化——どれも「入力を正しく宣言できているか」が壊れどころです。ABFSはそこをカーネルのVFS層で実測して照合することで回避しました。既存のビルドシステムを書き換えずにキャッシュの健全性を上げられる、という点が効きます。

キャリア。「ビルドが遅い」をCIの並列数とマシンスペックの話として処理してきた現場と、ファイルシステム層の問題として扱える現場の差が、ここで数字になって出ます。

本記事のベンチマーク値は、いずれも google/abfs のREADMEに記載された「同一VPC内にサーバを置いた条件での3回平均」です。本記事では再現していません。オンプレや遠隔リージョンでの値は公開されていません。

出典

PROJECTS

ビルド基盤やクラウド環境の設計に関わる領域では、こうした案件を扱っています。

掲載は案件の一例です。単価・稼働条件・技術要件を含む詳細はご登録後にご覧いただけます。

CONSULTATION

案件をお探しの方へ

イーランサーでは、専任担当がご経歴と希望条件を整理したうえで案件をご提案し、条件面の調整もお手伝いしています。すぐに稼働できる状態でなくても、情報収集としてご相談いただけます。

ご登録いただいた情報が企業に公開されることはありません。氏名・連絡先を伏せたスキルシートを使用します。登録から案件のご紹介、契約手続きまで費用は一切かかりません。

案件を見る
案件をお探しの方 人材をお探しの方