Skip to content

デプロイバックエンド

cornus deployエンジンは デプロイスペック (ネイティブ deploy.yaml、または Compose ファイル / devcontainer から変換されたもの) を、交換可能な六つのバックエンド のいずれかへ適用します。すべて同じインターフェースの背後にあり、CORNUS_DEPLOY_BACKEND 環境変数で選びます (環境変数のみ。CLI フラグはありません)。

CORNUS_DEPLOY_BACKEND対象Networking備考
dockerhost (既定)ローカル Docker デーモンDocker ネットワークDocker ソケット (/var/run/docker.sock) が必要。
podmanPodman デーモン (ネイティブ libpod API 経由)Podman のネットワーク (netavark)ルートフルでもルートレスでも動作。既定のソケットはありません。CORNUS_PODMAN_SOCKET を設定するか、CORNUS_PODMAN_SERVICE=1 で cornus 自身に podman system service を実行させます。
containerddockerd のない素の containerd ホストCNI bridge + portmapLinux 専用。root + CNI プラグインが必要。
bareOCI ランタイム CLI (runc/crun/youki) を直接 — デーモンなしCNI bridge + portmapLinux 専用。root + OCI ランタイムバイナリ + CNI プラグインが必要。イメージプル・監督・cgroup を cornus 自身が所有。
incusIncus デーモン (6.3+)Incus インスタンスネットワーク + proxy デバイスLinux 専用。OCI イメージを Incus の アプリケーションコンテナとして実行します。デーモンホスト側に skopeo + umoci が必要。仕様フィールドの対応範囲は最も狭く、下記を参照してください。
kubernetes / k8sKubernetes クラスター (client-go)デプロイメント + サービスサーバー / クラスター内のみ。RBAC 範囲。

選択はサーバー (cornus serve) と、--server なしで実行するローカル cornus deploy の両方に適用されます。例外は kubernetes です。これは server/cluster 内専用で、CORNUS_DEPLOY_BACKEND=kubernetes のローカル cornus deploy は警告とともに dockerhost へフォールバックします。

四つの host バックエンドは同じ核となる仕様フィールド (name / image / replicas / restart / env / ports) を尊重し、さらに dockerhost / containerd / bare はクライアントローカル 9P バインドマウント、Compose user ネットワーク、公開ポート転送も共有します。そのためこの三つの間では同じワークフローを変更せず移動できます。例外は依然として incus ですが、その差はかつてよりずっと狭くなりました。核となるフィールド、entrypoint の上書き、サーバーホストのバインドマウント、管理対象ボリューム、sysctlsulimitstmpfsshmSize は map しますが、クライアントローカル 9P バインドマウント、ヘルスチェック、user ネットワーク、command だけの上書きには対応しません。そして map できないフィールドについては必ず警告し、黙って捨てることはもうありません。特定バックエンドにしか対応しない仕様フィールドはデプロイスペックリファレンスにフィールドごとに記載されています。

privilege の扱いはdefault-denyです。明示的に許可 (CORNUS_ALLOW_PRIVILEGEDCORNUS_ALLOW_BIND_SOURCES) しない限り、特権コンテナとホストバインドマウントは拒否されます。セキュリティと認証を参照してください。

host バックエンド (dockerhostcontainerdbare) では、ワークロードの傍らで動く必要があるもの — クライアントローカルマウント、クライアント側エグレス、そして remote モードでは以下で説明するポート転送の再ルートと ssh-agent 中継 — はすべて、そのレプリカのネットワーク名前空間を共有するレプリカごとに 1 つの companion cornus caretaker コンテナで実現されます。したがって 1 回のデプロイでクライアントローカルマウントとクライアント側エグレスを組み合わせられます。host バックエンドがまだ実現していない唯一のアタッチメントはクライアント由来の資格情報で、これは引き続き kubernetes 専用です。

dockerhost (既定)

ローカル Docker デーモン上でワークロードをコンテナとして実行します。Docker ソケット (/var/run/docker.sockCORNUS_DOCKER_SOCK で上書き可) が必要です。最も機能が豊富なバックエンドで、仕様フィールドの最大範囲を Docker の create-time / host-config オプションに直接 map します。Compose user ネットワークは実際の Docker user-defined ネットワークとなり、libnetwork が DNS とネットワークごとの isolation をネイティブに提供します。

host-native 再エクスポート (このバックエンドでは既定) では、デーモンが既に持っているイメージ (bare またはループバックホストの参照) について、このバックエンドはレジストリプルをスキップします。そのイメージをプルすると cornus のレジストリ経由で同じデーモンへ往復してしまうためです。外部の参照 (例: docker.io/...) は従来どおりプルされます。

クライアントローカルバインドマウント は通常、呼び出し元のエクスポートを cornus サーバー自身のホストへ直接 kernel-9p マウントして実現されます — サーバーが駆動する Docker デーモンと同じホストにあることを前提とした、単一ホストの高速パスです。CORNUS_DOCKER_REMOTE=1 を設定すると、代わりに caretaker-sidecar 経路 (kubernetes バックエンドが常に使っているのと同じ仕組み) にオプトインします。companion の cornus caretaker コンテナが kernel 9P マウント自体を行い、rshared/rslave propagation を持つ Docker 管理ボリュームがそれをアプリコンテナへ中継します。そのため、サーバーがデーモンとファイルシステムを共有していない場合 (例: DOCKER_HOST=tcp://...) でもマウントが機能します。これには、このバックエンドの既存のエグレス companion 経路とまったく同じく、CORNUS_AGENT_IMAGE に cornus を組み込んだイメージを設定する必要があります。CORNUS_DOCKER_REMOTECORNUS_AGENT_IMAGE についてはサーバー環境変数を参照してください。

remote モードでは、この companion はデプロイが --mount を使うかどうかにかかわらず、アプリコンテナのネットワーク名前空間を共有してインスタンスごとに必ず作成されます — 単なるマウント中継ではなく「remote companion」です。CORNUS_DOCKER_REMOTE=1 のもとで cornus port-forwardcornus tunnel がそもそも機能するのもこのためです。companion がなければ、サーバーにはインスタンス自身のネットワークへ橋渡しする経路がないため、どちらもインスタンスへ直接接続する代わりに companion の共有 netns 経由で再ルートされます。同じ companion により、remote モードの任意のインスタンスで cornus exec --forward-agent がローカルの ssh-agent を exec セッションへ転送できるようになります。

二つのマウント経路を並べると次のようになります。呼び出し元のエクスポートがサーバーへ届くまでは同じで、最後の一区間だけが異なります。

podman

Podman 上でワークロードを実行します。ただし Podman の Docker 互換エンドポイントではなく、ネイティブの libpod API (/v5.0.0/libpod/...) を使います。

これは意図した選択です。Podman の互換層は 4 年近く Docker API v1.41 を名乗り続けており、その未修正の不具合のいくつかは、このバックエンドが依存する経路にちょうど当たります。互換版のコンテナ stats は pod 内コンテナの CPU を過大に報告し、互換版の attach はリクエストボディをストリームへ echo し返し、互換版の archive PUT は Docker と挙動が異なります。cornus は stats をそのまま通過させ、attach を生のまま橋渡しし、cornus cp をその archive エンドポイントの上に実装しているため、互換層に乗ればこれら 3 つをそのまま引き継ぐことになります。libpod のルートにはいずれの問題もなく、さらに互換層にはないものを 1 つ与えてくれます。pull ごとの tlsVerify です。これにより、デーモンホスト側の registries.conf を編集しなくても、cornus 自身の平文 HTTP ループバックレジストリからワークロードが pull できます。

Podman への到達方法を cornus に伝える

他のどのバックエンドとも異なり、podman には既定のエンドポイントがありません。cornus が探しに行くこともありません。CONTAINER_HOSTDOCKER_HOST も、既定のソケットパスも見ません。下の 2 つのどちらも設定されていない場合、サーバーは起動を拒否します。理由は診断のためです。自分でデーモンを見つけてしまうサーバーは、障害報告から「どのデーモンを駆動していたのか」に答えられません。

変数意味
CORNUS_PODMAN_SOCKETこのエンドポイントをそのまま使います。パス、unix:// / tcp:// の URL、または ssh:// の接続先を指定します。
CORNUS_PODMAN_SERVICE=1cornus 自身が専用ソケット上で podman system service を実行し、監督します。PATH 上の podman バイナリだけが必要で、有効化すべき socket ユニットはありません。

両方を設定するのは、優先順位ではなくエラーです。どちらが無視されるかは、まさに障害対応中に誰も覚えていない類の詳細だからです。

sh
# ルートレス
systemctl --user enable --now podman.socket
export CORNUS_PODMAN_SOCKET="$XDG_RUNTIME_DIR/podman/podman.sock"

# ルートフル
sudo systemctl enable --now podman.socket
export CORNUS_PODMAN_SOCKET=/run/podman/podman.sock

# リモート。`podman system connection` が保存する接続先をそのまま使えます
export CORNUS_PODMAN_SOCKET="ssh://core@host/run/user/1000/podman/podman.sock"

podman.socket を有効にしても Podman がデーモンになるわけではありません。このユニットは socket activation なので、サービスは必要になったときに起動し、アイドルになれば終了します。CORNUS_PODMAN_SERVICE=1 の子プロセスも同じ挙動で、違いはそのライフサイクルを誰が所有するかだけです。

指定されているが到達できないエンドポイントは、起動時エラーにはなりません。podman が停止しているのは後で解消しうる実行時の状態であり、サーバーは起動してレジストリを提供し続けます。起動時に致命的となるのは、自力では決して解消しない「セレクタが未設定」の場合だけです。

ルートレス

ルートレスな podman でも、デプロイ、ログ、exec、cornus cp は動作します。できないのは、このホストからワークロードへ直接ダイヤルすることです。ルートレスなコンテナのネットワーク名前空間は pasta / slirp4netns の背後にあり、その外側からは経路がありません。

そのため cornus port-forwardcornus tunnel は、ルートレスなデーモンに対してはタイムアウトを待たずに即座に拒否します。タイムアウトは「ワークロードが落ちている」と読めてしまい、調査を誤った場所へ導くからです。ワークロードの名前空間を共有する per-instance companion 経由で到達するには CORNUS_PODMAN_REMOTE=1 を設定します。他のバックエンドの remote モードと同様、CORNUS_AGENT_IMAGECORNUS_ADVERTISE_URL も必要です。ルートフルな podman にはこれらの制約はありません。

cornus はソケットのパスから推測するのではなく、デーモン自身にルートレスかどうか (host.security.rootless) を尋ねます。ルートフルなソケットはどこにでもバインドマウントできるためです。

ホストネイティブ再エクスポート

このバックエンドの既定であるホストネイティブ再エクスポートでは、/v2/* レジストリは podman のイメージストアを提供します。どのストアを提供するかは DOCKER_HOST ではなくデプロイバックエンドが決めます。podman サーバーのレジストリが Docker デーモンのイメージを再エクスポートしてしまうと、一度もデプロイしないランタイムのイメージを配ることになり、それは壊れているのではなく間違っているだけなので、何も報告してくれません。

containerd

CORNUS_DEPLOY_BACKEND=containerddockerd のない素の containerd ホスト上でネイティブに ワークロードを実行し、containerd v1 クライアントに直接デプロイインターフェース全体を実装します。Linux 専用で、ほかの環境では unsupported エラーを返します。dockerhost と同様、サーバーに対してもサーバーなしのローカル cornus deploy に対しても動作します。

必要なもの:

  • containerd ソケット (CORNUS_CONTAINERD_ADDRESS、既定 /run/containerd/containerd.sock; 標準 CONTAINERD_ADDRESS はフォールバックとして尊重)、
  • root (ネットワーク名前空間を作成し CNI プラグインを実行するため)、
  • 標準 CNI プラグイン (bridgeportmaphost-localloopback)。CORNUS_CNI_BIN_DIRCNI_PATH/opt/cni/bin から検出します。

ワークロードは cornus containerd 名前空間 (CORNUS_CONTAINERD_NAMESPACE) に置かれ、バックエンド状態 (ボリューム、ログ、CNI 設定) は <DataDir>/containerd/ 下に保存されます。

  • Networking は host-port publishing を portmap で行う単純な CNI bridge です。Compose ネットワークごとに CORNUS_CNI_SUBNET_BASE (既定 10.4) から独自の /24 を割り当てます。公開ポートはレプリカ 0 だけに DNAT されます。コンテナ間の名前解決は hosts-file 同期 (nerdctl 風) で機能します。UDP ポート mapping はサポートされます (kubernetes バックエンドと異なります)。
  • イメージプル はプレーン HTTP と TLS を自身で選びます。localhost レジストリは自動的にプレーン HTTP、CORNUS_CONTAINERD_INSECURE_REGISTRIES (comma-separated host[:port]) は明示ホストに拡張します。CORNUS_CONTAINERD_SNAPSHOTTER は rootfs snapshotter を上書きします (docker-in-docker のような overlay-backed ホストでは native を設定)。
  • ログ はデータディレクトリ下に保存され、CORNUS_CONTAINERD_LOG_MAX_BYTES (既定 16 MiB、旧世代一つを保持) で rotate され、cornus restart 後も残ります。再起動ポリシー は containerd restart-monitor プラグインに委譲されます。

containerd ビルドワーカー (CORNUS_BUILD_WORKER=containerd) と組み合わせると、ビルドの実行、snapshot、content が同じホスト containerd に委譲されます。タグ付きビルドはホストイメージストアに直接入り、ビルド直後のイメージをレジストリ往復なしでデプロイできます。遅延 build-context (--lazy / CORNUS_LAZY_BUILD) は containerd ワーカーでは未対応です。

クライアントローカルバインドマウントには CORNUS_CONTAINERD_REMOTE=1 が必要です。 dockerhostbare と違い、このバックエンドには単一ホストの kernel-9p 高速パスがありません (サーバー側のそのパスは前記 2 つのバックエンド専用です) 。そのためフラグ未設定のまま --mount を伴うデプロイを行うと事前に拒否され、エラーがこの変数を名指しします。フラグを設定すると、dockerhost のリモートモードと同じ caretaker-sidecar の仕組み (companion の cornus caretaker コンテナ/タスクが kernel 9P マウントを行い、rshared/rslave OCI マウントオプションを持つ共有ホストディレクトリ経由でアプリコンテナへ伝播させる) でマウントが実現され、CORNUS_AGENT_IMAGE も必要になります。dockerhost と違い、このフラグは真のリモートデーモン対応を追加しません。containerd のクライアント dialer はローカルの unix ソケットとしか話さないため、このバックエンドはフラグの有無にかかわらず無条件に cornus サーバーと同じホストにあります。sidecar の仕組み自体は持つ価値がありますが (サーバー自身が kernel マウント権限を持つ必要がなくなり、今後の機能が再利用できる土台にもなります)、同じホストにない containerd への道ではありません。

dockerhost と同じく、CORNUS_CONTAINERD_REMOTE=1--mount の有無にかかわらず、この companion をインスタンスごとに必ず作成します (アプリの pin されたネットワーク名前空間に参加します)。理由も同じで、cornus port-forward/cornus tunnel を再ルートし、ForwardPort の通常の直接 IP 接続が関わる場面で cornus exec --forward-agent を有効にするのがこの companion だからです。ここではサーバーが CNI bridge ネットワークへ直接接続する経路や権限を必要としなくなるだけで、上記の (未解決の) 真のリモートデーモン問題とは別の話です。

dockerhost との既知の差: attach は output-only、ヘルスチェックは無視され警告が出ます。ルートレス containerd は現在未検証・未対応です。

bare

CORNUS_DEPLOY_BACKEND=bare はワークロードをデーモンレスに実行します。dockerd も containerd もありません。cornus は低レベル OCI ランタイム CLI (runc、または CORNUS_BARE_RUNTIME 経由で crun/youki/runsc) を直接駆動し、デーモンが本来提供するすべてを自身で所有します。プロセス内 content store へのイメージプル、layer 展開 + rootfs 構築、OCI config.json 生成、プロセス監督 + restart policy、cgroup ライフサイクル、ロギングです。実質的に cornus 自身が Podman になる 構成です。ほかの host バックエンドと同様 Linux 専用で、サーバーにもローカル cornus deploy にも動作します。状態は <DataDir>/bare/ 下に保存されます。

必要なもの:

  • root (snapshotter mount、ネットワーク名前空間、CNI プラグイン、container cgroup のため)、
  • PATH 上の OCI ランタイムバイナリ (既定 runc。起動時に検証され、欠落は実行可能なエラーで即座に失敗)、
  • 標準 CNI プラグイン (bridgeportmaphost-localloopbackCORNUS_CNI_BIN_DIRCNI_PATH/opt/cni/bin から検出)。

Networking、hosts-file 名前解決、DataDir ボリュームの挙動は containerd バックエンドとまったく同じです。daemon 非依存の機構は共有コードです (CNI bridge + portmap、compose ネットワークごとに CORNUS_CNI_SUBNET_BASE から /24、公開ポートはレプリカ 0 に DNAT、インスタンスごとの /etc/hosts 同期、空のときだけコピーするボリューム seeding)。加えて、netns gateway 上のプロセス内 resolver が guest DNS に応答します (CORNUS_BARE_DNS=false で無効化)。イメージプルはプレーン HTTP と TLS を自身で選び (localhost は自動、CORNUS_BARE_INSECURE_REGISTRIES が拡張)、rootfs snapshotter は overlay + native フォールバックです (overlay-backed / docker-in-docker ホストでは CORNUS_BARE_SNAPSHOTTER=native)。

bare に固有なのは cornus が supervisor そのもの である点です。runc create/start は即座に戻り、runc の /run state は tmpfs なので、cornus 自身が pidfd で各 container の PID1 を待ち、restart policy (no / on-failure[:N] — containerd restart-monitor では表現できません / always / unless-stopped) を上限付きバックオフで適用して再起動します。二つの supervisor 形態がこのエンジンを共有します。プロセス内 (既定) と、オプトインの container ごとのデタッチ shim (CORNUS_BARE_SHIM、cornus の conmon 相当) で、後者は cornus の再起動後も存続します。起動時の reconcile パスがサーバー再起動後は生存者へ再アタッチし、ホスト再起動後はワークロードを完全に再構築します (netns pin は tmpfs 上にあるため、pin の消失が再起動のシグナルです)。インスタンスごとの状態 — イメージ、snapshot、IP、ポート、restart policy、および期待状態と観測状態 — は <DataDir>/bare/records/<id>/record.json として永続化されます。これが containerd のメタデータ DB を置き換えるストアです。

クライアントローカルバインドマウントは既定でほかの host バックエンドと同じ単一ホストの kernel-9p 高速パスを取り、CORNUS_BARE_REMOTE=1 で caretaker-sidecar パスにオプトインします (CORNUS_AGENT_IMAGE が必要)。dockerhost/containerd と異なり、この companion はマウント専用で、デプロイが実際にクライアントローカルマウントを宣言したときにのみ存在します。cornus port-forward/cornus tunnel はインスタンス自身の IP へ直接接続し (デーモンレスなバックエンドは常にサーバーと同じホストにあるため、これが正しい動作です)、cornus exec --forward-agent は利用できず、事前に拒否されます。containerd と同等にするため、オプションインターフェース一式 (MountingBackendEgressBackendRemoteCapable、ボリューム削除) を実装しています。

gVisor (runsc)。 CORNUS_BARE_RUNTIME=runsc を設定すると、各ワークロードが gVisor サンドボックス内で動作します。サンドボックスが guest の cgroup 計測とファイルシステムを所有するため、cornus は 2 つの操作を自動で切り替えます (ランタイム名で検出。CORNUS_BARE_STATS_SOURCE で上書き可)。cornus stats は host の cgroup ファイルではなくランタイム自身のメトリクス (runsc events --stats) を読み、cornus cp は host の /proc/<pid>/root 経由ではなくコンテナtar を実行します。ここから 2 点の注意が生じます。cornus cp はイメージ内に tar バイナリが必要で (scratch/distroless イメージはコピー不可)、コンテナごとのネットワークカウンタは報告されません (cornus stats のネットワーク I/O は 0 表示)。それ以外の監督・restart policy・ネットワーク・volume はすべて変わりません。

dockerhost との既知の差: containerd と同様、attach は output-only、ヘルスチェックは無視され警告が出ます。ルートレスは現在対象外で、明確にエラーになります。

incus

CORNUS_DEPLOY_BACKEND=incus はワークロードを Incus のアプリケーションコンテナとしてデプロイし、公式 Go クライアントで Incus デーモンの REST API (ローカル unix ソケット) と通信します。Incus 6.3+ は OCI イメージをそのままアプリケーションコンテナとして実行でき、cornus が対象とするのはこの機能です。ほかのバックエンドで実行するのと同じ OCI イメージを、dockerd や containerd や cornus 自身ではなく incusd が監督します。Linux 専用で (ほかの環境では unsupported エラーを返します)、ほかの host バックエンドと同様、サーバーに対してもサーバーなしのローカル cornus deploy に対しても動作します。

必要なもの:

  • incus デーモンソケット (CORNUS_INCUS_SOCKET、既定は /var/lib/incus/unix.socket) とそれへのアクセス権
  • Incus 6.3 以降。それより前のリリースには OCI サポートがなく、デプロイは Unsupported protocol: oci で失敗します
  • デーモンホスト上の skopeoumoci。OCI イメージを平坦化するために incusd 自身がこれらを呼び出します。必要なのは cornus が動くホストではなく incusd が動くホストです

インスタンスは CORNUS_INCUS_PROJECT (既定は default) で選んだプロジェクトに作成され、cornus-<app>-<replica> という名前になります。

プル矢印の起点に注目してください。イメージを自分で取得しない唯一のバックエンドです。

  • イメージプルを行うのは cornus ではなく incusd です。 cornus は自身のレジストリを指す OCI remote (InstanceSource{Protocol: "oci"}) をデーモンに渡し、incusd が skopeo 経由でプルします。skopeo は既定で HTTPS を使うため、平文 HTTP のレジストリは insecure と宣言する必要があります。CORNUS_INCUS_INSECURE_REGISTRIES (カンマ / 空白区切りの host[:port]) を設定すると cornus 側がそのホストを http:// で扱い、加えてデーモンホスト側にも対応する /etc/containers/registries.conf.d/ エントリが必要です (skopeo にも同意させるため)。ループバックのレジストリは cornus 側では自動的に平文 HTTP として扱われます。
  • 識別情報とメタデータは Incus の user.* 設定名前空間に載ります。任意のキーが許されるのはここだけです。user.cornus.manageduser.cornus.app、由来を示す user.cornus.origin.* 一式、そして Compose の labels: が格納されます。環境変数は environment.*、CPU / メモリの上限は limits.cpu.allowance / limits.memoryprivileged: true (ほかと同じくポリシーで制御されます) は security.privileged になります。
  • Apply は作り直します。 Incus は実行中インスタンスの削除を拒否するため、仕様の適用時にはそのアプリの既存インスタンスを停止して削除し、Start: true で新しく作成します。
  • 公開ポートはホスト側で bind する Incus の proxy デバイスになり、バックエンド共通の契約に従って replica 0 のみに付与されます。TCP と UDP のどちらのマッピングにも対応します。
  • restart policy は真偽値の boot.autorestart に map されます。no 以外はすべて有効になります。試行回数の上限は Incus にないため、restart: on-failure:NN は表現できません (containerd と同じ制限です)。
  • ログはインスタンスのコンソールログです。OCI の PID 1 の stdout/stderr が単一の生 PTY ストリームとして混ざったもので、cornus はこれを通常の stdout ストリームに framing し直します。この情報源には行ごとのタイムスタンプも stdout/stderr の分離も存在しないため、--since / --until / --follow / --tail / --timestamps は尊重できません。黙って無視するのではなく、それぞれ個別に警告します (不正な --since は従来どおりエラーです)。
  • cornus stats はメモリ、pids、ネットワークを正確に報告しますが、Incus はホスト全体の CPU 合計を公開しないため、そこから導く CPU 使用率は低く出るかゼロになります
  • cornus cp は Incus のインスタンスファイル API を利用します。この API はファイルサイズもシンボリックリンクの参照先も持たないため、cornus は本文を読み切ってサイズを測り、リンクは内容として読みます。正しく動作しますが、安価な stat ではありません。
  • cornus port-forwardcornus tunnel は、インスタンス状態から得たインスタンス自身のルーティング可能な IPv4 へ直接接続します。TCP と UDP の両方に対応し、companion は関与しません。リモートモード (後述) ではその直接接続こそ当てにできないため、トラフィックは代わりにレプリカの companion 経由へ再ルートされます。
  • cornus exec は TTY のサイズ設定を含めて対応しています。attach は意図的に非対応です。Incus が公開するのは docker-attach のストリーム意味論ではなく PID 1 に接続されたコンソールであるため、cornus attach は明確なエラーを返し、exec を案内します。

dockerhost との既知の差。 上記のログと stats の注意点に加えて、incus バックエンドは次を map しません。command だけの上書き、healthcheck、クライアントローカル 9P バインドマウント、Compose の user networksknativehealthcheck は保留ではなく恒久的な差です。Incus にはインスタンスレベルの probe が存在しないため、終了せずに不健全になったワークロードは running のまま報告され続けます。

黙って捨てられるものはありません。 それ以外の仕様フィールドは、map されるか、フィールド名を挙げた警告を出すかのどちらかです。そして対応済みの機能だけを使った仕様は警告を 1 つも出しません。この両方をテストが固定しています。これは最近まで理想にすぎなかったため、明記しておく価値があります。かつてこのバックエンドは 9 個のフィールドについて警告する一方で、およそ 20 個 (hostnamestopSignalcapAdd / capDropdevicesinittty、DNS 設定など) を何も言わずに捨てていました。いまは警告が出ないなら、そのフィールドは尊重されたということです。

3 つのフィールドは条件付きで map されます。 そしてその条件こそが要点です。

  • entrypoint はインスタンスの oci.entrypoint になります。これはイメージの argv 全体を置き換え、command がその argument を与えます — ほかのバックエンドで entrypoint が持つ意味論と同じです。表現できないのは command だけの上書きです。entrypoint: なしの command: は「イメージの ENTRYPOINT は保ったまま、その argument だけを差し替える」という意味ですが、oci.entrypoint は argv をまとめてしか置き換えられません。さらに、そのために必要な分割をこのバックエンドは見ることもできません。イメージを取得するのは incus 自身であり、incus が公開する argv (イメージ設定の平坦化された Process.Args) はすでに ENTRYPOINTCMD の境界を失っているからです。このケースは、回避策 — entrypoint も設定すること — を挙げて警告します。
  • workingDir絶対パスのときに oci.cwd として map されます。相対パスは警告されます。oci.cwd は絶対パスとして検証されるため incusd が create を拒否しますし、相対パスの基準となるイメージ自身の作業ディレクトリもここからは見えません。
  • user数値のときに map されます。10001000:1000oci.uid / oci.gid になります (uid だけの値ではグループはイメージに委ねられます)。ユーザー名やグループ名の形式 (app1000:staff) は警告されます。名前の解決にはイメージの /etc/passwd が必要ですが、このバックエンドはそれを一度も見ないからです — kubernetes バックエンドと同じ数値のみの制限です。1000:staff は uid だけを尊重してグループを捨てるのではなく丸ごと拒否されます。そうしないと、誰も要求していないグループでプロセスを走らせることになるからです。

マウントとボリューム。 サーバーホストのバインドパスは incus の disk デバイスになり、ほかの host バックエンドと同じ既定拒否の hostpolicy (CORNUS_ALLOW_BIND_SOURCES) で制御されます。許可リスト外のソースは、マウントされるのではなく引き続きデプロイを失敗させます。クライアントローカル 9P バインドマウントは非対応のままで、バックエンドに届く前にサーバーが拒否します。incus の disk デバイスで表現できないものはマウントごとに警告されます。ソースが空または相対パスの場合、ターゲットがルート (/) の場合、SELinux の relabel 要求です。管理対象 volumes は設定されたプールにカスタムストレージボリュームとして provision されます。匿名ボリュームはそのデプロイメントが消えるときに回収され、名前付きボリュームは compose down --volumes で削除されます。

同じく map されるもの (いずれも Incus が受け取れない項目については項目ごとに警告します): sysctls (linux.sysctl.* として。ただし OCI コンテナに対して incusd 自身が設定する 2 つを除く)、ulimits (limits.kernel.* として。Incus が文書化している rlimit 名について、かつ soft の上限が hard を超えない場合のみ)、tmpfsshmSize (どちらも tmpfs の disk デバイス。Incus が表現できるマウントオプションは size だけです)。

リモートモード。 CORNUS_INCUS_REMOTE は、CORNUS_DOCKER_REMOTE などがそれぞれのバックエンドで行うのと同じく、caretaker companion の経路を有効にします。各レプリカには PortForward と AgentRelay の role を持つ cornus caretaker を実行する companion インスタンスが付き、これによりサーバーが経路を持たないワークロードにも cornus port-forward / cornus tunnel が届き、cornus exec --forward-agent も使えるようになります。有効にしない場合、このバックエンドはエージェント転送を利用不可と宣言し、--forward-agent は前段で拒否されます。リモートモードには CORNUS_AGENT_IMAGECORNUS_ADVERTISE_URL (companion のイメージと、companion が接続し直す cornus の URL) が必要です。どちらかが欠けている場合、デプロイは途中まで進んでから失敗するのではなく、何も削除する前に失敗します。

incus の companion がほかのどの host バックエンドとも異なる点が 2 つあり、どちらも選択ではなく Incus によって強制されたものです。1 つは、netns を共有するサイドカーではなく兄弟インスタンスであることです。Incus はあるインスタンスが別のインスタンスのネットワーク名前空間へ参加する手段を公開していないため、caretaker はループバックではなくアドレスでアプリインスタンスへ接続します。もう 1 つは、転送されたエージェントのソケットが、サーバーのデータディレクトリからのバインドではなく共有カスタムストレージボリューム (id map の異なる非特権インスタンス 2 つがどちらもマウントできるよう security.shifted で作成) に載ることです。バインドであれば、サーバーがデーモンホストのファイルシステムを見られることを前提にしてしまいます。

リモートモードでも、ほかのバックエンドが companion から得ているクライアントローカルマウントは得られません。この差は単に未実装なのではなく構造的なものです。9P マウントはアプリのマウント名前空間へ伝播する必要があり、兄弟インスタンスにはそれができません — アプリインスタンスの内側で動く caretaker が必要になります。クライアント側エグレスが未配線なのも同じ理由です。

以上すべてに対する注意点が 1 つあります。companion の経路は実際の incusd に対して動かされたことがありません。vendor された Incus v6 API に対して構築されたものなので、実運用で証明済みというより、リモートモードで対応済みという位置づけで捉えてください。

kubernetes / k8s

CORNUS_DEPLOY_BACKEND=kubernetes (または k8s) は client-go で Kubernetes クラスターにデプロイし、各ワークロードを デプロイメント と公開ポート用の サービス として描画します。サーバー / クラスター内専用で、このバックエンドを指定したローカル cornus deploy は警告とともに dockerhost へフォールバックします。提供される Kubernetes マニフェストと Helm chart が使用するバックエンドです。

RBAC 範囲かつ名前空間付き (CORNUS_K8S_NAMESPACE) です。高度な仕様ブロックを実現する唯一のバックエンドでもあります。ネットワーク driver pipeline (CORNUS_K8S_NET_DRIVER: services、Multus 経由の bridge/ipvlan/macvlancilium) による user ネットワーク、enforcing エグレスプロキシ、Pod ごとの caretaker DNS resolver、資格情報ブローキング、クライアント側エグレス中継、ワークロード間 hub オーバーレイを提供します。ローリング更新はデプロイメントの strategy.rollingUpdate に map されます。

CLI を実行する machine ではなく Kubernetes API を通じてデプロイするため、kubernetes バックエンドがリモートクラスターで作業するを支えます。developer はクラスター内 cornus サーバーを操作し、ポートごとの転送または SOCKS5 conduit がワークロードポートを laptop へ戻します。

ForwardPort (つまり cornus port-forward/cornus tunnel) は、ここでは companion サイドカーをまったく必要としません。Kubernetes API 自身の pods/portforward サブリソースに直接乗ります。cornus exec --forward-agent にも対応しますが、host バックエンドのバックエンド全体に効く remote モードと違い、デプロイメントごとのオプトインです。DeploySpecagentForward を設定すると、Pod の caretaker に AgentRelayRole が組み込まれます (ほかに caretaker 役割を持たない Pod では最小構成のものが作られます)。これを設定せずに適用したデプロイメントは、--forward-agent を明確なエラーで拒否します。

権限の考え方

ワークロードを実行するバックエンド とプロセス内 ビルドエンジン は必要な権限が異なります。Cornus サーバーの実行方法はこれで決まります。

  • ビルドを行う Cornus には昇格が必要です。ビルドエンジンは runc + overlayfs + user 名前空間を実行します。レジストリとデプロイサブシステム単独には不要です。
  • dockerhost は Docker ソケット、containerd はソケット、root、CNI プラグイン、bareroot、OCI ランタイムバイナリ、CNI プラグイン (デーモンソケットは一切不要)、incus は incus デーモンソケットへのアクセス権 (加えてデーモンホスト上の skopeo/umoci) が必要で、ワークロード自身の権限は incusd に委ねます。kubernetes は RBAC 下のクラスター内実行が必要です。
sh
# Simplest: run the container privileged (the shipped default).
#   compose: privileged: true   |   k8s: securityContext.privileged: true

# Rootless: run unprivileged with the prerequisites present, then:
cornus serve --rootless          # or CORNUS_ROOTLESS=1

ルートレスには uidmap (newuidmap / newgidmap)、rootlesskitslirp4netns と適切な securityContext が必要です。イメージには uidmap が同梱されます。ホストによっては (例: kernel.apparmor_restrict_unprivileged_userns=1 の最近の Ubuntu) AppArmor プロファイルまたは緩和した sysctl が必要です。

これは ワークロード privilege とは別です。サーバーの実行方法にかかわらず default-deny であり、明示的に許可 (CORNUS_ALLOW_PRIVILEGEDCORNUS_ALLOW_BIND_SOURCES; セキュリティと認証を参照) しない特権コンテナとホストバインドマウントは拒否されます。

関連項目

Released under the Apache-2.0 License.