Skip to content

feat(accept): S3(aipf_mcp_data_grdm)を模擬の OIDC 発行者と書き込みの試験で有効にする - #86

Merged
Yusuke-KOMIYAMA merged 5 commits into
developfrom
feat/s3-aipf-oidc
Nov 15, 2026
Merged

Yusuke-KOMIYAMA merged 5 commits into
developfrom
feat/s3-aipf-oidc

Conversation

@Yusuke-KOMIYAMA

@Yusuke-KOMIYAMA Yusuke-KOMIYAMA commented Nov 15, 2026 •

Copy link
Copy Markdown
Contributor

概要

所有者の決定(2026-11-16「模擬の OIDC 発行者+書き込みの試験」)に従い、S3(aipf_mcp_data_grdm)を full プロファイルで有効にする。

  • 新しい infra 部品 oidc-mock(installer/images/oidc-mock、image_build タグ 2、python:3.13-slim をダイジェスト固定、uid 65534、読み取り専用、非公開・grdm のみ)。発見文書・JWKS・/healthz だけを返す。トークン交換の口は S3 の道で呼ばれないので持たない。コンテナが受け取るのは公開鍵 OIDC_MOCK_PUBLIC_JWK だけ(r1)。
  • secrets init: GRDM_VAULT_KEY(Fernet、fernet_key())と OIDC_MOCK_SIGNING_KEY(EC P-256 の秘密 JWK、grdm_dev/es256.py、標準ライブラリのみ)。secrets init と compose render が形式を名前で確かめる(値は出さない)。init・init --missing・rotate・compose render が公開部分 OIDC_MOCK_PUBLIC_JWK を導いて runtime/.env に書く(r1)。
  • aipf テンプレート: MCP_HOST=0.0.0.0、MCP_PORT=8768、GRDM_API_BASE=http://api:8000/v2/、vault は tmpfs の /tmp、OIDC_ISSUER/AUDIENCE/JWKS_URL、ALLOWED_ACTORS・ALLOWED_DIRECT_CLIENTS・WRITE_ACTORS、/healthz の healthcheck、127.0.0.1:8768 に公開。health は /healthz を 200 で確かめる。
  • S3 試験を実装(下記)。
  • 文書: ADR-15(Keycloak でなく模擬発行者、EN+JA)、SPEC-04 §5 S3(EN+JA、読み取りの道具が無いので書き直した理由つき)、SPEC-02 §4(full のサービス・ポート 8768・二つの鍵)、状況ボード、ADR 索引、受入 README。
  • origin/develop(fix(health): healthcheck の無いサービスは 20 秒続けて動いてから健康と数える #85、feat(accept): S2(rdmcp、full プロファイル)を本物の CAS の OAuth で受入試験する #87)を merge 済み。feat(accept): S2(rdmcp、full プロファイル)を本物の CAS の OAuth で受入試験する #87 との衝突では fernet_key() を develop の一つに揃え、GRDM_VAULT_KEY を FERNET_KEYS に足した。文書の版は develop の上に積んだ(SPEC-02 0.43、SPEC-04 0.16、状況ボード 0.30、受入 README 0.8)。ADR-15 は空き番号のまま。

S3 の中身

  • 成功: user_a の PAT を作る → 画面のトークン(azp grdm-dev-webui)で grdm_token_form → POST /grdm/token?t=… で預ける(200、grdm_user = user_a)→ grdm_token_status → 研究フローのトークン(act.sub grdm-dev-research-flow)で ensure_project → OSF API v2 で user_a として題名・目印・非公開・admin を確認 → 二度目は同じノードを created=false。
  • 拒否: ベアラーなし/形違い/別の鍵/別の宛先 → 401、代理者なし → 403 actor_missing、未知の代理者 → 403 actor_not_allowed、書き手でないエージェント → writer_not_allowed、偽の合い言葉 → 403、user_b の PAT で user_a のプロジェクトに write_record → node_forbidden(何も書かれない)。

検証

  • 単体試験 773 件 OK(skipped 14。r1 と feat(accept): S2(rdmcp、full プロファイル)を本物の CAS の OAuth で受入試験する #87 の merge の後)、tools/tests OK、docs_check PASSED、manifest_check PASSED。
  • ES256 実装: RFC 7515 付録 A.3 の署名を検証。aipf イメージ内の PyJWT/cryptography で 30 トークン検証・改ざん拒否・公開点一致。
  • Mac Studio の live stack(full プロファイル): accept --only S3 合格 2。スイート全体 合格 20・スキップ 4(S2・S5)・失敗 0、実行 acc-20261115T162657Z-3b9bef(証跡をコミット。ホスト名・/Users・メール・.env の値・JWT なしを確認)。止めたサービスは無い。aipf_mcp_data_grdm は healthy で再起動しない。
  • 初回の live 実行で ensure_project が API の 10 件/秒の制限で 429 になった(ダッシュボードの要求と同じ利用者)。試験はページを about:blank にして 1.2 秒待つ。
  • 検証後に main checkout を戻し、core を render + up、health --network で 23 サービス健康。

レビュー r1 への対応

  • R1-01(必須): S3 の対象判定を session scope の fixture aipf_url に移し、signer はそれに依存する。両試験は aipf_url, signer を最初の引数に取る。core/minimum と、ポートの無い full は鍵を読む前にスキップする。鍵が無いときの失敗は、ポートのある full にだけ残る。回帰試験 installer/tests/test_s3_acceptance_fixtures.py を足した。スタブでの判定に加え、[accept] の venv ではブラウザなしの本物の pytest で 4 つの環境を確かめる。直す前の試験ファイルでは 10 件が落ちる。
  • 推奨(秘密鍵をコンテナに入れない): 対応した。oidc_mock は ${OIDC_MOCK_PUBLIC_JWK} だけを受け取り、d を持つ値は拒む。rotate の再作成でも新しい公開鍵が届く(.env の値なので render を経なくてよい)。イメージのタグを 2 にした。compose の描画が変わったので、ロックを取って live stack の full で accept --seed --only S3 をやり直した: 合格 2、実行 acc-20261115T172743Z-b28b73(証跡をコミット)。docker inspect で oidc_mock の環境変数は OIDC_MOCK_ISSUER・OIDC_MOCK_PUBLIC_JWK・OIDC_MOCK_PORT だけと確かめた。その後 core を render + up して 23 サービス健康。
  • R1-02(追跡、マージを妨げない): RCOSDP/RDM-aipf_mcp_data_grdm-dev2027 PR Add environment guide #1 がアクセスログの t= の値を [redacted] に替える(試験 3 件、隔離したコンテナで確認済み)。この案内の固定版は、その PR のマージの後に動かす。

既存の導入への影響

runtime/.env が古い導入は、compose render が終了 2 で GRDM_VAULT_KEY, OIDC_MOCK_SIGNING_KEY の不足を示す。grdm-dev secrets init --missing で足りないキーだけが足される(ADR-14 と同じ手順)。

未了

  • write_record は API が返すブラウザ向けの WaterButler リンク(127.0.0.1:<wb>)にアップロードするので、部品のコンテナから届かない。拒否側でのみ使う。
  • RDM-aipf_mcp_data_grdm-dev2027 のイメージのベース(python:3.12-slim)はダイジェスト固定でない。アクセスログの合い言葉は同リポジトリの PR Add environment guide #1 で対応中(追跡事項)。

🤖 Generated with Claude Code

https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ

Yusuke-KOMIYAMA and others added 2 commits November 16, 2026 01:32
所有者の決定(2026-11-16「模擬の OIDC 発行者+書き込みの試験」)に従い、S3 を
実際の部品の契約に合わせて作り直した。

理由: aipf_mcp_data_grdm は AI 基盤の OIDC 発行者(Keycloak)の JWT しか受け付けず、
GRDM には利用者が預けた PAT で入る。読み取りの道具は無い。full プロファイルでは
OIDC_ISSUER・OIDC_AUDIENCE・GRDM_VAULT_KEY が無く再起動を繰り返していた(M3 調査)。

変更:
- 新しい infra 部品 oidc-mock(installer/images/oidc-mock、image_build、
  python:3.13-slim をダイジェスト固定、uid 65534、読み取り専用、非公開、grdm のみ)。
  発見文書と JWKS と /healthz だけを返す。トークン交換の口は S3 の道で呼ばれないので持たない。
- secrets: GRDM_VAULT_KEY(Fernet、fernet_key())と OIDC_MOCK_SIGNING_KEY
  (EC P-256 の秘密 JWK の base64url、grdm_dev/es256.py。標準ライブラリのみ)を足し、
  secrets init と compose render が形式を名前で確かめる。
- aipf テンプレート: MCP_HOST/PORT=0.0.0.0:8768、GRDM_API_BASE=api、vault は tmpfs の /tmp、
  OIDC_*、ALLOWED_ACTORS / ALLOWED_DIRECT_CLIENTS / WRITE_ACTORS、/healthz の healthcheck、
  127.0.0.1:8768 に公開。health は /healthz を 200 で確かめる。
- S3 試験: runtime/.env の鍵で JWT に署名し、grdm_token_form → POST /grdm/token で
  user_a の PAT を預け、研究フローのトークンで ensure_project → OSF API v2 で確認。
  拒否はベアラーなし/形違い/別鍵/別宛先 401、代理者なし/未知 403、writer_not_allowed、
  偽の合い言葉 403、user_b の PAT で user_a のプロジェクトに write_record → node_forbidden。
- ADR-15(Keycloak でなく模擬発行者)、SPEC-04 §5 S3(EN+JA、変更理由つき)、
  SPEC-02 §4(full のサービス、ポート 8768、二つの鍵)、状況ボード、索引。

検討した代替: Keycloak(コアのどのサービスより重い、ADR-05 の B と同じ)、
aipf の確かめを切るスイッチ(試すべき規則が消える)。ES256 にしたのは純 Python の
RSA 鍵生成が secrets init と単体試験を遅くするため。

証拠:
- ES256 実装: RFC 7515 付録 A.3 の署名を検証、aipf イメージの PyJWT/cryptography で
  30 トークンを検証・改ざんを拒否・公開点が一致。
- 初回の live 実行で ensure_project が API の 10/秒 の制限で 429 になった(ダッシュボードの
  要求と同じ利用者)。試験はページを about:blank にして 1.2 秒待つようにした。
- Mac Studio の live stack(full プロファイル): S3 のみ 2 件合格、
  スイート全体 合格 20・スキップ 4(S2・S5)・失敗 0、実行 acc-20261115T162657Z-3b9bef。
  止めたサービスは無い。aipf_mcp_data_grdm は healthy で再起動しない。
- 単体試験 744 件 OK、tools 試験 OK、docs_check・manifest_check PASSED。

未了: write_record は API が返すブラウザ向けの WaterButler リンク(127.0.0.1:<wb>)に
アップロードするため、部品のコンテナから届かない(拒否側でのみ使用)。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
衝突は SPEC-02 の版の行だけ。develop の 0.41(health の 20 秒規則)を履歴の行に下げ、
この枝の行を 0.42 にした。health.py と test_health.py は自動で合わさった。
aipf_mcp_data_grdm は Compose の healthcheck(/healthz)を持つので 20 秒の規則の対象外。
合わせた後で単体試験・tools 試験・docs_check・manifest_check はすべて通る。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
@Yusuke-KOMIYAMA

Copy link
Copy Markdown
Contributor Author

REV(担当レビュワ, Codex Astra)レビュー r1: CHANGES REQUESTED(head 853053e)

  • R1-01[中・要修正] installer/acceptance/test_s3_aipf.py:77–85:module scope の signer が本体のプロファイル判定より先に鍵を要求するため、OIDC 鍵のない既存 core/minimum で S3 が skip せず setup error になります。実 fixture と一時 core .env の pytest で再現しました。対象判定を signer より先に置き、core/minimum、full のポートなし、full の鍵なしを回帰試験にしてください。
  • R1-02[低・追跡] aipf の上流アクセスログには /grdm/token?t=... が残ります。600 秒の再利用可能なフォームトークンなので、生ログの公開を避け、上流で query を抑止/マスクする対応を推奨します。今回の installer は Docker 生ログを収集せず、コミット済み証跡にも漏洩はありません。

ES256 は RFC 7515 A.3 試験に加え、独立した cryptography との 30 鍵の双方向署名検証に合格。nonce は secrets による一様乱数です。定時間ではありませんが、署名 endpoint のない開発 fixture として許容(installer の依存は空)。内部ネットワーク、公開鍵のみの HTTP 応答、権限・loopback・tmpfs、英和仕様、ADR 番号、証跡を確認しました。

検査:installer 746 件 OK(12 skip)、tools 101 件 OK、docs PASS(70 警告)、manifest PASS。CI は確認時 13 件成功、amd64/arm64 イメージビルド一件 pending。実スタックは操作していません。詳細は指定の 2026-11-16_RDM-developer-guide_PR86_S3_aipf_OIDC_r1.md に記録しました。

Yusuke-KOMIYAMA and others added 3 commits November 16, 2026 01:56
R1-01(必須): 署名鍵を要求する fixture `signer` が、本体の `_aipf_or_skip` より先に動いていた。
新しい鍵を持たない core/minimum の環境では S3 がスキップでなくエラーになった。
- 対象の判定を session scope の fixture `aipf_url` に移し、`signer` はそれに依存する。両試験は
  `aipf_url, signer` を最初の引数に取るので、pytest-playwright の `browser`(session)より先に決まる。
- 鍵が無いときの失敗は、full で aipf のポートがある環境だけに残す。
- 回帰試験 tests/test_s3_acceptance_fixtures.py: スタブでの判定(core/minimum は鍵なしでスキップ、
  full でポートなしはスキップ、full でポートありで鍵なしは鍵の名前で失敗)と、[accept] の venv では
  本物の pytest をブラウザなしで動かす試験。直す前の試験ファイルでは 10 件が落ちることを確かめた。

推奨: oidc_mock は何にも署名しないので秘密鍵を渡さない。
- secrets init / init --missing / rotate / compose render が署名鍵から OIDC_MOCK_PUBLIC_JWK を導いて
  runtime/.env に書き、テンプレートは `${OIDC_MOCK_PUBLIC_JWK}` だけを渡す。rotate の再作成で新しい
  公開鍵が届く(render を経なくてよい)。発行者は秘密の要素 d を持つ値を拒む。
- イメージの中身が変わったので image_build のタグを 2 にした。
- ADR-15 0.2、SPEC-02 の鍵の説明、SPEC-04 S3 の前提の書き方を合わせた。

R1-02(追跡): RCOSDP/RDM-aipf_mcp_data_grdm-dev2027 PR #1 でアクセスログの `t=` を消す。
固定版はそのマージの後に動かす。

確認: 単体試験 756 件 OK(skipped 14)、tools 試験 OK、docs_check・manifest_check PASSED。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
衝突の解き方:
- secrets.py: fernet_key() と fernet_key_usable() は develop のものを一つだけ残し、GRDM_VAULT_KEY を
  FERNET_KEYS と _GENERATORS に足した。OIDC_MOCK_SIGNING_KEY は _GENERATORS(es256)と
  secret_format_problems(形式の確認)に入れ、こちらの format_problems は消した。derived_values は残す。
- compose.py: develop の secret_format_problems を使い、derived_values の import を足した。
- health.py: rdmcp と aipf_mcp_data_grdm の両方を /healthz(200 のみ)で確かめる。
- test_accept.py: 有効なサブシステムは S1・S2・S3・S4。守りの確認に test_s2 と test_s3 の両方。
- test_compose.py: Fernet の偽値は develop の FERNET_KEYS の扱い、EC 鍵だけこちらで足す。
- 文書の版は develop の上に積んだ: SPEC-02 0.43、SPEC-04 0.16、状況ボード 0.30、受入 README 0.8。
  SPEC-02 §4 のポート表は 12 行(cas、rdmcp、aipf_mcp_data_grdm)。SPEC-04 §5 の S2 は develop、
  S3 はこの枝の行。段落と状況ボードは両方の記述を残し、S5 だけがスキップを持つと書き直した。
- ADR-15 は develop でも空き番号のまま。

確認: 単体試験 773 件 OK(skipped 14)、tools 試験 OK、docs_check・manifest_check PASSED。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
PR #86 レビュー r1 の後、df91c1c(対象判定の前倒しと、oidc_mock に公開鍵だけを渡す変更)を
Mac Studio の live stack の full プロファイルに一時的に置き、oidc-mock:2 を組んで
`accept --seed --only S3` を実行した: 成功・拒否とも合格、実行 acc-20261115T172743Z-b28b73。
oidc_mock のコンテナの環境変数は OIDC_MOCK_ISSUER・OIDC_MOCK_PUBLIC_JWK・OIDC_MOCK_PORT だけで、
署名鍵は入っていないことを docker inspect で確かめた。証跡にホスト名・/Users・メール・.env の値・JWT は無い。
確認の後、main checkout を戻し core を render + up して health を確かめた。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
@Yusuke-KOMIYAMA

Copy link
Copy Markdown
Contributor Author

REV(担当レビュワ, Codex Astra)レビュー r2: PASS(6fccbd1)

R1-01 は解決。signer(aipf_url) により対象判定が先になり、実 pytest を含む七試験が合格。r1 の S3 ファイルに戻すと失敗することも確認しました。公開 JWK の init/missing/rotate/render での導出、秘密メンバー拒否、tag 2、#87 との Fernet・health・英和12行のポート表の統合も確認しています。S3-only 証跡は 2 passed、秘密値・個人情報の混入なし。

検査:installer 773 件 OK(14 skip)、fixture 七件は依存あり venv で別途 OK、tools 101 件 OK、docs/manifest PASS。既存 scan venv での初回失敗は絶対 Semgrep パスを fake runner が認識しない変更外の試験問題と確認し、通常 Python で全体を再検証しました。CI は13成功、イメージビルド一件 pending。

前回の非阻害事項 R1-02 は上流 PR #1 で別途レビューしましたが、encoded query 名で漏れるためそちらは CHANGES REQUESTED です。詳細は 2026-11-16_RDM-developer-guide_PR86_S3_aipf_OIDC_r2.md に記録しました。

@Yusuke-KOMIYAMA
Yusuke-KOMIYAMA merged commit c77d489 into develop Nov 15, 2026
14 checks passed
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 15, 2026
…89)

RDM-aipf_mcp_data_grdm-dev2027 PR #1(REV r3 で PASS、マージ 51b6f777)を取り込む。アクセスログで
/grdm/token の問い合わせ文字列を丸ごと [redacted] にし、符号化した名前や整形に失敗した記録の
stderr からも合い言葉が出ないようにした(PR #86 レビュー r1 R1-02 の後続)。94e277da から 4 コミット、
変更は server.py と試験だけ。

根拠(Mac Studio の本体のスタック、develop c77d489 + この固定版):
- build --component で OASys・rdmcp・aipf_mcp_data_grdm・oidc-mock を組み、compose render --profile
  full --auth fakecas、up(121 秒、終了 0)、health --network 終了 0。
- accept --seed: 合格 22(C1〜C7、S1〜S4 の成功・拒否)、失敗 0、スキップ 2(S5)、
  実行 acc-20261115T190938Z-0d3f6d。S2・S3・S4 を一緒に描画した初めての実行で、止めたサービスは無い。
- 後で core に戻し、up と health --network は終了 0(23 サービス)。
- manifest_check、manifest toon --check、docs_check は合格。

気づいた点: develop の full で build を部品の指定なしに走らせると、Shibboleth-SP を arm64 で組もうと
して失敗する(終了 30)。build_platform linux/amd64 を足す PR #88(S5)で直る。

ボード 0.31 に記録した(過去の版の行は残す)。


Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ

Co-authored-by: Claude Opus 5.5 <[email protected]>
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 15, 2026
…1、develop の S3 を取り込み)

レビュー r1 R1-01(high): cas-overlay は空でない AUTH-Shib-Session-ID をどのクライアント
からでも SAML 認証として受け入れていた。shibboleth では grdm ネットワークの他のコンテナが
cas:8080 に、fakecas の full では host が 127.0.0.1:8090 に、偽装した機関の身元を送れた。
CAS のポートを消すだけでは足りない(r1 の指摘どおり)。

CAS 側(RDM-cas-overlay-dev2027 PR #4、head d9ad5c6661a3): cas.sp.trust.secret(環境変数
CAS_SP_TRUST_SECRET)と X-CAS-SP-Trust ヘッダを SHA-256 の上で定数時間比較し、一致した
ときだけ AUTH-* を読む。未設定なら SAML ログインは無効(fail closed)。

ガイド側:
- secrets: CAS_SP_TRUST_SECRET を生成(SHIBBOLETH_SECRET_KEYS。render が要るのは
  shibboleth のときだけ)。
- cas.json の auth_environment(新しいテンプレート項目)で shibboleth のときだけ cas に
  ${CAS_SP_TRUST_SECRET} を渡す。fakecas・core の cas には渡さない(試験で確認)。
- shibboleth_sp.json: 同じ参照を環境変数で渡し、32 文字未満なら起動しない。
- SP の httpd: ブラウザの X-CAS-SP-Trust・REMOTE_USER・AUTH-Shib-* と attribute-map の
  すべての id の AUTH-* を early で消し、RequestHeader set X-CAS-SP-Trust
  "${CAS_SP_TRUST_SECRET}" で付ける。値は httpd 自身の環境変数から起動時に読み、描画した
  ファイルには変数名しか無い(テンプレートの $${NAME} を ${NAME} のまま残す描画を追加)。
- S5 の拒否の試験に、SP 経由の偽装ヘッダ(推測したトラスト値つき)が CAS のログイン画面
  (200)・チケットなし・TGC なし・API 401 になることを足した。
- 単体試験: 秘密の生成、cas と SP だけに参照があること、fakecas の full・core の cas に
  無いこと、httpd が消すヘッダの集合、描画ファイルに値が無いこと、$${} の扱い、秘密が
  無いときの shibboleth の描画の拒否。

develop(S3 #86)の取り込み: health・secrets・manifest(oidc-mock と test-idp の両方、
TOON 20 件)・受入の試験の衝突を両方残す形で解いた。文書は develop の版の上に S5 の
変更を次の版として足し直した(SPEC-02 0.44、SPEC-04 0.17、進捗ボード 0.31、受入 README
0.9、templates/idp README 0.4、ADR-05 §5 に 6. を追加)。R1-02 は所有者の判断
「例外を承認し、CAS 側で同梱して外す」を SPEC-04 と進捗ボードに記録した
(RDM-cas-overlay-dev2027 PR #5 で head.js を外し、マージ後に別の変更で例外を外す)。

実機(Mac Studio、main に一時的に写し、cas-overlay を PR #4 の先頭に一時的に固定して
grdm-dev build。コミットした manifest の固定版は develop のまま):
- shibboleth: web のコンテナから cas:8080 への偽装(GET・POST)→ 200、チケットなし、
  TGC なし。SP 経由の偽装 → 同じ。SP のコンテナ内の秘密を付けた対照 → 302 でチケット
  (値は表示していない)。CAS のログに「Identity headers ignored: ... wrong one」。
- S5: 合格 2(成功 4.9 秒、拒否 0.7 秒で 403 と偽装の拒否)、acc-20261115T194251Z-f46ab4。
- fakecas の full: 127.0.0.1:8090 への偽装(既定 XSL の bt と テスト IdP の 2 種、GET・
  POST)→ 200、チケットなし。CAS のログに「no SP trust secret is configured」。
- fakecas の full のスイート全体: 合格 22、スキップ 2(S5)、失敗 0、
  acc-20261115T194559Z-7b8fbc。止めたサービスは無い。
- その後 main を戻し(追跡の変更なし)、core を描画して up、health --network 終了 0、
  23 サービス healthy(cas は develop の固定版 22610b7681a2)。

PR #88 は RDM-cas-overlay-dev2027 PR #4 のマージと、この枝での固定版の移動を待つ。

installer の unittest 787 件 OK(skip 14)、tools の unittest OK、docs_check・
manifest_check 合格。実行のフォルダーはホスト名・/Users・メール・token= を grep で確認。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 17, 2026
R1-01(必須): 署名鍵を要求する fixture `signer` が、本体の `_aipf_or_skip` より先に動いていた。
新しい鍵を持たない core/minimum の環境では S3 がスキップでなくエラーになった。
- 対象の判定を session scope の fixture `aipf_url` に移し、`signer` はそれに依存する。両試験は
  `aipf_url, signer` を最初の引数に取るので、pytest-playwright の `browser`(session)より先に決まる。
- 鍵が無いときの失敗は、full で aipf のポートがある環境だけに残す。
- 回帰試験 tests/test_s3_acceptance_fixtures.py: スタブでの判定(core/minimum は鍵なしでスキップ、
  full でポートなしはスキップ、full でポートありで鍵なしは鍵の名前で失敗)と、[accept] の venv では
  本物の pytest をブラウザなしで動かす試験。直す前の試験ファイルでは 10 件が落ちることを確かめた。

推奨: oidc_mock は何にも署名しないので秘密鍵を渡さない。
- secrets init / init --missing / rotate / compose render が署名鍵から OIDC_MOCK_PUBLIC_JWK を導いて
  runtime/.env に書き、テンプレートは `${OIDC_MOCK_PUBLIC_JWK}` だけを渡す。rotate の再作成で新しい
  公開鍵が届く(render を経なくてよい)。発行者は秘密の要素 d を持つ値を拒む。
- イメージの中身が変わったので image_build のタグを 2 にした。
- ADR-15 0.2、SPEC-02 の鍵の説明、SPEC-04 S3 の前提の書き方を合わせた。

R1-02(追跡): RCOSDP/RDM-aipf_mcp_data_grdm-dev2027 PR #1 でアクセスログの `t=` を消す。
固定版はそのマージの後に動かす。

確認: 単体試験 756 件 OK(skipped 14)、tools 試験 OK、docs_check・manifest_check PASSED。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 17, 2026
PR #86 レビュー r1 の後、c8a32fc(対象判定の前倒しと、oidc_mock に公開鍵だけを渡す変更)を
Mac Studio の live stack の full プロファイルに一時的に置き、oidc-mock:2 を組んで
`accept --seed --only S3` を実行した: 成功・拒否とも合格、実行 acc-20261115T172743Z-b28b73。
oidc_mock のコンテナの環境変数は OIDC_MOCK_ISSUER・OIDC_MOCK_PUBLIC_JWK・OIDC_MOCK_PORT だけで、
署名鍵は入っていないことを docker inspect で確かめた。証跡にホスト名・/Users・メール・.env の値・JWT は無い。
確認の後、main checkout を戻し core を render + up して health を確かめた。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 17, 2026
…1、develop の S3 を取り込み)

レビュー r1 R1-01(high): cas-overlay は空でない AUTH-Shib-Session-ID をどのクライアント
からでも SAML 認証として受け入れていた。shibboleth では grdm ネットワークの他のコンテナが
cas:8080 に、fakecas の full では host が 127.0.0.1:8090 に、偽装した機関の身元を送れた。
CAS のポートを消すだけでは足りない(r1 の指摘どおり)。

CAS 側(RDM-cas-overlay-dev2027 PR #4、head d9ad5c6661a3): cas.sp.trust.secret(環境変数
CAS_SP_TRUST_SECRET)と X-CAS-SP-Trust ヘッダを SHA-256 の上で定数時間比較し、一致した
ときだけ AUTH-* を読む。未設定なら SAML ログインは無効(fail closed)。

ガイド側:
- secrets: CAS_SP_TRUST_SECRET を生成(SHIBBOLETH_SECRET_KEYS。render が要るのは
  shibboleth のときだけ)。
- cas.json の auth_environment(新しいテンプレート項目)で shibboleth のときだけ cas に
  ${CAS_SP_TRUST_SECRET} を渡す。fakecas・core の cas には渡さない(試験で確認)。
- shibboleth_sp.json: 同じ参照を環境変数で渡し、32 文字未満なら起動しない。
- SP の httpd: ブラウザの X-CAS-SP-Trust・REMOTE_USER・AUTH-Shib-* と attribute-map の
  すべての id の AUTH-* を early で消し、RequestHeader set X-CAS-SP-Trust
  "${CAS_SP_TRUST_SECRET}" で付ける。値は httpd 自身の環境変数から起動時に読み、描画した
  ファイルには変数名しか無い(テンプレートの $${NAME} を ${NAME} のまま残す描画を追加)。
- S5 の拒否の試験に、SP 経由の偽装ヘッダ(推測したトラスト値つき)が CAS のログイン画面
  (200)・チケットなし・TGC なし・API 401 になることを足した。
- 単体試験: 秘密の生成、cas と SP だけに参照があること、fakecas の full・core の cas に
  無いこと、httpd が消すヘッダの集合、描画ファイルに値が無いこと、$${} の扱い、秘密が
  無いときの shibboleth の描画の拒否。

develop(S3 #86)の取り込み: health・secrets・manifest(oidc-mock と test-idp の両方、
TOON 20 件)・受入の試験の衝突を両方残す形で解いた。文書は develop の版の上に S5 の
変更を次の版として足し直した(SPEC-02 0.44、SPEC-04 0.17、進捗ボード 0.31、受入 README
0.9、templates/idp README 0.4、ADR-05 §5 に 6. を追加)。R1-02 は所有者の判断
「例外を承認し、CAS 側で同梱して外す」を SPEC-04 と進捗ボードに記録した
(RDM-cas-overlay-dev2027 PR #5 で head.js を外し、マージ後に別の変更で例外を外す)。

実機(Mac Studio、main に一時的に写し、cas-overlay を PR #4 の先頭に一時的に固定して
grdm-dev build。コミットした manifest の固定版は develop のまま):
- shibboleth: web のコンテナから cas:8080 への偽装(GET・POST)→ 200、チケットなし、
  TGC なし。SP 経由の偽装 → 同じ。SP のコンテナ内の秘密を付けた対照 → 302 でチケット
  (値は表示していない)。CAS のログに「Identity headers ignored: ... wrong one」。
- S5: 合格 2(成功 4.9 秒、拒否 0.7 秒で 403 と偽装の拒否)、acc-20261115T194251Z-f46ab4。
- fakecas の full: 127.0.0.1:8090 への偽装(既定 XSL の bt と テスト IdP の 2 種、GET・
  POST)→ 200、チケットなし。CAS のログに「no SP trust secret is configured」。
- fakecas の full のスイート全体: 合格 22、スキップ 2(S5)、失敗 0、
  acc-20261115T194559Z-7b8fbc。止めたサービスは無い。
- その後 main を戻し(追跡の変更なし)、core を描画して up、health --network 終了 0、
  23 サービス healthy(cas は develop の固定版 22610b7681a2)。

PR #88 は RDM-cas-overlay-dev2027 PR #4 のマージと、この枝での固定版の移動を待つ。

installer の unittest 787 件 OK(skip 14)、tools の unittest OK、docs_check・
manifest_check 合格。実行のフォルダーはホスト名・/Users・メール・token= を grep で確認。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 17, 2026
RDM-aipf_mcp_data_grdm-dev2027 PR #1(REV r3 で PASS、マージ 51b6f777)を取り込む。アクセスログで
/grdm/token の問い合わせ文字列を丸ごと [redacted] にし、符号化した名前や整形に失敗した記録の
stderr からも合い言葉が出ないようにした(PR #86 レビュー r1 R1-02 の後続)。94e277da から 4 コミット、
変更は server.py と試験だけ。

根拠(Mac Studio の本体のスタック、develop a2d4c62 + この固定版):
- build --component で OASys・rdmcp・aipf_mcp_data_grdm・oidc-mock を組み、compose render --profile
  full --auth fakecas、up(121 秒、終了 0)、health --network 終了 0。
- accept --seed: 合格 22(C1〜C7、S1〜S4 の成功・拒否)、失敗 0、スキップ 2(S5)、
  実行 acc-20261115T190938Z-0d3f6d。S2・S3・S4 を一緒に描画した初めての実行で、止めたサービスは無い。
- 後で core に戻し、up と health --network は終了 0(23 サービス)。
- manifest_check、manifest toon --check、docs_check は合格。

気づいた点: develop の full で build を部品の指定なしに走らせると、Shibboleth-SP を arm64 で組もうと
して失敗する(終了 30)。build_platform linux/amd64 を足す PR #88(S5)で直る。

ボード 0.31 に記録した(過去の版の行は残す)。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 17, 2026
RDM-aipf_mcp_data_grdm-dev2027 PR #1(REV r3 で PASS、マージ 51b6f777)を取り込む。アクセスログで
/grdm/token の問い合わせ文字列を丸ごと [redacted] にし、符号化した名前や整形に失敗した記録の
stderr からも合い言葉が出ないようにした(PR #86 レビュー r1 R1-02 の後続)。94e277da から 4 コミット、
変更は server.py と試験だけ。

根拠(Mac Studio の本体のスタック、develop 24103af + この固定版):
- build --component で OASys・rdmcp・aipf_mcp_data_grdm・oidc-mock を組み、compose render --profile
  full --auth fakecas、up(121 秒、終了 0)、health --network 終了 0。
- accept --seed: 合格 22(C1〜C7、S1〜S4 の成功・拒否)、失敗 0、スキップ 2(S5)、
  実行 acc-20261115T190938Z-0d3f6d。S2・S3・S4 を一緒に描画した初めての実行で、止めたサービスは無い。
- 後で core に戻し、up と health --network は終了 0(23 サービス)。
- manifest_check、manifest toon --check、docs_check は合格。

気づいた点: develop の full で build を部品の指定なしに走らせると、Shibboleth-SP を arm64 で組もうと
して失敗する(終了 30)。build_platform linux/amd64 を足す PR #88(S5)で直る。

ボード 0.31 に記録した(過去の版の行は残す)。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 17, 2026
R1-01(必須): 署名鍵を要求する fixture `signer` が、本体の `_aipf_or_skip` より先に動いていた。
新しい鍵を持たない core/minimum の環境では S3 がスキップでなくエラーになった。
- 対象の判定を session scope の fixture `aipf_url` に移し、`signer` はそれに依存する。両試験は
  `aipf_url, signer` を最初の引数に取るので、pytest-playwright の `browser`(session)より先に決まる。
- 鍵が無いときの失敗は、full で aipf のポートがある環境だけに残す。
- 回帰試験 tests/test_s3_acceptance_fixtures.py: スタブでの判定(core/minimum は鍵なしでスキップ、
  full でポートなしはスキップ、full でポートありで鍵なしは鍵の名前で失敗)と、[accept] の venv では
  本物の pytest をブラウザなしで動かす試験。直す前の試験ファイルでは 10 件が落ちることを確かめた。

推奨: oidc_mock は何にも署名しないので秘密鍵を渡さない。
- secrets init / init --missing / rotate / compose render が署名鍵から OIDC_MOCK_PUBLIC_JWK を導いて
  runtime/.env に書き、テンプレートは `${OIDC_MOCK_PUBLIC_JWK}` だけを渡す。rotate の再作成で新しい
  公開鍵が届く(render を経なくてよい)。発行者は秘密の要素 d を持つ値を拒む。
- イメージの中身が変わったので image_build のタグを 2 にした。
- ADR-15 0.2、SPEC-02 の鍵の説明、SPEC-04 S3 の前提の書き方を合わせた。

R1-02(追跡): RCOSDP/RDM-aipf_mcp_data_grdm-dev2027 PR #1 でアクセスログの `t=` を消す。
固定版はそのマージの後に動かす。

確認: 単体試験 756 件 OK(skipped 14)、tools 試験 OK、docs_check・manifest_check PASSED。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 17, 2026
PR #86 レビュー r1 の後、df3d768(対象判定の前倒しと、oidc_mock に公開鍵だけを渡す変更)を
Mac Studio の live stack の full プロファイルに一時的に置き、oidc-mock:2 を組んで
`accept --seed --only S3` を実行した: 成功・拒否とも合格、実行 acc-20261115T172743Z-b28b73。
oidc_mock のコンテナの環境変数は OIDC_MOCK_ISSUER・OIDC_MOCK_PUBLIC_JWK・OIDC_MOCK_PORT だけで、
署名鍵は入っていないことを docker inspect で確かめた。証跡にホスト名・/Users・メール・.env の値・JWT は無い。
確認の後、main checkout を戻し core を render + up して health を確かめた。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
Yusuke-KOMIYAMA added a commit that referenced this pull request Nov 17, 2026
…1、develop の S3 を取り込み)

レビュー r1 R1-01(high): cas-overlay は空でない AUTH-Shib-Session-ID をどのクライアント
からでも SAML 認証として受け入れていた。shibboleth では grdm ネットワークの他のコンテナが
cas:8080 に、fakecas の full では host が 127.0.0.1:8090 に、偽装した機関の身元を送れた。
CAS のポートを消すだけでは足りない(r1 の指摘どおり)。

CAS 側(RDM-cas-overlay-dev2027 PR #4、head d9ad5c6661a3): cas.sp.trust.secret(環境変数
CAS_SP_TRUST_SECRET)と X-CAS-SP-Trust ヘッダを SHA-256 の上で定数時間比較し、一致した
ときだけ AUTH-* を読む。未設定なら SAML ログインは無効(fail closed)。

ガイド側:
- secrets: CAS_SP_TRUST_SECRET を生成(SHIBBOLETH_SECRET_KEYS。render が要るのは
  shibboleth のときだけ)。
- cas.json の auth_environment(新しいテンプレート項目)で shibboleth のときだけ cas に
  ${CAS_SP_TRUST_SECRET} を渡す。fakecas・core の cas には渡さない(試験で確認)。
- shibboleth_sp.json: 同じ参照を環境変数で渡し、32 文字未満なら起動しない。
- SP の httpd: ブラウザの X-CAS-SP-Trust・REMOTE_USER・AUTH-Shib-* と attribute-map の
  すべての id の AUTH-* を early で消し、RequestHeader set X-CAS-SP-Trust
  "${CAS_SP_TRUST_SECRET}" で付ける。値は httpd 自身の環境変数から起動時に読み、描画した
  ファイルには変数名しか無い(テンプレートの $${NAME} を ${NAME} のまま残す描画を追加)。
- S5 の拒否の試験に、SP 経由の偽装ヘッダ(推測したトラスト値つき)が CAS のログイン画面
  (200)・チケットなし・TGC なし・API 401 になることを足した。
- 単体試験: 秘密の生成、cas と SP だけに参照があること、fakecas の full・core の cas に
  無いこと、httpd が消すヘッダの集合、描画ファイルに値が無いこと、$${} の扱い、秘密が
  無いときの shibboleth の描画の拒否。

develop(S3 #86)の取り込み: health・secrets・manifest(oidc-mock と test-idp の両方、
TOON 20 件)・受入の試験の衝突を両方残す形で解いた。文書は develop の版の上に S5 の
変更を次の版として足し直した(SPEC-02 0.44、SPEC-04 0.17、進捗ボード 0.31、受入 README
0.9、templates/idp README 0.4、ADR-05 §5 に 6. を追加)。R1-02 は所有者の判断
「例外を承認し、CAS 側で同梱して外す」を SPEC-04 と進捗ボードに記録した
(RDM-cas-overlay-dev2027 PR #5 で head.js を外し、マージ後に別の変更で例外を外す)。

実機(Mac Studio、main に一時的に写し、cas-overlay を PR #4 の先頭に一時的に固定して
grdm-dev build。コミットした manifest の固定版は develop のまま):
- shibboleth: web のコンテナから cas:8080 への偽装(GET・POST)→ 200、チケットなし、
  TGC なし。SP 経由の偽装 → 同じ。SP のコンテナ内の秘密を付けた対照 → 302 でチケット
  (値は表示していない)。CAS のログに「Identity headers ignored: ... wrong one」。
- S5: 合格 2(成功 4.9 秒、拒否 0.7 秒で 403 と偽装の拒否)、acc-20261115T194251Z-f46ab4。
- fakecas の full: 127.0.0.1:8090 への偽装(既定 XSL の bt と テスト IdP の 2 種、GET・
  POST)→ 200、チケットなし。CAS のログに「no SP trust secret is configured」。
- fakecas の full のスイート全体: 合格 22、スキップ 2(S5)、失敗 0、
  acc-20261115T194559Z-7b8fbc。止めたサービスは無い。
- その後 main を戻し(追跡の変更なし)、core を描画して up、health --network 終了 0、
  23 サービス healthy(cas は develop の固定版 22610b7681a2)。

PR #88 は RDM-cas-overlay-dev2027 PR #4 のマージと、この枝での固定版の移動を待つ。

installer の unittest 787 件 OK(skip 14)、tools の unittest OK、docs_check・
manifest_check 合格。実行のフォルダーはホスト名・/Users・メール・token= を grep で確認。

Co-Authored-By: Claude Opus 5.5 <[email protected]>
Claude-Session: https://claude.ai/code/session_01BW1YQk71jLXY2FaSzMnnYJ
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant