実験のサマリー化

完了した実験の主要メトリクスをキャプチャする summary.md ファイルを生成します。R の summary() を実験結果に対して実行するようなものです。

実行する作業

実験結果の軽量サマリーを作成します:

1. experiment_summary.yaml から実行ステータスをパース
2. SLURM stdout から最終トレーニング損失を抽出
3. inspect-ai の .eval ファイルから精度を抽出
4. 実験ディレクトリに summary.md を生成
5. logs/summarize-experiment.log にプロセスをログ記録

前提条件

• experiment_summary.yaml が存在する
• 少なくともいくつかの実行が完了している(部分的な結果でも可)
• run-experiment が実行されている(またはマニュアル SLURM ジョブが実行されている)
• Conda 環境が有効化されている - parse_eval_log.py スクリプトは inspect-ai が必要です。抽出コマンド実行前に claude.local.md の conda 環境を有効化してください。

ワークフロー

1. 実験を検索

実験ディレクトリを検索:

• 実

...