[評価] - 172b checkpoints evaluation

[Taishi-N324]

Overview

swallow-evaluation の設定での評価を行う

Details

事前学習モデルIssue: https://github.com/llm-jp/experiments/issues/{id}

数パラグラフ以内で実験に関する詳細を説明してください。
関連するリンクがあれば適宜してください。

Resources

• 計算機
  • クラスタ: FIXME Sakura (Ishikari)
  • ノード種別: FIXME gpu-small (H100x8)
  • ノード台数: FIXME 1
• コード
  • リポジトリ: https://github.com/llm-jp/swallow-evaluation-vllm
  • コミット: c1b2a1393d004e2ffa795941d4e4e9c4a10520a4
• 評価データ:
• 出力データ:
  • 保存先: {cluster}:/data/experiments/{issue_id}/evaluations FIXME
• W&B ログ:
  • https://wandb.ai/{team}/{project} FIXME
• 開始日: YYYY-MM-DD
• 終了予定日: YYYY-MM-DD