add result of Swallow-70b-instruct-hf

README.md

@@ -150,6 +150,7 @@ Model outputs:
 
 | Model                                                    | Win Rate | Loss Rate | Win Rate Adjusted |
 |----------------------------------------------------------|----------|-----------|-------------------|
+| tokyotech-llm--Swallow-70b-instruct-hf                   | 46.2     | 42.5      | 51.9              |
 | llm-jp--llm-jp-13b-instruct-lora-jaster-dolly-oasst-v1.0 | 28.7     | 62.5      | 33.1              |
 | rinna--japanese-gpt-neox-3.6b-instruction-ppo            | 13.8     | 13.8      | 18.8              |
 | rinna--japanese-gpt-neox-3.6b-instruction-sft-v2         | 8.8      | 82.5      | 13.1              |

configs/tokyotech-llm--Swallow-70b-instruct-hf.json

@@ -0,0 +1,13 @@
+{
+    "model_id": "tokyotech-llm--Swallow-70b-instruct-hf",
+    "model_name_or_path": "tokyotech-llm/Swallow-70b-instruct-hf",
+    "lora_model_name_or_path": null,
+    "tokenizer_name_or_path": null,
+    "prompt_template": "以下に、あるタスクを説明する指示があります。リクエストを適切に完了するための回答を記述してください。\n\n### 指示:\n{instruction}\n\n### 応答:\n",
+    "generation_config": {
+      "do_sample": true,
+      "max_length": 2048,
+      "temperature": 0.99,
+      "top_p": 0.95
+    }
+  }

data/jp_bench/model_answer/tokyotech-llm--Swallow-70b-instruct-hf/config.json

@@ -0,0 +1,13 @@
+{
+  "model_id": "tokyotech-llm--Swallow-70b-instruct-hf",
+  "model_name_or_path": "tokyotech-llm/Swallow-70b-instruct-hf",
+  "lora_model_name_or_path": null,
+  "tokenizer_name_or_path": null,
+  "prompt_template": "以下に、あるタスクを説明する指示があります。リクエストを適切に完了するための回答を記述してください。\n\n### 指示:\n{instruction}\n\n### 応答:\n",
+  "generation_config": {
+    "do_sample": true,
+    "max_length": 2048,
+    "temperature": 0.99,
+    "top_p": 0.95
+  }
+}