release: v1.1

.aider

@@ -1,36 +1,36 @@
 /drop
 /add       README.md
-/add       handlers/model.go
-/add       handlers/profiles.go
-/add       handlers/prompt.go
-/add       handlers/results.go
-/add       handlers/suites.go
+/add       handlers\model.go
+/add       handlers\profiles.go
+/add       handlers\prompt.go
+/add       handlers\results.go
+/add       handlers\suites.go
 /add       main.go
-/add       middleware/import_error.go
-/add       middleware/socket.go
-/add       middleware/state.go
-/add       templates/bulk_delete_prompts.html
-/add       templates/confirm_refresh_results.html
-/add       templates/delete_model.html
-/add       templates/delete_profile.html
-/add       templates/delete_prompt.html
-/add       templates/delete_prompt_suite.html
-/add       templates/edit_model.html
-/add       templates/edit_profile.html
-/add       templates/edit_prompt.html
-/add       templates/edit_prompt_suite.html
-/add       templates/import_error.html
-/add       templates/import_prompts.html
-/add       templates/import_results.html
-/add       templates/move_prompt.html
-/add       templates/nav.html
-/add       templates/new_prompt_suite.html
-/add       templates/profiles.html
-/add       templates/prompt_list.html
-/add       templates/reset_profiles.html
-/add       templates/reset_prompts.html
-/add       templates/reset_results.html
-/add       templates/results.html
-/add       templates/style.css
+/add       middleware\import_error.go
+/add       middleware\socket.go
+/add       middleware\state.go
+/add       templates\bulk_delete_prompts.html
+/add       templates\confirm_refresh_results.html
+/add       templates\delete_model.html
+/add       templates\delete_profile.html
+/add       templates\delete_prompt.html
+/add       templates\delete_prompt_suite.html
+/add       templates\edit_model.html
+/add       templates\edit_profile.html
+/add       templates\edit_prompt.html
+/add       templates\edit_prompt_suite.html
+/add       templates\import_error.html
+/add       templates\import_prompts.html
+/add       templates\import_results.html
+/add       templates\move_prompt.html
+/add       templates\nav.html
+/add       templates\new_prompt_suite.html
+/add       templates\profiles.html
+/add       templates\prompt_list.html
+/add       templates\reset_profiles.html
+/add       templates\reset_prompts.html
+/add       templates\reset_results.html
+/add       templates\results.html
+/add       templates\style.css
 /read-only PRELIMINARY_DESIGN.md
 /read-only SYSTEM_PROMPT.md

.aider.model.metadata.json

@@ -1,14 +1,15 @@
 {
-  "mistral/mistral-large-latest": {
-    "max_tokens": -1,
+  "deepseek/deepseek-chat": {
+    "max_tokens": 8192,
     "repetition_penalty": 1.02,
     "top_k": 0,
     "top_p": 1,
     "min_p": 0.02,
     "top_a": 0.2,
-    "temperature": 1
+    "temperature": 0
   },
-  "mistral/pixtral-large-latest": {
+  "codestral/codestral-latest": {
+    "num_ctx": 262144,
     "max_tokens": -1,
     "repetition_penalty": 1.02,
     "top_k": 0,
@@ -17,7 +18,7 @@
     "top_a": 0.2,
     "temperature": 1
   },
-  "mistral/mistral-small-latest": {
+  "gemini/gemini-2.0-flash-exp": {
     "max_tokens": -1,
     "repetition_penalty": 1.02,
     "top_k": 0,
@@ -26,8 +27,7 @@
     "top_a": 0.2,
     "temperature": 1
   },
-  "codestral/codestral-latest": {
-    "num_ctx": 262144,
+  "gemini/gemini-exp-1206": {
     "max_tokens": -1,
     "repetition_penalty": 1.02,
     "top_k": 0,
@@ -36,7 +36,7 @@
     "top_a": 0.2,
     "temperature": 1
   },
-  "gemini/gemini-exp-1206": {
+  "mistral/mistral-large-latest": {
     "max_tokens": -1,
     "repetition_penalty": 1.02,
     "top_k": 0,
@@ -45,7 +45,7 @@
     "top_a": 0.2,
     "temperature": 1
   },
-  "gemini/gemini-2.0-flash-exp": {
+  "mistral/pixtral-large-latest": {
     "max_tokens": -1,
     "repetition_penalty": 1.02,
     "top_k": 0,
@@ -54,7 +54,7 @@
     "top_a": 0.2,
     "temperature": 1
   },
-  "gemini/gemini-2.0-flash-thinking-exp-1219": {
+  "mistral/mistral-small-latest": {
     "max_tokens": -1,
     "repetition_penalty": 1.02,
     "top_k": 0,
@@ -63,8 +63,8 @@
     "top_a": 0.2,
     "temperature": 1
   },
-  "deepseek/deepseek-chat": {
-    "max_tokens": 8192,
+  "gemini/gemini-2.0-flash-thinking-exp-1219": {
+    "max_tokens": -1,
     "repetition_penalty": 1.02,
     "top_k": 0,
     "top_p": 1,

.gitignore

@@ -1,8 +1,10 @@
 .aider*
 .env
+release/*
 tools/tts/.python-version
 tools/tts/audio.wav
 tools/tts/kokoro-v0_19.onnx
 tools/tts/uv.lock
 tools/tts/voices.json
 tools/tts/hello.py
+release/llm-tournament-v1.0-win.exe

data/results-default.json

@@ -1 +1 @@
-{"codestral-2501":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"command-r-7b":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"command-r-plus":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"deepseek-3-chat":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemini-2.0-flash-exp":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemini-exp-1206":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemma-2-27b-it":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemma-2-2b-it":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemma-2-9b-it":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gpt-4o-mini":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"internlm-3-8b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"learnlm-1.5-pro-experimental":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-3.1-405b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-3.1-nemotron-70b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-3.1-supernova-lite":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-3.3-70b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-doctor-3.2-3b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"minicpm-o-2.6":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"minimax-text-01":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"ministral-8b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"mistral-large-latest":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"nemotron-mini-4b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"phi-4":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"qwen-2.5-72b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"qwen-2.5-coder-14b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"qwen-2.5-coder-32b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"smollm-2-1.7b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"sonus-1-air":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"sonus-1-mini":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"sonus-1-pro":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"virtuoso-small":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]}}
+{"codestral-2501":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"command-r-7b":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"command-r-plus":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"deepseek-3-chat":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemini-2.0-flash-exp":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemini-exp-1206":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemma-2-27b-it":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemma-2-2b-it":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gemma-2-9b-it":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"gpt-4o-mini":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"internlm-3-8b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"learnlm-1.5-pro-experimental":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-3.1-405b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-3.1-nemotron-70b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-3.1-supernova-lite":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-3.3-70b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"llama-doctor-3.2-3b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"minicpm-o-2.6":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"minimax-text-01":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"ministral-8b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"mistral-large-latest":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"nemotron-mini-4b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"phi-3.5-mini-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"qwen-2.5-72b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"qwen-2.5-coder-14b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"qwen-2.5-coder-32b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"smollm-2-1.7b-instruct":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"sonus-1-air":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"sonus-1-mini":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"sonus-1-pro":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"unsloth-phi-4":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]},"virtuoso-small":{"passes":[false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false,false]}}

makefile

@@ -4,9 +4,9 @@ all:
 clean:
 	rm ./release/*
 build:
-	go build -o ./release/llm-tournament-v1.0-linux .
+	go build -o ./release/llm-tournament .
 buildwindows:
-	go build -o ./release/llm-tournament-v1.0-win.exe .
+	go build -o ./release/llm-tournament.exe .
 aiderinstalllinux:
 	curl -LsSf https://aider.chat/install.sh | sh
 aiderinstallwindows: