Document Bonsai 2 A/B results

2026-09-19 02:00:40 +02:00
parent de9b17f054
commit 9978e5b7e6
21 changed files with 3141 additions and 6 deletions
@@ -0,0 +1,34 @@
+{
+  "model": "qwen-fast",
+  "prompt": "Was ist links und was ist rechts im Bild? Nenne Form und Farbe beider Objekte.",
+  "expected": "Links ein roter Kreis, rechts ein blaues Quadrat.",
+  "started": 1789775622.0384746,
+  "response": {
+    "wall_seconds": 2.664,
+    "usage": {
+      "completion_tokens": 84,
+      "prompt_tokens": 162,
+      "total_tokens": 246,
+      "prompt_tokens_details": {
+        "cached_tokens": 0
+      }
+    },
+    "timings": {
+      "cache_n": 0,
+      "prompt_n": 162,
+      "prompt_ms": 1725.751,
+      "prompt_per_token_ms": 10.652783950617284,
+      "prompt_per_second": 93.87217507044758,
+      "predicted_n": 84,
+      "predicted_ms": 926.95,
+      "predicted_per_token_ms": 11.168072289156626,
+      "predicted_per_second": 89.54096768973514,
+      "draft_n": 64,
+      "draft_n_accepted": 51
+    },
+    "finish_reason": "stop",
+    "content": "Im Bild sind zwei geometrische Objekte zu sehen:\n\n- **Links**: Ein **roter Kreis**.\n  - Form: Kreis\n  - Farbe: Rot\n\n- **Rechts**: Ein **blaues Quadrat**.\n  - Form: Quadrat\n  - Farbe: Blau\n\nZusammenfassend:\n> Links ist ein roter Kreis, rechts ist ein blaues Quadrat.",
+    "reasoning_content": "",
+    "tool_calls": []
+  }
+}