# OpenAI：兩個 API 設定讓 GPT-5.6 Sol 的 ARC-AGI-3 分數翻近三倍，輸出 token 少六分之五

> 📖 本站完整內容索引（documentation index）：[llms.txt](/llms.txt)

> 原作者：OpenAI (@OpenAI) · 策展與摘要：EasyVibeCoding · 平台：X (Twitter) · 熱度：🔥🔥🔥🔥🔥 · 日期：2026-07-30

> 原始來源：https://x.com/OpenAI/status/2082616636989952217

## 中文摘要

OpenAI：兩個 API 設定讓 GPT-5.6 Sol 的 ARC-AGI-3 分數翻近三倍，輸出 token 少六分之五。

OpenAI 針對 GPT-5.6 Sol 在 2D 拼圖遊戲基準 ARC-AGI-3 表現不佳的原因進行調查，發現模型的大部分困惑並非模型本身固有，而與 harness 設定有關。官方指出，標準 harness 會在每個動作後捨棄私有推理，並在上下文滿時捨棄早期動作，導致模型必須不斷重新開始。

**API 設定影響**
- 使用 Responses API 取代舊版 Chat Completions API。
- 啟用保留推理（retained reasoning）與內容壓縮（compaction）兩項設定。
- 在公開測試集上，GPT-5.6 Sol（max reasoning）的分數提升 188%（約 2.9 倍，從 13.3% 提升至 38.3%），同時輸出 token 消耗量減少為六分之一。分數採 RHAE（相對人類動作效率），官方估算人類測試者平均約 48%。

![](https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/0c383d2af893c8aa.png)
> GPT-5.6 Sol 在開啟 retained reasoning 與 compaction 設定的 harness 下，於 ARC-AGI-3 Public Set 取得 38.3% 的最高分數，且輸出 token 減少至約六分之一。

**效能差異**
- 依據效能評估顯示，AI 模型的表現深受 API 設定與 harness 設計等隱蔽因素影響（GPT-5.6 系列的定位見本站先前策展〈[OpenAI 發表 GPT-5.6 系列模型](/curated/2230)〉）。
- 兩支對照影片顯示，Responses API Harness 能保留 reasoning 並壓縮舊訊息。

<video src="https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/1785380335604-36hilzxn.mp4" poster="https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/ff56bb4176dfc39b.jpg" controls playsinline preload="metadata" style="max-width:100%;height:auto;display:block;margin:1rem 0"></video>
> GPT-5.6 Sol (max) 在 Official ARC Harness 與 Responses API Harness 介面中的效能與 token 消耗對比測試過程。

<video src="https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/1785380379015-dwssq48v.mp4" poster="https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/a31bd8b22cd1ebf3.jpg" controls playsinline preload="metadata" style="max-width:100%;height:auto;display:block;margin:1rem 0"></video>
> GPT-5.6 Sol (max) 在 Official ARC Harness 與 Responses API Harness 兩種架構下的執行過程比較，展示 output token 增長、action 執行與 level 完成狀態。

![](https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/c6c086f17699706c.jpg)
> GPT-5.6 Sol 在 ARC-AGI-3 公開集中，啟用 retained reasoning 與 compaction 的 harness 後，以顯著更少的 output tokens 達到 38.3% 的 Score，大幅超越 Official harness 的表現。

**官方建議**
- API 開發者若想追求最佳效能，建議採用與 OpenAI 內部產品相同的設定：
  - 使用 Responses API
  - 保留推理
  - 使用壓縮
- 有興趣挑戰前沿模型的開發者，可至 [ARC Prize 官方網站](http://arcprize.org/tasks) 試玩公開遊戲。

## 媒體內容

**GPT-5.6 Sol (max) 在 Official ARC Harness 與 Responses API Harness 介面中的效能與 token 消耗對比測試過程。**

**影片中的 Prompt 與操作**

操作步驟：

1. （00:04）點擊 left
2. （00:05）點擊 down
3. （00:06）點擊 up 與 down
4. （00:07）點擊 left、up、down
5. （00:08）點擊 reset、up、down、left、left、right、left
6. （00:09）點擊 right、left、up、down
7. （00:10）點擊 interact、right、left、up、down
8. （00:11）點擊 reset、interact、reset、up、right、reset、down、down、reset、up、reset、down
9. （00:12）點擊 right、down、down、left、reset、interact、right、down
10. （00:13）點擊 interact、left、down、down、right、reset、interact、right、down
11. （00:16）點擊 reset、interact、right、left、down
12. （00:19）點擊 left、reset、interact、right、left、up、down
13. （00:26）點擊 interact、left、down、down、right、left、reset、interact、down
14. （00:29）點擊 interact、click (35, 4)、click (27, 43)、right、down、down
15. （00:31）點擊 click (53, 4)、reset、right、interact、click (53, 4)、interact、click (27, 43)、click (35, 4)、click (46, 4)
16. （00:34）點擊 interact、left、left、up、down、right、right、up、up
17. （00:35）點擊 interact、click (35, 4)、interact、left、up、interact、down
18. （00:36）點擊 click (27, 34)、click (29, 4)、click (35, 4)、left、left、up、up、click (29, 4)
19. （00:37）點擊 click (27, 34)、click (29, 4)、interact、right、click (35, 4)、left、left、up、up、click (29, 4)
20. （00:38）點擊 click (36, 35)、click (46, 4)、click (63, 0)、interact、right、down、down、left、left
21. （00:42）點擊 left、click (36, 35)、click (46, 4)、click (63, 0)、interact、right、down、down、left
22. （00:43）點擊 click (47, 4)、down、right、interact、click (53, 4)、reset
23. （00:44）點擊 left、down、right、down、right、up、up
24. （00:45）點擊 click (35, 4)、click (29, 4)、interact、left、up、interact、click (47, 4)、down
25. （00:46）點擊 click (32, 21)、click (35, 4)、interact、left、down、left、click (29, 4)、click (47, 4)
26. （00:48）點擊 interact、click (35, 4)、up、right、interact、click (35, 4)、right
27. （00:49）點擊 interact、click (59, 4)、interact、click (59, 4)、left、interact、click (35, 4)、interact、down
28. （00:50）點擊 click (14, 38)、click (41, 4)、click (59, 4)、interact、left、left、interact、click (29, 4)、interact、click (35, 4)、interact、down
29. （00:51）點擊 click (29, 4)、interact、click (35, 4)、right、right、click (14, 38)、click (41, 4)、click (59, 4)、interact、left、left、interact、click (29, 4)、interact、down
30. （00:52）點擊 left、click (36, 35)、click (46, 4)、click (63, 0)、interact、down、right、down、left、down、up、click (14, 38)
31. （00:53）點擊 interact、click (35, 4)、left、left、down、right、right
32. （00:54）點擊 interact、click (35, 4)、left、click (35, 4)、left、down、right、down、right
33. （00:55）點擊 down、interact、click (35, 4)、left、left、up、interact、click (29, 4)、right
34. （00:56）點擊 down、down、interact、click (35, 4)、left、left、up、interact、click (29, 4)、right
35. （00:57）點擊 interact、click (29, 4)、interact、click (35, 4)、right、right、down、down、right、down、interact、left、left
36. （00:58）點擊 interact、click (59, 4)、up、left、interact、click (29, 4)、right
37. （00:59）點擊 click (14, 38)、click (41, 4)、click (59, 4)、interact、left、left、interact、click (29, 4)、interact、down
38. （01:00）點擊 click (14, 38)、click (41, 4)、click (59, 4)、interact、left、 left、interact、click (29, 4)、interact、down
39. （01:01）點擊 interact、click (47, 4)、up、click (14, 38)、click (41, 4)、click (59, 4)、interact、left、left
40. （01:02）點擊 left、click (47, 4)、interact、click (59, 4)、up、click (14, 38)、click (41, 4)
41. （01:03）點擊 down、right、right、interact、click (47, 4)、down、down、left、down、right
42. （01:04）點擊 interact、click (35, 4)、down、down、down、right、right、down、interact、click (47, 4)
43. （01:05）點擊 interact、click (35, 4)、interact、left、click (46, 4)、click (63, 0)、interact、click (47, 4)
44. （01:06）點擊 click (46, 4)、interact、reset、interact、left、click (36, 35)、click (46, 4)、click (63, 0)、interact、right、interact
45. （01:07）點擊 click (46, 4)、interact、reset、interact、left、click (36, 35)、click (46, 4)、click (63, 0)、interact、left、click (31, 21)、down、up、up、click (35, 4)、down、right、right
46. （01:08）點擊 left、click (59, 4)、click (31, 21)、left、interact、click (35, 4)、left、down、down
47. （01:09）點擊 right、click (46, 4)、interact、reset、interact、left、click (36, 35)、click (46, 4)、click (63, 0)
48. （01:10）點擊 interact、right、click (46, 4)、reset、interact、left、click (36, 35)、click (46, 4)、click (63, 0)
49. （01:11）點擊 reset、interact、right、click (46, 4)、reset、interact、left、click (36, 35)、click (46, 4)
50. （01:12）點擊 interact、right、click (46, 4)、reset、interact、left、click (36, 35)、click (46, 4)
51. （01:13）點擊 reset、interact、right、click (46, 4)、reset、interact、left、click (36, 35)、click (46, 4)
52. （01:14）點擊 reset、interact、right、click (46, 4)、reset、interact、left、click (36, 35)、click (46, 4)
53. （01:15）點擊 reset、interact、right、click (46, 4)、reset、interact、left、click (36, 35)、click (46, 4)
54. （01:16）點擊 right、click (31, 21)、click (53, 4)、right、click (19, 26)、click (17, 24)、click (22, 25)、click (24, 24)
55. （01:17）點擊 right、click (31, 21)、click (53, 4)、right、click (19, 26)、click (17, 24)、click (22, 25)、click (24, 24)
56. （01:18）點擊 right、click (31, 21)、click (53, 4)、right、click (19, 26)、click (17, 24)、click (22, 25)、click (24, 24)
57. （01:19）點擊 left、click (46, 4)、interact、reset、interact、right、click (46, 4)、reset、interact
58. （01:20）點擊 left、click (46, 4)、interact、reset、interact、right、click (46, 4)、reset、interact
59. （01:21）點擊 left、click (46, 4)、interact、reset、interact、right、click (46, 4)、reset、interact
60. （01:22）點擊 left、interact、right、right、down、down、down、down、interact、click (59, 4)、reset、right
61. （01:23）點擊 interact、right、right、down、down、down、down、interact、click (59, 4)、reset、right
62. （01:24）點擊 left、interact、left、up、up、interact、click (31, 21)、click (53, 4)、left、up、right、interact
63. （01:25）點擊 left、interact、left、up、up、interact、click (31, 21)、click (53, 4)、left、up、right、interact
64. （01:26）點擊 left、interact、left、up、up、interact、click (31, 21)、click (53, 4)、left、up、right、interact
65. （01:27）點擊 left、interact、left、up、up、interact、click (31, 21)、click (53, 4)、left、up、right、interact
66. （01:28）點擊 left、interact、left、up、up、interact、click (31, 21)、click (53, 4)、left、up、right、interact
67. （01:29）點擊 left、interact、left、up、up、interact、click (31, 21)、click (53, 4)、left、up、right、interact
68. （01:30）點擊 left、interact、left、up、up、interact、click (31, 21)、click (53, 4)、left、up、right、interact
69. （01:31）點擊 left、interact、left、up、up、interact、click (31, 21)、click (53, 4)、left、up、right、interact
70. （01:32）點擊 left、interact、left、up、up、interact、click (31, 21)、click (53, 4)、left、up、right、interact
71. （01:33）點擊 right、left、click (46, 4)、interact、reset、interact、right、click (46, 4)
72. （01:34）點擊 right、left、click (46, 4)、interact、reset、interact、right、click (46, 4)
73. （01:35）點擊 right、left、click (46, 4)、interact、reset、interact、right、click (46, 4)
74. （01:36）點擊 right、left、click (46, 4)、interact、reset、interact、right、click (46, 4)
75. （01:37）點擊 right、left、click (46, 4)、interact、reset、interact、right、click (46, 4)
76. （01:38）點擊 right、left、click (46, 4)、interact、reset、interact、right、click (46, 4)
77. （01:39）點擊 right、left、click (46, 4)、interact、reset、interact、right、click (46, 4)
78. （01:40）點擊 interact、click (53, 4)、left、up、interact、click (31, 21)、click (53, 4)、left、up
79. （01:41）點擊 interact、click (47, 4)、left、interact、click (59, 4)、up、left、interact
80. （01:42）點擊 left、click (47, 4)、interact、click (59, 4)、up、left、interact
81. （01:43）點擊 down、right、right、interact、click (47, 4)、down、down、left、down
82. （01:44）點擊 interact、click (35, 4)、down、down、down、right、right、down、interact、click (47, 4)
83. （01:45）點擊 interact、click (35, 4)、interact、left、click (46, 4)、click (63, 0)、interact、click (47, 4)
84. （01:46）點擊 click (46, 4)、interact、reset、interact、left、click (36, 35)、click (46, 4)、click (63, 0)、interact
85. （01:47）點擊 click (46, 4)、interact、reset、interact、left、click (36, 35)、click (46, 4)、click (63, 0)、interact、left、click (31, 21)、down、up、up、click (35, 4)
86. （01:48）點擊 left、click (59, 4)、click (31, 21)、left、interact、click (35, 4)、left、down、down
87. （01:49）點擊 right、left、click (23, 4)、interact、click (47, 4)、up、interact
88. （01:50）點擊 interact、click (23, 4)、up、interact、click (47, 4)、down、down
89. 點擊 interact、click (14, 38)、click (41, 4)、right、interact、click (14, 38)、click (41, 4)、right、interact
90. 點擊 click (31, 22)、click (29, 4)、interact、click (14, 38)、click (41, 4)、right、interact、click (53, 4)
91. 點擊 interact、click (31, 22)、click (29, 4)、interact、click (14, 38)、click (41, 4)、right、interact、click (53, 4)
92. 點擊 interact、click (31, 22)、click (29, 4)、interact、click (14, 38)、click (41, 4)、right、interact、click (53, 4)
93. 點擊 interact、click (31, 22)、click (29, 4)、interact、click (14, 38)、click (41, 4)、right、interact、click (53, 4)
94. 點擊 interact、click (31, 22)、click (29, 4)、interact、click (14, 38)、click (41, 4)、right、interact、click (53, 4)
95. 點擊 interact、click (31, 22)、click (29, 4)、interact、click (14, 38)、click (41, 4)、right、interact、click (53, 4)
96. 點擊 interact、click (31, 22)、click (29, 4)、interact、click (14, 38)、click (41, 4)、right、interact、click (53, 4)
97. 點擊 interact、click (59, 4)、up、right、interact、click (29, 4)、right
98. 點擊 interact、click (59, 4)、up、right、interact、click (29, 4)、right
99. 點擊 interact、right、right、down、down、down、down、interact、click (59, 4)、reset、right
100. 點擊 interact、click (47, 4)、left、interact
101. 點擊 interact、click (35, 4)、left、interact、click (47, 4)、left
102. 點擊 click (31, 21)、click (53, 4)、left、up、up、interact、click (35, 4)、right、right、interact
103. 點擊 click (31, 21)、click (53, 4)、left、up、up、interact、click (35, 4)、right、right、interact
104. 點擊 left、left、click (46, 4)、interact、reset、interact、right、click (46, 4)、reset、interact
105. 點擊 left、left、click (46, 4)、interact、reset、interact、right、click (46, 4)、reset、interact
106. 點擊 left、left、click (46, 4)、interact、reset、interact、right、click (46, 4)、reset、interact
107. 點擊 interact、click (31, 21)、click (53, 4)、left、up、right、interact
108. 點擊 interact、click (31, 21)、click (53, 4)、reset、interact、left、click (36, 35)、click (46, 4)、click (63, 0)
109. 點擊 interact、click (53, 4)、left、down、down、down、down、right、interact、reset、click (31, 21)
110. 點擊 right、left、click (46, 4)、reset、interact、right、click (46, 4)
111. 點擊 interact、click (23, 4)、up、interact、click (47, 4)、down、right
112. 點擊 interact、click (23, 4)、up、interact、click (47, 4)、down、right
113. 點擊 interact、click (14, 38)、click (41, 4)、down、interact、click (14, 38)、click (41, 4)、down、left
114. 點擊 click (31, 22)、click (29, 4)、right、interact、click (14, 38)、click (41, 4)、right、interact
115. 點擊 click (31, 22)、click (29, 4)、right、interact、click (14, 38)、click (41, 4)、right、interact
116. 點擊 click (31, 22)、click (29, 4)、right、interact、click (14, 38)、click (41, 4)、right、interact
117. 點擊 right、right、right、left、click (46, 4)、reset
118. 點擊 right、right、right、left、click (46, 4)、reset
119. 點擊 click (46, 4)、interact、reset、right、right、left、left、interact
120. 點擊 interact、up、click (46, 4)、interact、right、interact、reset
121. 點擊 interact、left、reset、click (46, 4)、interact、right
122. 點擊 interact、reset、right、interact、click (46, 4)、left
123. 點擊 interact、reset、right、interact、click (46, 4)、left
124. 點擊 down、interact、click (46, 4)、interact、reset、left、up
125. 點擊 interact、click (46, 4)、right、interact、reset、left、up
126. 點擊 click (46, 4)、action cutoff
127. OGFRAME: 00:37

**GPT-5.6 Sol (max) 在 Official ARC Harness 與 Responses API Harness 兩種架構下的執行過程比較，展示 output token 增長、action 執行與 level 完成狀態。**

**影片中的 Prompt 與操作**

操作步驟：

1. （00:13）Responses API Harness 畫面出現「RESET LEVEL ACTION」按鈕
2. （00:29）畫面顯示「LEVEL COMPLETE」並推進至 level 2/6
3. （00:45）畫面顯示「LEVEL COMPLETE」並推進至 level 3/6
4. （02:03）Responses API Harness 畫面出現「RESET LEVEL ACTION」按鈕
5. （03:59）畫面顯示「LEVEL COMPLETE」並推進至 level 4/6
6. Responses API Harness 畫面出現「RESET LEVEL ACTION」按鈕
7. 畫面出現「CATCH-UP」按鈕
8. OGFRAME: 01:29

**GPT-5.6 Sol 在開啟 retained reasoning 與 compaction 設定的 harness 下，於 ARC-AGI-3 Public Set 取得 38.3% 的最高分數，且輸出 token 減少至約六分之一。**

**數據表**

|   | 起始 | 最佳 | 結束 |
| --- | --- | --- | --- |
| Harness with retained reasoning and compaction | 3.8% (0.08M tokens) | 38.3% (0.48M tokens) | 38.3% (0.48M tokens) |
| Official harness | 1.0% | 13.3% (2.90M tokens) | 13.3% (2.90M tokens) |

**GPT-5.6 Sol 在 ARC-AGI-3 公開集中，啟用 retained reasoning 與 compaction 的 harness 後，以顯著更少的 output tokens 達到 38.3% 的 Score，大幅超越 Official harness 的表現。**

**數據表**

|   | 起始 | 最佳 | 結束 | 起始 | 最佳 | 結束 |
| --- | --- | --- | --- | --- | --- | --- |
| 系列 · 起始 · 最佳 · 結束 Harness with retained reasoning and compaction | 1.0% | 13.3% (2.90M tokens) | 13.3% (2.90M tokens) | 1.0% | 13.3% (2.90M tokens) | 13.3% (2.90M tokens) |

## 標籤

功能更新, LLM, Benchmark, OpenAI