# ClaudeDevs 更新 cookbook 讓 Claude 能局部裁剪高解析度圖表

> 📖 本站完整內容索引（documentation index）：[llms.txt](/llms.txt)

> 原作者：ClaudeDevs (@ClaudeDevs) · 策展與摘要：EasyVibeCoding · 平台：X (Twitter) · 熱度：🔥🔥 · 日期：2026-07-24

> 原始來源：https://x.com/ClaudeDevs/status/2080434253175943400

## 證據與延伸閱讀

- [GitHub 儲存庫頁面截圖與數據](https://github.com/anthropics/claude-cookbooks/blob/main/multimodal/crop_tool.ipynb)

## 中文摘要

ClaudeDevs 更新 cookbook 讓 Claude 能局部裁剪高解析度圖表。

**更新概述**
ClaudeDevs 近期更新了其 cookbook，探討如何為模型配備「縮放工具」（zoom tool）來解決大型圖片在縮小後遺失重要細節的問題。透過這項工具，Claude 可以主動要求特定區域，並從完整解析度的原始圖片中取得該區塊的裁切畫面。

<video src="https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/1784873286764-51p3dovm.mp4" poster="https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/33682befcd91deb0.jpg" controls playsinline preload="metadata" style="max-width:100%;height:auto;display:block;margin:1rem 0"></video>
> 探討如何透過為模型配備「縮放工具」（zoom tool），提升其處理精細圖像細節與圖表閱讀的能力。

**運作原理與機制**
根據官方與展示內容，Claude 原本以 28×28-pixel 的 patch 檢視圖片，當細節小於一個 patch 時便難以辨識：
- 影像處理機制：圖片會依 28×28-pixel patch 消費 token，當資訊過小時便會失真。
- 運作流程：當圖像過小無法辨識時，Claude 會呼叫 `zoom(x1, y1, x2, y2)`，使用以左上角為原點 `(0,0)` 的絕對像素座標進行重複且更為精細的裁切。
- 執行指令範例：
  ```json
  [Tool] zoom({'x1': 988, 'y1': 238, 'x2': 1120, 'y2': 360})
  [Tool] zoom({'x1': 1025, 'y1': 270, 'x2': 1075, 'y2': 320})
  ```
- 系統會從原圖進行裁切並放大至影像預算允許的最大尺寸，並透過 `resized_size()` 進行預先調整大小，讓 Claude 的像素座標能達到 1:1 對應，使每個元素取得最多 patch。

**基準測試表現**
在包含 100 道密集真實世界圖表問題的 Chartography 基準測試（來自 Surge AI）中，配備縮放工具後模型的準確度獲得顯著躍升：
- Fable 5：準確度從 29% 大幅提升至 73%，暴增 44 個百分點。
- Claude Sonnet 5：準確度從 13% 提升至 44%，增加 31 個百分點。
- 以具體問題（如詢問第 48 個月的 Widget-A 與 Widget-E 產品線數值高低）為例，在沒有工具時高達 36 次答錯，搭配工具後則能達到 40 次全部答對。

![](https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/9c84281f8fed2059.png)
> GitHub 儲存庫 `anthropics/claude-cookbooks` 的頁面截圖，顯示其為展示使用 Claude 的各種趣味與實用方法的筆記本與教學集合，擁有 50k 個星標與 6k 個分支。

欲深入了解實作細節與完整程式碼，可參考 GitHub 上的 [multimodal/crop_tool.ipynb](https://github.com/anthropics/claude-cookbooks/blob/main/multimodal/crop_tool.ipynb) 檔案。

## 媒體內容

**探討如何透過為模型配備「縮放工具」（zoom tool），提升其處理精細圖像細節與圖表閱讀的能力。**

**影片中的 Prompt 與操作**

操作步驟：

1. （00:18）呼叫 zoom 工具針對指定座標區域進行局部放大

## 標籤

功能更新, 教學資源, Anthropic, Claude