# 策展 · X (Twitter) 🔥🔥🔥🔥

> 📖 本站完整內容索引（documentation index）：[llms.txt](/llms.txt)

> 作者：Farza 🇵🇰🇺🇸 (@FarzaTV) · 平台：X (Twitter) · 日期：2026-07-09

> 原始來源：https://x.com/FarzaTV/status/2074973272463310905

## 中文摘要

HeyClicky 推出空間上下文功能讓使用者圈選螢幕範圍。

**核心功能**
Farza (@FarzaTV) 發布了這項新功能，解決 AI 雖然擅長分析螢幕截圖，卻無法精確理解使用者關注點的問題。透過這項更新，使用者不再需要描述模糊的區域，只需透過直覺的圈選動作，即可讓 AI 聚焦於螢幕上的特定細節。

**實際應用場景**
根據演示影片（Demo）顯示，HeyClicky 的應用範圍相當廣泛，不僅限於靜態圖像分析，還能直接介入網頁與系統操作：
- 醫學教育：在瀏覽器開啟「Atlas of Human Anatomy」網頁時，使用者可圈選特定肌肉部位，直接向 AI 詢問相關解剖資訊。
- 網頁開發：在開發環境中，使用者可針對網頁特定區塊圈選並下達指令，例如在「Golden Gets Summer Camp」網站頁面要求 AI 新增「Explore Programs」按鈕，AI 會自動在指定位置完成操作。
- 系統與多媒體互動：該工具亦支援 macOS 系統設定介面、影片編輯軟體以及影片平台縮圖的互動，展現了高度的跨應用程式整合能力。

<video src="https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/1783561507145-hlfh3nkl.mp4" poster="https://pub-75d4fe1e4e80421b9ecb1245a7ae0d1a.r2.dev/curated/4a2b7e6f6a61c4cb.jpg" controls playsinline preload="metadata" style="max-width:100%;height:auto;display:block;margin:1rem 0"></video>
> 影片展示了名為 HeyClicky 的 AI 工具，透過游標圈選螢幕區域即可與 AI 精確互動與操作。

**操作流程**
使用者可透過以下步驟啟用空間上下文功能：
1. 透過快捷鍵觸發選取模式。
2. 使用滑鼠或游標在螢幕上繪製出需要 AI 關注的區域。
3. 該區域的視覺資訊將被擷取並作為上下文傳遞給 AI，隨後即可針對該區域分析或執行自動化操作。

這項更新大幅降低了使用者與 AI 互動的溝通成本，將「視覺指引」直接轉化為 AI 的執行參數，使 AI 代理能更精準地理解並處理螢幕上的複雜任務。

## 媒體內容

**影片展示了名為 HeyClicky 的 AI 工具，透過游標圈選螢幕區域即可與 AI 精確互動與操作。**

**影片中的 Prompt 與操作**

Prompt（00:20）：

```
HeyClicky，能告訴我關於這個特定區域肌肉的更多資訊嗎？
```

原文：HeyClicky, can you tell me more about the muscles in this particular region?

Prompt（00:44）：

```
HeyClicky 代理，你能幫我在網站的這個位置加一個按鈕嗎？
```

原文：HeyClicky agent, could you actually go and add a button to this part of the website right here?

操作步驟：

1. （00:12）使用者按下快捷鍵並以游標圈選螢幕區域
2. （00:21）使用者在瀏覽器中圈選解剖圖的肌肉部位
3. （00:45）使用者在網頁開發介面中圈選空白處
4. （00:54）AI 代理在圈選處自動插入按鈕

**逐字稿**

- `00:00` 嘿，今天我們要為 Hey Clicky 引入空間情境功能。運作方式是當你想要（Hey, so today we're introducing spatial context to Hey Clicky. How this works is when you want to）
- `00:05` 針對螢幕上某個具體內容提出問題時，你可以（actually point out something specific on your screen that you have a question about, you can）
- `00:09` 直接按下快速鍵，並使用滑鼠游標框選你希望模型（actually just press the hotkey and use your cursor to hover around the area that you want the model）
- `00:16` 關注的區域。假設我正在準備人體解剖學考試，我可以說：「Hey Clicky，可以告訴（to focus on. Let's say I'm studying for my human anatomy exam. I can say, Hey Clicky, can you tell）
- `00:21` 我更多關於這個區域肌肉的資訊嗎？」根據你圈選的範圍，那塊肌肉是（me more about the muscles in this particular region? From what you circled, that muscle is）
- `00:26` 三角肌。它有三個部分，前側、中間。所以這在今天（the deltoid. It has three parts, anterior in the front, middle of it. So this is possible today）
- `00:31` 透過像 ChatGPT 和 Claude 這樣的工具是可以做到的，但你必須先截圖、標註它，（with things like ChatGPT and Claude, but you've got to actually take a screenshot, annotate it,）
- `00:35` 並且在傳送給模型之前做一堆繁瑣的步驟。但如果這一切只需一個步驟，不是更好嗎？（and do a bunch of nonsense before you pass it off to the model. But it'd be a lot nicer if it was）
- `00:39` 假設我正在建立一個網站，我想說：「Hey Clicky Agent，（just one step, right? Let's say I'm building a website and I want to say, Hey Clicky agent,）
- `00:45` 你可以幫我在網站的這個部分新增一個按鈕嗎？」模型隨後會獲取（could you actually go and add a button to this part of the website right here? The model then takes）
- `00:50` 我提供的區域並將其傳遞給我們的 Agent，它就會在我們圈選的位置精確地新增一個按鈕。（the area that I serve her and passes it off to our agent, which will then add a button exactly where）
- `00:56` 我其實從未在整個 AI 產業中見過類似的功能，（our circle. I've actually never seen anything like this across the entire AI industry where）
- `01:00` 也就是你可以針對螢幕上的特定事物提供情境。身為人類，我們只是想（it's like you can give context of specific things on your screen. As humans, we just want）
- `01:04` 用滑鼠游標指向我們認為重要的事物。就像我們會向（to take our cursor and hover on the things that we find important. Kind of like we'd show）
- `01:08` 朋友展示說：「嘿，看看螢幕的這個部分。看這裡。」所以就是這樣。我們希望（a friend like, Hey, check this part of the screen out. Look at this. So that's that. We hope）
- `01:13` 你喜歡它。它現在已經正式上線了。順帶一提，我其實是在一面玻璃牆後面。（you like it. It's in production right now. And I'm actually behind a glass wall, by the way.）
- `01:18` Trick to you.

## 標籤

功能更新, 新產品, Agent, AIGC, HeyClicky