GitHub

Agent Board · 實測詳細說明

首頁的數字,是這樣測出來的

同一句話交給 AI agent,請它在五個看板工具上開單、接手單。下面每一節先講答案,再給你看每一次執行的資料。結論摘要在首頁。

怎麼測

同一句話每家拿到的任務一字不差
同一個模型Claude Sonnet 5.5,每次全新 session
各家官方 MCPJira、Linear、Notion、Plane、Agent Board
每組 13–15 次依序跑,輪流換起跑順序
逐張讀回單子內容對才算成功,不信 agent 自述
開單任務原文請在「準備發表會」這個專案的看板新增一張單:標題「確認發表會場地與報價」,狀態設為進行中,優先度高,描述寫「預算上限 5 萬、要能容納 80 人」。

不給指令範例、不給 ID、不准讀說明文件。2026-10-07 測五家;Agent Board 0.4.3 於 10-08 用同一題重測,下面 Agent Board 的開單數字都是這次。

開一張單

Agent Board 每一次都在 10 秒內完成,Jira 最快的一次也要 20 秒

Agent BoardMCP
6.5 秒
Agent BoardCLI
5.7 秒
Linear中途出錯 1 次
12.3 秒
Plane
17.1 秒
Notion13 次
18.4 秒
Jira中途出錯 5 次
27.2 秒
010203040
中位數(右邊數字)中間一半的執行最快到最慢

橫條越短,表示每次花的時間越穩定。最後開出來的單每一家都正確,「中途出錯」只代表過程中有一次呼叫失敗後重試。Notion 有 2 次發現已有同樣的單而沒新建,只算有建單的 13 次。把滑鼠移到橫條上可以看最快、最慢與中間一半的秒數;每一次的數字在頁尾。

為什麼差這麼多

別家要先查幾次,才知道單該怎麼寫

Agent Board
2次
載入工具建單
Linear
2次
載入工具建單

能直接寫名稱,一樣兩步;慢在每次呼叫本身。

Plane
4次
載入工具查專案查狀態 ID建單
Notion
4次
載入工具搜尋讀資料庫結構建頁
Jira
7次
載入工具取站台 ID搜專案建單轉狀態重搜重搜

建單時不能指定狀態,要建完再轉。同名單累積後要多搜幾次,從 5 次漲到最多 10 次。

灰 載入工具黃 查詢綠 寫入虛線 同名單變多後的額外搜尋

每一格是一次工具呼叫,左邊是中位數。路徑取自每家最典型的一次執行。

接手一張單

看狀態、改完成、留註記:Agent Board 約 10 秒,其他四家 16 到 22 秒

接手任務原文請接手這張單:〈單號〉。先看它現在的狀態與內容,然後把狀態改成「完成」,並在這張單上新增一筆註記:「已比對三個場地,報價 3.8 到 6.5 萬,建議選第二個」。
Agent BoardCLI
10.0 秒
Agent BoardMCP
10.5 秒
Linear
16.0 秒
Jira中途出錯 1 次
19.8 秒
Plane
21.0 秒
Notion中途出錯 1 次
21.9 秒
0102030
中位數(右邊數字)中間一半的執行最快到最慢

每組 13 次,每次一張不同的單。這一題只比耗時:CLI 一次 Bash 能串好幾個指令,比呼叫次數對它不公平。所有單事後讀回都已完成;註記在 Jira 與 Agent Board 讀回確認,其他家以 agent 回報為準。

口語開單

說「準備發表會」也能開對專案:正確率 100%(19/19)

用口語名,一次就進對專案(19)agent 直接用正式名稱,不計入(11)

看板上的專案正式名稱是 AB-Benchmark,事先登記了「準備發表會」這個叫法,CLI、MCP 各跑 15 次。沒登記時,看板會擋下不認識的名稱並列出選項;但「agent 會停下來問你」這件事這次沒量到,因為 subagent 沒有人可以問。

讀這些數字時要記得

樣本小每組 13 到 15 次、單一模型、同一台機器。看得出量級差異,不是統計結論。
比的是步數,不是產品其他四家是功能完整的產品,Agent Board 是刻意做窄的工具。
不是同一天Agent Board 0.4.3 晚一天重測,其他家沒有重測。
不講省錢token 幾乎都是每回合重送的快取,和費用不是同一回事。
測試空間會變大Jira、Notion 累積同名單,後面幾次搜尋變慢。
作者自己測的不是第三方評測。題目原文在下面,歡迎重跑。

完整數字與原始資料

開單:各家完整數字 中位數與範圍、token、出錯次數
工具呼叫次數耗時(秒)輸入 token(萬)中途出錯單子正確
Agent Board MCP0.4.326.5(6.1–8.3)28.50/1515/15
Agent Board CLI0.4.31(1–2)5.7(5.1–9.3)18.7(18.7–28.3)0/1515/15
Agent Board MCP0.4.126.1(5.4–8.5)27.10/1515/15
Agent Board CLI0.4.1,叫法未登記2(2–3)7.1(6.6–11.3)27.0(27.0–36.1)15/1515/15
Linear2(2–3)12.3(10.3–19.1)27.9(27.9–37.7)1/1515/15
Plane417.1(15.6–24.5)47.40/1515/15
Notion有建單的 13 次4(4–5)18.4(15.1–23.7)39.3(39.3–50.2)0/1313/13
Jira7(5–10)27.2(20.5–40.3)67.8(47.3–107.3)5/1515/15

0.4.1 的 CLI 每次都先把口語名當專案名而被拒,所以 15 次都出錯一次;0.4.3 登記叫法後不再被拒。

接手:各家完整數字
工具呼叫次數耗時(秒)輸入 token(萬)中途出錯單子正確
Agent Board CLI2(2–4)10.0(7.2–15.4)27.2(27.0–37.7)0/1313/13
Agent Board MCP410.5(8.8–18.0)37.8(37.7–38.0)0/1313/13
Linear5(4–5)16.0(14.4–18.3)38.0(37.9–38.0)0/1313/13
Jira5(4–6)19.8(16.0–27.5)47.2(37.5–47.3)1/1313/13
Plane6(5–6)21.0(19.7–26.0)47.9(47.6–47.9)0/1313/13
Notion5(4–6)21.9(18.9–30.9)49.3(29.0–59.7)1/1313/13
開單:每一次執行 2026-10-07,Agent Board 0.4.1
次 Agent Board CLI Agent Board MCP Linear Plane Notion Jira
呼叫秒萬 token呼叫秒萬 token呼叫秒萬 token呼叫秒萬 token呼叫秒萬 token呼叫秒萬 token
13!10.036.128.527.1315.337.6416.547.4417.148.8522.147.4
22!7.127.025.427.1210.528.0423.847.4522.050.2520.547.4
32!6.627.026.527.1210.827.9416.347.4417.539.3728.475.9
42!6.727.025.527.1313.937.7415.647.4418.538.7625.256.6
52!7.627.026.927.1318.937.6415.647.4416.049.0730.178.3
62!7.227.027.627.1211.727.9418.947.4414.138.78!29.178.9
72!7.427.026.127.1211.827.9417.147.4418.639.38!39.488.1
83!8.836.126.627.1212.328.0421.847.4423.749.09!38.597.0
93!9.736.125.727.13!19.137.5416.947.4419.239.3722.967.8
102!6.627.025.827.1315.737.6417.347.4417.939.38!32.888.1
112!6.627.025.927.1210.327.9418.347.4418.439.310!40.3107.3
122!6.727.025.827.1213.427.9424.547.4415.139.3525.547.3
132!11.327.027.927.1211.827.9415.947.4518.950.2627.266.0
142!6.927.026.127.1211.327.9417.447.4415.739.3523.556.8
152!6.727.026.027.1212.327.9416.247.4518.950.2521.356.8
開單:Agent Board 0.4.3 每一次執行 2026-10-08
次 Agent Board CLI Agent Board MCP
呼叫秒萬 token呼叫秒萬 token
116.918.727.528.5
216.318.726.428.5
316.518.726.428.5
415.418.728.328.5
515.618.726.828.5
615.418.726.528.5
715.518.726.228.5
815.718.726.328.5
915.118.726.428.5
1029.328.326.728.5
1128.828.326.528.5
1215.518.726.828.5
1316.218.726.528.5
1415.518.726.828.5
1515.918.726.128.5
接手:每一次執行 2026-10-07
次 Agent Board CLI Agent Board MCP Linear Jira Plane Notion
呼叫秒萬 token呼叫秒萬 token呼叫秒萬 token呼叫秒萬 token呼叫秒萬 token呼叫秒萬 token
127.927.248.937.7515.638.0416.037.5619.847.9524.749.3
2210.427.2412.937.7515.638.0417.437.5625.947.9527.449.4
3211.027.2412.237.7414.537.9519.547.2519.747.6519.349.3
449.737.7410.537.8516.037.9416.037.6521.247.6630.959.7
529.327.249.237.8516.138.0519.847.2620.947.9526.449.4
6210.227.248.837.8517.638.0527.547.2521.947.6422.139.0
7210.427.2413.737.8515.738.0522.047.2519.947.6521.849.4
827.727.2410.737.9516.337.9523.947.2526.047.66!26.746.2
9210.027.249.137.9418.337.9519.347.2622.047.9521.949.4
10213.527.149.237.9517.538.06!20.047.3622.947.9519.349.3
11215.427.0413.737.9514.438.0416.037.5621.047.9519.949.1
1228.827.2418.038.0514.538.0524.147.2619.747.9420.529.0
1327.227.049.338.0517.438.0421.137.5620.647.9418.937.9
題目原文與計算方式
任務(用自然語言,像人對助理說的一樣):
請在「準備發表會」這個專案的看板新增一張單:標題「確認發表會場地與報價」,狀態設為進行中,優先度高,描述寫「預算上限 5 萬、要能容納 80 人」。
做完後只用一句話回報:建好了什麼、單子的編號或網址。

規則:
- 只准動下面指定的測試空間;不要刪除或修改任何既有資料;不要向使用者詢問任何憑證。
- 工具若是延後載入的(需要先用 ToolSearch 取得 schema),照常做。
- 不要讀專案原始碼或文件來學怎麼用;直接用工具完成。
- 最後的回報要誠實:有沒有成功、哪裡卡過。

使用工具:〈該組的工具〉。要用的看板:〈該組的測試空間〉(就是「準備發表會」這個專案)。
任務(用自然語言,像人對助理說的一樣):
請接手這張單:〈單號〉。先看它現在的狀態與內容,然後把狀態改成「完成」,並在這張單上新增一筆註記:「已比對三個場地,報價 3.8 到 6.5 萬,建議選第二個」。
做完後只用一句話回報:現在這張單的狀態是什麼、註記有沒有寫上。

規則:
- 只准動這一張單;不要刪除任何資料;不要向使用者詢問任何憑證。
- 工具若是延後載入的(需要先用 ToolSearch 取得 schema),照常做。
- 不要讀專案原始碼或文件來學怎麼用;直接用工具完成。
- 最後的回報要誠實:有沒有成功、哪裡卡過。

使用工具:〈該組的工具〉。這張單在〈該組的測試空間〉。

呼叫次數含載入工具那一次。耗時是 session 第一筆到最後一筆紀錄的時間差。token 是每個模型回應的輸入相加,同一個回應只算一次。「!」表示該次有工具呼叫回傳錯誤;劃掉的是 Notion 沒建單的兩次。原始紀錄含測試站台名稱與空間識別碼,不公開。

Agent Board 是開源的本機看板,MIT 授權:github.com/111588004/agent-board