iT邦幫忙

鐵人檔案

2026 iThome 鐵人賽
回列表
AI 自動化

測試的前提正在改變:AI 時代下 QA 的思維轉換 系列

AI 讓取得知識的成本趨近於零,但測試的難度並沒有跟著下降,因為測試以往成立的前提變了。
三十天分四段:
- 技術門檻都被壓平之後,QA 還剩什麼?
- 把團隊的判斷變成 AI 讀得到的共用資產
- 該如何讓 AI 跑 E2E 的方式實測與取捨?
- 該怎麼測一個 AI Agent?

參賽天數 24 天 | 共 24 篇文章 | 0 人訂閱 訂閱系列文 RSS系列文
DAY 1

[Day1] AI 把軟體技術的門檻壓平了,QA 卻變得更難做?

2022 年,我參加了人生第一次鐵人賽,題目是《QA 三十天養成日記》,硬是撐完了 30 篇。 四年後的今天,我在開賽前,把那 30 篇在大致重頭讀了一次。...

2026-09-15 ‧ 由 Gary 分享
DAY 2

[Day2] 「AI 說這錯誤只是 Flaky」,我是 QA!我應該要保持懷疑百次千次!

昨天說到,AI 已經可以回答絕大多數 QA 的知識型問題。 今天來說一個王小明的故事:如果太相信 AI,就可能把一個真的 Bug 放上線。 故事如下 ▲ 那天...

2026-09-16 ‧ 由 Gary 分享
DAY 3

[Day3] 知識斷層一直都在,AI 只是讓它裂得更快

前兩天講的都還停留在「一個人」的層級:AI 把知識的取得成本壓到很低,但判斷答案對不對的成本一點都沒降。 今天把範圍拉大到整個團隊。 先講結論:標題所寫的問題不...

2026-09-17 ‧ 由 Gary 分享
DAY 4

[Day4] AI 中常提到 Prompt 跟 Skill 差別?對 QA 來說影響又是什麼?

Prompt 是什麼 Prompt 就是你這次要對 AI 講的話。 「幫我寫測試案例」是 prompt,「請依照下列六個步驟排查這次的失敗,每一步都要列出你判斷...

2026-09-18 ‧ 由 Gary 分享
DAY 5

[Day5] 寫了一支很完整的 Skill,然後 AI 從來沒被叫出來過?所以理解使用情境真的很重要!

故事 王小明包第一支 Skill:產生測試案例。 流程七八個步驟、硬規則寫得清楚、範例也附了完整的輸入輸出。 寫完在群組裡說了一聲:「以後要列 case 的時候...

2026-09-19 ‧ 由 Gary 分享
DAY 6

[Day6] 善於 hook 做防線!我是 QA 我需要一個保持品質且可控制又安全的 AI!

Hooks 是在 Claude Code 生命週期的特定時間點(工具呼叫前/後、對話開始/結束等)自動觸發指定的腳本。它跟「CLAUDE.md」最大的差別在於:...

2026-09-20 ‧ 由 Gary 分享
DAY 7

[Day7] 問 AI「你剛剛做得對嗎」,它可能永遠都說對

昨天畫了三條 AI 不能越過的線,其中兩條由 hook 守住,AI 繞不過。 因為有了 SKILL 這個助力,規則寫在文件裡,但現實是 我完全不知道 AI 有沒...

2026-09-21 ‧ 由 Gary 分享
DAY 8

[Day8] Skill 越寫越大包,AI 反而變笨了?它真正需要的是「知識庫」

經過前面的經驗,我們寫的 Skill 終於能在對的時候被叫出來了。 流程寫得清楚、硬規則也定好了,用起來很順。 然後我又會開始想:既然這麼好用,那乾脆把更多東西...

2026-09-22 ‧ 由 Gary 分享
DAY 9

[Day9] AI 源頭關鍵終究是「人」!請保持專業度才能駕馭好 AI

前面幾篇已知充分了解「流程有 Skill、經驗有知識庫、規則有把關」等等了 不過 AI 終究是我們在工作時的一種工具,它能大大加速流程,但終究能有效判定是否真的...

2026-09-23 ‧ 由 Gary 分享
DAY 10

[Day10] AI 時代下,QA 怎麼有效從頭學習自動化測試?建立測試廣度與深度

在 AI 時代,用各種自動化測工具 Appium、k6、pytest、Robot Framework 做出一個自動化 Demo,已經易如反掌。 跑得起來不難,難...

2026-09-24 ‧ 由 Gary 分享