「Alpha 高,所以量表只有一個構念。」在這句話後面加上 Cronbach(1951)和正確的 DOI,就有證據了嗎?昨天的先備診斷讓讀者檢查自己能否算、能否解釋;今天再多走一步,檢查教材中的一句主張,是否真的受到所引來源支持。
最直覺的做法是文章末尾放一串參考文獻。這只能證明作者知道一些相關來源,不能證明正文中的哪一句由哪個來源支持,更不能顯示中間是否多走了一步。例如「alpha 高表示量表單一維度」即使後面列出 Cronbach(1951),也不會因為格式正確就變成合理推論。
我把寫作現場拆成四格:
| 類型 | 例子 | 需要留下什麼 |
|---|---|---|
| 來源 source | Standards 2014 的 validity 章 | 作者/組織、版本、URL、locator |
| 主張 claim | 效度針對特定分數解釋與用途 | 可被支持或反駁的完整句子 |
| 證據關係 support | 該章明確把 validity 連到 intended interpretations | 來源如何支持,是否只是部分支持 |
| 作者推論 inference | 因此本量表可用於課程診斷 | 新增的前提、資料與限制 |
表格的作用,是把常被壓成一行引文的推理展開。它不能替我判定來源品質;一篇原始論文也可能不適用我的母體與用途。真正的查核仍要閱讀定位處前後文。
可以用一個刻意過度概括的提示練習查核:請 Claude 為「omega 永遠優於 alpha」找三篇來源。即使它列出真實的信度論文,仍要逐句確認是否支持「永遠」這個全稱判斷。Revelle 與 Zinbarg 比較多個係數,Sijtsma 討論 alpha 的誤用;要引用它們,仍須保留各自的模型、分數與用途條件。
因此工作流不是「AI 給引用,我貼進文章」,而是:
主張草稿
→ Claude 提出檢索詞與來源候選
→ 教師開啟出版者或 DOI 頁
→ 定位頁碼/章節/段落
→ 判斷支持、部分支持或不支持
→ 改寫主張並記錄剩餘限制
我把原句改為:「在 congeneric 測量模型下,依 factor loadings 與 error variances 定義的 omega,可能比套用 tau-equivalence 條件的 alpha 更貼近欲估的 reliability;但係數選擇仍取決於模型與分數定義。」這句比較長,卻把決策所需的條件放回來。
不是每句教材文字都需要假裝成定理。我為帳本設定六種狀態:第一手來源已支持、教學簡化、計算重現、模擬觀察、作者經驗、待研究問題。這讓我可以誠實寫「依我的教材開發經驗,固定 handoff 能降低章節漂移」,而不必捏造一篇實證研究;也能清楚標示 ENGAGE-v1 的結果只是合成資料觀察。
完整例題可以從效度的分類開始。若草稿寫「2014 Standards 將效度分成內容、效標與構念效度」,就回到原文看它如何安排指定分數解釋、用途與支持證據。不能只因原文提到相同詞彙,就認為作者支持草稿的分類。這裡檢查的是來源的論證如何被轉述,而不是名稱是否曾出現。
反例則是一個正確 DOI 配上錯誤 locator。若帳本只有 DOI,未記頁碼或章節,日後更新文章時仍得重讀全文。更糟的是,摘要可能只談結果,正文限制段落卻否定我的延伸。因此 locator 至少要到頁、章、節或官方網頁的小標。
本系列的每列包含:文章日、完整主張、狀態、來源類型、作者或組織、年份/版本、永久連結、locator、查核日期、Claude 的角色、人工查核與剩餘限制。以 Day 14 為例:主張是「驗證的是分數解釋與用途」;來源是 Kane(2013)與 Standards(2014);Claude 協助拆推論鏈;人工查核是對照原文開頭與標準章節;限制是本系列採其中一條教學主線,沒有涵蓋所有 validity 理論。
我也把直接引用內控設為正文 10%,比賽規則雖允許更高比例,但長引文會掩蓋作者是否真的能重建論證。原則是短句必要時才引,其他以自己的話轉述並保留定位。
來源—主張帳本把句子、證據狀態與定位放在一起,讓教師知道下一步是讀原文、重算結果,還是補充作者的推論。Claude 可以協助拆句、建議檢索詞或找缺欄;教師要決定目前證據能支持到哪裡。這份帳本接下來會交給 Spectra,連同每日依賴與驗收條件保存,避免改稿時只留下漂亮句子,卻丟了尚未完成的查核。
基礎閱讀是 2014 Standards 的導論與 validity 章;發展閱讀可比較 Messick(1995)與 Kane(2013);研究閱讀則進入每個方法的原始模型與後續爭論。下一篇會把目前的規則、30 天依賴與驗收寫進 Spectra:不是讓工具替我判斷學術真偽,而是讓每一個待查核承諾不會在日更裡消失。
帳本也需要版本紀律。網頁會更新,套件文件會改版,DOI 指向的文章通常穩定,頁面呈現卻可能變。對網頁來源,我記錄查核日期與小標;對 PDF 或書籍,記頁碼與版本;對軟體,記套件版本與函數文件。若後續版本改變結論,舊列不覆寫,而新增 verification record。這使勘誤有歷史,不會讓今天的文字假裝一直如此。
最後,我不要求每個教學句都掛兩篇文獻。定義、方法條件與可爭議主張需要來源;作者設計的閱讀路徑可標為作者經驗;由 ENGAGE-v1 算出的數值則標為計算重現。正確分類比堆高引用數更重要,也讓讀者知道哪一部分值得沿文獻繼續追。
實際用帳本時,可以先選本篇開頭那一句 alpha 主張,記下支持它需要哪些條件,再逐一對照來源。找不到支持就縮小或刪去主張;找到的只是書目資訊,就先標為待讀全文。完成這一列比再增加三篇文獻更能說明查核進度,也能讓下一位接手者知道工作停在哪裡。