← 教學 · 揭開推論的怪獸社研法 第 10-11 週
葉崇揚|東吳大學社會學系
研 社會研究法(碩士班)

揭開推論的怪獸

KKV 與 RSI 的方法論對話 ・ 測量、效度、小樣本與因果過程觀察

葉崇揚(Chung-Yang Yeh)
東吳大學社會學系教授
2026年5月

KKV (1994) RSI (2010)

本講綱要

01
兩本書的對話脈絡
KKV (1994) 與 Rethinking Social Inquiry (2010)
→ 跳至該節
02
測量誤差與測量效度
從KKV的統計取徑到Adcock & Collier的共享架構
→ 跳至該節
03
小樣本研究的挑戰
n=1的危險、crucial case再評估、增加觀察策略
→ 跳至該節
04
因果過程觀察
RSI對主流量化方法的根本性反思
→ 跳至該節
05
東亞社會政策研究的應用
年金改革、福利態度、社會投資的案例分析
→ 跳至該節

學習目標

理解

理解KKV「單一推論邏輯」立場及其對質性研究的方法論建議

分析

分析測量誤差對因果推論的不同影響並掌握Adcock & Collier四層次架構

比較

比較KKV與RSI對小樣本研究、資料集觀察與因果過程觀察的不同立場

應用

在自身的社會政策研究中辨識測量效度議題與適合的因果推論策略

為何讀這場對話?

質性與量化的方法論辯論並未終結

對你的研究

  • 比較福利國家研究的個案數有限
  • 東亞研究面對「壓縮現代性」的脈絡特殊性
  • 年金改革政治需要追蹤關鍵決策過程
  • 福利態度研究需要嚴謹的概念化與測量

對學術社群

  • KKV成為政治學方法論的「準典範」
  • RSI是質性方法論最系統的回應
  • 兩者的對話塑造了當前研究設計的論辯
  • 新一代「混合方法」的源頭

對研究實作

  • 如何判斷小樣本研究是否有效
  • 如何處理測量誤差與內生性
  • 如何結合資料集觀察與過程追蹤
  • 如何撰寫具方法論意識的論文

兩本書的脈絡:KKV 與 RSI

KKV (1994)

Designing Social Inquiry

核心立場

  • 質性與量化共享「一個推論邏輯」
  • 強調可重複、可證偽、降低不確定性
  • 以迴歸分析的形式邏輯為基準
  • 建議:增加觀察數、避免不確定設計

影響

成為政治學研究所方法論「標準教材」

RSI (2010)

Rethinking Social Inquiry

核心立場

  • 質性研究有不同的推論槓桿來源
  • 區分主流量化方法與統計理論觀點
  • 提出資料集觀察 vs 因果過程觀察
  • 強調Leamer所說的「推論怪獸」

影響

為質性方法論提供系統性的方法論辯護

── 對話 ──

資料來源King, Keohane & Verba (1994);Brady & Collier (2010)

I

PART I

測量問題:誤差、效度與脈絡

從KKV的統計取徑到Adcock & Collier的共享架構

KKV的測量論:核心立場

MEASUREMENT ERROR 第一部分・測量
「質性與量化測量在根本上類似,差別只在呈現方式」

信度 vs 效度的取捨

  • 量化研究:精確(reliable),但未必有效(valid)
  • 質性研究:較有效,但精確度較低
  • 兩者都使用名目、順序、區間三種測量層次
  • 兩者都應提出對推論「不確定性」的估計

方法論建議

  • 盡量採用最適合理論目的的測量層次
  • 避免把連續變項任意切成類別(grouping error)
  • 讓他人重複編碼以增加可信度
  • 報告測量過程的所有判斷與不確定性

出處King, Keohane & Verba (1994), Ch. 5, 5.1 Measurement Error, pp. 151–168

系統性 vs 非系統性測量誤差

第一部分・測量
系統性誤差 (Systematic)非系統性誤差 (Nonsystematic)
性質對某類個案一致地高估或低估有時偏高有時偏低,平均為零
依變項Y造成偏誤 (bias)造成無效率,但不偏誤
自變項X造成偏誤造成「向零偏誤」,低估真實效果
因應策略用他人對不同目的編碼的指標、雙盲編碼改善測量精確度、增加觀察數

關鍵啟示若研究發現X對Y的效果「不顯著」,不能直接結論「無效果」。若X存在隨機誤差,真實效果其實「比觀察到的更大」(向零偏誤)。

資料來源KKV (1994), Ch. 5, 5.1.1–5.1.2, pp. 155–168

案例 1:福利態度研究中的測量挑戰

第一部分・測量
研究問題 「為何台灣民眾即便在高度不平等下,仍未呈現 Meltzer-Richard 中位選民模型的預期?」

測量設計的挑戰

  • 「不平等感知」:客觀基尼係數 vs 主觀體制評價
  • 「福利支持」:對特定政策 vs 對福利國家整體
  • 「經濟發展主義」:本土概念的量表化
  • 選項措辭差異造成系統性偏誤的風險

KKV的建議如何落地?

  • 使用「他人為不同目的所編碼」的測量
    • 採用 ISSP、TSCS 既有題組
  • 中介效果模型降低系統性偏誤
    • 不平等 → 體制評價 → 政策支持
  • 多重指標處理隨機誤差
    • 對「福利支持」用多題加總
  • 報告所有不確定性
    • 提供標準誤、敏感度分析

參考葉崇揚、蔡明璋、呂建德 (2017)《臺灣民主季刊》;葉崇揚、古允文 (2021) JAPP

Adcock & Collier (2001):測量效度的共享架構

MEASUREMENT VALIDITY 第一部分・測量

1 背景概念

Background Concept

與某一既定概念相關的各種潛在意涵

▶

2 系統化概念

Systematized Concept

研究者所採取的具體概念定義

▶

3 指標

Indicators / Measures

用以操作化的計分程序,質性分類也算

▶

4 個案分數

Scores for Cases

將指標應用於個案所得到的具體結果

出處Adcock & Collier (2001) Measurement Validity, APSR 95(3): 529–546

概念化、操作化與計分:兩個方向的移動

第一部分・測量

研究者在四個層次之間,同時做「由上而下」與「由下而上」的反覆移動

由上而下:建立測量

  • 概念化(Conceptualization) 從背景概念走向系統化概念
  • 操作化(Operationalization) 從系統化概念走向指標
  • 計分(Scoring) 運用指標產出個案分數

由下而上:友善修訂

  • 分數 → 指標 根據實際分數結果,精緻化計分程序
  • 指標 → 系統化概念 出現未預期觀察,回頭修改概念
  • 系統化概念 → 背景概念 重新評估理論的根本假設

出處Adcock & Collier (2001), pp. 530–532, Figure 1

三種效度檢驗 (Validation)

第一部分・測量

內容效度檢驗

Content Validation

指標是否充分捕捉系統化概念的全部內容?

關鍵元素是否被排除?
不適當元素是否被納入?
由概念意涵與個案計分間反覆檢視

聚合/區辨效度檢驗

Convergent/Discriminant

對同一現象的不同測量是否高度相關?對不同現象的測量是否區辨?

以描述性預期為參照 對同概念的不同指標應收斂
對不同概念的指標應區辨

法則學/構念效度

Nomological/Construct

本測量與其他變項的關係,是否符合既有的因果理論預期?

以解釋性的因果關係為參照 需要相對確立的理論
可作為更高層次的整合性檢驗

出處Adcock & Collier (2001), pp. 538–542

案例 2:「值得幫助的貧困者」的測量

第一部分・測量

研究設計 Yeh, Huang, Kim & Wang (2025) — 臺韓 deserving poor 聯合分析實驗
受訪者在多屬性貧困者描述中選擇「最值得幫助」者,由選擇行為推論其判準

背景概念

deserving poor

民眾依何種道德判準認定誰值得社會援助

▶

系統化概念

援助選擇行為的潛在偏好

在多屬性個案中,受訪者願意分配社會救助的傾向

▶

指標

Conjoint experiment 設計

屬性:年齡、性別、勞動狀態、子女、族群、努力程度

▶

個案分數

AMCE

(Average Marginal Component Effect) 個案在每一屬性上對選擇機率的邊際效果

參考Yeh, Huang, Kim & Wang (2025) ESPAnet年會發表論文

脈絡特殊性與等同性 (Equivalence)

第一部分・測量
「同一指標上的同一分數,在不同脈絡中可能具有不同的意涵」
1

脈絡特定的觀察領域

在不同脈絡中,「分析上等同」的觀察可能落在不同的社會場域

案例美國「社會福利落後」的爭辯,需納入軍人退伍金、母性主義立法、稅式支出
2

脈絡特定指標

對不同個案使用「不同但功能等同」的測量題項

案例政黨成員資格在美國 vs 歐洲——美國以「競選參與」替代「黨員身分」
3

調整後的共同指標

使用同一指標,但乘以加權係數以補償脈絡差異

案例醫療公共支出在美國(鎖定非勞動力)vs 北歐(普及)的計算調整

出處Adcock & Collier (2001), pp. 534–537

案例 3:「社會投資」在東亞的測量挑戰

第一部分・測量
謎題 為什麼韓國能相對順利地進行社會投資轉型,而臺灣卻不行?

歐洲主流指標的問題

  • 用社會支出(公共托育、ALMP)占GDP比
  • 假設「資源移轉」邏輯:從舊保障移至新投資
  • 東亞為「資源競爭」邏輯,無原有保障可移轉
  • 同一數字(如GDP的1%)在兩種脈絡意義不同

脈絡敏感的處理策略

  • 把「壓縮現代性」納入概念定義
  • 區分「擴張型」vs「替代型」社會投資轉型
  • 在臺韓使用調整後的支出比較(控制總社支起點)
  • 輔以政策內容分析(institutional content analysis)

參考葉崇揚、古允文 (2017)《社會政策與社會工作學刊》;Yeh & Lue (2024) JAPP

測量小結:本部分的整合

第一部分・測量

從KKV到Adcock & Collier

  • KKV:測量是「形式邏輯」問題
  • Adcock & Collier:測量是「概念—觀察」連結
  • 效度檢驗本身就是學術論證
  • 脈絡特殊性無法迴避,但可透過等同性策略處理
  • 東亞研究:歐洲指標的「向零偏誤」需校正

課堂討論題

Q1
研究台灣「福利沙文主義」時,應否直接套用歐洲既有量表?
Q2
「進步的兩難」概念如何在四層次架構中建立測量效度?
Q3
從你目前的論文題目,找出最不確定的效度議題。
II

PART II

小樣本研究的推論挑戰

從KKV的「增加觀察數」到RSI的因果過程觀察

KKV:n=1 為何是危險的?

CRUCIAL CASE STUDIES 第二部分・小樣本
「即使有最強的理論預測,單一觀察仍無法成為決定性檢驗」
01

對立解釋

Alternative Explanations

幾乎所有有趣的解釋都涉及多個因果變項;單一觀察無法區辨各個變項的相對貢獻

02

測量誤差

Measurement Error

在單一觀察下無法以聚合方式抵消隨機誤差,誤差可能直接導致錯誤結論

03

決定論 vs 機率論

Determinism

社會現象實質上是機率性的;單一觀察的「異常」可能來自隨機因素而非理論的失敗

出處KKV (1994), Ch. 6, 6.1.1 Crucial Case Studies, pp. 209–212

KKV 對 Eckstein「crucial case」的回應

CRUCIAL CASE STUDIES 第二部分・小樣本

Eckstein (1975) 的主張

  • Crucial case = 對某個理論最有利或最不利的關鍵個案
  • Most-likely case:若理論在此都失敗,則可整體推翻
  • Least-likely case:若理論在此都成功,則大幅強化
  • 「單一關鍵個案足以對理論造成KO」

KKV 的反駁

  • 極少數解釋只仰賴單一因果變項
  • 測量誤差不可避免
  • 社會現實本質上是機率性的,並非決定性
  • 「單一個案」其實往往蘊含多個觀察

結論:Eckstein的提醒有用,但其推論過強

出處Eckstein (1975); KKV (1994) Ch. 6, pp. 209–212

KKV:從少觀察中創造多觀察

MAKING MANY OBSERVATIONS FROM FEW 第二部分・小樣本
策略 1

同測量、新單位

Same Measures, New Units

對同一理論,在更多單位(國家、州、機構、個人)上應用相同的指標

範例將台灣年金研究擴展到日本、韓國的勞退制度比較
策略 2

同單位、新測量

Same Units, New Measures

對同一單位,找出理論的多個可觀察意涵 (observable implications)

範例對「年金市場化」加上「IRA偏好」、「金融素養」、「投資行為」等新測量
策略 3

新測量、新單位

New Measures, New Units

通常涉及移至更低層次(如從國家到個人),用不同變項檢驗同一理論

範例從「壓縮現代性影響制度發展」推出「對福利態度的個人層次假設」

出處KKV (1994), Ch. 6.3 Making Many Observations from Few, pp. 217–229

RSI的回應:兩種觀察類型

第二部分・小樣本

Collier, Brady & Seawright (2010) 對KKV的根本性挑戰

資料集觀察

Data-Set Observation

  • 矩形資料集中的「一列」
  • 包含某一個案在所有變項上的分數
  • 提供以「共變」為基礎的推論槓桿
  • 適合「薄分析」(thin analysis)
  • 適合大N、統計檢定、迴歸分析
因果過程觀察

Causal-Process Observation (CPO)

  • 提供脈絡或機制資訊的洞察
  • 不必然以資料集陣列的方式存在
  • 可作為「鐵證」(smoking gun)
  • 適合「厚分析」(thick analysis)
  • 適合過程追蹤、個案內分析、機制分析

出處Collier, Brady & Seawright (2010) RSI Ch. 9, pp. 184–187

增加資料:對N、自由度與推論槓桿的不同後果

第二部分・小樣本
增加方式對 N 的影響對自由度的影響對推論槓桿的影響
增加資料集觀察(新個案)↑ 增加↑ 增加若新個案概念化適當且因果同質,槓桿增加;否則可能下降
增加因果過程觀察不變通常不變若洞察力強,可大幅增加,特別在小N時是核心槓桿
增加變項(新變項)不變↓ 降低若為相關缺漏變項,槓桿增加;否則因自由度下降而降低

啟示KKV的「增加觀察數」其實混合了三種不同操作。對小N質性研究而言,增加因果過程觀察往往比增加資料集觀察更有效。

出處RSI (2010) Ch. 9 Table 9.3, pp. 187–189

過程追蹤 (Process Tracing)

第二部分・小樣本

從「相關性推論」轉向「機制性推論」

初始條件

▶

決策過程

▶

中介機制

▶

結果

1

辨識所有可能的因果機制(不只一個)

2

在歷史紀錄中尋找符合機制預期的證據

3

排除證據與既有機制都不相容的替代解釋

出處George & McKeown (1985); Bennett & Checkel (2015)

案例 4:台灣年金改革政治的因果機制

第二部分・小樣本
研究謎題 為何台灣勞工退休金最終會採取DC制的個人帳戶制度?單純是因為勞工動員失敗嗎?

過程追蹤所追蹤的關鍵時點與因果過程觀察

1990s
中小企業生產體制下,傳統DB制企業年金制度性錯置
CPO 1 企業逃避提撥的政府統計資料
2001–04
「結構中的行動者」——勞、資、政三方策略互動
CPO 2 立法院公聽會發言、立委會議紀錄
2004
勞退新制通過,DC個人帳戶制取代DB舊制
CPO 3 陳水扁政府內部備忘錄、勞工團體文件
2016+
公教年改:政黨輪替後的責難迴避策略
CPO 4 年改委員會逐次會議錄影與決議

參考葉崇揚 (2016)《人文及社會科學集刊》

案例 5:壓縮現代性 vs 制度遺緒——臺韓比較

第二部分・小樣本
比較謎題 韓國能快速完成社會投資轉型,臺灣為何不行?
資料集觀察提供的

跨國比較證據

  • 韓國公共托育支出:1.5% GDP
  • 台灣公共托育支出:0.3% GDP
  • ALMP支出韓國5倍於臺灣
  • OECD國家面板資料的迴歸分析
  • → 但無法說明「為何」
因果過程觀察揭示

機制與時序

  • 1997亞洲金融危機:韓國的關鍵轉折點
  • 金大中政府主動納入女性與青年議題
  • 臺灣中小企業生產體制制約了制度建構
  • 民進黨vs國民黨的「資源競爭」結構
  • → 提供「為什麼」的解釋

參考葉崇揚、古允文 (2017);Yeh & Lue (2024)

假設的兩種表述:條件獨立性 vs 設定假設

第二部分・小樣本

條件獨立性假設

Conditional Independence (KKV)
  • 源自實驗類比
  • 處置「指派」與「潛在結果」獨立
  • 控制變項作為解決方案
  • 強調統計控制與選擇偏誤
  • 潛在問題:把實驗模型套用至觀察研究

設定假設

Specification Assumption (RSI)
  • 源自實際模型設定問題
  • 所納入變項與「誤差項」應無關
  • 聚焦於內生性與缺漏變項
  • 直接連結到主流計量經濟學詞彙
  • 優勢:更貼近研究者實際處境

出處RSI (2010) Ch. 9, pp. 178–184

KKV 與 RSI 的根本分歧

整合
面向KKVRSI
推論邏輯單一推論邏輯,質性向量化看齊多元推論槓桿,兩者根本不同
觀察的定義資料集中的一列區分資料集觀察與因果過程觀察
增加觀察的策略增加 N,避免不確定設計增加 CPO 往往比增加 N 更有效
對小N研究視為「不確定」設計,需謹慎有獨特優勢,可詮釋性勝過確定性
對因果推論聚焦於相關、控制與不偏估計聚焦於機制、設定與「推論怪獸」
理想研究可重複、可證偽、降低不確定性可詮釋、可辯護、結合多種推論槓桿

整合自KKV (1994); Brady & Collier eds. (2010) RSI

綜合討論

綜合討論
Q1
請選擇一個你正在發展的研究計畫。 用Adcock & Collier四層次架構,畫出你的核心概念→指標→個案分數的鏈條,並指出最薄弱的一環。
Q2
假設你研究「年金市場化的去管制弔詭」。 請設計三種「因果過程觀察」,分別在制度、行動者、論述三個層次提供推論槓桿。
Q3
KKV認為「沒有crucial case」,RSI則認為CPO可作為「鐵證」。 如何判斷一個CPO是真正的「鐵證」,而非研究者的選擇性閱讀?

本講小結

結論
1
測量是研究的根本
「分數—指標—系統化概念—背景概念」四層次的反覆精緻化,是質性與量化共享的工程
2
脈絡敏感性無法迴避
東亞研究面對歐洲指標的內在限制,需要透過等同性策略(脈絡特定觀察領域、脈絡特定指標、調整後共同指標)建立可比性
3
因果推論有兩種槓桿
資料集觀察提供共變式推論,因果過程觀察提供機制式推論,兩者互補而非替代
4
「增加觀察」需具體化
在小樣本研究中,增加因果過程觀察通常比增加新個案更有效;謹慎使用過程追蹤
5
可詮釋勝過確定
可信的因果推論不依賴單一統計檢力的提升,而依賴多種證據與審慎論證的累積

延伸閱讀與參考文獻

延伸閱讀

必讀文獻

King, Keohane & Verba (1994). Designing Social Inquiry. Ch. 5, 6.

Brady, Collier & Seawright (2010). RSI Ch. 9: Sources of Leverage in Causal Inference.

Adcock & Collier (2001). Measurement Validity. APSR 95(3): 529–546.

Bennett & Checkel (2015). Process Tracing: From Metaphor to Analytic Tool.

進階閱讀

Goldthorpe (2001). Causation, Statistics, and Sociology.

George & Bennett (2005). Case Studies and Theory Development.

Mahoney (2010). After KKV: The New Methodology of Qualitative Research.

葉崇揚 (2016). 行動者的失敗?或結構的限制?《人文及社會科學集刊》。

感謝聆聽・歡迎討論

← → 切換頁面 Esc 目次 F 全螢幕

目次 ・ Table of Contents

點選任一條目跳到該頁