Transcript 5 Research Design 中央大學.資訊管理系 范錚強

5
Research Design
中央大學.資訊管理系
范錚強
mailto: [email protected]
2011.03 updated
Learning Objectives
Understand . . .
The basic stages of research design.
The major descriptors of research design.
The major types of research designs.
The relationships that exist between variables in
research design and the steps for evaluating those
relationships.
研究精神：排除「威脅」(threats)
決定適當的研究設計
中央資管：范錚強
2
What Is Research Design?
Blueprint
Plan
Guide
Framework
中央資管：范錚強
3
What Tools Are Used in
Designing Research?
中央資管：范錚強
4
What Tools Are Used in
Designing Research?
Project Plan in
Gantt chart
format
中央資管：范錚強
5
Design in the Research Process
中央資管：范錚強
6
Descriptors of Research Design
Perceptual
Awareness
Purpose of
Study
Question
Crystallization
Descriptors
Data
Collection
Method
Experimental
Effects
Time
Dimension
Research
Environment
Topical Scope
中央資管：范錚強
7
Degree of Question
Crystallization
Exploratory Study
Loose structure
Expand understanding
Provide insight
Develop hypotheses
中央資管：范錚強
8
探索：構念的形成
構念層次
X
推論：因果關係
Y
抽象化
構念化
x
抽象化
構念化
因果、共變關係
y
測量
誤差
測量
中央資管：范錚強
實質層次
誤差
9
Degree of Question
Crystallization
Exploratory Study
Formal Study
Loose structure
Precise procedures
Expand understanding
Begins with hypotheses
Provide insight
Answers research
questions
Develop hypotheses
中央資管：范錚強
10
理論驗證
構念層次
X
因果關係：實徵支持
學說：因果關係
Y
操作化
操作化
x
因果、共變關係
統計結論
y
測量
誤差
操弄、測量
中央資管：范錚強
實質層次
誤差
11
Approaches for Exploratory Investigations
Participant observation
Film, photographs
Projective techniques
Psychological testing
Case studies
Ethnography 民俗誌
Expert interviews
Document analysis
Proxemics and Kinesics 肢體
語言學
中央資管：范錚強
12
Desired Outcomes
of Exploratory Studies
Established range and scope of possible
management decisions
Established major dimensions of research
task
Defined a set of subsidiary questions that can
guide research design
尋找規則 Law 和初步檢視可能的原因
中央資管：范錚強
13
Desired Outcomes of
Exploratory Studies (cont.)
Developed hypotheses about possible causes of
management dilemma
Learned which hypotheses can be safely
ignored
Concluded additional research is not needed or
not feasible
中央資管：范錚強
14
Commonly Used Exploratory Techniques
Secondary Data
Analysis
Experience
Surveys
Focus Groups
中央資管：范錚強
15
Face-to-face interaction—
one of the best ways to
learn from participants.
中央資管：范錚強
16
Experience Surveys
What is being done?
What has been tried in the past with or without
success?
How have things changed?
Who is involved in the decisions?
What problem areas can be seen?
Whom can we count on to assist or participate in the
research?
中央資管：范錚強
17
Focus Groups
Group discussion
6-10 participants
Moderator-led
90 minutes-2 hours
中央資管：范錚強
18
Data Collection Method
Monitoring:
觀察、資料蒐集
行為
Communication:
詢問
態度、看法、瞭解程度
中央資管：范錚強
19
The Time Dimension
Cross-sectional
單一時間斷面
無法確認因果關係方向
Longitudinal
長時間
投入資源可能太多
中央資管：范錚強
20
The Topical Scope
Statistical Study
Case Study
Breadth
Depth
Population inferences
Detail
Quantitative
Qualitative
Generalizable findings
Multiple sources of
information
陷阱：整合採取兩個方法的短處
統計分析缺乏廣度
個案分析缺乏深度
中央資管：范錚強
21
The Research Environment
Field conditions
Lab conditions
Simulations
中央資管：范錚強
22
Purpose of the Study
Reporting
Descriptive
Casual Explanatory
Causal Predictive
中央資管：范錚強
23
Descriptive Studies
Who?
How much?
What?
When?
Where?
中央資管：范錚強
24
Descriptive Studies
Descriptions of population
characteristics
Estimates of frequency of
characteristics
Discovery of associations
among variables
樣本代表性極端重要
中央資管：范錚強
25
Experimental Effects
Ex Post Facto Study
Experiment
After-the-fact report on
what happened to the
measured variable
事後回溯
Study involving the
manipulation or control of
one or more variables to
determine the effect on
another variable
可操弄、控制
中央資管：范錚強
26
Ex Post Facto Design
Fishing Club Member
Non-Fishing-Club Member
Age
High Absentee
Low Absentee
High Absentee
Low Absentee
Under 30 years
36
6
30
48
30 to 45
4
4
35
117
45 and over
0
0
5
115
中央資管：范錚強
27
Causation and Experimental Design
Control/
Matching
Random
Assignment
中央資管：范錚強
28
Mills Method of Agreement
中央資管：范錚強
29
Mills Method of Difference
中央資管：范錚強
30
Causal Studies
Symmetrical
ZX
ZY
Reciprocal
XY
YX
Asymmetrical
XY
中央資管：范錚強
31
Understanding Casual Relationships
Property
Behavior
Response
Disposition
中央資管：范錚強
Stimulus
32
Asymmetrical Casual Relationships
Stimulus-Response
PropertyDisposition
PropertyBehavior
Disposition-Behavior
中央資管：范錚強
33
Fishbein & Ajzen 的 TRA
Aijen and Fishbein: TRA
Theory of Reasoned Actions 慎思行動理論
Beliefattituteintentionbehavior
哪個是哪個？
Stimulus: 刺激
Property: 性質（人口變數、個人特質等）
Disposition: 態度、選擇、傾向
Behavior: 行為
中央資管：范錚強
34
Exhibit 6-6 Types of Asymmetrical Causal
Relationships
Relationship Type
Nature of Relationship
Examples
Stimulus-response
An event or change results in a
response from some object.
A change in work rules leads to a higher level of worker output.
A change in government economic policy restricts corporate
financial decisions.
A price increase results in fewer unit sales.
Property-disposition
An existing property causes a
disposition.
Age and attitudes about saving.
Gender attitudes toward social issues.
Social class and opinions about taxation.
Disposition-behavior
A disposition causes a specific
behavior.
Opinions about a brand and its purchase.
Job satisfaction and work output.
Moral values and tax cheating.
Property-behavior
An existing property causes a
specific behavior.
Stage of the family life cycle and purchases of furniture.
Social class and family savings patterns.
Age and sports participation.
中央資管：范錚強
35
Evidence of Causality
Covariation between
A and B
Time order of events
No other possible
causes of B
中央資管：范錚強
36
Participants’ Perceptional Awareness
No deviation perceived
Deviations perceived
as unrelated
Deviations perceived as
researcher-induced
中央資管：范錚強
37
研究中的效度Validity理念
替代效果
構念層次
X
外部效度
Y
構念效度
構念效度
操作化
操作化
內部效度
x
操弄、測量
因果關係
統計結論效度
y
共變關係
誤差
測量
操作層次
中央資管：范錚強
誤差
38
統計結論效度
Statistical Conclusion Validity
Q:研究中的因變數和自變數是否相關？
(共變 co-variation)
研究設計的敏感度是否足夠顯示資料間
的共變
若敏感度構，是否有足夠的証據支持
「因」和「果」之間有共變？
如果有充分証據顯示其間的共變，其強
度為何
中央資管：范錚強
39
對統計結論效度的威脅
分析缺乏統計力
樣本大小、信心水準的影響
違背統計測試的假設
母體分布、均質性、自變數之間的獨立性
在資料中找尋「規則」
多重比對、資料的特例
衡量方法的信度
實驗操弄的信度
實驗情境中的隨機偏誤
其他外在的、未被控制的影響因素
回答問卷者的系統性誤差
中央資管：范錚強
40
內部效度 Internal Validity
Q:若A和B共變，其間有何因果關係？
A->B
A??B
B->A
A->C->B
A
B
+
C
A
+
-
A
B
C
A
+
B
-
C
+
-
-
C
替代的
因果關係
+
B 第三變項
的干擾
內部效度的精神在於排除第三變項對A-B關係的替代性解釋
中央資管：范錚強
41
對內部效度的最主要威脅
發生歷史事件
樣本成熟
受測樣本在前測和後測之間的成長，例如，熟悉測試工具
測量工具改變
統計迴歸
例如：將樣本依前測得分分組，高分組退步，低分組進步
選擇偏誤
樣本流失
因果關係的混淆
在相關性研究中，經常發生
中央資管：范錚強
42
構念效度 Construct Validity
構念的操作化是否良好
操作化：操弄和測量
必須確保
自變數的確反映了相關的構念
自變數不會隨著相關、但不同的變數做改變
依變數應該反映了相關的構念
依變數不應該受無關變數的影響
針對同一個構念的不同衡量結果應該收斂
針對相關但不同構念的衡量結果應該發散
中央資管：范錚強
43
對構念效度的威脅
操作化前對構念搞不清楚
構念的定義、操作化定義、它確切的意義
單一操作化的偏誤
實驗中，需要多項操弄水準、劑量
單一方法的偏誤
需要測量多個「外顯」的變數
樣本對研究假說的猜測
中央資管：范錚強
44
對構念效度的威脅2
樣本對測量感到緊張
樣本對研究有特殊期望
構念混淆、模糊，構念的程度差異
不同操弄之間的相互影響
操弄和測量之間的相互影響
中央資管：范錚強
45
信度 Reliability
測量工具的穩定度、可靠度
重測信度、折半信度、複本信度
測量工具的內部一致性
項目間的信度(e.g. Cronbach a)
評分員間的信度
中央資管：范錚強
46
外部效度 External Validity
Q: 研究結果能否推論到整個目標母體？
母體—我們在說哪一個？
目標母體
針對目標母體所作的正式描述
在實徵研究中，實際達成的樣本所對應的母體
另外一個和外部效度相關但不同的觀念：
可類化性Generalizability
研究結果可推廣到其他母體的程度
中央資管：范錚強
47
外部效度 External Validity
規劃樣本
實際達成
的樣本
目標母體
正式描述
實際達成的母體
中央資管：范錚強
48
對外部效度的威脅
研究情境的影響
在某企業中進行研究
選擇和操弄間的相互影響
自我選擇可能會排除某一類的樣本
例如：新藥的測試，自願者求生意願較強
研究情境和操弄間的相互影響
歷史事件和操弄間的相互影響
過程長的研究
中央資管：范錚強
49
透過抽樣增進外部效度
全面隨機抽樣
求取代表性、統計力強
經常昂貴、實驗室實驗下不可行
分層隨機抽樣
刻意求取樣本的異質性
每一個母體中的子群體都被納入
選取典型樣本
統計力弱、在學術研究中不利
每一個母體中的子群體都被納入
中央資管：范錚強
50
透過重複研究增進外部效度
不同的重複可能、各有優劣
同時重複、連續重複
獨立研究人員、相同研究人員
真實重複、假設重複（大型研究中的不同部份）
比較好的重複研究
多個小型的研究
多個情境
多個研究者
中央資管：范錚強
51
研究效度間的取捨
學術性研究
內部效度構念效度統計結論效度外部效度
實務性研究、應用研究
內部效度外部效度依變數的構念效度統計結論效
度自變數的構念效度
在進行研究設計時，研究者必須清醒的對各種效度
的考量，做全盤的取捨
例如：在研究管理者決策訂定的研究時，應該用學生為
樣本（高可行性、高內部效度、低外部效度）；還是在
真實情境用真實的經理人員（低可行性、低內部效度、
高外部效度）
中央資管：范錚強
52
研究方法的選擇
強方法 Strong methods
能明確地呈現內部校度
實驗室研究
弱方法 Weak methods
Ex post facto, 自然觀察，訪談…
中央資管：范錚強
53