簡報檔 - 教育行政與評鑑研究所

Download Report

Transcript 簡報檔 - 教育行政與評鑑研究所

臺灣高等教育整合資料庫建置
報告
市立教育大學報告
王麗雲
國立臺灣師範大學教育學系
教育研究與評鑑中心
2012年10月1日
報告重點
•
•
•
•
•
•
•
• 臺灣高等教育整合資料庫
Taiwan Integrated Postsecondary Education Database
(TIPED)
建置背景
建置目的
設計理念
調查實施
調查成果
未來挑戰與展望
什麼是次級資料?
• Secondary data is data collected by
someone other than the user.
• 要資料做什麼?
• 別人為何要幫我們蒐集資料?
• 我們為何要用別人蒐集的資料?
要資料做什麼?
•
•
•
•
瞭解現況
瞭解趨勢
瞭解因果機制
預測
• 以便能夠
– 行動
– 解謎與解釋
– 發表與畢業
為何別人要幫我們蒐集資料?
•
•
•
•
資訊蒐集
政策學習
績效責任
節省調查經費
為何我們要用別人蒐集的資料?
•
•
•
•
節省調查經費
資料品質優良
樣本具代表性
可以重覆研究
次級資料庫能做什麼?
•基礎性:探索性強,深入性稍受限
•全面性:有架構,但未必服務特定理論
•公共性(政策導向,別的學者搜集的資料很
難變成你的次級資料)
次級資料庫不能做什麼?
•研究旨趣未必相同
•構念測量未必完整(有什麼跑什麼?)
•時間過於久遠
•資料釋出較受限(時間、隱匿性)
臺灣高等教育整合資料庫建置背景
•源起
• 彭森明教授原服務於美國教育部國家教育統計中心,應清
華大學之聘回國建置。
• 初始補助單位為國科會與教育部。
• 2004年首次進行大一大三調查(高等教育師生調查)。
• 2004年首次進行91學年度畢業生畢業後一年調查(畢業生
流向調查)。
• 2006年彭森明教授由清華大學調任國立台灣師範大學,計
畫改隸國立臺灣師範大學。
臺灣高等教育整合資料庫建置背景
•現況
補助單位 教育部
執行單位 國立臺灣師範大學教育研究與評鑑
中心教育資料組
主持人
彭森明(2009年1月前)
王麗雲(2009年1月後)
臺灣高等教育整合資料庫建置背景
執行單位:教育研究與評鑑中心研究內容
臺灣高等教育整合資料庫建置背景
教育研究與評鑑中心組織架構
臺灣高等教育整合資料庫建置背景
臺灣高等教育整合資料庫
ll
畢業生流向調查
(應屆畢、畢業後一、畢業後三調查)
+
高等教育師生調查
(大一、大三調查,大專教師調查)
+
師資生調查
臺灣高等教育整合資料庫建置背景
•
•
•
•
臺灣高等教育整合資料庫網址:
http://www.cher.ntnu.edu.tw/
臺灣師資培育資料庫:
https://tted.cher.ntnu.edu.tw/
臺灣高等教育整合資料庫建置背景
• 建置過程中的挑戰與成長
•
•
•
•
•
學校抗拒
本土網路調查經驗
經費穩定性
調查價值
人力資源
臺灣高等教育整合資料庫建置目的:
高等教育改進
What
資料分析
How
改進行動
Why
學術研究
建置信實可靠
的高等教育整
合資料庫,說
明高等教育現
況與趨勢變化,
以及學校辦學
現況
提供高等教育
資訊,作為教
育、人力、經
濟、產業等相
關決策與改革
參考,並回答
重要的辦學與
政策問題
透過高等教育
相關議題的研
究,提供以證
據為基礎的建
議,作為實務
改進或理論討
論的依據
臺灣高等教育整合資料庫建置目的
政策研究
(Policy Research)
校務研究
(Institutional Research)
學術研究
(academic research)
臺灣高等教育整合資料庫設計理念
•長期性
•橫斷性
•個人層級
•機構層級
臺灣高等教育整合資料庫設計理念
•問卷架構
•強調問卷架構而非理論架媾
•以IOEO架構引導問卷設計
臺灣高等教育整合資料庫調查架構
 IOEO問卷架構
Input
說明:1=大一問卷;3=大三問卷;4=應屆畢業問卷;+1=畢後一年問卷;+3=畢後三年問卷。
Opportunity
Effort
Outcome
Ability
Curriculum & Instruction
Time Allocation
Academic
Competence(1、3、4、+1、+3)
Entrance test score(1)
Language ability(1,4)
Class ranking and track(1、+1、+3)
Quality / diversity(3、4)
General & common education(3)
Teaching/Testing Method(3)
Classroom Conext(1、3、4)
Hidden Curriculum(1、3、4)
Career Guidance(3、4)
Sleep (1、3)
Internet (1、3)
Study (1、3)
Work (1、3)
Leisure(1、3)
Grades/performance (1、3、4)
Ed expectation(1、3、4、+1、+3)
Core competency(4、+1)
Certification/license(4、+1、+3)
Teachers & Peers
Study plan
Psychological and Behavioral
Outcome
Certification/license(1、+1、+3)
Family & Neighborhood
SES(1、+1)
Family composition(1、3、4、 +1、
+3)
Family relationship/ Expectation(1、3)
Ethnicity background(1、3)
Religion(1、3)
Neighborhood(1)
Disposition
Attitudes towards education and work
(1、+1、+3)
Work and Education Expectation(1)
Teacher Quality(1、3)
Teacher/student relationship(1、3)
Peer environment(1,3)
Reference group(1,3)
Conditions of life
School Infrastructure
Club(1、4)
Department Context(1、3)
Administrative Support(1、3)
Learning Support(1、3)
Facilities(1 、 3)
Work experiences(4、+1、+3)
Learning behavior
Homework(1、
3)
Economic condition and support(1、3、
Class participation(1、3)
4、+1、+3)
Study
habit(1、3)
Living conditions(1、3、4)
Reading behavior(1、3)
Working Conditions(1、3)
Library behavior(1、3)
Prior Experiences
Schooling experiences(1、+1、3)
Curriculum choice(3)
Further study plan(4、+1、+3)
School choice(1、3)
College plan(1)
Job choice(4、+1、+3)
Participation
Cultural participation(3)
Social participation(3)
Club(1、3)
International participation(4)
Mental health(1、3)
Self-efficacy(1、3)
Academic self-concept(+3)
Value(3、4)
Delinquent behavior(3)
Internet behavior(1 、3)
Career/Employability
Work expectation(4、+1、+3)
Employability(4、+1、+3)
Career plan(4)
Income expectation(4)
Employment experienes(4、+1、+3)
Satisfaction with college
education
Self assessment(1、3、4、+1、+3)
School assessment (4、+1、+3)
•IOEO架構
•Input
–Ability
–Family Background and Neighborhood
–Disposition
–Prior School Experiences
–Employment History
臺灣高等教育整合資料庫設計理念
•IOEO架構
•Opportunity
–Curriculum & Instruction
–Teachers & Peers
–Conditions of Life
–School Infrastrucutre
臺灣高等教育整合資料庫設計理念
•IOEO架構
•Effort
–Time allocation
–Study plan
–Learning Behavior
–Participation
臺灣高等教育整合資料庫設計理念
•IOEO架構
•Outcome
–Academic
–Psychological & Behavioral Outcome
–Career/Employment
–Satisfaction with College Education
臺灣高等教育整合資料庫調查實施
調查對象
調查名稱
調查學制/對象
調查年級
一般大學、四技、二技、五專、二 大、碩、博
畢業生流向調查(應
屆畢、畢業後一、畢 專、進修部、在職專班/普查
業後三)
高等教育師生調查: 一般大學、四技、二技、二專/抽
大一大三調查
查+普查
大一、大三
學生
高等教育師生調查: 在職本國籍專任教師/普查
大專教師調查
師資生調查
同上,修有師資職前培育課程者/
普查
大一、大三、
碩、博
臺灣高等教育整合資料庫調查實施
參與機構
主辦單位
教育部高教司
顧問單位
青輔會、國科會、經建會、行政院科技顧問組、
勞委會、工研院、資策會
參與校院
全國一般大學校院及技職校院
(不含軍警校院及空中大學)
執行單位
國立臺灣師範大學教育研究與評鑑中心
臺灣高等教育整合資料庫調查實施
團隊成員
王秀槐老師
「高等教育整合資料庫」之「畢業生流向調查」與
林大森老師
「大一大三調查」問卷專家諮詢委員
楊孟麗老師
劉曉芬老師
「高等教育整合資料庫」之「畢業生流向調查問卷」
專家諮詢委員
「高等教育整合資料庫」之「大一大三調查問卷」專家諮詢委
員
關秉寅老師
黃雅容老師
劉若蘭老師
陳曉郁老師
林信榕老師
紀金山老師
張民杰老師
「師資培育資料庫調查」專家諮詢委員
張炳煌老師
張素貞老師
張嘉育老師
黃嘉莉老師
楊志強老師
臺灣高等教育整合資料庫調查實施
團隊成員
劉曉芬老師
張德勝老師
王秀槐老師
「高等教育整合資料庫」之「大專校院專任教師調查問卷」專 田芳華老師
家諮詢委員
戴曉霞老師
林嘉洤老師
李天任老師
湯誌龍老師
臺灣高等教育整合資料庫調查實施
執行流程
調查準備階段
資料蒐集與分析
母群名單、聯絡方
式蒐集
資料蒐集與催收
文獻分析、比較研
究、焦點團體座談
資料清理、檢誤、
權重計算
成果運用
高等教育議題分析
高等教育研究電子報
行政人員工作坊
問卷編製
資料分析
研究人員工作坊
焦點團體座談、認
知訪談、預試
報告撰寫
研究成果發表會
問卷定稿、網路問
卷調查平台設計輔
助查詢系統設計
調查工作檢討改進
臺灣高等教育整合資料庫調查實施
調查方式
主要方式:網路問卷
• 節省經費
• 方便催收
• 減少如面訪或電訪因個人隱私因素所造成的拒訪。
• 不致產生訪員效應。
• 程式引導受訪者跳答,防止受訪者自填問卷時發生跳答錯誤。
• 納入網路填答檢查機制,大幅降低漏答情形。
• 省去資料鍵入的程序,避免人工資料處理、鍵入的錯誤。
次要方式:紙本問卷
• 對於不方便上網填寫問卷之受訪者,先以紙本問卷進行資料蒐集,
再以人工方式將受訪者之答案輸入問卷系統中。
臺灣高等教育整合資料庫調查實施
資料處理
• 資料清理
• 母群與樣本確定
• 不合理值
• 資料檢誤
• 資料檢誤
• 邏輯檢誤
• 權重計算
• 以學校、學類四碼、性別分組,計算每組樣本人數及
回收人數,兩者之比率即為該組之回收權重。
臺灣高等教育整合資料庫調查實施
資料安全
•機房環境監控系統
•防火牆設施
•異地備份
•機房門禁控管
• 成員控管
• 資訊分級控管
• 存取控管
• 釋出控管
• 資料加密
臺灣高等教育整合資料庫調查實施
資料釋出
• 釋出資料類型
•即時資料(excel) :未清理,不含個資,
調查開始即獲得
•各校資料(SPSS) :已清理,不含個資。
•公開資料(SPSS) :已清理,無學校及系所
編碼,有個人姓名身份外之個資。
臺灣高等教育整合資料庫調查實施
資料釋出
• 目前暫停釋出
•資料庫清理完畢後,透過工作坊與研討會說明資
料庫之使用。
•未來(?)
•個人與機構需要使用資料,經中心審核同意後,
方釋出調查資料檔以利公共使用。公開使用版不
提供個別學生、系所、學校資料,僅供整體分析
與公共良善用途。
•欲使用調查資料者需完整填寫申請表且同意資料
相關使用規範後,始授予權限下載資料。
臺灣高等教育整合資料庫調查成果
(☆:已完成;★:進行中;___:加掛師資生)
學年度
91
92
93
94
95
96
97
98
調查名稱
大一調查
☆
☆
☆
大三調查(含二技)
☆
☆
☆
大專教師調查
☆
應屆畢業生調查
(大碩博)
畢業後一年調查
(大碩博)
畢業後三年調查
(大碩博)
☆
★
☆
☆
☆
☆
☆
☆
☆
☆ ★
臺灣高等教育整合資料庫調查成果
回收率
調查名稱
回收數
樣本數
回收率(%)
92大一
33,959
49,575
68.5
92大三
94大一
30,272
52,315
48,905
75,057
61.9
69.7
94大三
97大一
15,036
58,098
24,690
84,200
60.9
69.0
97大三
53,490
79,836
67.0
97二技
6,220
8,304
74.9
臺灣高等教育整合資料庫調查成果
回收率
調查名稱
回收數
樣本數
回收率(%)
93畢業後一大專
16,387
48,916
33.5
93畢業後一碩士
93畢業後一博士
6126
348
38,772
2,035
15.8
17.1
94畢業後一大專
94畢業後一碩士
94畢業後一博士
88,694
11,912
711
262,408
47,270
3,307
33.8
25.2
21.5
95畢業後一大專
95畢業後一碩士
203,101
31,454
263,084
46,120
77.2
68.2
95畢業後一博士
1,885
2,704
69.7
臺灣高等教育整合資料庫調查成果
回收率
調查名稱
回收數
樣本數
回收率(%)
94畢業後三大專
180,623
267,194
67.6
94畢業後三碩士
94畢業後三博士
22,148
1,150
42,592
2,550
52.0
45.1
臺灣高等教育整合資料庫調查成果
• 對國家來說
•
•
•
•
掌握畢業生流向與發展
瞭解人才供需現況與問題
作為各部會規劃擬定政策的參考
根據調查資訊評估及檢討教育政策與實務之成
效與問題
• 針對特定政策議題提供答案
臺灣高等教育整合資料庫調查成果
觀觀觀觀觀觀
觀觀觀觀觀觀
觀
觀
觀
觀觀觀
觀觀觀觀
觀
觀
觀
觀觀觀觀觀觀觀
觀觀
觀觀觀觀觀
觀觀觀
觀觀
觀觀觀
觀觀觀觀觀觀 觀觀觀觀觀觀
觀觀觀觀觀觀觀觀觀
觀觀觀觀觀觀觀觀觀
觀 觀 觀 觀+
觀 觀 觀 10觀
觀觀觀觀觀觀觀觀觀
觀觀觀觀觀觀觀觀觀觀
評估、整合各專案調查資料
觀觀觀觀觀觀
觀觀觀觀觀觀
(觀 觀 觀 觀 觀 觀 觀 )
特殊資料蒐集
觀觀觀觀觀觀
各專案調查、蒐集資料
臺灣高等教育整合資料庫調查成果
• 對學校來說




瞭解學校教師、在校生與生畢業生的流向、發
展與意見,強化畢業生輔導單位之組織與功能
進行校務資料(institutional data)分析,調整學
校辦學策略
獲得辦學資訊,提升大專校院決策、行政與服
務之回應性
提升大專校院校務研究水準,提升高教品質
臺灣高等教育整合資料庫調查成果
• 提供學校的具體產品
– 學校分析報告
– 系所分析報告
– 其他校務分析需求
– 各校調查資料
臺灣高等教育整合資料庫調查成果
免費分析報告先決條件
調查結案
回收率達75%以上
學校有特殊需求
依回收率由高至低
來文說明
製作分析報告
電子檔e-mail寄送
學校回傳簽收單
臺灣高等教育整合資料庫調查成果
• 資訊應用與傳播
– 電子報
– 工作坊
– 研討會
– 資料釋出
臺灣高等教育整合資料庫調查成果
•學術研究成果:應用本資料庫發表之研討會論
文、期刊論文、碩博士論文至95年止逾140篇,另
有專書。
•應用推廣成果:
–工作坊:由95年迄今共辦理五場工作坊。說明
資料庫應用方式。
–電子報:迄今共出版43期,介紹高等教育資料
庫分析成果與相關高等教育研究資訊。
– 未來展望:區分行政人員與學界(含研究生),
分別辦理工作坊與研討會。
臺灣高等教育整合資料庫調查成果
• 可能成果
• 1. 整合國內高等教育研究社群與決策人力,研討高等教
育重要議題;
• 2. 提供信實、相關、重要、即時之高等教育資訊;
• 3. 透過個人層級師生資料之搜集,解釋與預測高等教育
中之重要議題;
• 4. 發佈國內高等教育現況、趨勢、挑戰與表現相關資料,
爭取各界對高等教育的關心與支持;
• 5. 節省各界對高等教育相關資料搜集重覆之成本、人力
與時間,提升高等教育資料品質與研究結果之推論性;
• 6.在高教研究與高等教育決策品質提升的帶動下,使我國
高等教育能卓越發展。
臺灣高等教育整合資料庫調查成果
• 可能成果
•透過長期追蹤資料(longitudinal data)之建置,
能提供對高等教育機構與個人更強的因果解釋力;
•提供長期趨勢資料;
•與國內已有或未來擬開發之資料庫(如臺灣教育長
期追蹤資料庫、TASA等、大專院校畢業生流向調
查、師資生資料庫)串連。
未來挑戰
• 經費穩定性
• 人力穩定性(學校、計畫)
• 時間軸
未來展望
• 調查品質提升
– 問卷精簡
– 問卷多元
– 回收率提升
– 權重計算精緻化
– 品質檢測
未來展望
• 應用價值提升
– 線上分析系統開發
– 資料庫合併加值
– 應用推廣:校務分析、學門分析
– 深入議題分析報告
– 決策諮詢
未來展望
• 國際接軌
– Baccalaureate and Beyond
– Beginning Postsecondary Students Longitudinal
Study
– High School & Beyond
– National Longitudinal Survey
– National Study of Postsecondary Faculty
– OECD Feasibility Study for the International
Assessment of Higher Education Learning Outcomes
– The Freshman Survey
– College Senior Survey