Transcript 11/17 博四邱文玉體育行政主管機關績效評估

(博士論文計畫書初稿報告)
體育行政主管機關績效評估模式之建構-多元方法之整合
A Performance Evaluation Model for the Sports Agency in Taiwan ：
A Mixed-method Approach
指導教授：林財源 博士
李元墩 博士
學
2011/11/17
生：邱文玉
1
報告大綱
一、緒論
體育行政主管機關
績效評估模式
之建構
二、文獻探討
三、研究設計與方法
四、預期成果
2011 / 11 / 17
2
第一章 緒論
2011 / 11 / 17
3
研究背景
 詹乾隆、吳麗雲（2010）提出近年來世界各國面對整體環境變
化，紛紛投入政府再造與行政革新，以提昇政府施政績效。
 目前各國政府包括台灣、美國、澳洲、紐西蘭、英國、瑞典、
加拿大甚至亞洲的新加坡政府等，皆以績效管理理論其中的平
衡計分卡（balanced scorecard, 以下簡稱BSC）以提昇政府施
政 績 效 （ Quinlivan, 2000 ； Muldrow, Buckley & Schay, 2002 ；Schay, Beach,
Caldwell & Lapolice, 2002； McAdam & Walker, 2003；吳安妮，2004；詹乾隆等，2010）
 平衡計分卡是為改善企業組織的管理，但是在改善政府與非營
利組織的管理上，效果更好（Atkinson & McCrindell, 1997；Silk, 1998；
Kloot & Martin, 2000；Irwin, 2002；Liang & Hou, 2006；Sterling, 2007；吳安妮，2003
、2005）
2011 / 11 / 17
4
 張柏森（2004）於「行政機關施政績效評估作業推動現況」
需修正的問題，例如策略績效目標與衡量指標連結仍待強化
、績效目標與衡量指標挑戰度不足、施政計畫與預算編列尚
難結合等，均影響評估的結果，這些都需要持續改善與精進
。資料造假（data corruption）和挑軟柿子吃（creaming）等
問題（Grizzle, 2002）
 所以許多以平衡計分卡進行績效評估的相關文獻，運用不同
的研究方法（質性或量化）探討績效評估議題，但欠缺在整
體研究設計上，表述研究方法之邏輯性
2011 / 11 / 17
5
研究背景
 交通部、體委會、通訊傳委員會、臺灣省政府等機關績效表現
較低（張四明，2009 ），至今存在諸多單位並未建構完整的
績效評估指標，我國最高中央體育行政組織暨行政院體育委員
會，簡稱體委會，亦在其現象當中。
 蘇維杉（2010）過去體委會制定體育政策白皮書或是中長程的
施政方針，這些政策傳達的語言都太過抽象，各級體育行政組
織或民眾往往不容易理解。
 體委會正面臨組織變革，預於2012年與教育部體育司合併成立
「體育署」，亦即國家推動「組織改造」之際，原兩單位之功
能合併後將面對未來一連串的挑戰，是故體育署必須建立一個
完整的組織績效評估系統，以促進組織發揮最大效益。
2011 / 11 / 17
6
理論的研究缺口
BSC理論之應用性?
改善政府與非營利組織的管理上效果更好?
Gap
學者認為此理論過於封閉?
BSC理論結合其他評估方法的意義與效果?
林文晟（2006）如再結合績效值可量化的數量模式與方法：
資料包絡分析法、層級分析法、區別分析、集群分析、線性迴歸
、灰關聯分析及模糊理論等，將更助於組織績效衡量。
Why
2011 / 11 / 17
7
行政組織管理實務之重要性
專有制度及文化的獨特性組織績效評估
吳安妮（2004）指出政府機關對於BSC制度之著墨甚少。
Gap
專注於政府部門績效評估的研究相當有限（劉順仁，2007），
在進行各單位的績效評估時，須了解各行政機關的工作內容及
特質差異頗大，因此為使評估指標更精緻化，實需依據各機關業
務特性之差異，訂定該業務評估指標。
機關的績效評估制度面與執行面之對應關係
朱鎮明（2007）指出國內機關只將現在「所有」指標歸類並塞進
四大構面，過多指標意味沒有確認少數關鍵的績效指標、沒能設
計與明確指出具體的關聯與數據目標值（quantifiable targets）
張四明（2010）也提出從「You get what you measure.」的觀點
強調衡量指標與目標值的訂定才是關鍵所在，建立屬於自己組織
的指標是未來績效評估發展的趨勢及重要工作（郭昱瑩，2004）
2011 / 11 / 17
8
研究目的
 運用多元研究程序模式(mixed research process model)
建構體育行政主管機關平衡計分卡績效指標系統
【觀念與方法之創新】 【學術價值】
 探討平衡計分卡理論應用於政府機關/獨特性之發展
【學術、實務價值】
2011 / 11 / 17
9
論文結構
探討國內外體育行政主管機關
績效評估情況
發展該機關BSC績效指標系統
探討該機關BSC績效指標系
統層級與指標之權重配分
分析該機關歷年之重點績效
整合多元方法建構該機關之績
效評估模式
2011 / 11 / 17
10
第二章 文獻探討
2011 / 11 / 17
11
文獻探討
績效評估
(平衡計分卡)
政府機關績效評估
中央體育行政組織
績效評估
觀念性
架構
2011 / 11 / 17
12
文獻探討-績效評估
績效管理脈絡
區別
定義
年代
重要學者
重要理論
重點主張
評述
2011 / 11 / 17
績效評估
績效管理
策略績效管理
績效評估係指一個組 績效管理係指組織對其有 策略績效管理係指組織管理以
織為其特殊目的，選 助於績效的活動，採取一 策略為核心，結合組織的資源
擇適當的績效指標， 套有系統的管理方法，以 與作業流程，採取一系列有效
針對評估標的（組織、 達成組織整體的績效目標。 管理活動，包括策略規畫、目
政策、個人）進行執 而組織績效活動包括目標 標設定、作業流程管理、支援
行過程與結果的評量， 設定、作業流程管理、激 系統建構、激勵與獎酬制度、
以引導組織績效目標 勵與溝通、鼓勵創新與學 鼓勵創新與組織學習、建立績
的達成
習、建立績效標竿及績效 效標竿、績效制估及風險管理
評估等
等，以創造組織價值及達成組
織績效目標
1970年代
1980年代以後
1990年代以後
Drucker（1973）
Adnum（1993）
Kaplan and Norton（1992）
OECD（1994）
Thompson and Strickland（2001）
Saltmarshe, Ireland and
Robbins（1990）
McGregor（2003）
Verweie and Berghe（2004）
Berman（2006）
3E模式
管理系統活動
平衡計分卡
績效管理特徵
策略管理五大任務
整合績效管理
以績效評估引導決策 強調目標設定及系統流程 強調願景與策略引導、規畫與
與產出；主張生產力 活動管理；強調過程與結 執行結合；注重長期目標與多
強調成果導向
果並重
元績效；結合策略、資源與流
程管理
過於強調最後結果的 缺乏整合績效活動流程管 為目前學者運用在績效管理及
績效，容易產生只注 理；在資源引導限制下， 績效評估相關研究的趨勢
重短期績效，而忽略 組織必須要有願景與策略
組織長期發展；績效 引導
是規畫與執行出來的，
而不是評估出來的
資料來源：邱吉鶴（2008）與本研究整理 13
文獻探討-績效評估
平衡計分卡
(BSC)
資料來源：McAdam and Walker（2003）與本研究整理
2011 / 11 / 17
14
文獻探討-績效評估
 BSC理論與評估方法應用
 林文晟（2006）指出BSC的管理工具如能再結合績效值可量
化的數量模式與方法，將有助於整體經營績效的衡量。文
獻中指出，不同組織績效管理與評估的目的，可以選擇不
同類型的績效評估方法（Sean, Theobald & Jill Nicholson,
2006）。
 非數量性分析（non-quantitative analysis）
 半數量性分析（semi-quantitative analysis）
 數量性分析（quantitative analysis）
 為了解決評估績效所存在的若干問題，慎選一個合適的評
估模式、指標與方法是相當重要的。績效目標應具備「代
表性」、「客觀性」及「量化性」，而衡量指標則應包括
「具體評估方式」及「衡量標準」。
2011 / 11 / 17
15
文獻探討-績效評估
 Wu, Tzeng and Chen（2009）利用模糊多準則決策方法整合BSC進行銀行績
效評估。
 Huang（2009）利用BSC與層級分析法，發展一個智慧型BSC知識基礎系統。
 Eilat, Golany and Shtub（2008）利用評分計分卡架構結合資料包絡分析
（DEA）法，發展出DEA-BSC模式進行研發專案績效評估。
 García-Valderrama, Mulero-Mendigorri and Revuelta-Bordoy（2009）
亦結合BSC與資料包絡分析法進行廠商研發效率之評估。
 陳偉杰（2008）立法院會議績效管理模式之建構以BSC理論為基礎，運用深
度訪談與層級分析法等。
根據文獻得知，許多研究雖運用不同的研究方法進行績效評估議題，
但欠缺在整體研究設計的邏輯性與連結性的表述。
2011 / 11 / 17
16
文獻探討-績效評估
 換句話說，
當我們運用某種方法在某一階段，
必定是為了解決什麼，
層次上的銜接問題又為何，
所以選擇哪一種研究方法進行探討與分析。
這整個動態的流程的目的性與邏輯性的完整，
才能確切的達到該研究的最終目的。
【研究缺口與本研究目的】
2011 / 11 / 17
17
文獻探討-政府機關績效評估
 國內外行政機關運用BSC之研究
2011 / 11 / 17
資料來源：于泳泓（2002）與本研究整理
18
 組織屬性的不同，適用於一般營利機構的傳統平衡
計分卡構面及衡量焦點，並非可全盤適用於政府組
織。建構政府組織的策略管理體系，設計一套合適
的組織績效指標衡量系統，以期提升績效實為當務
之急。又因國內外應用平衡計分卡於政府機關之著
墨甚少。
【研究缺口與本研究目的】
2011 / 11 / 17
19
文獻探討-中央體育行政組織績效評估
資料來源：教育部（2010）
2011 / 11 / 17
20
文獻探討-中央體育行政組織績效評估
 我國體育白皮書結合時代脈動，善用國內相關部會（衛生署
、內政部、行政院主計處、經濟部、教育部與體委會等）之
統計資料與資源，以及國外政府機構之研究成果與指標。
 故本研究參照中華民國體育白皮書（2007）指出推展體育運
動較有成效的國家其中有美國、德國、法國、日本、中國，
另並納入近期西班牙體育行政組織運用平衡計分卡之實例文
獻進行深入討論。
2011 / 11 / 17
21
文獻探討-中央體育行政組織績效評估
2011 / 11 / 17
22
文獻探討-中央體育行政組織績效評估
法國體育組織
1.
2.
3.
4.
運
動
體
育
面
向
5.
6.
7.
學
校
體
育
面
向
主要任務
國家層級的組織
會議、補助各級優秀運動員、舉辦運動賽會
地方政府層級組織
同上
運動協會組織
運動選手的比賽許可、競賽、運動員培育、器材設備支援、發展計畫支援
奧會組織
選手選拔、申辦奧運賽會、推廣奧運精神與奧運教育的主要單位
策略目標
指標
規畫與執行公共 業務成果部分
健康、運動、身 1.運動相關的職業訓練以及運動教練（指導員）之培訓
體活動和運動參 2.接待優秀運動員
與
3.協助參與運動協會之校園運動指導
舉辦運動賽會
4.補助各級優秀運動員
接待及補助各級 5.舉辦運動賽會
優秀運動員
6.提升婦女參與運動實踐的人口，改善失能者的運動參與機會
協助參與運動協 7.提供110個運動協會經費補助，用以擴大運動參與的人口
會之校園運動指 8.同時制定運動安全的規範與相關法令
導
9.協助體育、運動學協會的專業化管理，尤其是在「運動就業
運動相關的職業 方案」方面
訓練以及運動教 10.發展政策宣傳
練（指導員）之 11.舉辦研討會、記者會、出版部內相關體育和運動刊物
培訓
財務管理部分
內部人員與組織 1.經費預算的提報、追蹤、與考核
服務的管理行政、2.會計業務
經費的協調
內部流程部分
選手選拔、申辦 1.管理與評鑑的執行控管
奧運賽會、和推 2.檔案與政策資料保存等
廣奧運精神與奧 3.管理部內資訊系統
運教育
組織學習部分
1.就業與人才的管理、在職訓練
有關學校體育的事務工 具體策略是透過學校、社區全民運動和頂尖運動員優異的國
作及學生課後運動普及 際表現而達到政策目標，近年面對少子化、高齡社會，推出
化
運動振興計畫
2011 / 11 / 17
重點工作
全民運動
競技運動
運動、健康與預防
職業與培訓
主要任務
建立友善的環境與制度
推動親近大自然運動
配合國家先導性政策，推行運動普及計畫
推動「國家運動發展中心」計畫
推展「青年與運動社團生活」計畫
發展「青年與運動社團生活」的計畫
重視運動與失能者的具體配套
積極鼓勵女性之運動參與
提升學童游泳普及率
資助與獎勵的參賽經費
資助國家運動訓練中心（l’Institut National du Sport, INSEP
）的翻新與現代化
設立運動生化醫學與流行病學研究機構
主辦（申辦）各項大型國際運動賽會
發展法國職業運動的形象
制訂促進職業運動正常發展的規範
實施運動員的健康照護
展開「運動、健康、安適」之全民健康促進計畫
推動「運動與國家運動發展中心」計畫
挹注運動普及教育之經費
支援運動指導與協會指導之推展經費
蒐集與統整所有運動領域與指導員的就業和培訓資訊
資料來源：健康與體育部（2010）、掌慶維（2010）與本研究整理 23
文獻探討-觀念性架構
 發展觀念性架構前提，亦作整體目標評估細則定位、構
面說明
評估細則
計畫架構
施政目標
評估原則
評估層次
評估構面
相對應
表 研究目標評估細則
內容
國家中程施政計畫
各機關發展四年為期之目標
策略、目標與績效管理
組織績效
業務成果、行政效率、財務管理、組織學習（舊制-業務、
人力、經費）
策略績效目標與衡量指標
資料來源：行政院所屬各機關施政績效管理要點（2009）與本研究整理
2011 / 11 / 17
24
構面
業務成果
行政效率
財務管理
組織學習
表 平衡計分卡四構面之說明
說明
為了達成機關的使命及願景，應提供哪些服務項目，以滿
足所服務的對象及利益關係者
為滿足機關本身及服務對象，有哪些組織設計、行政流程、
服務措施、法規制度、計畫方案等，需加以檢討、簡化、
整併、最佳化，以提升服務品質及效能
如何有效運用機關財產及達成預算成本控制
提升人力資源有效運用之方式為何？如何提高員工的價值
與能力
資料來源：行政院所屬各機關施政績效管理作業手冊（2009）與本研究整理
2011 / 11 / 17
25
 總文獻來源
資料來源：國家體育總局（2010）、
奧林匹克運動聯盟（2010）、
健康與體育部（2010）、
陳瑩峰、高俊雄（2010）、
US HHS（2010）、
文部科學省（2010）、
Manuel et al.（2010）
體育司（2010）與本研究整理
2011 / 11 / 17
26
策略地圖
Diagram
資料來源：參考吳安妮（2004a）、Manuel et al.（2010）及本研究建構
2011 / 11 / 17
27
觀念性架構
與觀念性架構
資料來源：參考吳安妮（2004a）、Manuel et al.（2010）及本研究建構
2011 / 11 / 17
28
第三章 研究設計與方法
2011 / 11 / 17
29
研究設計與方法
2011 / 11 / 17
30
研究流程
2011 / 11 / 17
31
研究方法
 專家深度訪談（in-depth interview）
半結構式(semi-structured interviews)
 模糊德菲法（fuzzy delphi method）
決策群體(decision makers)
 層級分析法（analytic hierarchy process, AHP）
成對比較矩陣（pairwise comparison matrix）
 資料包絡分析法（data envelopment analysis, DEA）
二階段DEA法（two-stage data envelopment analysis）
2011 / 11 / 17
32
研究對象與工具
 「內部專家」定義：該專家對本研究探討的機關與平衡
計分卡績效評估之政策制定與執行關係程度高者，是為
內部專家；
 「外部專家」定義：該專家對本研究探討的機關曾具合
作經驗，並針對績效管理觀點具有經驗上高度認知，是
為外部專家。
本研究為達研究目的，
並依序多元研究論之邏輯性，
在研究方法的不同階段選擇適切的研究對象，
以期專家能精準提供本研究之問題。
2011 / 11 / 17
33
研究目的、對象與方法一覽表
研究目的
建構初步績效
指標系統
指標聚類
權重配分
研究對象
內部高階
外部高階
內部中高階
外部中高階
內部中高階
外部中高階
7位
7位
6位
6位
6位
6位
研究方法
深度訪談
(半結構式)
模糊德菲法
(問卷調查)
層級分析法
(問卷調查)
【代表性、客觀性、量化性】
2011 / 11 / 17
34
深度訪談（in-depth interview）之研究對象與工具
專家深度訪談對象－內部高階代表
姓名
王俊權
吳龍山
林德福
陳士魁
陳國儀
陳薇如
彭臺臨
2011 / 11 / 17
內部高階代表
職稱
教育部體育司 司長
行政院體育委員會 處長
行政院體育委員會 前主委
行政院體育委員會 副主任委員
中華奧林匹克委員會 秘書長
行政院研究發展考核委員會績效管理 執行委員
行政院研究發展考核委員會 科長
政府績效與服務效能 視察
行政院體育委員會 參事
中華台北奧林匹克委員會 委員
運動與環保委員會 委員
體委會競技運動處 前處長
體委會綜合計畫處
【代表性、客觀性、量化性】
訪談時間
100/10/17
100/08/10
100/08/16
100/08/19
100/08/19
100/09/19
100/08/11
35
專家深度訪談對象－外部高階代表
姓名
白秀雄
高俊雄
許光麃
陳美燕
黃志雄
劉田修
鄭志富
2011 / 11 / 17
外部高階代表
職稱
台北富邦銀行基金會 董事長
台灣中華智障者體育運動協會 理事長
台北聽奧協辦 理事長
台北市 前副市長
國立體育大學 校長
行政院體育委員會主要專案 推動委員
教育部重要計畫 主持人
AASM亞洲運動管理協會 前會長
臺灣體育運動管理學會 前理事長
台北聽奧籌辦效益與經驗傳承研究 主持人
國立臺灣體育運動大學 教務長
行政院體育委員會國際賽會 籌備委員
國立體育大學管理學院休閒產業經營學系 系主任
臺灣體育運動管理學會 秘書長
中華奧林匹克委員會 委員
中華奧會婦女運動委員會 委員
殘障運動總會 運核委員/選訓委員
聽障奧運資訊部 召集人
立法委員
雅典奧運跆拳道銀牌
中華奧會運動委員會 前主任委員
樹德科技大學休閒遊憩與運動管理 系主任
行政院體育委員會運動設施處 前處長
臺灣體育運動管理會場館設施委員會 主任委員
國立臺灣師範大學 副校長
行政院體育委員會 前副主任委員
中華奧林匹克委員會 前委員/執行委員
教育部「教育政策白皮書」 諮詢委員
中華民國體育學會 理事長
臺灣體育運動管理學會 常務理事
【代表性、客觀性、量化性】
訪談時間
100/08/18
100/08/24
100/09/29
100/08/24
100/08/23
100/09/14
100/09/20
36
第四章 預期結果
2011 / 11 / 17
37
 建構多元方法績效評估模式
 平衡計分卡理論應用於政府機關之參考
 提供體育行政主管機關績效評估指標系統之參考
2011 / 11 / 17
38
Thank you for your kindest attention.
學生
文玉敬上