BC1. Tổng quan PISA va ĐG trên diện rộng

Download Report

Transcript BC1. Tổng quan PISA va ĐG trên diện rộng

ĐÁNH GIÁ TRÊN DIỆN RỘNG VÀ PISA
TS. Lê Thị Mỹ Hà
PGS. TS Nguyễn Lộc
PVT. Viện KHGD Việt Nam – Giám
Đốc điều phối quốc gia
QUY TRÌNH
ĐÁNH GIÁ TRÊN DIỆN RỘNG
2
Xác định mục đích cần đánh giá
Xác định đối tượng đánh giá và chọn mẫu
học sinh để đánh giá
Chuẩn bị về tổ chức thực hiện
Xác định nội dung, phương pháp đánh giá
Xây dựng công cụ đánh giá
Xây dựng ma trận của các bộ công cụ
Viết các câu hỏi
Thử nghiệm các bộ công cụ đánh giá
Phân tích, đánh giá các câu hỏi
Sửa chữa, hoàn thiện các bộ công cụ
sử dụng cho khảo sát chính thức
Tiến hành đánh giá
Thu thập dữ liệu và xử lý dữ liệu
Viết báo cáo kết quả
Thông báo kết quả tới các đối tượng có liên
quan và đề xuất các giải pháp cải tiến
Tổng kết đợt đánh giá và lựa chọn các câu
hỏi tốt đưa vào ngân hàng câu hỏi.
3
QUY TRÌNH ĐÁNH GIÁ PISA
4
5
Tóm tắt cấu trúc báo cáo


1. Tổng quan về PISA OECD
2. Tóm tắt quá trình triển khai PISA tại
Việt Nam
6
GIỚI THIỆU CHUNG VỀ PISA


"Programme for
International Student Assessment - Chương
trình đánh giá học sinh quốc tế" do Tổ chức
hợp tác và phát triển kinh tế (OECD) khởi
xướng và chỉ đạo.
Đến 2015, hơn 70 quốc gia tham gia PISA để
theo dõi tiến bộ của mình nhằm phấn đấu đạt
được các mục tiêu giáo dục cơ bản.
PISA
là
viết
tắt
của
PGS. TS Nguyễn Lộc
PVT. Viện KHGD Việt Nam – NPM
ĐẶC ĐIỂM CỦA PISA


PISA nổi bật nhờ quy mô toàn cầu và tính
chu kỳ.
PISA là khảo sát giáo dục duy nhất đánh giá
kiến thức và kỹ năng của học sinh ở độ tuổi
15, độ tuổi kết thúc giáo dục bắt buộc ở
hầu hết các quốc gia.
PGS. TS Nguyễn Lộc
PVT. Viện KHGD Việt Nam – NPM
MỤC TIÊU CỦA CHƯƠNG TRÌNH PISA

Mục tiêu của Chương trình PISA là đánh giá năng lực của học
sinh ở độ tuổi 15 kết thúc phần giáo dục bắt buộc đã được
chuẩn bị để đáp ứng những thách thức của cuộc sống
sau này.

PISA thu thập và cung cấp cho các quốc gia các dữ liệu có thể
so sánh được ở tầm quốc tế cũng như sự tiến bộ về khả
năng đọc hiểu, toán học và khoa học của học sinh độ tuổi 15
ở các quốc gia tham gia PISA.
Khảo sát của PISA
PISA được thực hiện theo chu kì 3 năm/lần.
Đối tượng đánh giá là học sinh trung học trong độ tuổi
15.
Việc đánh giá được thực hiện ở 03 lĩnh vực kiến thức
chính là đọc hiểu, toán học và khoa học; đồng thời
học sinh và nhà trường sẽ trả lời 01 phiếu hỏi về điều
kiện, hoàn cảnh.
Mỗi kì đánh giá sẽ có một lĩnh vực kiến thức được lựa
chọn để đánh giá sâu hơn.
Các nội dung đánh giá của PISA qua các kỳ
Năm 2000 Năm 2003 Năm 2006
Năm
2009
Năm 2012
Năm
2015
Đọc hiểu
Đọc hiểu
Đọc hiểu Đọc hiểu
Đọc hiểu
Đọc hiểu
Toán học
Toán học
Toán học Toán học
Toán học
Toán học
Khoa học Khoa học Khoa học Khoa học
Khoa học
Khoa
Giải quyết
Giải quyết vấn đề
học
vấn đề
Bài thi trên máy
tính
Bài thi đánh giá
năng lực tài chính
Ghi chú: Phần được gạch chân là nội dung trọng tâm trong mỗi kỳ đánh giá
MẪU KHẢO SÁT PISA
Trong mỗi chu kỳ đánh giá, mỗi quốc gia có khoảng từ 4.500
đến 50.000 học sinh được chọn để tham gia đánh giá theo
cách chọn mẫu ngẫu nhiên.
Việc lấy mẫu được tiến hành theo phương pháp phân tầng 2
cấp (chọn trường ở cấp quốc gia và chọn học sinh ở cấp
trường) dựa trên các bằng chứng chính xác về tuổi và nơi
đang học. Điều này đòi hỏi các quốc gia tham gia PISA
phải có một hệ thống dữ liệu chính xác và đầy đủ
về học sinh và nhà trường của mình.
Khảo sát của PISA


Tính đến năm 2006, tất cả học sinh đều sử dụng bút chì
và giấy khi làm bài trắc nghiệm. Tuy nhiên, từ 2009 sẽ có
thêm bài thi trắc nghiệm trên máy tính.
Hiện nay, mỗi kỳ PISA được tiến hành theo 2 đợt,


Đợt 1: PISA chính thức dành cho các nước thành viên
OECD.
Đợt 2 (thông thường sau 1 năm): PISA bổ sung (PISA
Plus hay PISA+) dành cho các nước không phải là
thành viên OECD.
VIỆT NAM THAM GIA PISA
•
Ý nghĩa:





Bước tích cực của hội nhập quốc tế về giáo dục;
So sánh “mặt bằng” giáo dục quốc gia với giáo dục
quốc tế;
OECD đưa ra kết quả phân tích và đánh giá về chính
sách giáo dục quốc gia và đề xuất những thay đổi về
chính sách giáo dục cho các quốc gia;
Góp phần đổi mới phương pháp đánh giá, đưa ra cách
tiếp cận mới về dạy – học, thi và đánh giá.
Là bước chuẩn bị tích cực cho lộ trình đổi mới giáo
dục sau 2015.
14
VIỆT NAM THAM GIA PISA





Ngày 27/10/2008 Phó thủ tướng, Bộ trưởng Nguyễn Thiện Nhân
có văn bản giao Bộ Giáo dục và Đào tạo tiến hành khẩn trương
nhất để đăng ký Việt Nam tham gia Chương trình quốc tế đánh
giá học sinh (Programme for International Student Assessment PISA)
Ngày 22/10/2009 Phó thủ tướng, Bộ trưởng Nguyễn Thiện Nhân
có thư gửi ông Angel Gurria, Tổng Thư ký OECD đề nghị chấp
nhận Việt Nam tham gia PISA 2012.
Ngày 11/11/2009: OECD có thư chính thức gửi Phó thủ tướng,
Bộ trưởng Nguyễn Thiện Nhân về việc đồng ý đề Việt Nam tham
gia PISA.
Thực hiện khảo sát thử nghiệm 2011 và chính thức năm 2012.
So với các nước tham gia PISA 2012:
+ Xếp thứ 69/70 về GDP bình quân đầu người
+ Xếp thứ 70/70 về chỉ số HDI
Phương pháp luận cơ bản





Công cụ đánh giá học sinh (các đề thi)
Phiếu hỏi học sinh
Phiếu hỏi trường học (Hiệu trưởng)
Phiếu hỏi phụ huynh
2012 Không có phiếu hỏi giáo viên
Học sinh được lựa chọn từ nhiều lớp học
 Trọng tâm đánh giá không giới hạn ở các
môn học đuợc dạy ở trường
(2015 mới có phiếu hỏi giáo viên)

16
Các giai đoạn hoạt động chính
của PISA 2015

Chuẩn bị đề thi và phiếu hỏi


Triển khai thử nghiệm


Năm 2013
Năm 2014
Kỳ thi chính thức

Năm 2015
17
Xây dựng các câu hỏi thi cho
PISA 2015
- Các quốc gia xây dựng câu hỏi đóng góp cho
OECD, nộp trước tháng 12/2012.
- OECD tập trung các câu hỏi, sàng lọc và tập
hợp thành các tập câu hỏi chuyển cho các
quốc gia.
- Đánh giá câu hỏi vào năm 2013
- Dịch các câu hỏi thi (2013)
- Xây dựng thành các bộ đề thi theo yêu cầu kỹ
thuật của OECD (2014)
18
Dịch các bộ công cụ khảo sát PISA
Tất cả các ngôn ngữ chiếm hơn 5%
dân số trong mẫu đều được sử
dụng.
 Yêu cầu về dịch kép/Sự hòa hợp
(ngoại trừ các chỉ dẫn/ hướng dẫn
mã số và các sổ tay hướng dẫn)

19
Mẫu khảo sát


Khảo sát thử nghiệm: Cỡ mẫu được xác
định sao cho có thể lấy được 200 học
sinh trả lời mỗi câu hỏi. Mỗi quốc gia
chọn 40 trường x 35 HS/trường = 1.400
HS.
Khảo sát chính thức: 150 trường x 35
HS = 5.250 HS.
20
Chuẩn bị tài liệu kiểm tra

Thu thập thông tin của học sinh (tên,
mã số học sinh, số cuốn đề thi/ bảng
hỏi) để in & dán nhãn thay vì viết tay
lên cuốn đề thi. In nhãn tên như vậy sẽ
hạn chế sai sót trong quá trình phát
cuốn đề thi cho học sinh. Đồng thời
cũng tăng độ chính xác và hiệu quả của
việc nhập dữ liệu và làm sạch dữ liệu
21
Các Buổi thi dự phòng

Khuyến nghị nên lên kế hoạch tổ chức
buổi thi dự phòng ở những trường chưa
tới 80% học sinh được chọn tham gia
làm bài thi.
22
Cán bộ giám sát chất lượng


Năm 2015, đội ngũ cán bộ giám sát chất
lượng chương trình PISA được chỉ định và trả
lương bởi Nhà thầu quốc tế để đến 1 số
trường (thông thường là 15 trường)
Cán bộ coi thi không được thông báo về việc
có Cán bộ giám sát đến trường. Nhưng điều
phối của trường có thể được thông báo trước
để Giám sát viên có thể tiếp cận với truờng
học.
23
Quy trình và yêu cầu tạo lập
đề thi và phiếu hỏi

Phạm vi:
Quy trình này chỉ áp dụng cho việc tạo lập và tổ
hợp các đề thi & bảng hỏi phục vụ cho khảo sát
chính thức PISA 2012.
Mục đích:
 Tạo lập 13 đề thi, 01 bảng hỏi nhà trường, 03
bảng hỏi học sinh phục vụ cho khảo sát chính thức
PISA 2012
Yêu cầu:
 Tạo lập các đề thi (bao gồm cluster) và bảng hỏi
theo đúng tiêu chuẩn 10.3 do OECD đề ra trong tài
liệu hướng dẫn NPM về các yêu cầu cho chuẩn bị
tài liệu phục vụ khảo sát chính thức PISA 2012



24
Các thông số liên quan


Mỗi Cluster được cấu thành từ các Units
Mỗi Unit được đánh mã PM _ _ _ hoặc
PR _ _ _ hoặc PS _ _ _ (vị trí _ có thể là
một con số từ 0-9 hoặc chữ cái hoa)
25
Cấu tạo một đề thi
Trang
bìa
Booklet
Bảng
công
thức
PM4
B1
Hướng
dẫn
chung
04
Cluster
PM12
Một số
Unit
PM947
PM _ _ _
PM13
PM6
26
PM _ _ _
Khảo
sát
năng
lực
Cấu tạo một bảng hỏi học sinh
Form A
• Section
_
• Section
_
• ….
TRANG BÌA
Form B
Form C
• Section A
• ST #
• Section B
• ……
• Section
_
• ST#
• ST#
• Section
_
• ….
27
Form D
Booklet – trang bìa -Mã học sinh, tên
28
học sinh và tên
trường đã được VP
PISA xây dựng sẵn
và in trực tiếp lên
trang bìa bằng phần
mềm.
--Việc này tránh sai
sót và tiết kiệm thời
gian cho cả học sinh
và Cán bộ quản lý
khảo sát.
-OECD đã khuyến
nghị các nước nên
tiến hành dán nhãn
lên trang bìa tuy
nhiên họ nhất trí với
cách làm của Việt
Nam là in trực tiếp
sau quá trình đàm
phán
Bảng công thức và phần hướng dẫn chung
29
Trang khảo sát năng lực
Trang này xuất hiện ở
cuối mỗi đề thi
30
Phiếu hỏi học sinh
Mã học sinh đã được
xây dựng sẵn và in
trực tiếp lên trang
bìa
31
Phiếu hỏi nhà trường
Phiếu hỏi này dành
cho Hiệu trưởng trả
lời
32
GiỚI THIỆU CƠ CẤU TỔ
CHỨC CỦA PISA
1. Cơ cấu tổ chức của PISA
OECD

-
Cơ cấu tổ chức của PISA OECD được thiết kế
như sau:
Cục Giáo dục OECD
Hội đồng quản trị PISA
Các nhà thầu quốc tế
Ban quản lý PISA quốc gia
Các nhóm chuyên gia của quốc tế
1.1. Cục Giáo dục OECD
Cục giáo dục OECD có trách nhiệm quản lý hoạt
động thường nhật của PISA:
-
Theo dõi việc triển khai khảo sát,
Quản lý hành chính các vấn đề của Hội đồng quản
trị PISA,
Tạo đồng thuận giữa các nước và là trung gian
giữa Hội đồng quản trị PISA và liên danh nhà thầu
triển khai PISA.
1.2. Hội đồng quản trị PISA
Mỗi quốc gia thành viên OECD tham gia PISA có
01 đại diện trong Hội đồng quản trị PISA.
-
Mỗi quốc gia đối tác được cử 01 đại diện làm
quan sát viên tại Hội đồng.
-
-
Hội đồng quản trị PISA bầu ra Chủ tịch Hội đồng.
Hội đồng quản trị PISA sẽ xác định các ưu tiên
chính sách đối với PISA và đảm bảo là các ưu tiên
này được triển khai trong cuộc khảo sát.
-
Như vậy các nước đối tác không thể có ảnh hưởng
đối với các nội dung học thuật cũng như các vấn
đề tổ chức thực hiện của PISA.
1.3. Nhà thầu quốc tế
Đối với mỗi kỳ PISA sẽ lựa chọn một nhà thầu quốc
tế chịu trách nhiệm thiết kế và triển khai khảo sát.
Trong các kỳ đánh giá đã qua, liên danh quốc tế do
Hội đồng nghiên cứu giáo dục Úc (ACER) đã trúng
thầu và thực hiện. Các thành viên của liên danh này
bao gồm:






ETS: Tổ chức tập huấn và các dịch vụ giáo dục – Mỹ
ACER: Hội đồng nghiên cứu giáo dục Úc;
CAPSTAN: Cơ quan kiểm soát chất lượng ngôn ngữ
Bỉ;
DIPF: Viện nghiên cứu sư phạm quốc tế Đức;
NIER: Viện nghiên cứu chính sách giáo dục quốc
gia Nhật;
ASPE: Trung tâm phân tích hệ thống và thực tiễn
giáo dục Đại học Liège - Bỉ;

WESTAT: Công ty tư vấn nghiên cứu Mỹ.

và một số tổ chức khác.
Mô hình cơ cấu tổ chức của PISA OECD:
2. Cơ cấu tổ chức của
PISA ở Việt Nam
Việt Nam chính thức tham dự kỳ đánh giá
PISA 2012. Việt Nam đã xây dựng cơ cấu
tổ chức triển khai PISA ở Việt Nam như
sau:
2. Cơ cấu tổ chức của PISA ở Việt Nam
2.1. Ban chỉ đạo đánh giá trong nước và quốc tế học
sinh phổ thông
Trưởng ban: TS. Nguyễn Vinh Hiển, Thứ trưởng Bộ
Giáo dục và Đào tạo.
2.2. Ban Dịch thuật các tài liệu PISA kỳ khảo sát
2.3. Ban Đề thi PISA
2.4. Ban tổ chức kỳ khảo sát
2.5. Ban chấm thi, chọn mẫu và xử lý số liệu, viết báo
cáo kỳ khảo sát
2.6. Văn phòng PISA Việt Nam.
Cơ cấu tổ chức PISA tại Việt Nam:
Ban chỉ đạo đánh giá trong
nước và quốc tế
Ban Dịch thuật các
tài liệu PISA
Ban tổ chức
khảo sát
Ban Đề thi PISA
Văn phòng
PISA Việt
Nam
Ban chỉ đạo cấp
tỉnh
Điều phối viên cấp
trường
Ban chấm thi, chọn mẫu
và xử lý số liệu, viết báo
cáo
Kế hoạch triển khai PISA tại
Việt Nam- Những mốc quan trọng



Khảo sát thử nghiệm 4/2014
Chuẩn bị dữ liệu mẫu thi PISA
chính thức 2015 và chọn mẫu học
sinh thi chính thức.
Khảo sát chính thức 4/2015
43
[email protected]
 ĐT: 04.36231513

44