- NAEP测评:国际青少年科学素质全景解读
- 李秀菊 李高峰
- 3543字
- 2021-04-23 12:59:23
第一节 学生问卷
学生问卷主要收集与学生学习有关的信息,收集的内容包括学生基本信息、家庭情况、经济状况、学习资源等。大约有一半的调查问题与学生参与的NAEP评估内容密切相关。这些信息有助于对NAEP评估结果的综合分析。这些数据分析结果有助于确定教育如何满足不同学生群体的需求以及进行不同群体之间的比较。学生调查问卷提供了有关学生的教育经历和在课堂内外学习机会的重要信息。[3]
NAEP学生问卷完成时间一般为15分钟。学生可以根据意愿自主回答问题,不想回答的问题可以通过“留白”跳过。学生的回答是完全保密的,不会与学生的身份或个人信息进行关联。调查问卷中提供的信息始终按照联邦标准、法律和相关操作标准进行处理。所有个别学生的回答都按年级和科目进行组合和分组。这些回答被汇总成报告,总结NAEP调查问卷的结果,提供不同组别下的测评成绩报告,如种族、社会经济地位、性别、残疾和英语语言学习者不同组别、不同类型的测评结果。报告强调了描述学生知识和学习成绩的可靠和有效评估的信息。学生问卷包括两部分,第一部分的背景调查主要是学生的一般信息,第二部分的背景调查是与测评学科相关的信息。
从NAEP调查问卷中收集的信息,有助于更好地了解美国学生的教育情况和需求,为教育工作者、决策者和研究人员提供重要的数据和参考,对于制定相关的教育政策具有重要意义。
一 学生问卷的调查情况
NCES的网站提供了2005年至2018年,对4、8、12年级的111份学生调查问卷[4],其中科学学科的学生问卷共13份(见表2-1)。NAEP的测试和背景调查均同时进行,其中2011年4年级和12年级未进行测评,因此也未进行背景调查。2018年科学测评项目为试验项目(Pilot),测评结果不对外公开,收集的数据将用于未来NAEP测评的开发和实施。[5]本章主要分析2005年、2009年和2015年的背景调查问卷。
表2-1 科学学科的学生问卷情况
二 学生问卷的调查内容
学生问卷第一部分一般有13题左右,第二部分一般有10~30题。根据NAEP报告卡的分类情况,学生问卷主要涉及两个类别,一是学生因素(Student Factors),二是校外因素(Factors Beyond School)。学生因素包括人口统计学信息、情感倾向(Affective Disposition)、学业成绩和学习经历(Academic Record and School Experience)三个方面。校外因素包括家庭监管环境(Home Regulatory Environment)和校外时间使用(Time Use Outside of School)两个方面。以下分别介绍两个类别下的人口统计学信息、情感倾向、学习成绩和学习经历、家庭环境和校外时间使用五个方面的调查内容。
(一)人口统计学信息
NAEP报告卡中的人口统计学信息包括23个变量,这些变量主要用于学生问卷的调查。变量的主要内容包括学生的种族、家庭成员情况和父母的受教育状况等,例如学生是亚裔(Student is Asian)、母亲受教育水平(Mother's Education Level)、和父亲一起生活(Lives in Home with Father)等。学生问卷中的人口统计学调查内容是第一部分的第1题和第2题,这两道题目在历年的调查中均未发生变化。每一题目都有一个题目编码(ID号),例如VB331330、VB331331,由字母和数字构成;有的题目编码完全由字母组成,例如GENDER(调查学生性别的题目编码)。
例36 你是西班牙裔还是拉丁裔?填涂一个或多个选项。(题目编码:VB331330)
A.不,我不是西班牙裔、拉丁裔
B.是的,我是墨西哥人、墨西哥裔或奇卡诺裔
C.是的,我是波多黎各人或波多黎各裔
D.是的,我是古巴人或古巴裔
E.是的,我是其他西班牙裔或拉丁裔背景
例37 以下哪一(些)项最好地描述了你?填涂一个或多个选项。(题目编码:VB331331)
A.白人
B.黑人或非裔美国人
C.亚裔
D.美国印第安人或阿拉斯加土著民
E.土著夏威夷人或其他太平洋岛民
这两道题主要用于调查学生的人口统计学信息,问题的设置与美国人口普查问题相近。[6]人口统计学信息的统计变量是NAEP报告测评结果的基本变量,除了第1题和第2题涉及的信息外,学生的年级、年龄、性别等信息在抽样时已经确定,因此在测评试题中未要求填写。此外,学生的部分人口统计学信息通过教师问卷或者学校问卷进行统计,因此学生不必填写。此外2015年NAEP学生背景调查要求学生提供家庭的邮政题目编码。
例38 把你家庭住址的邮政题目编码写在方框中。(题目编码:VE102537)
在2005年、2009年和2015年,NAEP报告卡中的人口统计信息中还调查了家庭中用英语交谈的情况,2005年就家庭成员的组成情况进行了调查,主要关注父母是亲生父母、养父母还是其他监护人。
(二)情感倾向
NAEP报告卡中情感倾向信息包括8个变量,变量的主要内容包括对科学的兴趣、对测试的态度和从事科学活动的频次等,这些变量均用于学生报告。2005年、2009年、2015年同时调查的题目有3个,内容分别是“题目难度”“考前努力程度”“重要性认识”。“题目难度”和“考前努力程度”的回答要求学生对照以往考试在“相对简单”“差不多”“比较难”或“非常难”四个备选项中做出选择,最后一题(题目编码:VB595184)要求学生根据不同程度的重要性进行选择。
例39 在这次考试中取得好成绩对你重要吗?(题目编码:VB595184)
A.不重要 B.一般 C.重要 D.非常重要
2009年和2015年新增的调查题目有4个,增加了学生对于科学学科在情感方面的调查。例如,下面两个题目(例40、例41)主要关注学生对科学学科的态度和兴趣,在这一方面,背景调查还通过询问“你是否能够听懂老师在科学课上的讲解”以及“你觉得你是否能够提交优秀的作业”等进行调查。
例40 你做好科学作业的频次如何?(题目编码:VC315294)
A.从未或几乎从未 B.有时 C.经常 D总是或几乎总是
例41 你喜欢学习科学的程度如何?(题目编码:VC315299)
A.有一点儿喜欢 B.有一些喜欢 C.相当喜欢 D.非常喜欢
2015年在12年级的学生问卷中还设计了尺度式问题,增加了情感倾向的测量维度(题目编码:VC305330)。
例42 请说明你对下列关于科学学科的表述“不同意”或“同意”的程度。(题目编码:VC305330)
NAEP报告卡可以将题目中学生的不同选择作为变量,单独导出分组数据,同时通过变量间的相关分析,进一步探查测评结果与情感倾向的关系。通过本题可以看出,大的题目具有单独的题目编码,同时其包含的小题也存在单独的题目编码,这种设计是为了在变量分析和数据导出时能够更为明确地分组,所以出现了一题有多个题目编码的情况。
(三)学业成绩和学习经历
NAEP学业成绩和学习经历调查中,4年级、8年级及12年级共有的一个变量是学生的缺课情况,只有一个题目(例43)。
例43 你上个月缺课多少天?(题目编码:B018101)
A.没有 B.1~2天 C.3~4天 D.5~10天 E.10天以上
12年级调查的题目相对较多,NAEP报告卡包括24个变量,主要内容为学生参加的各种课程:①对于高中课程类型的描述,选项分别是普通型、学术型、职业型;②是否参加或参加过国际科学学士学位课程;③是否参加或参加过高中或大学学分的在线科学课程;④是否参加或参加过科学预科课程,选项分别是生物学、环境学、化学、物理学B或C、计算机科学 A 或AB、从未参加任何预科课程;⑤你是否现在正在学习科学课程;⑥从8年级到现在你学习过哪些课程(题目编码:VC305768)。
例44 从8年级到现在,你上过哪些课程?如果你上某门课不止一次,那就以你最近的那一次为准。每一行选一项,包括暑期学校学过的课程,但不包括那些只是长期课程中的一部分的主题。(题目编码:VC305768)
例44要求学生对从8年级以来所学课程进行逐一选择,纵向的选项共包括12项,分别是:a.地球与空间科学、b.生命科学(生物学除外)、c.物理科学(化学、物理学除外)、d.普通科学、e.1年级生物学、f.2年级生物学、g.1年级化学、h.2年级化学、i.1年级物理、j.2年级物理、k.工程技术、l.其他科学课程。
(四)家庭监管环境
NAEP报告卡中涉及家庭监管环境的变量有1个,内容是“在家里谈论学习”( Talk About Studies at Home),历年来4、8、12年级均采用了同一题目(例45)进行调查。
例45 你经常和家里的人谈论你在学校里学过的东西吗?(题目编码:B017451)
A.从未或几乎从不 B.每隔几周1次
C.大约每周1次 D.一周2~3次
E.每天
(五)校外时间使用
NAEP报告卡中涉及校外时间使用的变量共有11个,内容是学生家里图书情况、课后时间的利用、家庭环境等。其中历年在4、8、12年级均进行了调查的题目共有3个,分别是:①你家里有多少本书(例46);②家里是否有你的电脑;③一天要读几页书。备选项中不仅给出了参照的数目,同时也给出了相对形象的描述,便于学生作答。例如,关于你家里有多少本书的选项,不仅写出了多少本书,还用书架来量化家里的书(例46)。
例46 你家里有多少本书?(题目编码:VB331335)
A.很少(0~10本) B.能填满一层书架(11~25本)
C.足以填满一个书柜(26~100本) D.能填满几个书柜(100本以上)
随着社会经济的发展,一些调查内容也进行了相应的调整。例如,2005年、2009年调查了学生家庭中是否订阅有报纸、杂志,家里是否有百科全书等情况,但2015年则没有进行调查。2015年的调查内容从家庭条件的某些方面进行调查,试图推断学生校外时间的使用情况。例47的选项能够从侧面反映学生的学习环境、可支配时间、可利用资源、家庭经济状况等因素。
例47 你家里有以下物品设施吗?可多选。(题目编码:VF098664)
A.互联网 B.家用干衣机
C.洗碗机 D.多个浴室
E.你的独立卧室