1、考试科研方法(七)编辑: 2007-03-27 21:17:54浏览:3667次七、调查法(一):问卷法调查法是考试研究中最常用的方法之一。调查法按对象可划分为五类:典型调查、普遍调查、抽样调查、个案调查和专家调查。按方法可划分为四类:一是调查表法、问卷法和访谈法;二是个案研究法;三是测验调查法;四是经验总结法。考试研究中应用较多的是抽样调查中的问卷法和访谈法。下面依次介绍这两种方法。问卷调查是以书面提出问题的方式搜集资料的一种调查方法。研究者把所要调查的问题编制成易于填写和回答的问卷,分发给调查对象,请其按要求作答,并对回收问卷中所提供的信息资料进行统计分析,从而得出研究结论,形成研究报告。
2、(一)问卷法的特点和适用问卷法和其他调查法一样,都是对现实情况的一种描述研究,而不像历史研究法以过去发生的事实为研究对象;都是搜集自然状态下的事实资料,而不像实验研究法那样对研究对象加以适当的控制以研究自变量与因变量的因果关系。同为调查法,问卷与访谈有密切联系,它们都是通过调查对象的回答来了解情况和征询意见,但两者又有许多不同的特点:问卷是标准化调查,即按统一设计的有一定结构的问卷所进行的调查。而访谈则有标准化访问和非标准化访问两种情况;问卷一般是间接调查,即研究者并不与被调查者直接见面,而由被调查者自己填写问卷。访谈则需要研究者与被调查者当面交谈;问卷一般是书面调查,即研究者用书面提出问题,
3、被调查者也用书面回答问题。访谈则是通过口头交谈来了解情况和征询意见;问卷一般是抽样调查,即调查对象是通过抽样方法选取的。访谈对象则一般不是通过抽样选取的;问卷一般是定量研究,研究的主要目的是通过样本统计量推断总体参数。访谈一般是定性调查,通常不存在从数量上推断总体的问题。以上特点是从总体上说的,其实问卷中也有口头交谈和当面接触的,如访问问卷和电话问卷。然而问卷的主要方式是间接的书面调查。以下所讨论的也主要是间接的书面的问卷研究。特点之中既包含着优点,也隐含着缺陷。问卷法与访谈等其他调查法相比较,具有以下一些优点:以书面形式提出和回答问题,研究者不必与调查对象直接交流,节省时间、人力、财力,方便
4、实用;能够在比较大的范围内分发问卷,不受时空限制,可以根据需要抽取较大容量的样本,对于总体有较好的代表性;如果研究设计和问卷编制得当,可以在较短时间内搜集到关于研究对象的大量信息,效益较高;结构性较强,标准化程度较高,便于统计和定量分析;研究对象作答用时较短,且不署名,受环境干扰较小,可以了解真实的意见,比较客观。问卷法的缺陷或局限是:研究对象独立作答,如遇误解或歧义,研究者无法现场指导和说明,调查后发现问题也难于更改和补救,缺乏灵活性,也会影响研究的信度;搜集的信息资料往往比较表面,不能采用当面“追问”等方法深入了解研究对象的内心真实思想,限制研究的深度;研究者不能调控作答过程,研究对象由于
5、种种原因可能对有些问题不作回答,影响有效问卷的回收率和研究效度。问卷法在考试研究中的应用主要有以下三种情况:一是了解和认识现实情况,如了解统计报表不能反映的自学考试应考对象中在校生、打工者的比例,应考者的学习方式及不同方式的经费投入情况,学习中的主要困难,对于某些辅导材料的购买和使用情况,毕业生的就业情况;二是了解和掌握有关群体对于考试改革举措的反应、意见、态度、要求和希望,如了解中学教师、家长、学生和管理人员对于高考科目改革的意见,对于会考形式变化的意见,自学考试应考者对于专业和课程调整的意见;三是调查了解社会对于考试工作的评价、意见和看法,如了解社会各界对于考试内容、形式和导向的评价,对于
6、考风考纪的看法,对于自学考试毕业生社会适应性的意见。从1978年邓小平同志在全国教育工作会议上提出“要认真研究、试验,改进考试的内容和形式,使它的作用完善起来”之后,我国的教育考试就走上了以“改进考试的内容和形式”为主要议题的改革之旅。考试改革如同经济改革、教育改革一样,是一项需要不断设计、长期实施的系统工程,到今天还远没有完结。而在改革进程中,及时了解和掌握改革参与者、利益相关者和社会各有关方面的动态、反应和意见,为相关决策提供依据和参照,对于改革的顺利进行和深入发展具有特别重要的意义。因此,在以改进实际工作为主要目的的发展研究中,问卷调查有着十分广泛的应用。(二)问卷的设计问卷是问卷研究中
7、搜集资料的工具。问卷的设计,在很大程度上决定着问卷调查的质量、回收率和有效性。1、问卷的结构问卷(除问卷的名称外)一般由卷首语、问题与回答方式、编码、结束语四部分组成。卷首语。其功能相当于“自我介绍信”。内容一般包括:调查的目的、意义和主要内容,对调查对象的希望和要求,填写问卷的说明,回复问卷的方式和时间,调查的匿名和保密原则,调查者名称等。卷首语的语气要诚恳、谦逊,文字要简明、通俗。卷首语放在问卷第一页的最上面,或者作为一封信(单独一页)放在问卷的前面。问题和回答方式。这是问卷的主要构成部分,一般包括调查的问题、回答问题的方式及其说明等内容。编码。把问卷中的全部问题和各项答案转换为代号(如英
8、文字母)和数字,以便运用计算机对调查结果进行数据处理。结束语。通常是简短的几句话,对调查对象的合作表示感谢。2、问题的种类和形式问卷中的问题大体上可分为四类:背景类问题。主要是调查对象本人与研究相关的基本情况。如性别、年龄、民族、职业、收入等。它们是对问卷结果进行分析研究的重要依据。事实类问题(客观性问题)。指已经发生和正在发生的各种事实和行为。如:“您所在助学单位的学员中来自农村的人数或比例”,“此次考试的及格人数或及格率”,“近三年间的毕业人数或毕业率”;“您参加自考后几年获得专科毕业证书”,“购买教辅材料、接受助学和参加考试各花费多少钱(答案中分别给出不等的数额区间)”;“为准备高考,除
9、教材外,您阅读了多少本辅导材料(含习题册)”,“其中多少本是学校组织或老师建议购买的”等等,都属于事实或行为方面的问题。意向类问题(主观性问题)。指人们的思想、态度、感情、愿望、意见等方面的问题。如:“您对于高考科目改革有什么看法”,“您认为自考的教材适于自学吗”,“您对于改进助学辅导工作有哪些建议”等等。检验类问题。为检验回答是否真实、准确而设计的问题。问卷中的问题有三种基本类型:开放型(结构型)、封闭型(非结构型)和混合型。开放型问题是指题目本身并不给出可供选择的答案,而由调查对象自由作答的那些问题(如果整个问卷全部由开放型问题组成,则称为开放式问卷)。封闭型问题是指问题本身给出几种答案,
10、要求调查对象从中选择一种或多种答案作为自己的回答的那些问题。混合型问题是将封闭型问题与开放型问题适当结合所形成的问题。通常是提出一个封闭型问题,在调查对象选择答案后再提出追问性质的开放型问题。绝大多数的问卷,或者全部采用封闭型问题,或者以封闭型问题为主,再附以混合型和开放型问题。封闭型问题的具体形式多种多样,常见的主要有以下几种:两项选一式(含是否式)。提出问题,并给出可供选择的两种答案(包括“是”和“否”),要求调查对象从中选取一种答案。如:您的性别男女您接受过助学辅导吗是否您高考的志愿是自己填写的吗是否这种形式,适用于只有两个极端答案的定类(属于哪一类)问题。多项单选式。问题本身给出多种答
11、案,要求调查对象从中选择一种答案。如您报考自学考试之前的学历初中高中中专大专硕士博士您的职业企业员工公务员教师军人农民其他您对于所接受的助学是否满意很满意满意比较满意较不满意不满意很不满意您认为高考填报志愿的最佳时间是考试前考试后,公布分数前公布分数后这种形式,适用于具有多种相互排斥答案的定类问题。多项任选式。问题本身给出多种答案,要求调查对象从中选择符合自己情况的一种或几种答案。如:您自学中的主要困难没有学习时间教材不便于自学缺少辅导材料没有学习指导缺乏学习交流其他您对于所接受的助学感到不满意的是收费较高助学水平较低教学秩序较差学习环境不大好其他这种形式,适用于有几种互不排斥的答案的定类问题
12、。排序式。问题本身给出若干种答案,要求调查对象对各个答案排出先后顺序;或者从中选择几个答案,并排出顺序。如:请您按照自己的喜欢程度对高中所学课程排序(按喜欢程度把课程的编号填写在后面的括号内。最喜欢的填在左边第一个括号内,然后依此向后填写)语文数学外语政治历史地理物理化学生物()()()()()()()()()您认为当前自学考试教材编写中的主要问题是(请按重要程度挑选出三项,并依重要程度排序)不便于自学不联系实际系统性不强内容陈旧重点不突出与大纲要求不一致()()()这种形式,适用于需要表示一定先后顺序或轻重缓急的定序(决定顺序)问题。列举式。问题本身并不给出答案,要求调查对象在给出的横线上面
13、或括号之中列举自己的答案。如:您选择专业最看重什么条件?(请列举三个)()()()您认为会考改革主要应解决什么问题?(请列举两项)()()这是一种半开放的问题形式,适用于有几种互不排斥的答案的定类问题。矩阵式(表格式)。把同类的几个问题和答案排列为一个矩阵或列成表格,由调查对象对比着进行填答。如您认为当前社会助学存在的主要问题是(请在适当的括号内打勾)很严重较严重一般不太严重不构成问题收费问题()()()()()质量问题()()()()()管理问题()()()()()体制问题()()()()()应试问题()()()()()您认为当前高考最需要改革的方面是(请在适当的括号内打勾)很紧迫较紧迫一般
14、不太紧迫不构成问题科目设置()()()()()突出能力()()()()()多次考试()()()()()学校自主()()()()()这种形式,适用于采用相同方式回答的一组定序问题。3、问卷的编制问卷的编制涉及问题的表述、答案的编写、问题的排列和问题的长度等若干具体问题。(1)问题的表述。问卷调查通常都由调查对象独自填写,调查对象只能根据问卷本身来理解问题和回答问题。因此,问卷中的问题表述对于调查对象的回答质量具有特别的重要性。在设计和编制问卷中,在问题的表述方面需要特别注意以下一些问题:具体。问题的内容要具体,不提过于抽象、笼统的问题。单一。问题的内容要单一,不要把两个及两个以上问题合在一起提问
15、。通俗。语言要通俗,不使用调查对象可能感到陌生的语句。除了对于专业人士的调查问卷外,要避免使用过于专业化的术语。简明,无歧义。语言应尽可能简单明确,不使用模棱两可、容易产生歧义的语句。客观。态度要客观,避免使用有诱导性、有倾向性的语言。如:“教师是令人尊敬的职业,你愿意报考培养教师的师范院校吗”,在“教师是令人尊敬的职业”这句话的诱导下,调查对象的肯定回答很可能并不是真心想法。避免涉及隐私等敏感性问题。假如难于完全绕开敏感性问题,那么就需要采用某些特殊的方法和用词技巧,来减轻问题的敏感程度。(2)答案的编写答案的设计和编写需要注意以下几个问题:相关性。设计的答案必须与所询问的问题有直接关系。比
16、如,征询对于考试组织实施方面的意见,其答案可列入考点设置、考场编排、考试秩序等内容,但不可把试题的数量、难度、广度和试题的编写质量等写进答案之中,因为后者并不与考试组织实施直接相关。同层次性。给出的各个答案必须属于同一性质、同一层次的内容。比如,询问“希望从事什么职业”,答案中可以列举工人、公务员、专业技术人员、管理人员等职业类别的项目,而不可列入车工、营业员等属于工种类别的内容。独立(互斥)性。提出的各个答案之间不能有包含、兼容之类的关系,而必须是相互独立、相互排斥的。比如,关于学历,不可同时列入“专科”、“大学”,“研究生”、“博士”,因为“大学”包含“专科”(甚至也包含硕士、博士),“研
17、究生”包含“博士”,它们并不是相互独立的。完整性。设计的答案应尽可能穷尽一切主要的结果,而不能有明显的疏漏。如关于学历,只是给出小学、中学、大学,就不够完整,应补充为小学及以下、中等教育、大专及以上(或列出大专、本科、硕士、博士)。如果可能的答案过多,可以根据调查对象的特点,列出几个主要的答案,最后加一个“其他”,以保证答案的完整性。可能性。给出的答案应是调查对象能够并且愿意回答的内容。过于专业性的(如试卷的平行性)、抽象的(如价值观),以及涉及隐私等敏感性的内容,不可列入答案之中。(3)问题的排列一份问卷通常都有数十道、上百道问题。这些问题该怎样排列呢?首先,把同类问题集中在一起,并按先“背
18、景”、再“事实”、最后“意向”的顺序排放。“检验”类问题则穿插在其他种类问题之中。其次,在同类问题之中,应把易于回答的问题放在前面,把稍难回答的问题放在后面。再次,要把一般性的问题排放在前面,而把那些特殊性的问题排放在后面。第四,把具有一定概括性的大问题排放在前面,把更为具体的小问题排放在后面。第五,把封闭性问题放在前面,把半开放和开放性问题放在后面。一般如此,但也不能绝对。比如,当提出一个事实性的问题(如你是否接受助学)之后,还想追问其原因或态度的时候(如对于没有接受助学的调查对象追问没有接受助学的原因),就需要把追问性的问题紧挨着这个事实性问题排放,而不宜放在所有事实性问题之后。实际上,这
19、属于相关问题的转接,这里就不细说了。(4)问卷的长度问卷的长度或问题的数量,应当适度,一份问卷的作答时间一般以3040分钟为宜。问题太多,调查对象可能感到厌倦,敷衍了事;问题太少,可能得不到研究所需要的基本实事资料,影响研究结论。如感到问题可能太多,可把那些可问可不问的问题尽量删除;如感到问题可能太少,则可根据研究目的适当增加能够获得所需要的事实资料的新问题。(三)问卷调查的实施问卷调查的一般程序是:设计问卷(含草拟问卷后征求有关人员和专家的意见,修订问卷);选择调查对象;试测,并修改问卷;分发问卷;回收问卷;审查回收问卷,剔除那些无效的问卷;对问卷结果的整理加工和统计分析。这里对试测、分发和
20、回收问卷、回收问卷的审查、提高回收率问题再略作说明。问卷的试测,是在问卷编制结束、正式投入使用之前,从总体中选取3050人作为试测的样本,用以检查问卷的表述能否为调查对象所理解,问题及答案的设计是否合理,以便修改问卷。试测后,要对结果的信度和效度进行分析,作为修改的依据或参照。分发问卷有多种方式,如随报刊投递、邮局寄送、派人分发等等。对于考试研究,最好的方式是通过组织进行分发,其好处,一是发送和回收比较迅速、便捷,二是回收率较高。回收问卷的审查,就是通过逐份审阅,区分出并剔除掉那些回答不合格的无效问卷,从而把调查资料的整理加工工作建立在有效问卷的基础上,以提高研究结论的可靠性和有效性。一般认为,有效问卷的回收率在30%左右,调查资料只能作为参考;回收率在50%以上,根据调查结果提出的建议可以采纳;回收率在70%以上,才可作为研究的依据。因此,提高有效问卷的回收率是问卷调查一个十分重要的问题。为此,应该精心设计和编制问卷,使调查对象正确理解研究者的意图,并愿意真实地反映有关情况和自己的态度;应该争取在调查对象中具有很高声望的考试机构的公开支持,或主办调查,以提高调查对象对调查活动的信任程度和回答意愿;特别是,应该尽量通过招生考试系统发放和回收问卷,这样将大大提高有效问卷的回收率。关于调查结果的定性和定量(统计)分析,我们将相关章节中作详细介绍。