2月24日上午9点,华南师范大学政治与公共管理学院于石牌校区文科楼负一楼政行系办公室举行了寒假研学系列活动第六讲:调查实验—公共政策评估的应用场景与实践路径。
本次活动由华南师范大学政治与公共管理学院副院长杨爱平教授主持,华南师范大学公共管理一级学科带头人、政治与公共管理学院首席专家倪星教授,以及万晓宏教授、薛捷教授、张强教授,华南农业大学公共管理学院副院长唐斌教授,华南理工大学公共管理学院李文彬教授,暨南大学公共管理学院林慕华教授,澳门科技大学商学院助理教授徐劲飞博士,华南师大MPA教育中心项目主任颜海娜副教授,华南师范大学政治与公共管理学院刘劲宇高级实验师、于刚强博士、傅承哲博士等嘉宾出席了活动。活动采用线上线下相结合的方式进行,共有100多名师生参加了本次研学,活动氛围热烈融洽。
主题分享
第一位进行分享的是政治与公共管理学院硕士研究生唐薇同学,她以《“一鱼两吃”:如何用社会调查来做实验研究》为题,从“为什么要做调查实验?”“调查实验是如何产生并发展的?”“调查实验的基本原理是什么?”三个方面为大家介绍了调查实验的理论知识部分。
首先,她以契合法、差异法和共变法三个推断方法为例介绍了调查实验产生的直接动力——因果分析;其次,她概述了调查实验产生的基础即实验和调查作为两种独立的研究方法在社会科学研究中的运用以及存在的不足;最后,她通过结合生动形象的小故事,为大家介绍了调查实验的定义、核心、三大变量和三个重要机制,让大家对于调查实验的理论部分有了初步的了解。
随后,政治与公共管理学院本科生江嘉莉同学进行了《“治大国如烹小鲜”:如何设计一个调查实验》的分享。她将实验划分为准备、设计、执行和分析四个阶段,并逐一讲述了需要关注和学习的内容。
在准备阶段,实验方法的选择需要验证“效果一致”“前因后果”“真实相关”并与研究“特别需求”相匹配;接着她分别介绍了主体间设计、主体内设计和混合设计这三种样本分配设计的优缺点和适用范围,并指出选取调查对象需要考虑样本选取方法和样本量两个方面。
在设计阶段,她分别介绍了三种处理操纵设计,包括启动效应调查实验、析因调查实验和列举调查实验, 以及四种样本分配设计,包括简单随机化设计、分层随机化设计、区组随机化设计和随机化析因设计,还有概率抽样和非概率抽样两种样本抽选设计。
在执行阶段,实地采集数据尤为重要,为确保数据采集的质量,既可以通过预调查来检测设计的有效性,又可以通过过程控制保证实验环境的有效和实验变量的有效操控。
在分析阶段,有方差分析、因子水平均值分析、协方差分析、回归分析等统计分析手段,研究者可按需选择。
紧接着,政治与公共管理学院傅承哲博士分享了《“鱼熊兼得”:调查实验的若干应用场景与案例》。他结合一些有趣的社会现象,从正反两面区分了因果关系和相关关系,深入浅出地介绍如何借助“反事实逻辑框架”来确定事物之间是否有因果关系,并总结了公共政策因果效应识别的黄金法则,包括实验逻辑和随机试验。
而后,他以四位诺贝尔经济学奖得主为例展示实验研究法在国外公共管理研究中更受欢迎的现状,并举例分析了调查实验的多种应用场景以及阐述了行为公共管理视角下的政策分析,最后结合自身经验对研究设计的过程提出了一些建议。
最后由来自香港科技大学社会科学部的博士研究生黄靖洋同学进行分享。他介绍道,实验研究已经成为英美政治学研究的主流,与一般定量研究和定性研究相比有着独特的优势,英美TOP 30的高校在本科阶段和硕士研究生阶段就开设了相应课程。他还列举了许多实验研究的议题、英美高校政府学院和政治学系的实验方法课程培训内容、实验方法在中国政治学研究中的应用,以及实验研究中要注意的问题。
嘉宾点评
澳门科技大学徐劲飞老师从校际合作的角度出发,建议把调查实验的工作坊做成常态化的交流机制,联络周边院校,打造以调查实验为基础的大湾区的“黄埔军校”,多给青年学者做一些布道培训。
华南理工大学李文彬老师从公共管理学的角度对调查实验这一研究方法做出了补充说明,该方法有着明确的使用场景、适用研究对象和研究目的,适合于心理层面和偏好层面、价值观层面的测量性研究,不能将其过度泛化。
同时,李老师还提出了一些值得思考和进一步讨论的问题:第一,该方法依托于问卷调查,其调查结果可能与问卷调查差别不大,存在真实性不足、与实际情景的偏离很大的问题;第二,由于实验法的控制性和随机性等先天性问题,实验过程可能存在很大难度,针对人的心理层面和行为价值偏好层面这类指向现实的问题,很难产生具有外部效度的观点。相比之下,田野实验研究结果在逻辑性、因果解释力、政策启示方面应当更有价值。
暨南大学林慕华老师站在“学习者”的角度,对此次研学活动的意义进行了总结。不管我们采取怎么样的研究路径,我们都要对不同的研究方法有所了解和掌握,一来是可以对自己所从事的研究有所互补,二来是可以通过不断地对比和反思来选择更符合自己研究问题的方法,研究方法是工具和手段,要服务于我们的研究目的。
另外,林老师还针对调查实验法提出了新的问题:如何确定样本的大小?心理学实验室研究的样本可以很小,而调查实验的样本需要多大才有足够的外部效应,才能使结论可以外推?问卷调查的随机性非常难以把控,如何确定抽样和分配是随机的?问题该如何表述才不会影响回收问卷的质量,削弱调查研究的信度和效度?只有妥善处理这些问题,才能做出更好的研究。
华南农业大学唐斌老师介绍了华南农业大学“目前有什么”。华农每年派出2000多名学生前往农村积累中国农村尤其是南方农村的原始素材,还建立了广东农村的数据库和一些调查研究的观测点、联系点,并时常派老师和学生进行半个月以上的观测调研,为以后的研究打基础。基于庞大的素材积累,唐老师指出应思考如何把素材转化成数据,再把数据转化成研究成果。最后,唐老师邀请大家前往华农探讨,开展合作研究。
总结环节
在活动的最后,杨爱平老师进行了简短的总结。他表示此次研学活动非常精彩,并对各位老师同学来自不同角度、不同维度的认真分享和嘉宾们见解独到的点评表示高度赞赏和衷心感谢。通过此次活动,我院的老师同学们开阔了眼界、增长了见识、提升了能力,了解了调查实验这一研究方法的优缺点、适用对象及范围,对每一个从事教学研究的老师和同学们都很有帮助。
寒假研学齐参与
政管师生共成长
政管学院寒假研学系列活动
精彩未完待续
敬请关注