社会研究方法：选择设计，审查一种测量
一个问题还不是设计，一致也还不是真实。先建立问题到证据的计划，再检查两位编码者的分类能支持何种有限测量主张。不涉及真实参与者或私人资料。
学习路线与例题编辑责任：University Reading List 编辑项目。 编辑与选书方法 · 来源核验日期:
适用范围与编辑责任
适合能读社会科学论证、会初等比例的研究方法初学者。Bhattacherjee为免费研究生入门，Creswell两作者第六版面向计划书，Salganik第一版讨论数字研究，三者任务不同。虚构编码案例只教授给定名义一致指标，不设万能合格阈值。
选择你的起点
需要免费的研究方法主线
以Bhattacherjee连接概念、理论、设计、测量、抽样与分析，项目需要时另补专门技术。
需要把问题写成计划
用Research Design比较质性、量化、混合取向并写一致方案。
问题涉及数字记录或平台
先明确设计，再读Bit by Bit；历史平台例子不是当前API说明或收集人们资料的许可。
三本书如何取舍
Social Science Research: Principles, Methods, and Practices
Anol Bhattacherjee · 版次: 2 · 2012
免费的紧凑方法主线
- 适合何时选择
- 需要概念到推论的连贯地图。
- 何时另选路线
- 想靠一本短书完成统计软件或专业质性分析训练。
- 建议阅读范围
- 第二版实际标题中的理论、设计、测量、信度效度与抽样；不新编章号。
- 局限与取舍
- USF说明这是2012年研究生取向文本；初学者指研究方法初学，并非无需学术阅读和数量准备。
选书前试做
为“回答提供理由”等虚构构念写编码规则与两个边界例子。
检查标准: 观测类别不同于构念；说明判断进入何处、重复分类仍不能确定什么。
Research Design: Qualitative, Quantitative, and Mixed Methods Approaches（研究设计：定性、定量与混合方法）
John W. Creswell; J. David Creswell · 版次: 6 · 2023
计划书与取向比较
- 适合何时选择
- 需要问题、目的和方法相互匹配。
- 何时另选路线
- 以为简短方法章能代替专业训练，或混合方法只等于两份数据。
- 建议阅读范围
- 第六版1、4及6–10章：取向、伦理、目的、问题和三类方法。
- 局限与取舍
- 出版社核实十章结构；整齐的计划书不证明测量可靠或有效。
选书前试做
为编码问题写目的陈述和一种设计，注明能支持和不能支持的结论。
检查标准: 抽样单位、规则与推论匹配问题；因果主张不止需要双人一致表。
Bit by Bit: Social Research in the Digital Age
Matthew J. Salganik · 版次: 1 · 2017
免费的数字研究比较
- 适合何时选择
- 希望区分观察、提问、实验与协作。
- 何时另选路线
- 立即需要平台操作，或还需方法术语入门。
- 建议阅读范围
- 第一版1.5建立地图，2–5章比较设计，6章讨论伦理；不混同旧Open Review版。
- 局限与取舍
- 作者强调长期方法抽象；旧平台例子不确定当前权限、同意或再利用规则，部分活动另需数学或编程。
选书前试做
用四设计地图为一个虚构问题提两条路线，分别写伦理难点。
检查标准: 设计改变研究者与参与者的关系及推论种类；公开可见不自动解决收集或合并是否合适。
检查先修准备
什么是单位？
明确是人、帖子、段落、事件或组织；换单位会改变分母，通常也改变主张。
一致能证明效度吗？
不能。两人也可能同意同一条糟糕规则；一致性与测量能否支持预期解释是两回事。
需要什么数学？
二乘二表、比例及κ=(po−pe)/(1−pe)。pe是边际比例乘积基准，不是已证明的随机猜测心理机制。
六步学习与具体成果
已标记完成的成果: 0 / 6
勾选用于自我记录，不是成绩评定；标记不会发送给本站。
-
定义问题与构念
建议阅读范围: Bhattacherjee理论与测量部分。
动手产出: 写构念、操作规则及一个故意模糊的虚构段落。
检查标准: 读者能说出规则怎样分类、哪里仍需判断。
-
选择取向
建议阅读范围: Research Design1、6–10章，Bit by Bit1.5。
动手产出: 比较同一问题的两种设计，列单位、产出与局限。
检查标准: 从所求推论出发，不由偏好的软件决定。
-
制作小型编码本
建议阅读范围: 测量与信度讨论。
动手产出: 为虚构材料写互斥且穷尽的A/B规则，保留分歧记录。
检查标准: 讨论前独立分类与事后协商分开，不能拿共识当初始一致。
-
审计第一张表
建议阅读范围: 下方原创题。
动手产出: 计算边际、观察一致、基准一致和κ。
检查标准: 注明每个分母，不发明未提供的真实标签。
-
检验表面改善
建议阅读范围: 变式与描述统计的意义。
动手产出: 对新表比较原始一致与κ。
检查标准: 材料构成和边际改变，不支持简单的编码者进步结论。
-
写有限方法备忘
建议阅读范围: Bit by Bit第6章与方案。
动手产出: 写抽样、编码、一致与效度局限，列真实研究前仍需的证据。
检查标准: 不把虚构材料当参与者观察，不实施招募或抓取。
原创例题与解析
两位编码者与80个虚构段落
两人独立把同一80段虚构文本分为A或B。A/A36、A/B4、B/A12、B/B28，首标签属编码者1。求原始一致率与题给无权重Cohen κ，并说明尚未建立什么。
前提假设
无缺失分类，A/B为互斥、穷尽的名义类别。表为构造，未给真值或随机样本。po定义为对角比例；pe为对应类别的两人边际比例乘积之和。
- 观察一致po=(36+28)/80=0.80。编码者1的A/B边际40/40，编码者2为48/32。
- pe=(40/80)(48/80)+(40/80)(32/80)=0.50；κ=(0.80−0.50)/(1−0.50)=0.60。
- 16次不一致，方向分别4与12。没有参照真值或编码本证据，不能判断谁正确或构念是否测到。
答案与解释
原始一致80%、κ=0.60，是对这个虚构集合的一致性描述，不是准确率、构念效度或通用合格评级。
检验结果
由四格恢复双方边际和80。协商后的共识表回答不同问题，不能称初始独立一致。
改变假设，再做一题
原始一致更高，κ却可能更低
改用另一批80段虚构材料：A/A0、A/B4、B/A4、B/B72。保持独立分类、名义类别及κ定义，不提供前后干预主张。
- 原始一致72/80=0.90，比旧表0.80高。两人A比例均4/80=0.05，B均0.95。
- pe=0.05²+0.95²=0.905；κ=(0.900−0.905)/(1−0.905)=−1/19≈−0.05263。
- 大量共同B但没有共同A，边际与材料构成已改变，两个指标不必给两表相同排序。
答案与解释
第二表原始一致90%而κ为负；单个数都不能证明编码者更好或测量有效。类别比例变化本身会影响比较。
检验结果
核对总数80及0.905>0.900，不用泛化κ形容词替代结论；写明表格、基准和推论。没有进行健康、人格或社会群体分类。
常见误区
把构念当指标
标签是需论证的操作选择，不是概念本身。
把百分比当真值
一致、准确、效度所需证据不同。
把访问当许可
技术可达不决定伦理、同意或语境期待。
进入下一阶段之前
- 能连接研究问题、构念、单位与观测计划。
- 能复算两张编码表，并解释为何不是效度检验。
- 能按下一任务选主教材，并说明一项方法训练缺口。
来源与版次核验
来源核验日期:
- USF: Social Science Research record and licence
USF核实2012年、研究生对象和CC BY-NC-SA3.0；保留第二版身份，按主题而非新编章图阅读。
- SAGE: Research Design sixth-edition contents
SAGE第六版目录核实十章与计划书取向，不声称全文评价或方法效果。
- Salganik: first-edition outline
作者第一版大纲及伦理章核实四类设计及责任，保留2017出版与2018版权区别。
- Penn State: nominal agreement and kappa definitions
Penn State大学教材提供名义一致定义；Cohen1960原论文见研究记录，两表与计算均为原创，无临床例子移植。
这些是本站建议的学习活动，并非大学官方作业，也不代表对每本书逐页通读。