求职指标的变化因操作化决策而引起,当使用数字痕迹从计数器

科学领域:

• 社会科学 社会科学 社会科学
• 信息科学 信息科学 信息科学
• 人与计算机的交互

背景情况:

• 数字痕迹,特别是计量数据,为研究在线行为提供了调查的替代方案.
• 从数字数据中运行抽象概念涉及到关于事件选择和指标定义的关键决策.
• 使用数字痕迹测量在线求职强度是复杂的,因为行为的间接性质.

研究的目的:

• 通过使用计量数字数据,调查操作化选择对测量求职强度的影响.
• 探索不同组合的测量目标和类型如何影响求职强度指标的有效性.
• 评估其他操作化因素,如会话细分和异常处理对测量结果的影响.

主要方法:

• 利用了来自西班牙600名小组成员的计量数据.
• 通过不同的测量目标 (例如,工作平台会话) 和测量类型 (例如,访问次数,花费时间) 探索了10,080个不同的操作.
• 分析了会话细分方法和异常值处理技术对测量结果的影响.

主要成果:

• 在测量中发现了显著的变化,尺度对之间的相关性从0.14到0.91.
• 与共享相同测量目标的指标相比,与仅共享相同测量类型的指标相比,共享相同测量目标的指标表现出更强的融合有效性.
• 虽然会话细分方法影响了结果,但指标选择的影响更大.

结论:

• 分析数字痕迹的操作化决策,特别是对于在线求职强度,极大地影响了实质性调查结果.
• 研究人员必须在使用计量数据时仔细考虑和报告他们的操作选择.
• 测量目标和类型的选择对于实现可靠和有效的在线行为测量至关重要.