メーターを用いたデジタルトレースから誘発される求職指標の操作化決定による変動性

科学分野:

• 社会科学
• 情報科学
• ヒューマンコンピュータインタラクション

背景:

• デジタルトレース、特にメーター化されたデータは、オンライン行動を研究するための調査の代替手段を提供します。
• デジタルデータから抽象的な概念を操作化することは、イベントの選択と指標の定義に関する重要な決定を伴います。
• オンライン求職強度の測定は、行動の直接的でない性質のため、デジタルトレースを使用すると複雑になります。

研究 の 目的:

• メーター化されたデジタルデータを使用した求職強度の測定における操作化の選択の影響を調査すること。
• 測定ターゲットと測定タイプの異なる組み合わせが求職強度指標の妥当性にどのように影響するかを探求すること。
• セッションセグメンテーションや外れ値処理などの他の操作化要因が測定結果に与える影響を評価すること。

主な方法:

• スペインの600人のパネルからのメーター化されたデータを利用しました。
• 測定ターゲット（例：求職プラットフォームセッション）と測定タイプ（例：訪問回数、滞在時間）を変更することにより、10,080の異なる操作化を検討しました。
• セッションセグメンテーション方法と外れ値処理技術が測定結果に与える影響を分析しました。

主要な成果:

• 測定値に大きなばらつきが見られ、指標ペア間の相関は0.14から0.91の範囲でした。同じ測定ターゲットを共有する指標は、同じ測定タイプのみを共有する指標よりも強い収束的妥当性を示しました。セッションセグメンテーション方法は結果に影響を与えましたが、指標の選択はより大きな影響を及ぼしました。

結論:

• デジタルトレース、特にオンライン求職強度の分析における操作化の決定は、実質的な発見に重大な影響を与えます。
• 研究者は、メーター化されたデータを使用する際に、操作化の選択を慎重に検討し、報告する必要があります。
• 測定ターゲットと測定タイプの選択は、オンライン行動の信頼性が高く妥当な測定を達成するために最も重要です。