2012年8月19日 星期日

單項目 (single item)量表信效度是否不佳?

前幾天在部落格提到對於只有一個項目的問卷的疑慮,
而剛好老師提供了一篇文章與這個議題相關,因此簡單記錄作者對於此議題的看法。

信度
1.當所欲測量的構念 (construct)較為簡單時,使用單項目量表和使用多項目量表的信度差異不大。
2.以電腦化適性測驗的方式選題,即使題目很少也可以有良好的信度與精準度(精準估計受測者的能力)。

效度
即使單項目量表與多項目量表的分數達高度相關,兩者的效標效度(或與其它變項的相關)仍可能有很大差異。此外,單項目量表的施測結果可能大幅受到某些特定因素的影響,例如:性別、年齡。

結論:單項目量表與多項目量表分數是否等價則需進一步驗證,且依測量構念而有差異。

個人疑問:
1.文章中提到的criterion和criterion variable是指效標嗎?或是其他參考依據?
原文如下:Similar results for scores estimated from full length versus subsets of items are expected if the two are very highly correlated. But even if the longer and shorter variants of a measure are correlated at r=0.70, they can have substantially different correlations with a criterion.

It would have been informative if West et al.had reported the performance of all the items in the emotional exhaustion and depersonalization scales. In addition, they could have evaluated whether associations of individual items with the criterion variables vary by characteristics such as gender and age.

參考文獻:Hays, R. D., Reise, S., & Calderon, J. L. (2012). How Much Is Lost in Using Single Items? Journal of General Internal Medicine.

8 則留言:

  1. 您的效標 vs 參考依據,有何不同!?

    回覆刪除
    回覆
    1. 作者已經移除這則留言。

      刪除
    2. 我再看了一次這一段文章,覺得兩個應該是一樣的意思。
      但是不很確定單項目量表和效標的關聯為什麼受到其它特性的影響。

      刪除
  2. 「單向度量表」??
    您可以猜猜看 why?

    回覆刪除
    回覆
    1. 抱歉,是「單項目量表」。
      我已經重新張貼了!謝謝您。

      刪除
  3. 博班老師的責任不是給您答案
    而是教您如何澄清問題,思考,解決問題。
    很折磨人,我知道。
    但這是必要的!

    回覆刪除
    回覆
    1. 我確實覺得有被澄清到!

      關於單項目量表和效標的關聯容易受到其它人口學特性的影響,
      我覺得可能是當該項目和效標都和某變項有關連時,
      該項目和效標之間的關係可能就會增加或減少。
      例如:IADL的獨立程度和性別有關,憂鬱程度也與性別有關,則IADL和憂鬱程度的相關就會受到性別的影響。
      我猜想,如果用迴歸分析的方式,或許可以控制已知的影響變項對於預測效度的影響。
      另外,多項目量表之所以沒有這個問題,可能是因為不是所有題目都會受到特定影響變項的影響,
      因此特定影響變項對於效標效度的影響不大。

      刪除
  4. 就字意上 "they could have evaluated whether..."
    作者只是建議。。。。究竟如何!? who knows.

    您的解釋 looks great!!
    e.g., 單一項目如 shopping, 就可能受到人口學變項影響

    回覆刪除