Capítulo 36 Propriedades psicométricas
36.1 Características
36.1.1 O que são propriedades psicométricas?
- .REF?
Concordância alta | Concordância baixa | |
---|---|---|
Validade alta | Adequado | Inadequado |
Validade baixa | Inadequado | Inadequado |
O pacote lavaan276 fornece a função modificationIndices para calcular os índices de modificação.
O pacote semTools277 fornece a função reliability para analisar a confiabilidade de um instrumento.
O pacote psych278 fornece a função icc para calcular a confiabilidade utilizando coeficientes de correlação intraclasse.
36.4 Validade de conteúdo
36.4.3 Que fatores afetam a validade?
A amostragem não probabilística pode dificultar a generalização dos achados da amostra para a população, diminuindo assim a validade externa do estudo.13
Quando as características da amostra obtida por seleção não probabilística forem similares às da população, a validade externa pode ser maior.13
36.4.4 Como avaliar a validade de um estudo?
- As características da amostra apresentadas na Tabela 1 são úteis para interpretação da validade interna e externa dos achados do estudo.174
36.13 Concordância
36.13.2 Quais métodos são adequados para análise de concordância de variáveis dicotômicas?
Teste positivo | Teste negativo | Total | |
---|---|---|---|
Teste positivo | \(a\) | \(b\) | \(g=a+b\) |
Teste negativo | \(c\) | \(d\) | \(h=c+d\) |
Total | \(e=a+c\) | \(f=b+d\) | \(N=a+b+c+d\) |
O pacote psych278 fornece a função tetrachoric para calcular o coeficiente de correlação tetracórica (\(r_{tet}\)).
36.13.3 Quais métodos não são adequados para análise de concordância de variáveis dicotômicas?
Concordância absoluta \(C_{A}\) - quantidade de casos em que examinadores concordam - não é recomendada porque não corrige a estimativa para possíveis concordâncias ao acaso.283
Concordância percentual \(C_{\%}\) - proporção de casos em que examinadores concordam pela quantidade total de casos - não é recomendada porque não corrige a estimativa para possíveis concordâncias ao acaso.283
Qui-quadrado \(\chi^2\) a partir da tabela de contigência não é recomendado porque tal teste analisa associação.283
A família de coeficientes de Cohen \(\kappa\) não é adequada para analisar concordância quando as variáveis são aparentemente (e não originalmente) dicotômicas.283
36.13.4 Quais métodos são adequados para análise de concordância de variáveis categóricas?
Coeficiente de Cohen \(\kappa\): mede a concordância corrigida pelo acaso.280,281
Coeficiente de Cohen ponderado \(\kappa_{w}\): mede a concordância corrigida pelo acaso.280,281
Grave | Moderado | Leve | Total | |
---|---|---|---|---|
Grave | \(a\) | \(b\) | \(c\) | \(j=a+b+c\) |
Moderado | \(d\) | \(e\) | \(f\) | \(k=d+e+f\) |
Leve | \(g\) | \(h\) | \(i\) | \(l=g+h+i\) |
Total | \(j=a+d+g\) | \(k=b+e+h\) | \(l=c+f+i\) | \(N=a+b+c+d+e+f+g+h+i\) |
- Coeficiente de correlação policórica \(r_{pol}\).283
O pacote psych278 fornece a função tetrachoric para calcular o coeficiente de correlação policórica (\(r_{pol}\)).
36.13.5 Quais métodos são adequados para análise de concordância de variáveis categóricas e contínuas?
- Coeficiente de correlação bisserial \(r_{s}\).283
O pacote psych278 fornece a função tetrachoric para calcular o coeficiente de correlação bisserial (\(r_{s}\)).
36.13.7 Quais métodos são adequados para análise de concordância de variáveis contínuas?
Gráfico de dispersão com a reta de regressão.74
Gráfico de limites de concordância (média dos testes vs. diferença entre testes) com a reta de regressão do viés e respectivo no nível de significância \(\alpha\) pré-estabelecido.74
O pacote BlandAltmanLeh284 fornece as funções bland.altman.stats e bland.altman.plot para calcular e apresentar, respectivamente, o gráfico com os limites de concordância entre dois métodos.
36.13.8 Quais métodos não são adequados para análise de concordância de variáveis contínuas?
Comparação de médias: dois métodos apresentarem médias similares - isto é, ‘sem diferença estatística’ após um teste inferencial de hipótese nula \(H_{0}:\mu_{1} = \mu_{2}\) - não informa sobre a concordância deles. Métodos com maior erro de medida tendem a ter menos chance de rejeição da hipótese nula.74
Correlação bivariada: o coeficiente de correlação dependente tanto da variação entre indivíduos (isto é, entre os valores verdadeiros) quanto da variação intraindividual (isto é, erro de medida). Se a variância dos erros de medida de ambos os métodos não for pequena comparadas à variância dos valores verdadeiros, o tamanho do efeito da correlação será pequeno mesmo que os métodos possuam boa concordância.74
Regressão linear: o teste da hipótese nula da inclinação da reta de regressão (\(H_{0}:\beta = 0\)) é equivalente a testar a correlação bivariada (\(H_{0}:\rho = 0\)).74
36.15 Diretrizes para redação
36.15.1 Quais são as diretrizes para redação de estudos de propriedades psicométricas?
Visite a rede Enhancing the QUAlity and Transparency Of health Research EQUATOR Network para encontrar diretrizes específicas para cada tipo de estudo de propriedades psicométricas.
COSMIN reporting guideline for studies on measurement properties of patient-reported outcome measures:285 https://www.equator-network.org/reporting-guidelines/cosmin-reporting-guideline-for-studies-on-measurement-properties-of-patient-reported-outcome-measures/
Recommendations for reporting the results of studies of instrument and scale development and testing:286 https://www.equator-network.org/reporting-guidelines/recommendations-for-reporting-the-results-of-studies-of-instrument-and-scale-development-and-testing/
Guidelines for reporting reliability and agreement studies (GRRAS) were proposed:287 https://www.equator-network.org/reporting-guidelines/guidelines-for-reporting-reliability-and-agreement-studies-grras-were-proposed/>
Ferreira, Arthur de Sá. Ciência com R: Perguntas e respostas para pesquisadores e analistas de dados. Rio de Janeiro: 1a edição,