Capítulo 47 Propriedades psicométricas
47.1 Características
47.1.1 O que são propriedades psicométricas?
- .REF?
| Concordância alta | Concordância baixa | |
|---|---|---|
| Validade alta | Adequado | Inadequado |
| Validade baixa | Inadequado | Inadequado |
O pacote lavaan367 fornece a função modificationIndices para calcular os índices de modificação.
O pacote semTools368 fornece a função reliability para analisar a confiabilidade de um instrumento.
O pacote psych369 fornece a função icc para calcular a confiabilidade utilizando coeficientes de correlação intraclasse.
47.4 Validade de conteúdo
47.4.3 Que fatores afetam a validade?
A amostragem não probabilística pode dificultar a generalização dos achados da amostra para a população, diminuindo assim a validade externa do estudo.15
Quando as características da amostra obtida por seleção não probabilística forem similares às da população, a validade externa pode ser maior.15
47.4.4 Como avaliar a validade de um estudo?
- As características da amostra apresentadas na Tabela 1 são úteis para interpretação da validade interna e externa dos achados do estudo.216
47.13 Concordância
47.13.2 Quais métodos são adequados para análise de concordância de variáveis dicotômicas?
| Teste positivo | Teste negativo | Total | |
|---|---|---|---|
| Teste positivo | \(a\) | \(b\) | \(g=a+b\) |
| Teste negativo | \(c\) | \(d\) | \(h=c+d\) |
| Total | \(e=a+c\) | \(f=b+d\) | \(N=a+b+c+d\) |
O pacote psych369 fornece a função tetrachoric para calcular o coeficiente de correlação tetracórica (\(r_{tet}\)).
47.13.3 Quais métodos não são adequados para análise de concordância de variáveis dicotômicas?
Concordância absoluta \(C_{A}\) — quantidade de casos em que examinadores concordam — não é recomendada porque não corrige a estimativa para possíveis concordâncias ao acaso.374
Concordância percentual \(C_{\%}\) — proporção de casos em que examinadores concordam pela quantidade total de casos — não é recomendada porque não corrige a estimativa para possíveis concordâncias ao acaso.374
Qui-quadrado \(\chi^2\) a partir da tabela de contigência não é recomendado porque tal teste analisa associação.374
A família de coeficientes de Cohen \(\kappa\) não é adequada para analisar concordância quando as variáveis são aparentemente (e não originalmente) dicotômicas.374
47.13.4 Quais métodos são adequados para análise de concordância de variáveis categóricas?
Coeficiente de Cohen \(\kappa\): mede a concordância corrigida pelo acaso.371,372
Coeficiente de Cohen ponderado \(\kappa_{w}\): mede a concordância corrigida pelo acaso.371,372
| Grave | Moderado | Leve | Total | |
|---|---|---|---|---|
| Grave | \(a\) | \(b\) | \(c\) | \(j=a+b+c\) |
| Moderado | \(d\) | \(e\) | \(f\) | \(k=d+e+f\) |
| Leve | \(g\) | \(h\) | \(i\) | \(l=g+h+i\) |
| Total | \(j=a+d+g\) | \(k=b+e+h\) | \(l=c+f+i\) | \(N=a+b+c+d+e+f+g+h+i\) |
- Coeficiente de correlação policórica \(r_{pol}\).374
O pacote psych369 fornece a função tetrachoric para calcular o coeficiente de correlação policórica (\(r_{pol}\)).
47.13.5 Quais métodos são adequados para análise de concordância de variáveis categóricas e contínuas?
- Coeficiente de correlação bisserial \(r_{s}\).374
O pacote psych369 fornece a função tetrachoric para calcular o coeficiente de correlação bisserial (\(r_{s}\)).
47.13.7 Quais métodos são adequados para análise de concordância de variáveis contínuas?
Gráfico de dispersão com a reta de regressão.143
Gráfico de limites de concordância (média dos testes vs. diferença entre testes) com a reta de regressão do viés e respectivo no nível de significância \(\alpha\) pré-estabelecido.143
O pacote BlandAltmanLeh375 fornece as funções bland.altman.stats e bland.altman.plot para calcular e apresentar, respectivamente, o gráfico com os limites de concordância entre dois métodos.
47.13.8 Quais métodos não são adequados para análise de concordância de variáveis contínuas?
Comparação de médias: dois métodos apresentarem médias similares — isto é, ‘sem diferença estatística’ após um teste inferencial de hipótese nula \(H_{0}:\mu_{1} = \mu_{2}\) — não informa sobre a concordância deles. Métodos com maior erro de medida tendem a ter menos chance de rejeição da hipótese nula.143
Correlação bivariada: o coeficiente de correlação dependente tanto da variação entre indivíduos (isto é, entre os valores verdadeiros) quanto da variação intraindividual (isto é, erro de medida). Se a variância dos erros de medida de ambos os métodos não for pequena comparadas à variância dos valores verdadeiros, o tamanho do efeito da correlação será pequeno mesmo que os métodos possuam boa concordância.143
Regressão linear: o teste da hipótese nula da inclinação da reta de regressão (\(H_{0}:\beta = 0\)) é equivalente a testar a correlação bivariada (\(H_{0}:\rho = 0\)).143
47.15 Diretrizes para redação
47.15.1 Quais são as diretrizes para redação de estudos de propriedades psicométricas?
Visite a rede Enhancing the QUAlity and Transparency Of health Research (EQUATOR Network) para encontrar diretrizes específicas.
COSMIN reporting guideline for studies on measurement properties of patient-reported outcome measures:376 https://www.equator-network.org/reporting-guidelines/cosmin-reporting-guideline-for-studies-on-measurement-properties-of-patient-reported-outcome-measures/
Recommendations for reporting the results of studies of instrument and scale development and testing:377 https://www.equator-network.org/reporting-guidelines/recommendations-for-reporting-the-results-of-studies-of-instrument-and-scale-development-and-testing/
Guidelines for reporting reliability and agreement studies (GRRAS) were proposed:378 https://www.equator-network.org/reporting-guidelines/guidelines-for-reporting-reliability-and-agreement-studies-grras-were-proposed/>
Ferreira, Arthur de Sá. Ciência com R: Perguntas e respostas para pesquisadores e analistas de dados. Rio de Janeiro: 1a edição,