Capítulo 50 Propriedades psicométricas
50.1 Características
50.1.1 O que são propriedades psicométricas?
- .REF?
| Concordância alta | Concordância baixa | |
|---|---|---|
| Validade alta | Adequado | Inadequado |
| Validade baixa | Inadequado | Inadequado |
O pacote lavaan384 fornece a função modificationIndices para calcular os índices de modificação.
50.4 Validade de conteúdo
50.4.3 Que fatores afetam a validade?
A amostragem não probabilística pode dificultar a generalização dos achados da amostra para a população, diminuindo assim a validade externa do estudo.15
Quando as características da amostra obtida por seleção não probabilística forem similares às da população, a validade externa pode ser maior.15
50.4.4 Como avaliar a validade de um estudo?
- As características da amostra apresentadas na Tabela 1 são úteis para interpretação da validade interna e externa dos achados do estudo.220
50.13 Concordância
50.13.2 Quais métodos são adequados para análise de concordância de variáveis dicotômicas?
| Teste positivo | Teste negativo | Total | |
|---|---|---|---|
| Teste positivo | \(a\) | \(b\) | \(g=a+b\) |
| Teste negativo | \(c\) | \(d\) | \(h=c+d\) |
| Total | \(e=a+c\) | \(f=b+d\) | \(N=a+b+c+d\) |
O pacote irr388 fornece a função kappa2 para estimar a confiabilidade utilizando coeficiente \(\kappa\) de Cohen para 2 examinadores.
O pacote irr388 fornece a função kappam.fleiss para estimar a confiabilidade utilizando coeficiente \(\kappa\) de Fleiss para mais de 2 examinadores.
O pacote irr388 fornece a função kappam.light para estimar a confiabilidade utilizando coeficiente \(\kappa\) de Light para mais de 2 examinadores em dados categóricos.
O pacote psych391 fornece a função tetrachoric para calcular o coeficiente de correlação tetracórica (\(r_{tet}\)).
50.13.3 Quais métodos não são adequados para análise de concordância de variáveis dicotômicas?
Concordância absoluta \(C_{A}\) — quantidade de casos em que examinadores concordam — não é recomendada porque não corrige a estimativa para possíveis concordâncias ao acaso.390
Concordância percentual \(C_{\%}\) — proporção de casos em que examinadores concordam pela quantidade total de casos — não é recomendada porque não corrige a estimativa para possíveis concordâncias ao acaso.390
Qui-quadrado \(\chi^2\) a partir da tabela de contigência não é recomendado porque tal teste analisa associação.390
A família de coeficientes de Cohen \(\kappa\) não é adequada para analisar concordância quando as variáveis são aparentemente (e não originalmente) dicotômicas.390
50.13.4 Quais métodos são adequados para análise de concordância de variáveis categóricas?
Coeficiente de Cohen \(\kappa\): mede a concordância corrigida pelo acaso.386,387
Coeficiente de Cohen ponderado \(\kappa_{w}\): mede a concordância corrigida pelo acaso.386,387
| Grave | Moderado | Leve | Total | |
|---|---|---|---|---|
| Grave | \(a\) | \(b\) | \(c\) | \(j=a+b+c\) |
| Moderado | \(d\) | \(e\) | \(f\) | \(k=d+e+f\) |
| Leve | \(g\) | \(h\) | \(i\) | \(l=g+h+i\) |
| Total | \(j=a+d+g\) | \(k=b+e+h\) | \(l=c+f+i\) | \(N=a+b+c+d+e+f+g+h+i\) |
- Coeficiente de correlação policórica \(r_{pol}\).390
O pacote psych391 fornece a função tetrachoric para calcular o coeficiente de correlação policórica (\(r_{pol}\)).
50.13.5 Quais métodos são adequados para análise de concordância de variáveis categóricas e contínuas?
- Coeficiente de correlação bisserial \(r_{s}\).390
O pacote psych391 fornece a função tetrachoric para calcular o coeficiente de correlação bisserial (\(r_{s}\)).
50.13.7 Quais métodos são adequados para análise de concordância de variáveis contínuas?
Gráfico de dispersão com a reta de regressão.147
Gráfico de limites de concordância (média dos testes vs. diferença entre testes) com a reta de regressão do viés e respectivo no nível de significância \(\alpha\) pré-estabelecido.147
O pacote BlandAltmanLeh392 fornece as funções bland.altman.stats e bland.altman.plot para calcular e apresentar, respectivamente, o gráfico com os limites de concordância entre dois métodos.
50.13.8 Quais métodos não são adequados para análise de concordância de variáveis contínuas?
Comparação de médias: dois métodos apresentarem médias similares — isto é, ‘sem diferença estatística’ após um teste inferencial de hipótese nula \(H_{0}:\mu_{1} = \mu_{2}\) — não informa sobre a concordância deles. Métodos com maior erro de medida tendem a ter menos chance de rejeição da hipótese nula.147
Correlação bivariada: o coeficiente de correlação dependente tanto da variação entre indivíduos (isto é, entre os valores verdadeiros) quanto da variação intraindividual (isto é, erro de medida). Se a variância dos erros de medida de ambos os métodos não for pequena comparadas à variância dos valores verdadeiros, o tamanho do efeito da correlação será pequeno mesmo que os métodos possuam boa concordância.147
Regressão linear: o teste da hipótese nula da inclinação da reta de regressão (\(H_{0}:\beta = 0\)) é equivalente a testar a correlação bivariada (\(H_{0}:\rho = 0\)).147
50.14 Confiabilidade
50.14.2 Quais métodos são adequados para análise de confiabilidade?
- .REF?
O pacote semTools393 fornece a função reliability para analisar a confiabilidade de um instrumento.
O pacote psych391 fornece a função icc para estimar a confiabilidade utilizando coeficientes de correlação intraclasse.
O pacote multilevel394 fornece a função mult.icc para estimar a confiabilidade utlizando diversos coeficientes de correlação intraclasse.
O pacote multilevel394 fornece a função cronbach para estimar a confiabilidade utlizando o \(\alpha\) de Cronbach.
O pacote irr388 fornece a função kripp.alpha para estimar a confiabilidade utilizando coeficiente \(\alpha\) de Krippendorff.
O pacote irr388 fornece a função iota para estimar a confiabilidade utilizando coeficiente \(\iota\).
50.15 Diretrizes para redação
50.15.1 Quais são as diretrizes para redação de estudos de propriedades psicométricas?
Visite a rede Enhancing the QUAlity and Transparency Of health Research (EQUATOR Network) para encontrar diretrizes específicas.
COSMIN reporting guideline for studies on measurement properties of patient-reported outcome measures:395 https://www.equator-network.org/reporting-guidelines/cosmin-reporting-guideline-for-studies-on-measurement-properties-of-patient-reported-outcome-measures/
Recommendations for reporting the results of studies of instrument and scale development and testing:396 https://www.equator-network.org/reporting-guidelines/recommendations-for-reporting-the-results-of-studies-of-instrument-and-scale-development-and-testing/
Guidelines for reporting reliability and agreement studies (GRRAS) were proposed:397 https://www.equator-network.org/reporting-guidelines/guidelines-for-reporting-reliability-and-agreement-studies-grras-were-proposed/>
Ferreira, Arthur de Sá. Ciência com R: Perguntas e respostas para pesquisadores e analistas de dados. Rio de Janeiro: 1a edição,