[en] APPLIED PSYCHOMETRICS: LEVERAGING METHODS AND MODELS ACROSS DIVERSE CONTEXTS

[pt] PSICOMETRIA APLICADA: EXPLORANDO MÉTODOS E MODELOS EM CONTEXTOS DIVERSOS

[pt] RODRIGO LEAO FERREIRA DO NASCIMENTO

[pt] DADOS FALTANTES

[pt] ANALISE DE REDES

[pt] TEORIA DE RESPOSTA AO ITEM

[pt] DESENVOLVIMENTO HUMANO

[pt] ANALISE FATORIAL CONFIRMATORIA

[en] MISSING DATA

[en] NETWORK ANALYSIS

[en] ITEM RESPONSE THEORY

[en] HUMAN DEVELOPMENT

[en] CONFIRMATORY FACTOR ANALYSIS

[pt] Estudos psicométricos são de fundamental importância para garantir processos de avaliação justos em diferentes contextos. Sua utilização não está restrita a uma certa área ou disciplina científica, sendo amplamente aplicada em áreas como a Educação. Independentemente do contexto de aplicação em que se pretende mensurar tais características psicológicas, será necessário o uso de técnicas e procedimentos baseados em diferentes tradições psicométricas. Tais técnicas e procedimentos visam gerar evidências para se apoiar ou não a validade das inferências feitas a partir das interpretações dos resultados desses instrumentos. Diante dessa oferta de técnicas e procedimentos, faz-se importante colocar em perspectiva a aplicação dessas diferentes tradições, considerando suas características e atributos substantivos, metodológicos e históricos. Nesse sentido, a presente investigação científica buscou se apoiar em duas ênfases distintas: (1) aplicação de diferentes técnicas psicométricas e exploração de desafios metodológicos; (2) para oferecer evidências acerca de instrumentos psicométricos utilizados e novos. Para isso, a presente tese foi dividida em quatro artigos. O primeiro artigo buscou obter evidências de invariância de duas medidas em saúde mental (depressão e ansiedade) em amostras de três países: Brasil, Espanha e Portugal. Em linhas gerais, os resultados obtidos apontam para a estabilidade da medida de depressão, sendo a invariância menos estável na medida de ansiedade utilizada. O segundo artigo apresentado se refere à busca de evidências de validade para um inventário de avaliação da penosidade recém-criado, no contexto hospitalar brasileiro. Os achados encontrados apontam para uma estrutura fatorial mais robusta com uma dimensão, embora sejam discutidos fatores contingentes à estrutura teórica de três fatores. Além da investigação confirmatória da estrutura interna do instrumento, foi implementada uma técnica de Teoria de Resposta ao Item, que revelou níveis médios a difíceis para os itens, no geral. A terceira aplicação apresentada diz respeito ao uso de técnicas de Análise de Redes no contexto do desenvolvimento infantil dos Estados Unidos. Os resultados obtidos podem ser interpretados sob a luz de uma estrutura de rede estável, com seis comunidades, o que vai de encontro à proposta teórica do instrumento de medida. Finalmente, o quarto estudo descrito nessa tese visou apresentar oportunidades e desafios metodológicos no tratamento de grandes quantidades de dados faltantes dentro de modelos de TRI, no contexto do desenvolvimento infantil. De modo geral, as evidências apresentadas nessa tese apontam para a importância da adoção substantivamente consubstanciada de diferentes técnicas e procedimentos psicométricos na aplicação, tanto na investigação da estrutura interna quanto no desenvolvimento de novos instrumentos, sobretudo buscando observar as intrincadas relações estatísticas verificadas entre os diferentes modelos. Além disso, o presente estudo aponta para desafios metodológicos atuais e futuros, sobretudo a partir da tendência na área de instrumentos que privilegiem não só as necessidades dos desenvolvedores, mas também a experiência dos respondentes.

[en] Psychometric studies are fundamentally important to ensure fair assessment processes in different contexts. Their use is not limited to a specific area or scientific discipline, being widely applied in fields such as Education. Regardless of the application context in which psychological characteristics are to be measured, it is necessary to employ techniques and procedures based on different psychometric traditions. Such techniques and procedures aim to generate evidence to support or refute the validity of the inferences made from the interpretations of the results produced by these instruments. Given the range of available techniques and procedures, it is crucial to contextualize the application of these different traditions, considering their substantive, methodological, and historical attributes and characteristics. In this sense, the present scientific investigation sought to focus on two distinct emphases: (1) the application of different psychometric techniques and (2) the exploration of methodological challenges, with the goal of providing evidence on both existing and newly developed psychometric instruments. To this end, the present thesis was organized into four articles. The first article aimed to gather evidence of measurement invariance for two mental health measures (depression and anxiety) in samples from three countries: Brazil, Spain, and Portugal. Overall, the results suggest the stability of the depression measure, while the invariance of the anxiety measure was found to be less stable. The second article focuses on gathering validity evidence for a recently developed instrument for assessing job penibility in the Brazilian hospital context. The findings indicate a more robust factorial structure with a single dimension, although contingent factors related to the theoretical proposition of a three-factor structure are discussed. In addition to the confirmatory investigation of the instrument s internal structure, an Item Response Theory (IRT) approach was implemented, revealing that the items, in general, presented moderate to high levels of difficulty. The third application refers to the use of Network Analysis techniques in the context of child development in the United States. The results can be interpreted within the framework of a stable network structure comprising six communities, which aligns with the theoretical proposal of the measurement instrument. Finally, the fourth study described in this thesis aimed to present opportunities and methodological challenges in handling large amounts of missing data within IRT models, also in the context of child development. Overall, the evidence presented in this thesis highlights the importance of adopting a substantively grounded approach to the application of different psychometric techniques and procedures. This is relevant not only for the investigation of internal structure but also for the development of new instruments, particularly when seeking to understand the intricate statistical relationships that emerge across different models. Furthermore, this study sheds light on current and future methodological challenges, especially considering the growing trend toward instruments that prioritize not only the needs of developers but also the experience of respondents.

JESUS LANDEIRA FERNANDEZ

LUIS FLAVIO CHAVES ANUNCIACAO

JESUS LANDEIRA FERNANDEZ

PEDRO PAULO PIRES DOS SANTOS

LUIS FLAVIO CHAVES ANUNCIACAO

THOMAS EICHENBERG KRAHE

LEONARDO FERNANDES MARTINS

JANE KAPLAN SQUIRES

2025-05-02

2025-01-16

[pt] TEXTO

application/pdf

INGLÊS

https://www.maxwell.vrac.puc-rio.br/colecao.php?strSecao=resultado&nrSeq=70197@1

https://www.maxwell.vrac.puc-rio.br/colecao.php?strSecao=resultado&nrSeq=70197@2

https://doi.org/10.17771/PUCRio.acad.70197