Response-scale format effects on the psychometric parameters of items
Project goals
Self-report measures of attitudes and personality characteristics often use items with Likert-type response scales where respondents select an answer from a range of ordered options (e.g., agree–disagree). Such response scales can differ in several formal attributes – number of options, verbal anchors, their extremity, or orientation. These may affect reliability and validity of responses and total scores and directly affect measurement quality. For better understanding of the response process, we propose an explanatory psychometric model allowing to investigate the differences in cognitive processes in responding to different response scales. The proposed model accommodates for inter-individual differences in response-scale perception and can model several response-scale attributes simultaneously. We will test the model in a series of online mixed experimental designs manipulating response-scale attributes. The results can be used for equating measures using different response scales, selection of optimal scale format in scale development, or more precise reliability estimation.
Keywords
reliabilityvalidityresponse styleresponse biasresponse processCASMitem-factor analysis
Public support
Provider
Czech Science Foundation
Programme
Standard projects
Call for proposals
SGA0202300001
Main participants
Masarykova univerzita / Fakulta sociálních studií
Contest type
VS - Public tender
Contract ID
23-06924S
Alternative language
Project name in Czech
Vliv formátu odpověďové stupnice na psychometrické parametry položek
Annotation in Czech
Pro měření postojů a jiných osobnostních charakteristik pomocí sebeposuzovacích škál jsou nejčastěji použity stupnice likertovského typu, kde respondent volí z ordinálně seřazených možností (např. souhlasím–nesouhlasím). Tyto stupnice se však mohou lišit v řadě ohledů – např. počtem možností, jejich verbálním označením, extremitou či orientací škály. To vše pak ovlivňuje reliabilitu i validitu odpovědí i výsledného skóre a má přímý vliv na kvalitu měření. V návaznosti na předchozí spíše deskriptivní výzkum navrhujeme explanatorní psychometrický model, který umožní zkoumat odpověďové procesy. Výhodou námi navrženého postupu je, že bere v potaz interindividuální rozdíly, a že umožňuje studovat více charakteristik odpověďové stupnice najednou. Model budeme ověřovat sérií online experimentů se smíšeným designem manipulujícím vlastnostmi odpověďové stupnice. Výsledky projektu bude možné využít pro vyvažování skórů napříč různě formátovanými škálami, volbu optimálního formátu odpověďové stupnice pro konkrétní účely, nebo pro přesnější odhad reliability psychologického měření.
Scientific branches
Solution timeline
Realization period - beginning
Jan 1, 2023
Realization period - end
Dec 31, 2025
Project status
K - Ending multi-year project
Latest support payment
Feb 29, 2024
Data delivery to CEP
Confidentiality
S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů
Data delivery code
CEP25-GA0-GA-R
Data delivery date
Feb 21, 2025
Finance
Total approved costs
5,878 thou. CZK
Public financial support
5,806 thou. CZK
Other public sources
72 thou. CZK
Non public and foreign sources
0 thou. CZK
Recognised costs
5 878 CZK thou.
Public support
5 806 CZK thou.
0%
Provider
Czech Science Foundation
OECD FORD
Psychology (including human - machine relations)
Solution period
01. 01. 2023 - 31. 12. 2025