Długość kwestionariusza a precyzja odpowiedzi na pytania ilościowe w badaniach ankietowych

• Authors: Hardy Wojciech

Title variants

EN

Length of the Questionnaire and the Precision of Response to Quantitative Questions in Surveys

RU

Длина анкеты и точность ответов на количественные вопросы в анкетных исследованиях

• Languages of publication: PL

Abstracts

PL

Cechy ankiety, takie jak jej długość, trudność czy jej subiektywnie postrzegana ciekawość, mają bezpośredni wpływ na jakość otrzymanych danych. Autor analizuje związek pomiędzy długością kwestionariusza a precyzją pozyskanych z jego pomocą danych ilościowych, wykorzystując dane ankietowe GUS na temat rozkładu wynagrodzeń w społeczeństwie polskim. Badanie opiera się na naturalnym quasi-eksperymencie, jakim było zwiększenie liczby pytań w kwestionariuszu między 2005 r. i 2006 r. Analizie poddano wpływ tej zmiany na rozrzut deklarowanych przez respondentów dochodów. Wyniki wskazują na istotny negatywny związek pomiędzy długością ankiety i precyzją udzielanych odpowiedzi (pytania przesunięte na dalsze miejsca w ankiecie dają mniej precyzyjne odpowiedzi). Uzyskane wyniki są względnie odporne na oddziaływanie innych czynników.

EN

The features of the questionnaire, such as its length, difficulty, or subjectively perceived curiosity, have a direct effect on the quality of survey data received. The author analyses the relationship between the length of the questionnaire and the precision of quantitative data obtained in a survey, using survey data on wage income distribution in the Polish households, collected by the Central Statistical Office. The research is based on a natural quasi- experiment provided by raising the number of questions asked between 2005 and 2006. The author analyses the impact of this change on the dispersion of incomes declared by the respondents. The results show a negative relationship between the length of the questionnaire and the precision of the responses obtained (questions that have been shifted to further places in the questionnaire yield less precise answers). The results are relatively robust against the impact of other factors.

RU

Такие характеристики анкеты как длина, трудность или субъективно ощущаемая привлекательность, имеют прямое влияние на качество получаемых данных. Автор анализирует связь между длиной анкеты и точностью полученных с ее помощью количественных данных, используя анкетные данные ГСУ на тему расклада заработной платы в польском обществе. Исследование опирается на естественный квазиэксперимент, каковым было увеличение количества во- просов в анкете между 2005 и 2006 гг. Анализировалось влияние изменения анкеты на диапазон декларируемых респондентами доходов. Результаты указывают на существенную отрицательную связь между длиной анкеты и точностью даваемых ответов (вопросы, переставленные на более удаленные места в анкете, дают менее точные ответы). Полученные результаты относительно устойчивы к воздействию других факторов.

Keywords

EN

survey data; income distribution; questionnaire

• Publisher: Komitet Nauk Ekonomicznych PAN, Polskie Towarzystwo Ekonomiczne
• Journal: Ekonomista
• Year: 2015
• Issue: 5
• Pages: 707-718

Contributors

author

Hardy Wojciech

• Mgr Wojciech Hardy – Wydział Nauk Ekonomicznych Uniwersytetu Warszawskiego i Instytut Badań Strukturalnych w Warszawie

References

• Badanie Aktywności Ekonomicznej Ludności, dane: BAEL II kwartał 2005, BAEL II kwartał 2006.
• Dillman D.A., Sinclair M.D., Clark J.R., Effects of Questionnaire Length, Respondent-Friendly Design, and a Difficult Question on Response Rates for Occupant-Addresed Census Mail Surveys, „Public Opinion Quarterly” 1993, nr 57(3).
• Galesic M., Bosnjak M., Effect of Questionnaire Length on Participation and Indicators of Response Quality in a Web Survey, „Public Opinion Quarterly” 2009, nr 73(2).
• Heberlein T.A., Baumgartner R., Factors Affecting Response Rates to Mailed Questionnaires – A Quantitative Analysis of the Published Literature, „American Sociological Review” 1978, nr 43(4).
• Herzog A.R., Bachman J.G., Effects of Questionnaire Length on Data Quality, „Public Opinion Quarterly” 1981, nr 45(4).
• Krosnick J.A., Alwin D.F., An Evaluation of a Cognitive Theory of Response-Order Effects in Survey Measurement, „Public Opinion Quarterly” 1987, nr 51(2).
• Krosnick J.A., Response Strategies for Coping with the Cognitive Demands of Attitude Measures in Surveys, „Applied Cognitive Psychology” 1991, nr 5(3).
• Krosnick J.A., Presser S., Question and Questionnaire Design, w: Handbook of Survey Research (2ed), red. J.D. Wright, P.V. Marsden, Elsevier, San Diego 2009.
• Krosnick J.A., Survey Research, „Annual Review Psychology” 1999, nr 50.
• Lightspeed Research 2008, Questionnaire Length, http://www.lightspeedresearch.com/pdfs/Questionnaire_Length.pdf [14.08.2011].
• Marcinkowska I., Ruzik A., Strawiński P., Walewski M., Badanie struktury i zmian rozkładu wynagrodzeń w Polsce w latach 2000–2006, Ministerstwo Pracy i Polityki Społecznej, Warszawa 2008.
• Polski Generalny Sondaż Społeczny, dane: PGSS 1992–1995, PGSS 1997/8.
• Riphahn R.T., Serfling O., Item Non-response on Income and Wealth Questions, „Empirical Economics” 2005, nr 30(2).
• Subar A.F., et al., Is Shorter Always Better – Relative Importance of Questionnaire Length and Cognitive Ease on Response Rates and Data Quality for Two Dieatary Questionnnaires, „American Journal of Epidemiology” 2001, nr 153(4).
• World Institute for Development Economics Research of the United Nations University 2008, UNU-WIDER World Income Inequality Database, Version 2.0c, http://www.wider.unu.edu/research/Database/en_GB/database/ [15.08.2011].