Słowa kluczowe
międzykrajowe badania porównawcze
metodologia sondażowa
komunikowanie wyników badań
Jak cytować
Liczba wyświetleń: 187
Liczba pobrań: 94
Abstrakt
Podstawowym źródłem informacji o schematach losowania próby i procedurach terenowych badań sondażowych oraz związanych z nimi potencjalnych źródłach błędów pomiaru jest dokumentacja metodologiczna. Jej szeroko pojęta jakość, której istotny element stanowią kompletność i standaryzacja, jest czynnikiem determinującym możliwość prowadzenia badań metodologicznych na dużych zbiorach danych pochodzących z międzykrajowych programów porównawczych. Za punkt wyjścia do poprawy jakości dokumentacji metodologicznej powinno służyć dokładne rozpoznanie dotychczasowego stanu rzeczy. Stanowi to pierwszy cel poniższego badania. Kolejnym celem była analiza problemów obecnych w tym obszarze, która umożliwiła sformułowanie zaleceń dążących do zwiększenia standaryzacji tworzonych raportów i tym samym możliwości lepszego wykorzystania danych pochodzących z badań sondażowych. Analiza zawarta w artykule opiera się na inwentaryzacji danych metodologicznych z 30 międzykrajowych porównawczych programów sondażowych z całego świata. Podsumowuję całość zbioru opartego na 10 493 realizacjach krajowych, poszczególne programy, a także przedstawiam problematyczne praktyki na podstawie konkretnych raportów metodologicznych. Przykłady i zestawienia ukazują rozwój i obecny stan jakości opracowanej dokumentacji. Efektem badania jest krytyczna ocena obecnych praktyk dokumentacyjnych, które ze względu na niewielki poziom standaryzacji pomiędzy projektami bardzo utrudniają praktyczną inwentaryzację informacji na temat przyjętych procedur badawczych. Przedstawiam zestawienia problematycznych praktyk oraz propozycję standaryzacji formy raportów, która rozwiązałaby większość trudności pojawiających się obecnie w procesie harmonizacji danych metodologicznych.
Finansowanie
Narodowe Centrum Nauki, Preludium 17, umowa nr 2019/33/N/HS6/00322
Bibliografia
AAPOR/WAPOR. (2021). AAPOR/WAPOR task force report on quality in comparative surveys.
American Association for Public Opinion Research. (2023). Standard definitions: Final dispositions of case codes and outcome rates for surveys (wyd. 10). AAPOR.
Castorena, O. (2021). Methodological note #007: Survey weights in AmericasBarometer data. Vanderbilt University.
Comparative Study of Electoral Systems. (2023). CSES download data and documentation. https://cses.org/data-download/download-data-documentation/
Dubrow, J. K., Jenkins, J. C., Kołczyńska, M., Oleksiyenko, O., Powałko, P., Słomczyński, K. M., Tomescu-Dubrow, I., Wysmułek, I., i Zieliński, M. W. (red.). (2016). Democratic values and protest behavior: Harmonization of data from international survey projects. IFIS PAN Publishers.
European Values Study. (2023). European values study: Methodology, data, documentation. https://europeanvaluesstudy.eu/methodology-data-documentation/
Fonteneau, F. (2011). Experiences and benefits of implementing the DDI in data management. UNESCAP Expert Group Meeting.
GESIS. (2019). Overview of comparative surveys worldwide. https://web.archive.org/web/20191211072538/https://www.gesis.org/angebot/daten-analysieren/weitere-sekundaerdaten/uebersichten/overview-of-comparative-surveys-worldwide
GESIS Eurobarometer Data Service. (2023). Eurobarometer fieldwork dates and institutes, sample sizes, and geographic units by participating countries. https://www.gesis.org/fileadmin/upload/dienstleistung/daten/umfragedaten/eurobarometer/eb_standard/eb_countries-overtime.xlsx
Jabkowski, P. (2019). Zróżnicowanie praktyk sondażowych w międzykrajowych badaniach porównawczych na podstawie archiwizacji 1537 surveyów zrealizowanych w krajach europejskich w latach 1981–2017. Przegląd Socjologiczny, 68(1), 9–38. DOI: https://doi.org/10.26485/PS/2019/68.1/1
Jabkowski, P. (2023). Increase in the quality of methodological documentation of cross-national pan-European multi-wave surveys over the last 40 years – a research note. International Journal of Social Research Methodology, 26(6), 817–824. DOI: https://doi.org/10.1080/13645579.2022.2097394
Jabkowski, P., Cichocki, P., i Kołczyńska, M. (2021). Multi-Project Assessments of sample quality in cross-national surveys: The role of weights in applying external and internal measures of sample bias. Journal of Survey Statistics and Methodology, 11(2), 1–24. DOI: https://doi.org/10.1093/jssam/smab027
Jabkowski, P., i Kołczyńska, M. (2020). Sampling and fieldwork practices in Europe: Analysis of methodological documentation from 1,537 surveys in five cross-national projects, 1981–2017. Methodology, 16(3), 186–207. DOI: https://doi.org/10.5964/meth.2795
Jedinger, A., Watteler, O., i Förster, A. (2018). Improving the quality of survey data documentation: A total survey error perspective. Data, 3(4), 1–10. DOI: https://doi.org/10.3390/data3040045
Kołczyńska, M. (2014). Representation of Southeast European countries in international survey projects: Assessing data quality. Ask: Research and Methods, 23(1), 57–78.
Kołczyńska, M., i Schoene, M. (2018). Survey data harmonization and the quality of data documentation in cross-national surveys. W: Advances in comparative survey methods (s. 963–984). DOI: https://doi.org/10.1002/9781118884997.ch44
Mohammad, L. M., Vidalis, B. M., Fatemi, L., Coffman, R. R., Qeadan, F., i Kimmell, K. T. (2021). Use of standardized history and physical examination for neurosurgical patients improves clinical documentation and reimbursement. World Neurosurgery, 148, e667–e673. DOI: https://doi.org/10.1016/j.wneu.2021.01.056
Mohler, P. Ph., Hansen, S. E., Pennell, B.-E., Thomas, W., Wackerow, J., i Hubbard, F. (2010). A survey process quality perspective on documentation. W: J. A. Harkness, M. Braun, B. Edwards, T. P. Johnson, L. E. Lyberg, P. Ph. Mohler, B.-E. Pennell, i T. W. Smith (red.), Survey methods in multinational, multiregional, and multicultural contexts (s. 299–314). John Wiley & Sons. DOI: https://doi.org/10.1002/9780470609927.ch16
Mohler, P. Ph., Pennell, B.-E., i Hubbard, F. (2008). Survey documentation: Toward professional knowledge management in sample surveys. W: E. D. de Leeuw, J. J. Hox, i D. A. Dillman (red.), International handbook of survey methodology (s. 403–420). L. Erlbaum Associates.
Ohio State University. (2024). Comparative national elections project: Publicly available surveys. https://u.osu.edu/cnep/surveys/surveys-through-2012/
Raffle, A. E., i Gray, J. A. M. (2007). Screening: Evidence and practice. Oxford University Press. DOI: https://doi.org/10.1093/acprof:oso/9780199214495.001.0001
Rasmussen, K. B. (2014). Social science metadata and the foundations of the DDI. IASSIST Quarterly, 37(1–4), 28. DOI: https://doi.org/10.29173/iq499
Rose, E. A., Deshikachar, A. M., Schwartz, K. L., i Severson, R. K. (2001). Use of a template to improve documentation and coding. Family Medicine, 33(7), 516–521.
Rybak, A. (2023). Survey mode and nonresponse bias: A meta-analysis based on the data from the international social survey programme waves 1996–2018 and the European social survey rounds 1 to 9. PLOS ONE, 18(3). DOI: https://doi.org/10.1371/journal.pone.0283092
Rybak, A. (2024a). Baza danych – Kompletność dokumentacji sondaży [Baza Danych]. OSF.
Rybak, A. (2024b). Ryciny do artykułu [plik PDF]. OSF.
Rybak, A. (2024c). Spis odnośników do baz danych [plik PDF]. OSF.
Slomczynski, K. M., Powałko, P., i Krauze, T. (2017). Non-unique records in international survey projects: The need for extending data quality control. Survey Research Methods, 11(1), 1–16.
Slomczynski, K. M., i Tomescu-Dubrow, I. (2018). Basic principles of survey data recycling. W: Advances in Comparative Survey Methods (s. 937–962). John Wiley & Sons, Inc. DOI: https://doi.org/10.1002/9781118884997.ch43
Slomczynski, K. M., Tomescu-Dubrow, I., i Wysmulek, I. (2022). Survey data quality in analyzing harmonized indicators of protest behavior: A survey data recycling approach. American Behavioral Scientist, 66(4), 412–433. DOI: https://doi.org/10.1177/00027642211021623
Tepper, S. J., Spruill, M. K., Premachandra, B., i Lewis, N. A. (2022). Surveys as conversations between makers and takers: A conversational framework for assessing and responding to community needs. Analyses of Social Issues and Public Policy, 22(3), 857–875. DOI: https://doi.org/10.1111/asap.12326
Van Wettere, N. (2022, 12 stycznia). How to implement the metadata standard „Data Documentation Initiative (DDI)”?
Vardigan, M. (2014). DDI Timeline. IASSIST Quarterly, 37(1–4), 51. DOI: https://doi.org/10.29173/iq502
Vardigan, M., Heus, P., i Thomas, W. (2008). Data documentation initiative: Toward a standard for the social sciences. International Journal of Digital Curation, 3(1), 107–113. DOI: https://doi.org/10.2218/ijdc.v3i1.45
World Values Survey. (2023). World values survey: Documentation for download. https://www.worldvaluessurvey.org/WVSContents.jsp
Licencja
Prawa autorskie (c) 2025 WPiA UAM
Utwór dostępny jest na licencji Creative Commons Uznanie autorstwa 4.0 Międzynarodowe.