.: ORİJİNAL ARAŞTIRMA
Ölçek Geliştirme Çalışmalarında Kullanılan İçerik Geçerliliğine Genel Bir Bakış
An Overview Evaluation of the Content Validity Used in Scale Development Studies
Turkiye Klinikleri J Biostat. 2019;11(2):143-51
doi: 10.5336/biostatic.2019-65953
Makale Dili: TR
Tam Metin
ÖZET
Amaç: Makalenin amacı, içerik geçerliliğinde kullanılan nicel ölçütleri tanıtmak ve Lawshe'nin içerik geçerlilik oranı için asgari uzman sayısını belirlemektir. Çalışmada içerik geçerliliğinin tanımı, önemi, kavramsal temeli ve fonksiyonel doğası incelenmiştir. Gereç ve Yöntemler: Bir testin (alet, ölçek ya da anketin) kabul edilebilir olup olmadığını söyleyebilmek için göz önünde bulundurulan beş kriter güvenirlik, geçerlik, objektiflik, pratiklik ve ekonomiklik olarak sıralanmaktadır. Kabul edilebilir bir testin geliştirilmesinde geçerlilik ve güvenirlilik özellikle üzerinde durulan iki önemli kavramdır ve ölçüm geçerliliği yaklaşık 100 yıldır bilim adamlarının dikkatini çeken önemli ve karmaşık bir konudur. Geçerlilik, araştırmacıların elde ettiği yanıtlardan elde edilen çıkarımların bir özelliğidir ve bu özellik araştırmacıların bu yanıtları elde etmek için kullandıkları araçlara ait olmayıp sabit bir özelliktir. Bulgular: Gerek yayınlanmamış ve piyasada mevcut ölçeklerin gerekse diğer psikometrik ölçeklerin kullanım sıklığında son yıllarda artış görülmektedir. Ne yazık ki, bu ölçeklerin birçoğunun geçerliliği ve güvenilirliği ile ilgili bilgiler ya elde edilememektedir, ya yetersizdir ya da uygun değildir. Psikometrik ölçekte içerik geçerliliğinin önemi ve içerik geçerliliğinin güvenilirlik ile ilişkisi, ölçek geliştirmede içerik geçerliliğini önemli bir adım haline getirmiştir. Sonuç: İçerik geçerliliği yargıların ölçülmesi için geliştirilen alternatif yöntemlerle mukayese edildiğinde, Lawshe yöntemi yalnızca basit hesaplamalar gerektiren ve kritik bir eşik değeri belirlemek için kullanıcılara kullanımı kolay bir tablo sunan basit ve kullanıcı dostu bir yöntemdir.
Anahtar Kelimeler: İçerik geçerliliği; içerik geçerlilik oranı; içerik geçerlilik indeksi; test oluşturma; ölçek geliştirme
Amaç: Makalenin amacı, içerik geçerliliğinde kullanılan nicel ölçütleri tanıtmak ve Lawshe'nin içerik geçerlilik oranı için asgari uzman sayısını belirlemektir. Çalışmada içerik geçerliliğinin tanımı, önemi, kavramsal temeli ve fonksiyonel doğası incelenmiştir. Gereç ve Yöntemler: Bir testin (alet, ölçek ya da anketin) kabul edilebilir olup olmadığını söyleyebilmek için göz önünde bulundurulan beş kriter güvenirlik, geçerlik, objektiflik, pratiklik ve ekonomiklik olarak sıralanmaktadır. Kabul edilebilir bir testin geliştirilmesinde geçerlilik ve güvenirlilik özellikle üzerinde durulan iki önemli kavramdır ve ölçüm geçerliliği yaklaşık 100 yıldır bilim adamlarının dikkatini çeken önemli ve karmaşık bir konudur. Geçerlilik, araştırmacıların elde ettiği yanıtlardan elde edilen çıkarımların bir özelliğidir ve bu özellik araştırmacıların bu yanıtları elde etmek için kullandıkları araçlara ait olmayıp sabit bir özelliktir. Bulgular: Gerek yayınlanmamış ve piyasada mevcut ölçeklerin gerekse diğer psikometrik ölçeklerin kullanım sıklığında son yıllarda artış görülmektedir. Ne yazık ki, bu ölçeklerin birçoğunun geçerliliği ve güvenilirliği ile ilgili bilgiler ya elde edilememektedir, ya yetersizdir ya da uygun değildir. Psikometrik ölçekte içerik geçerliliğinin önemi ve içerik geçerliliğinin güvenilirlik ile ilişkisi, ölçek geliştirmede içerik geçerliliğini önemli bir adım haline getirmiştir. Sonuç: İçerik geçerliliği yargıların ölçülmesi için geliştirilen alternatif yöntemlerle mukayese edildiğinde, Lawshe yöntemi yalnızca basit hesaplamalar gerektiren ve kritik bir eşik değeri belirlemek için kullanıcılara kullanımı kolay bir tablo sunan basit ve kullanıcı dostu bir yöntemdir.
Anahtar Kelimeler: İçerik geçerliliği; içerik geçerlilik oranı; içerik geçerlilik indeksi; test oluşturma; ölçek geliştirme
ABSTRACT
Objective: The purpose of the article is to introduce quantitative criteria used for content validity and to determine the minimum number of experts for content validity of Lawshe. The definition, importance, conceptual basis, and functional nature of content validity were examined in the article. Material and Methods: There are five criteria that are used to know whether or not the test (instrument, scale or questionniare) can be considered qualified namely reliability, validity, objectivity, practicality, and economy. Validity and reliability are two important things related to constructing such kind of test. Validity of measurement is an important and complex issue that has received much attention from scientists for nearly 100 years. Validity is a property of the inferences investigators make from the responses they obtain and not a fixed property of the instruments used to obtain those responses. Results: Both unpublished and commercially available scales and other psychometric devices yielding ordinal level measurements appear to have increased in frequency of usage during recent years. Unfortunately, information concerning the reliability and validity of many of these instruments is either unavailable, insufficient, or inappropriate. The importance of content validity in the instrument psychometric and its relevance with reliability, have made it an essential step in the instrument development. Conclusion: Compared with alternative methods for quantifying content validity judgements, the Lawshe method is straightforward and user-friendly, requiring only simple computations and providing a table for determining a critical cutoff value.
Keywords: Content validity; content validity ratio; content validity index; test construction; instrument development
Objective: The purpose of the article is to introduce quantitative criteria used for content validity and to determine the minimum number of experts for content validity of Lawshe. The definition, importance, conceptual basis, and functional nature of content validity were examined in the article. Material and Methods: There are five criteria that are used to know whether or not the test (instrument, scale or questionniare) can be considered qualified namely reliability, validity, objectivity, practicality, and economy. Validity and reliability are two important things related to constructing such kind of test. Validity of measurement is an important and complex issue that has received much attention from scientists for nearly 100 years. Validity is a property of the inferences investigators make from the responses they obtain and not a fixed property of the instruments used to obtain those responses. Results: Both unpublished and commercially available scales and other psychometric devices yielding ordinal level measurements appear to have increased in frequency of usage during recent years. Unfortunately, information concerning the reliability and validity of many of these instruments is either unavailable, insufficient, or inappropriate. The importance of content validity in the instrument psychometric and its relevance with reliability, have made it an essential step in the instrument development. Conclusion: Compared with alternative methods for quantifying content validity judgements, the Lawshe method is straightforward and user-friendly, requiring only simple computations and providing a table for determining a critical cutoff value.
Keywords: Content validity; content validity ratio; content validity index; test construction; instrument development
REFERANSLAR:
- Sirajudeen MS, Pillai PS, Shah UN, Mohan N. Content validity and inter-rater reliability of a checklist to assess the ergonomic practice of computer professionals. Int J Rehabil Res. 2012;1(2):11-8. [Crossref]
- Ercan İ, Kan İ. [Reliability and validity in the scales]. Journal of the Uludağ University Medical Faculty. 2004;30(3):211-6.
- Bolarinwa OA. Principles and methods of validity and reliability testing of questionnaires used in social and health science researches. Niger Postgrad Med J. 2015;22(4):195-201. PMID: 26776330 [Crossref] [PubMed]
- Zamanzadeh V, Ghahramanian A, Rassouli M, Abbaszadeh A, Alavi-Majd H, Nikanfar AR. Design and implementation content validity study: development of an instrument for measuring patient-centered communication. J Caring Sci. 2015;4(2):165-78. PMID: 26161370 [Crossref] [PubMed] [PMC]
- Beck CT, Gable RK. Ensuring content validity: an illustration of the process. J Nurs Meas. 2001;9(2):201-15. PMID: 11696942 [Crossref] [PubMed]
- Rubio DM, Berg-Weger M, Tebb SS, Lee ES, Rauch S. Objectifying content validity: conducting a content validity study in a social work research. Soc Work. 2003;27(2):94-104. [Crossref]
- Baghestani AR, Ahmadi F, Tanha A, Meshkat M. Bayesian critical values for Lawshe's content validity ratio. Meas Eval Couns Dev. 2019;52(1):69-73. [Crossref]
- Polit DF, Beck CT. The content validity index: are you sure you know what?s being reported? Critique and recommendations. Res Nurs Health. 2006;29(5):489-97. PMID: 16977646 [Crossref] [PubMed]
- Ozer I, Fitzgerald SM, Sulbaran E, Garvey D. Reliability and content validity of an English as a foreign language (EFL) grade-level test for Turkish primary grade students. Procd Soc Behv. 2014;112:924-9. [Crossref]
- Abdollahpour I, Nedjat S, Noroozian M, Majdzadeh R. Performing content validation process in development of questionnaires. Iran J Epid. 2011;6(4):6674.
- Wynd CA, Schmidt B, Schaefer MA. Two quantitative approaches for estimating content validity. West J Nurs Res. 2003;25(5):508-18. PMID: 12955968 [Crossref] [PubMed]
- Sireci SG. The construct of content validity. Social Indic Res. 1988;45(1-3):83-117. [Crossref]
- Delegado-Rico E, Carretero-Dios H, Ruch W. Content validity evidences in test development: an applied perspective. Int J Clin Hlth Psyc. 2012;12(3):44960.
- Ayre C, Scally AJ. Critical values for Lawshe?s content validity ratio: revisiting the original methods of calculation. Meas Eval Couns Dev. 2014;47(1):79-86. [Crossref]
- Polit DF, Beck CT, Owen SV. Is the CVI an acceptable indicator of content validity? Appraisal and recommendations. Res Nurs Health. 2007;30(4):459-67. PMID: 17654487 [Crossref] [PubMed]
- Yaghmaie F. Content validity and its estimation. J Med Educ. 2003;3(1):25-7.
- Haynes SN, Richard DCS, Kubany ES. Content validity in psychological assessment: a functional approach to concepts and methods. Psychol Assess. 1995;7(3):238-47. [Crossref]
- Koller I, Levenson MR, Glück J. What do you think you are measuring? A mixed-methods procedure for assessing the content validity of test items and theory-based scaling. Front Psychol. 2017;8:126. PMID: 28270777 [Crossref]
- Kassam-Adams N, Marsac ML, Kohser KL, Kenardy JA, March S, Winston FK. A new method for assessing content validity in model-based creation and iteration of eHealth interventions. J Med Internet Res. 2015;17(4):e95. PMID: 25881584 [Crossref] [PubMed] [PMC]
- Gilbert GE, Prion S. Making sense of methods and measurement: Lawshe?s content validity index. Clin Simul Nurs. 2016;12(12):530-1. [Crossref]
- Ahari MN, Azad A, Alizadeh-Zarei M, Ebadi A, Parand A, Mohammadi P. Development and validity of the school interim competency of performance skill battery scale (SICPSBS). Int J Pediatr. 2018;6(11):8451-73.
- Davies K, Bulsara MK, Ramelet AS, Monterosso L. Content validity testing of the ESAT: a decision aid tool for performing endotracheal suction in children. Aust Crit Care. 2018;31(1):23-30. PMID: 28254165 [Crossref] [PubMed]
- Hadzaman NAH, Takim R, Nawawi AH, Mohamad Yusuwan N. Content validity of governing in Building Information Modelling (BIM) implementation assessment instrument. IOP Conf Ser: Earth Environ Sci. 2018;140(1): DOI: 10.1088/1755-1315/140/1/012105 [Crossref]
- Halek M, Holle D, Bartholomeyczik S. Development and evaluation of the content validity, practicability and feasibility of the innovative dementia-oriented assessment system for challenging behaviour in residents with dementia. BMC Health Serv Res. 2017;17(1):554. PMID: 2880693 [Crossref] [PubMed] [PMC]
- Wilson FR, Pan W, Schumsky DA. Recalculation of the critical values for Lawshe?s content validity ratio. Meas Eval Couns Dev. 2012;45(3):197-210. [Crossref]
- Shariati B, Keshavarz-Akhlaghi AA, Mohammadzadeh A, Seddigh R. The content validity of the cultural formulation interview (CFI). Psychiatry J. 2018;2018:3082823. PMID: 30631771 [Crossref] [PubMed] [PMC]
- Lawshe CH. A quantitative approach to content validity. Pers Psychol. 1975;28(4):563-75. [Crossref]
- Lynn MR. Determination and quantification of content validity. Nurs Res. 1986;35(6):382-5. PMID: 3640358 [Crossref]
- Davis LL. Instrument review: getting the most from a panel of experts. Appl Nurs Res. 1992;5(4):194-7. [Crossref]
.: İşlem Listesi