.: ARAŞTIRMA
Yayın Etiği Açısından Dergi Çeşitliliği ve Bir Metrik Önerisi: Metodolojik Bir Çalışma
Journal Diversity in Terms of Publication Ethics and a Metric Recommendation: A Methodological Study
Turkiye Klinikleri J Med Ethics. 2023;31(2):91-7
doi: 10.5336/mdethic.2023-95949
Makale Dili: TR
Tam Metin
ÖZET
Bu çalışmada, yeni bir bilimsel metrik olarak Uyarlanmış Dergi Çeşitlilik İndeksi'nin tanıtılması ve kullanılabilirliğinin araştırılması amaçlanmıştır. Araştırmacıların nicel ve nitel değerlendirmesi için çeşitli bilimsel metrikler mevcuttur. Bu metriklerin her birinin güçlü yanları ve sınırlamaları vardır, daha doğru olanı arayış hâlen devam etmektedir. Çalışmada, Simpson (1949) tarafından biyolojik çeşitlilik için önerilen indeks, dergi çeşitlilik indeksi olarak uyarlanmıştır. Dergi Çeşitlilik İndeksi'nin hesaplanması, örnek bir uygulama ile gösterilmiştir. Örnek için kullanılan veriler tamamen rastgele türetilmiş verilerdir. Bilimsel araştırmaların yayımlanması, bilginin yayılmasının temel taşı olmasının yanı sıra akademik ve bilimsel değerlendirme ve kariyer gelişimi için de temel bir kriterdir. Dünyanın dört bir yanındaki birçok akademik toplulukta, bilim insanlarının bireysel katkılarının kalitesinin değerlendirilmesinde güvenilir bilimsel metriklerin kullanılması önemli kabul edilir. Yazar düzeyindeki etkinin kapsamlı bir şekilde değerlendirilmesi için tek başına hiçbir metrik uygun değildir. Belirli metriklerin seçimi, değerlendirmenin amacına ve içeriğine bağlıdır. Bir araştırmacının yayımladığı çalışmalarını gerek kendi içinde gerekse araştırmacılar tarafından yapılan çalışmalar arasındaki çeşitliliğini ölçmek için hangi indeksin kullanılacağına dair pratik bir kural söz konusu değildir. Bu çalışmada önerilen Uyarlanmış Simpson İndeksi, diğer çeşitlilik indekslerine (Shannon-Weiner İndeksi, Evenness İndeksi vb.) kıyasla kullanımı en kolay olanıdır. Uyarlanmış Dergi Çeşitlilik İndeksi'nden elde edilen değerler, pay veya payda terimini hesaplamak için dergi sayısı yerine aynı dergide yayımlanan makale sayısı kullanıldığından dergi sayısına duyarlı değildir. Dergi çeşitlilik indekslerinin kullanılması, bir araştırmacının araştırma sonuçlarının etkinliğinin farklı editörler, hakemler ve okuyucular tarafından değerlendirilmesine yardımcı olur. Dolayısıyla dergi çeşitliliğine ilişkin bir metrik elde etmek önemlidir.
Anahtar Kelimeler: Simpson İndeksi; dergi çeşitliliği; performans değerlendirme; yayın etiği
Bu çalışmada, yeni bir bilimsel metrik olarak Uyarlanmış Dergi Çeşitlilik İndeksi'nin tanıtılması ve kullanılabilirliğinin araştırılması amaçlanmıştır. Araştırmacıların nicel ve nitel değerlendirmesi için çeşitli bilimsel metrikler mevcuttur. Bu metriklerin her birinin güçlü yanları ve sınırlamaları vardır, daha doğru olanı arayış hâlen devam etmektedir. Çalışmada, Simpson (1949) tarafından biyolojik çeşitlilik için önerilen indeks, dergi çeşitlilik indeksi olarak uyarlanmıştır. Dergi Çeşitlilik İndeksi'nin hesaplanması, örnek bir uygulama ile gösterilmiştir. Örnek için kullanılan veriler tamamen rastgele türetilmiş verilerdir. Bilimsel araştırmaların yayımlanması, bilginin yayılmasının temel taşı olmasının yanı sıra akademik ve bilimsel değerlendirme ve kariyer gelişimi için de temel bir kriterdir. Dünyanın dört bir yanındaki birçok akademik toplulukta, bilim insanlarının bireysel katkılarının kalitesinin değerlendirilmesinde güvenilir bilimsel metriklerin kullanılması önemli kabul edilir. Yazar düzeyindeki etkinin kapsamlı bir şekilde değerlendirilmesi için tek başına hiçbir metrik uygun değildir. Belirli metriklerin seçimi, değerlendirmenin amacına ve içeriğine bağlıdır. Bir araştırmacının yayımladığı çalışmalarını gerek kendi içinde gerekse araştırmacılar tarafından yapılan çalışmalar arasındaki çeşitliliğini ölçmek için hangi indeksin kullanılacağına dair pratik bir kural söz konusu değildir. Bu çalışmada önerilen Uyarlanmış Simpson İndeksi, diğer çeşitlilik indekslerine (Shannon-Weiner İndeksi, Evenness İndeksi vb.) kıyasla kullanımı en kolay olanıdır. Uyarlanmış Dergi Çeşitlilik İndeksi'nden elde edilen değerler, pay veya payda terimini hesaplamak için dergi sayısı yerine aynı dergide yayımlanan makale sayısı kullanıldığından dergi sayısına duyarlı değildir. Dergi çeşitlilik indekslerinin kullanılması, bir araştırmacının araştırma sonuçlarının etkinliğinin farklı editörler, hakemler ve okuyucular tarafından değerlendirilmesine yardımcı olur. Dolayısıyla dergi çeşitliliğine ilişkin bir metrik elde etmek önemlidir.
Anahtar Kelimeler: Simpson İndeksi; dergi çeşitliliği; performans değerlendirme; yayın etiği
ABSTRACT
In this study, it is aimed to introduce the Adapted Journal Diversity Index as a new scientometric and to investigate its usability. Various scientometric metrics are available for the quantitative and qualitative assessment of researchers. Each of these metrics has its strengths and limitations, and the search for a more accurate one is still ongoing. In the study, the index proposed by Simpson (1949) for biodiversity was adapted as a journal diversity index. The calculation of the Journal Diversity Index is illustrated with a sample application. The data used for the example are completely randomly derived data. The publication of scientific research is the cornerstone of the dissemination of knowledge, as well as a fundamental criterion for academic and scientific evaluation and career advancement. In many academic communities around the world, the use of reliable scientific metrics is considered important in assessing the quality of individual scientists' contributions. No single metric is appropriate for a comprehensive assessment of author-level impact. The choice of specific metrics depends on the purpose and content of the assessment. There is no practical rule about which index to use to measure the diversity of a researcher's published work, both within itself and among the studies done by the researchers. The adapted Simpson Index proposed in this study is the easiest to use compared to other diversity indices (Shannon-Weiner Index, Evenness Index etc.). The values obtained from the adapted Simpson Index are not sensitive to the number of journals, as the number of articles published in the same journal is used instead of the journal number to calculate the numerator or denominator. The use of journal diversity indexes helps a researcher to evaluate the effectiveness of research results by different editors, reviewers and readers. Therefore, it is important to obtain a metric for journal diversity.
Keywords: Simpson Index; journal diversity; performance evaluation; publishing ethics
In this study, it is aimed to introduce the Adapted Journal Diversity Index as a new scientometric and to investigate its usability. Various scientometric metrics are available for the quantitative and qualitative assessment of researchers. Each of these metrics has its strengths and limitations, and the search for a more accurate one is still ongoing. In the study, the index proposed by Simpson (1949) for biodiversity was adapted as a journal diversity index. The calculation of the Journal Diversity Index is illustrated with a sample application. The data used for the example are completely randomly derived data. The publication of scientific research is the cornerstone of the dissemination of knowledge, as well as a fundamental criterion for academic and scientific evaluation and career advancement. In many academic communities around the world, the use of reliable scientific metrics is considered important in assessing the quality of individual scientists' contributions. No single metric is appropriate for a comprehensive assessment of author-level impact. The choice of specific metrics depends on the purpose and content of the assessment. There is no practical rule about which index to use to measure the diversity of a researcher's published work, both within itself and among the studies done by the researchers. The adapted Simpson Index proposed in this study is the easiest to use compared to other diversity indices (Shannon-Weiner Index, Evenness Index etc.). The values obtained from the adapted Simpson Index are not sensitive to the number of journals, as the number of articles published in the same journal is used instead of the journal number to calculate the numerator or denominator. The use of journal diversity indexes helps a researcher to evaluate the effectiveness of research results by different editors, reviewers and readers. Therefore, it is important to obtain a metric for journal diversity.
Keywords: Simpson Index; journal diversity; performance evaluation; publishing ethics
REFERANSLAR:
- Zerem E. The ranking of scientists based on scientific publications assessment. J Biomed Inform. 2017;75:107-9. [Crossref] [PubMed]
- Niiniluoto I. Measuring the success of science. In: Linda W, Fine A, Forbes M, eds. PSA: Proceedings of the Biennial Meeting of the Philosophy of Science Association. Vol. 1. Chicago: The University of Chicago Press; 1990. p.435-45. [Crossref]
- Hirsch JE. An index to quantify an individual's scientific research output. Proc Natl Acad Sci U S A. 2005;102(46):16569-72. [Crossref] [PubMed] [PMC]
- Egghe L. Theory and practise of the G-index. Scientometrics. 2006;69(1):131-52. [Crossref]
- Stallings J, Vance E, Yang J, Vannier MW, Liang J, Pang L, et al. Determining scientific impact using a collaboration index. Proc Natl Acad Sci U S A. 2013;110(24):9680-5. [Crossref] [PubMed] [PMC]
- Jin B, Liang L, Rousseau R, Egghe L. The R and AR indices: complementing the h-index. Chin Sci Bull. 2007;52(6):855-63. [Crossref]
- Dorogovtsev SN, Mendes JFF. Ranking scientists. Nature Phys. 2015;11(11):882-4. [Crossref]
- Wang G, Yang J. Axiomatic quantification of co-authors' relative contributions. 2010;arXiv:1003.3362. [Link]
- Bai X, Pan H, Hou J, Guo T, Lee I, Xia F. Quantifying success in science: an overview. IEEE Access. 2020;8:123200-14. [Crossref]
- Sternberg RJ. Evaluating merit among scientist. J Appl Res Mem Cogn. 2018;7(2):209-16. [Crossref]
- Mester G. Rankings scientists, journals and countries using h-index. Interdiscip Descr Complex Sys 2016;14(1):1-9. [Crossref]
- Barnes C. The h-index debate: an introduction for librarians. J Acad Librariansh 2017;43(6):487-94. [Crossref]
- Bartneck C, Kokkelmans S. Detecting h-index manipulation through self-citation analysis. Scientometrics. 2011;87(1):85-98. [Crossref] [PubMed] [PMC]
- Memisevic H. Review: research interest in ResearchGate: the silver bullet of scientometrics or the emperor's new clothes? Cent Asian J Med Hypotheses Ethics. 2022;3(3):187-91. [Crossref]
- Ahangar HG, Siamian H, Yaminfirooz M. Evaluation of the scientific outputs of researchers with similar h index: a critical approach. Acta Inform Med. 2014;22(4):255-8. [Crossref] [PubMed] [PMC]
- Ali MJ. Understanding the 'g-index' and the 'e-index'. Semin Ophthalmol. 2021;36(4):139. [Crossref] [PubMed]
- Gasparyan AY, Yessirkepov M, Duisenova A, Trukhachev VI, Kostyukova EI, Kitas GD. Researcher and author impact metrics: variety, value, and context. J Korean Med Sci. 2018;33(18):e139. [Crossref] [PubMed] [PMC]
- Bihari A, Tripathi S, Deepak A. A review on h-index and its alternative indices. J Inf Sci. Research Article. 2021. [Crossref]
- McLaughlin JE, McLaughlin GW, McLaughlin JS, White CY. Using Simpson's diversity index to examine multidimensional models of diversity in health professions education. Int J Med Educ. 2016;7:1-5. [Crossref] [PubMed] [PMC]
- Dainesi SM, Pietrobon R. Scientific indicators of productivity: time for action. Braz J Psychiatry. 2007;29(2):100-1. [Crossref] [PubMed]
- Grinäv AV. The disadvantages of using scientometric indicators in the digital age. IOP Conf Ser Mater Sci Eng. 2020;940:012149. [Crossref]
- Moskovkin VM. The Quartile Index in scientometrics. Autom Doc Math Linguist. 2021;55(4):166-8. [Crossref]
- Adnani H, Cherraj M, Bouabid H. Similarity indexes for scientometric research: a comparative analysis. Malaysian J Libr Inf Sci. 2020;25(3):31-48. [Crossref]
- Simpson E. Measurement of diversity. Nature. 1949;163:688. [Crossref]
- Zhou J, Agichtein E, Kallumadi S. Diversifying multi-aspect search results using Simpson's diversity index. In: d'Aquin M, Dietze S, Hauff C, Curry E, Cudré-Mauroux P, eds. CIKM '20: The 29th ACM International Conference on Information and Knowledge Management, Virtual Event; 2020 October 19-23; Ireland. New York: Association for Computing Machinery; 2020. p.2345-8. [Crossref]
- Altıner S, Ayhan MB. An approach for the determination and correlation of diversity and efficiency of software development teams. S Afr J Sci. 2018;114(3/4):1-9. [Link]
- Palaghianu C. A tool for computing diversity and consideration on differences between diversity indices. J Landsc Manage. 2014;5(2):78-82. [Link]
- Guajardo SA. Measuring diversity in police agencies. J Ethn Crim Justice. 2015;13(1):1-15. [Crossref]
- Bhaumik S, Jagnoor J. Diversity in the editorial boards of global health journals. BMJ Glob Health. 2019;4(5):e001909. [Crossref] [PubMed] [PMC]
- Roswell M, Dushoff J, Winfree R. A conceptual guide to measuring species diversity. Oikos. 2021;130(3):321-38. [Crossref]
.: İşlem Listesi