zdorПроблемы здоровья и экологииHealth and Ecology Issues2220-09672708-6011Gomel State Medical University10.51523/2708-6011.2020-17-4-15zdor-1875Research ArticleОБЩЕСТВЕННОЕ ЗДОРОВЬЕ И ЗДРАВООХРАНЕНИЕ, ГИГИЕНАPUBLIC HEALTH AND HEALTH CARE, HYGIENEОценка качества бинарного классификатора в научных исследованияхAssessment of the quality of a binary classifier in researchhttps://orcid.org/0000-0001-9148-487XКовалевА. А.KovalevA. A.

Ковалев Алексей Алексеевич — заведующий сектором ЭТОРОиМ УО «Гомельский государственный медицинский университет»

Aleksey A. Kovalev — Head of the Sector of Operational Maintenance and Repair of Equipment of the EI «Gomel State Medical University»

etorom@gsmu.byhttps://orcid.org/0000-0002-3121-5595КузнецовБ. К.KuznetsovB. K.

Кузнецов Борис Куприянович — к.б.н., доцент, зав. кафедрой медицинской и биологической физики УО «Гомельский государственный медицинский университет»

Boris K. Kuznetsov — Candidate of Biological Science, Associate Professor, Head of the Department of Medical and Biological Physics of the EI «Gomel State Medical University»

etorom@gsmu.byhttps://orcid.org/0000-0002-3366-1601ЯдченкоА. А.YadchenkoA. A.

Ядченко Алексей Александрович — доктор физико-математических наук, профессор кафедры медицинской и биологической физики УО «Гомельский государственный медицинский университет»

Aleksey A. Yadchenko — Doctor of Physics and Mathematics, Professor at the Department of Medical and Biological Physics of the EI «Gomel State Medical University»

https://orcid.org/0000-0001-5370-865XИгнатенкоВ. А.IgnatenkoV. A.

Игнатенко Валерий Андреевич — к.б.н., заведующий отраслевой лабораторией по мониторингу пищевого (микронутриентного) статуса населения и разработки технологий его коррекции с использованием функциональных продуктов и биологически активных добавок ГП «Институт биохимии биологически активных соединений НАН Беларуси»

Valeriy A. Ignatenko — Candidate of Biological Science, Head of the Branch Laboratory for Monitoring the Nutritional (Micronutrient) Status of the Population and Development of Technologies for Its Correction Using Functional Products and Biologically Active Supplements, SE «Institute of Biochemistry of Biologically Active Compounds of the National Academy of Sciences of Belarus»

УО «Гомельский государственный медицинский университет»Gomel State Medical UniversityГП «Институт биохимии биологически активных соединений НАН Беларуси»Institute of Biochemistry of Biologically Active Compounds of the National Academy of Sciences of Belarus20202812202004105–113Copyright © Ковалев А.А., Кузнецов Б.К., Ядченко А.А., Игнатенко В.А., 20202020Ковалев А.А., Кузнецов Б.К., Ядченко А.А., Игнатенко В.А.Kovalev A.A., Kuznetsov B.K., Yadchenko A.A., Ignatenko V.A.Данная работа распространяется под лицензией Creative Commons Attribution 4.0.This work is licensed under a Creative Commons Attribution 4.0 License.https://journal.gsmu.by/jour/article/view/1875

В статье рассмотрены основные принципы оценки качества бинарного классификатора посредством возможностей ROC-анализа. Описан алгоритм ROC-анализа и интерпретация полученных результатов. Разобрана методика расчета основных параметров ROC-кривой, а также указания для оценки их статистической значимости.

The article deals with the basic principles of the assessment of the quality of a binary classifier using the potential of the ROC analysis and describes a ROC analysis algorithm and the interpretation of the obtained results. The work discusses the methodology for the calculation of the main parameters of the ROC curve, as well as the instructions for the assessment of their statistical significance.

бинарный классификатордиагностическая модельROC-анализROC-криваяплощадь под ROC-кривойстатистическая значимость площади под ROC-кривойоценка эффективности диагностического тестаbinary classifierdiagnostic modelROC analysisROC curvearea under the ROC curvestatistical significance of the area under the ROC curveassessment of the effectiveness of a diagnostic testReferencesФлетчер Р, Флетчер С, Вагнер Э. Клиническая эпидемиология. Основы доказательной медицины. Москва, РФ: Медиа Сфера; 1988. 352 с.Fletcher R, Fletcher S, Vagner E. Klinicheskaya epidemiologiya. Osnovy dokazatel'noj mediciny. Moskva, RF: Media Sfera; 1988. 352 p. (in Russ.)Файнзильберг ЛС, Жук ТН. Гарантированная оценка эффективности диагностических тестов на основе усиленного ROC-анализа. Управляющие Системы и Машины. 2009;5:3-13.Fajnzil'berg LS, ZHuk TN. Garantirovannaya ocenka effektivnosti diagnosticheskih testov na osnove usilennogo ROC-analiza. Upravlyayushchie Sistemy i Mashiny. 2009;5:3-13. (in Russ.)Гайдышев ИП. Оценка качества бинарных классификаторов. Вестник Омского Университета. 2016;1:14-17. https://cyberleninka.ru/article/n/otsenka-kachestva-binarnyh-klassifikatorov/viewerGajdyshev IP. Ocenka kachestva binarnyh klassifikatorov. Vestnik Omskogo Universiteta. 2016; 1(79): 14-17. https://cyberleninka.ru/article/n/otsenkakachestva-binarnyh-klassifikatorov/viewer (in Russ.)Литвин АА, Калинин АЛ, Тризна НМ. Использование данных доказательной медицины в клинической практике. Проблемы Здоровья и Экологии. 2008 Vol 18(4):12-19.Litvin AA, Kalinin AL, Trizna NM. Ispol'zovanie dannyh dokazatel'noj mediciny v klinicheskoj praktike. Problemy Zdorov'ya i Ekologii. 2008 Vol 18(4):12-19. (in Russ.)Пацай ДИ, Блахов НЮ. ROC-анализ оценки тяжести состояния и качества прогноза у больных острым панкреатитом. Военная Медицина. 2011;42(3):60-66.Pacaj DI, Blahov NYU. ROC-analiz ocenki tyazhesti sostoyaniya i kachestva prognoza u bol'nyh ostrym pankreatitom. Voennaya Medicina. 2011;42(3):60-66. (in Russ.)David J. Hand. Measuring classifier performance: a coherent alternative to the area under the ROC curve. Machine Learning. 2009;77:103-23. doi: 10.1007/s10994-009-5119-5David J. Hand. Measuring classifier performance: a coherent alternative to the area under the ROC curve. Machine Learning. 2009;77:103-23. doi: 10.1007/s10994-009-5119-5Seong Ho Park, Jin Mo Goo, Chan-Hee J. Receiver Operating Characteristic (ROC) Curve: Practical Review for Radiologists Korean Journal of Radiology. 2004; 5(1):11-18. https://www.ncbi.nlm.nih.gov/pmc/articles/PMC2698108/Seong Ho Park, Jin Mo Goo, Chan-Hee J. Receiver Operating Characteristic (ROC) Curve: Practical Review for Radiologists Korean Journal of Radiology. 2004;5(1):11-18. https://www.ncbi.nlm.nih.gov/pmc/articles/PMC2698108/Hanczar B, Hua J, Chao Sima, Weinstein J, Bittner M, Edward R. Dougherty Small-sample precision of ROCrelated estimates. Bioinformatics. 2010;26(6):822-30. https://doi.org/10.1093/bioinformatics/btq037Hanczar B, Hua J, Chao Sima, Weinstein J, Bittner M, Edward R. Dougherty Small-sample precision of ROCrelated estimates. Bioinformatics. 2010; 26(6):822-30. https://doi.org/10.1093/bioinformatics/btq037Королюк ИП. ROC-анализ (операционные характеристики наблюдателя): базовые принципы и применение в лучевой диагностике. Медицинская Визуализация. 2013;6:113-23.Korolyuk IP. ROC-analiz (operacionnye harakteristiki nablyudatelya): bazovye principy i primenenie v luchevoj diagnostike. Medicinskaya Vizualizaciya. 2013;6:113-23. (in Russ.)

The authors declare that there are no conflicts of interest present.