<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.3 20210610//EN" "JATS-journalpublishing1-3.dtd">
<article article-type="research-article" dtd-version="1.3" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xml:lang="ru"><front><journal-meta><journal-id journal-id-type="publisher-id">safetyrisk</journal-id><journal-title-group><journal-title xml:lang="ru">Безопасность и риск фармакотерапии</journal-title><trans-title-group xml:lang="en"><trans-title>Safety and Risk of Pharmacotherapy</trans-title></trans-title-group></journal-title-group><issn pub-type="ppub">2312-7821</issn><issn pub-type="epub">2619-1164</issn><publisher><publisher-name>Federal State Budgetary Institution ‘Scientific Centre for Expert Evaluation of Medicinal Products’ of the Ministry of Health of the Russian Federation (FSBI ‘SCEEMP’)</publisher-name></publisher></journal-meta><article-meta><article-id pub-id-type="doi">10.30895/2312-7821-2025-13-4-440-451</article-id><article-id custom-type="elpub" pub-id-type="custom">safetyrisk-492</article-id><article-categories><subj-group subj-group-type="heading"><subject>Research Article</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="ru"><subject>ДОКЛИНИЧЕСКИЕ ИССЛЕДОВАНИЯ</subject></subj-group><subj-group subj-group-type="section-heading" xml:lang="en"><subject>PRECLINICAL STUDIES</subject></subj-group></article-categories><title-group><article-title>Валидация метода доклинической оценки пользы и риска применения лекарственных средств на основе WOE и IV</article-title><trans-title-group xml:lang="en"><trans-title>Validating Preclinical Assessment of a Medicine Benefit-Risk Ratio Based on WOE and IV Models</trans-title></trans-title-group></title-group><contrib-group><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0001-6111-6961</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Ивашова</surname><given-names>Д. М.</given-names></name><name name-style="western" xml:lang="en"><surname>Ivashova</surname><given-names>D. M.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Ивашова Динара Михайловна</p><p>Петровский б-р, д. 8, стр. 2, Москва, 127051</p></bio><bio xml:lang="en"><p>Dinara M. Ivashova</p><p>8/2 Petrovsky Bvld, Moscow 127051</p></bio><email xlink:type="simple">Ivashova@expmed.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0002-7926-6033</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Шредер</surname><given-names>О. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Schreder</surname><given-names>O. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Шредер Ольга Васильевна, канд. биол. наук</p><p>Петровский б-р, д. 8, стр. 2, Москва, 127051</p></bio><bio xml:lang="en"><p>Olga V. Shreder, Cand. Sci. (Biol.)</p><p>8/2 Petrovsky Bvld, Moscow 127051</p></bio><email xlink:type="simple">shrederov@expmed.ru</email><xref ref-type="aff" rid="aff-1"/></contrib><contrib contrib-type="author" corresp="yes"><contrib-id contrib-id-type="orcid">https://orcid.org/0000-0001-8583-2372</contrib-id><name-alternatives><name name-style="eastern" xml:lang="ru"><surname>Горячев</surname><given-names>Д. В.</given-names></name><name name-style="western" xml:lang="en"><surname>Goryachev</surname><given-names>D. V.</given-names></name></name-alternatives><bio xml:lang="ru"><p>Горячев Дмитрий Владимирович, д-р мед. наук</p><p>Петровский б-р, д. 8, стр. 2, Москва, 127051</p></bio><bio xml:lang="en"><p>Dmitriy V. Goryachev, Dr. Sci. (Med.)</p><p>8/2 Petrovsky Bvld, Moscow 127051</p></bio><email xlink:type="simple">gorachev@expmed.ru</email><xref ref-type="aff" rid="aff-1"/></contrib></contrib-group><aff-alternatives id="aff-1"><aff xml:lang="ru"><institution>Федеральное государственное бюджетное учреждение «Научный центр экспертизы средств медицинского применения» Министерства здравоохранения Российской Федерации</institution><country>Россия</country></aff><aff xml:lang="en"><institution>Scientific Centre for Expert Evaluation of Medicinal Products</institution><country>Russian Federation</country></aff></aff-alternatives><pub-date pub-type="collection"><year>2025</year></pub-date><pub-date pub-type="epub"><day>18</day><month>12</month><year>2025</year></pub-date><volume>13</volume><issue>4</issue><fpage>440</fpage><lpage>451</lpage><permissions><copyright-statement>Copyright &amp;#x00A9; Ивашова Д.М., Шредер О.В., Горячев Д.В., 2025</copyright-statement><copyright-year>2025</copyright-year><copyright-holder xml:lang="ru">Ивашова Д.М., Шредер О.В., Горячев Д.В.</copyright-holder><copyright-holder xml:lang="en">Ivashova D.M., Schreder O.V., Goryachev D.V.</copyright-holder><license xml:lang="ru" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>Данная работа распространяется под лицензией Creative Commons Attribution 4.0.</license-p></license><license xml:lang="en" license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:type="simple"><license-p>This work is licensed under a Creative Commons Attribution 4.0 License.</license-p></license></permissions><self-uri xlink:href="https://www.risksafety.ru/jour/article/view/492">https://www.risksafety.ru/jour/article/view/492</self-uri><abstract><sec><title>ВВЕДЕНИЕ</title><p>ВВЕДЕНИЕ. Математические модели успешно применяются в медико-биологических исследованиях, в том числе для прогнозирования эффективности и безопасности лекарственных препаратов. В ФГБУ «НЦЭСМП» Минздрава России разработан и внедрен в научную практику метод доклинической оценки соотношения «польза–риск» применения лекарственных средств, основанный на бинарной классификации переменных для расчета предикторов WoE (Weight of Evidence) и IV (Information Value). Алгоритмы расчета коэффициентов WoE и IV основаны на байесовской модели априорной вероятности, что позволяет прогнозировать риски и принимать обоснованные решения о применении фармакологических средств для снижения генотоксических и эмбриотоксических эффектов средовых тератогенов. Однако для подтверждения прогностической способности необходима фармакологическая валидация потенциального корректора и качества вычислений прогностической системы.</p></sec><sec><title>ЦЕЛЬ</title><p>ЦЕЛЬ. Валидация метода доклинической оценки соотношения «польза–риск» на примере исследования фармакологической коррекции фабомотизолом репротоксических эффектов торфяного дыма у крыс.</p></sec><sec><title>МАТЕРИАЛЫ И МЕТОДЫ</title><p>МАТЕРИАЛЫ И МЕТОДЫ. В работе использованы экспериментальные и статистические методы анализа. Для подтверждения прогностической значимости результатов доклинической оценки пользы и риска фармакологической коррекции гено- и эмбриотоксических эффектов торфяного дыма использовали методику, разработанную в ФГБУ «НЦЭСМП» Минздрава России. Для валидации математической модели оценки соотношения «польза–риск» и фармакологической валидации корригирующих свойств фабомотизола (в дозах 1 и 10 мг/кг) на моделях гено- и эмбриотоксичности у белых беспородных крыс, индуцированных торфяным дымом, применены методы логистической регрессии и ROC-анализа.</p></sec><sec><title>РЕЗУЛЬТАТЫ</title><p>РЕЗУЛЬТАТЫ. В рамках фармакологической валидации анализ AUC (0,701; 0,617–0,786) показал, что корригирующая способность фабомотизола у крыс прогнозируется в диапазоне от «неудовлетворительной» до «хорошей» (0,500; 0,239–0,761). Это соответствует оценкам WOE/IV: от «низкой» до «умеренной» весомости (0,34; –0,99) и от «слабой» до «сильной» информационной ценности (0,02; 0,45). Проверка качества вычислений для генотоксичности показала следующие значения AUC: 0,554 для предсказанной вероятности и 0,432 для предсказанной группы (уровень случайного угадывания). Для эмбриотоксичности AUC составила, соответственно, 0,701 и 0,782, что указывает на хорошую предсказательную способность модели.</p></sec><sec><title>ВЫВОДЫ</title><p>ВЫВОДЫ. Валидационное исследование подтвердило прогностическую ценность WoE и IV. Модель оценки соотношения «польза–риск», основанная на байесовской априорной вероятности, показала высокую сходимость с ROC-анализом в оценке гено- и эмбриотоксичности торфяного дыма, а также корригирующей способности фабомотизола.</p></sec></abstract><trans-abstract xml:lang="en"><sec><title>INTRODUCTION</title><p>INTRODUCTION. Mathematical models are actively used in biomedical research, including efficacy and safety prediction of medicinal products. Scientific Centre for Expert Evaluation of Medicinal Products has developed and implemented a method for preclinical benefit-risk assessment of medicinal products. The method is based on the binary classification of variables used to calculate WoE (Weight of Evidence) and IV (Information Value) predictors. Calculation algorithms for WoE and IV are based on Bayesian model of prior probability, which allows for risk prediction and informed decision-making regarding pharmacotherapy and its ability to reduce the geno­toxic and embryotoxic effects of environmental teratogens. However, confirmed predictive ability warrants pharmacological validation of a potential corrector and the predictive system computation quality.</p></sec><sec><title>AIM</title><p>AIM. This study aimed to validate preclinical assessment method of the benefit-risk ratio by correcting reprotoxic effects of peat smoke in rats with pharmacotherapy as a case study.</p></sec><sec><title>MATERIALS AND METHODS</title><p>MATERIALS AND METHODS. The study used experimental and statistical analysis. A method developed by Scientific Centre for Expert Evaluation of Medicinal Products was used to confirm predictive significance of preclinical benefit-risk assessment for pharmacotherapeutic correction of peat smoke-induced embryotoxic effects. In order to validate benefit-risk assessment mathematical model and the corrective pharmacological properties of fabomotizole in genotoxicity and embryotoxicity models induced by peat smoke in rats, logistic regression and ROC analysis methods were applied.</p></sec><sec><title>RESULTS</title><p>RESULTS. AUC analysis (0.701; 0.617–0.786) within pharmacological validation showed that fabomotizole corrective capacity in rats was predicted in the range from “unsatisfactory” to “good” (0.500; 0.239–0.761). This corresponds to WOE/IV estimates, from “low” to “moderate” weight (0.34; –0.99) and “weak” to “strong” information value (0.02; 0.45). Computation quality test for genotoxicity showed an AUC of 0.554 for the predicted probability and 0.432 for the predicted group (random guessing). For embryotoxicity, AUC was 0.701 and 0.782, indicating good predictive ability of the model.</p></sec><sec><title>CONCLUSIONS</title><p>CONCLUSIONS. The validation study has confirmed the predictive value of WoE and IV. The benefit-risk model based on Bayesian prior probability has shown high convergence with ROC analysis in assessing genotoxicity and embryotoxicity of peat smoke, as well as corrective capacity of fabomotizole.</p></sec></trans-abstract><kwd-group xml:lang="ru"><kwd>валидация метода</kwd><kwd>коэффициент весомости доказательств</kwd><kwd>коэффициент информационной ценности</kwd><kwd>лекарственные препараты</kwd><kwd>соотношение «польза–риск»</kwd><kwd>торфяной дым</kwd><kwd>генотоксичность</kwd><kwd>эмбриотоксичность</kwd><kwd>фабомотизол</kwd><kwd>крысы</kwd><kwd>доклинические исследования</kwd></kwd-group><kwd-group xml:lang="en"><kwd>method validation</kwd><kwd>weight of evidence coefficient</kwd><kwd>WOE</kwd><kwd>information value coefficient</kwd><kwd>medicinal products</kwd><kwd>benefit-risk ratio</kwd><kwd>peat smoke</kwd><kwd>genotoxicity</kwd><kwd>embryotoxicity</kwd><kwd>fabomotizole</kwd><kwd>rats</kwd><kwd>preclinical studies</kwd></kwd-group><funding-group><funding-statement xml:lang="ru">Работа выполнена в рамках государственного задания ФГБУ «НЦЭСМП» Минздрава России № 056-00001-25-00 на проведение прикладных научных исследований (номер государственного учета НИР 124022300127-0)</funding-statement><funding-statement xml:lang="en">The study was conducted by the Scientific Centre for Expert Evaluation of Medicinal as part of the applied research funded under State Assignment No. 056-00001-25-00 (R&amp;D Registry No. 124022300127-0)</funding-statement></funding-group></article-meta></front><back><ref-list><title>References</title><ref id="cit1"><label>1</label><citation-alternatives><mixed-citation xml:lang="ru">Шредер ОВ, Бунятян НД, Горячев ДВ и др. Математическое прогнозирование эффективности лекарственных средств в доклинических исследованиях. Ведомости Научного центра экспертизы средств медицинского применения. Регуляторные исследования и экспертиза лекарственных средств. 2022;12(3):315–30. https://doi.org/10.30895/1991-2919-2022-12-3-315-330</mixed-citation><mixed-citation xml:lang="en">Shreder OV, Bunyatyan ND, Goryachev DV, et al. Mathematical prediction of the efficacy of medicinal products in preclinical studies. Bulletin of the Scientific Centre for Expert Evaluation of Medicinal Products. Regulatory Research and Medicine Evaluation. 2022;12(3):315–30 (In Russ.). https://doi.org/10.30895/1991-2919-2022-12-3-315-330</mixed-citation></citation-alternatives></ref><ref id="cit2"><label>2</label><citation-alternatives><mixed-citation xml:lang="ru">Енгалычева ГН, Сюбаев РД. Разработка педиатрических препаратов: ключевые факторы риска и программа доклинических исследований. Ведомости Научного центра экспертизы средств медицинского применения. Регуляторные исследования и экспертиза лекарственных средств. 2023;13(1):14–26. https://doi.org/10.30895/1991-2919-2023-500</mixed-citation><mixed-citation xml:lang="en">Engalycheva GN, Syubaev RD. Development of paediatric medicines: Key risk factors and non-clinical research programmes. Bulletin of the Scientific Centre for Expert Evaluation of Medicinal Products. Regulatory Research and Medicine Evaluation. 2023;13(1):14–26 (In Russ.). https://doi.org/10.30895/1991-2919-2023-500</mixed-citation></citation-alternatives></ref><ref id="cit3"><label>3</label><citation-alternatives><mixed-citation xml:lang="ru">Thomas RS, Paules RS, Simeonov A, et al. The US Federal Tox21 Program: A strategic and operational plan for continued leadership. ALTEX. 2018;35(2):163–8. https://doi.org/10.14573/altex.1803011</mixed-citation><mixed-citation xml:lang="en">Thomas RS, Paules RS, Simeonov A, et al. The US Federal Tox21 Program: A strategic and operational plan for continued leadership. ALTEX. 2018;35(2):163–8. https://doi.org/10.14573/altex.1803011</mixed-citation></citation-alternatives></ref><ref id="cit4"><label>4</label><citation-alternatives><mixed-citation xml:lang="ru">Vanslette K, Tohme T, Youcef-Toumi K. A general model validation and testing tool. Reliab Eng Syst Safety. 2020;195:106684. https://doi.org/10.1016/j.ress.2019.106684</mixed-citation><mixed-citation xml:lang="en">Vanslette K, Tohme T, Youcef-Toumi K. A general model validation and testing tool. Reliab Eng Syst Safety. 2020;195:106684. https://doi.org/10.1016/j.ress.2019.106684</mixed-citation></citation-alternatives></ref><ref id="cit5"><label>5</label><citation-alternatives><mixed-citation xml:lang="ru">Guzman-Castillo M, Brailsford S, Luke M, Smith H. A tutorial on selecting and interpreting predictive models for ordinal health-related outcomes. Health Serv Outcomes Res Method. 2015;15:223–40. https://doi.org/10.1007/s10742-015-0140</mixed-citation><mixed-citation xml:lang="en">Guzman-Castillo M, Brailsford S, Luke M, Smith H. A tutorial on selecting and interpreting predictive models for ordinal health-related outcomes. Health Serv Outcomes Res Method. 2015;15:223–40. https://doi.org/10.1007/s10742-015-0140</mixed-citation></citation-alternatives></ref><ref id="cit6"><label>6</label><citation-alternatives><mixed-citation xml:lang="ru">Stefaniak F. Prediction of compounds activity in nuclear receptor signaling and stress pathway assays using machine learning algorithms and low-dimensional molecular descriptors. Front Environ Sci. 2015;3:77. https://doi.org/10.3389/fenvs.2015.00077</mixed-citation><mixed-citation xml:lang="en">6 Stefaniak F. Prediction of compounds activity in nuclear receptor signaling and stress pathway assays using machine learning algorithms and low-dimensional molecular descriptors. Front Environ Sci. 2015;3:77. https://doi.org/10.3389/fenvs.2015.00077</mixed-citation></citation-alternatives></ref><ref id="cit7"><label>7</label><citation-alternatives><mixed-citation xml:lang="ru">Соломина АС, Шредер ОВ, Мокрова ЕД и др. Фабомотизол как средство фармакологической коррекции пре- и постнатальных нарушений, вызванных древесно-торфяным задымлением, табачным дымом, алкоголем, гипергликемией и циклофосфамидом у потомства крыс. Молекулярная медицина. 2020;18(3):34–48. https://doi.org/10.24411/2587-7836-2018-10008</mixed-citation><mixed-citation xml:lang="en">Solomina AS, Schreder OV, Mokrova ED, et al. Fabomotisol as a means of pharmacological correction of pre- and postnatal disorders induced by wood and peat smoke, tobacco smoke, alcohol, hyperglycemia and cyclophosphamide in rat offspring. Molecular Medicine. 2020;18(3):34–48 (In Russ.). https://doi.org/10.24411/2587-7836-2018-10008</mixed-citation></citation-alternatives></ref><ref id="cit8"><label>8</label><citation-alternatives><mixed-citation xml:lang="ru">Шредер ОВ, Шредер ЕД, Дурнев АД, Середенин СБ. Сопряженность генотоксических и тератогенных эффектов, вызываемых циклофосфамидом, и их модификация афобазолом. Гигиена и санитария. 2011;(5):64–8. EDN: OHIKNH</mixed-citation><mixed-citation xml:lang="en">Shreder OV, Shreder ED, Durnev AD, Seredenin SB. Association of genotoxic and teratogenic effects induced by cyclophosphamide and their modification with afobazole. Hygiene and Sanitation. 2011;(5):64–8 (In Russ.). EDN: OHIKNH</mixed-citation></citation-alternatives></ref><ref id="cit9"><label>9</label><citation-alternatives><mixed-citation xml:lang="ru">Горбатова ДМ, Немова ЕП, Соломина АС, Дурнев АД. Пренатальные эффекты продуктов сгорания торфа и их коррекция афобазолом у потомства крыс. Бюллетень экспериментальной биологии и медицины. 2014;158(11):604–5. EDN: TEWYEB</mixed-citation><mixed-citation xml:lang="en">Gorbatova DM, Nemova EP, Solomina AS, Durnev AD. Prenatal effects of peat combustion products and their correction with aphobazol in rat offspring. Bulletin of Experimental Biology and Medicine. 2014;158(11):604–5 (In Russ.). EDN: TEWYEB</mixed-citation></citation-alternatives></ref><ref id="cit10"><label>10</label><citation-alternatives><mixed-citation xml:lang="ru">`10. Горбатова ДМ, Жанатаев АК, Немова ЕП, Дурнев АД. Повреждения ДНК в клетках плацент и эмбрионов крыс, подвергнутых воздействию торфяного дыма; антигенотоксический эффект афобазола. Экологическая генетика. 2016;14(2):50–6. https://doi.org/10.17816/ecogen14250-56</mixed-citation><mixed-citation xml:lang="en">`10. Gorbatova DM, Zhanataev AK, Nemova EP, Durnev AD. DNA damage in placenta cells and rat embryos exposed to peat smoke; antigenotoxic effect of afobazole. Environmental Genetics. 2016;14(2):50–6 (In Russ.). https://doi.org/10.17816/ecogen14250-56</mixed-citation></citation-alternatives></ref><ref id="cit11"><label>11</label><citation-alternatives><mixed-citation xml:lang="ru">Забелин АВ, Пыхалов АА. Валидация конечно-элементных моделей и алгоритм ее реализации. Вестник Пермского национального исследовательского политехнического университета. Механика. 2017;(3):216–33. https://doi.org/10.15593/perm.mech/2017.3.13</mixed-citation><mixed-citation xml:lang="en">Zabelin AV, Pyhalov AA. Finite-element model validation and its execution algorithm. PNRPU Mechanics Bulletin. 2017;(3):216–33 (In Russ.). https://doi.org/10.15593/perm.mech/2017.3.13</mixed-citation></citation-alternatives></ref></ref-list><fn-group><fn fn-type="conflict"><p>The authors declare that there are no conflicts of interest present.</p></fn></fn-group></back></article>
