kvmolurОбразование и саморазвитиеEducation and Self-Development1991-7740Казанский (Приволжский) федеральный университет10.26907/esd.19.3.08MZIPFXkvmolur-42Research ArticleСтатьиЦифровой образовательный контент для современного урока: технология экспертизы качестваDigital Educational Content for a Modern Lesson: Quality Assessment Technologyhttps://orcid.org/0000-0001-7163-341XБосовА. В.BosovA.

Алексей В. Босов

Москва, Россия

Alexey Bosov

Moscow, Russia

ABosov@frccsc.ruhttps://orcid.org/0000-0001-6654-5992СеливановаН. Л.SelivanovaN.

Наталия Л. Селиванова

Москва, Россия

Natalia Selivanova

 

nselivanova2000@mail.ruhttps://orcid.org/0000-0001-6082-2725ПустыльникЮ. Ю.PustylnikYu.

Юлия Ю. Пустыльник

Москва, Россия

Yulia Pustylnik

 

y.pustylnik@internet.ruФИЦ ИУ РАНРоссияFRC CSC RASRussian FederationФГБНУ «Институт стратегии развития образования»РоссияFederal State Budget Scientific Institution “Institute for Strategy of Education Development”Russian Federation20242809202519398113Copyright © Босов А.В., Селиванова Н.Л., Пустыльник Ю.Ю., 20252025Босов А.В., Селиванова Н.Л., Пустыльник Ю.Ю.Bosov A., Selivanova N., Pustylnik Y.Данная работа распространяется под лицензией Creative Commons Attribution 4.0.This work is licensed under a Creative Commons Attribution 4.0 License.https://kvmolur.elpub.ru/jour/article/view/42

Электронные обучающие системы (ЭОС) остаются предметом пристального внимания исследователей. Неотъемлемой и наиболее ответственной частью ЭОС является цифровой образовательный контент – ключевой элемент как дистанционного, так и очного общего и профессионального образования. Оценка его качества для экспертного сообщества – деликатный вопрос, сложность которого обусловлена субъективностью экспертизы. Подойти к его решению с новой позиции позволяют современные средства автоматизации, развиваемые в рамках парадигмы искусственного интеллекта.Цель статьи состоит в представлении результатов предварительного исследования подходов к повышению точности и объективности экспертизы качества цифрового образовательного контента за счет частичной автоматизации экспертных процедур. Ведущими методами исследования являются анализ, экспертиза, моделирование, констатирующий эксперимент, описание.В результате представлено теоретическое обоснование автоматизации экспертизы качества цифрового образовательного контента как нового междисциплинарного направления научных исследований, поставлены задачи, определены цели, методы, представлены первые результаты, полученные в рамках данного направления. Показано, что целью развития этого направления будет формирование расширенного описания процесса экспертизы качества цифрового образовательного контента, включая предложения по экспертным процедурам, реализуемым только средствами автоматизации, описание информационной модели экспертизы и интерпретации результатов автоматической экспертизы.Новизна полученных результатов заключается в формировании теоретических основ автоматического анализа качества цифрового образовательного контента, в получении принципиально нового качества оценочных процедур контента ЭОС, опирающегося на объективные и измеримые качественные характеристики и показатели, формализованные этапы (процессы) экспертизы, количественно квалифицируемые результаты оценивания.

Widely and universally used e-learning systems (ELS) remain the subject of close attention of researchers. An integral and most important part of the ELS is digital educational content. This is a key element for both distance and full-time education, and in recent years it has been widely used not only in higher education, but also in general education. Assessing the quality of educational content for the expert community is a delicate issue, the complexity of which is due to the examinator subjectivity. Modern automation tools, developed within the framework of the artificial intelligence paradigm, which have already demonstrated the ability to solve various problems, allow us to approach this issue from a new position.The purpose of the article is to present the results of a preliminary study of approaches to increasing the accuracy and objectivity of the examination of the quality of digital educational content through partial automation of expert procedures. The leading research methods are analysis, examination, modeling, ascertaining experiment, description.As a result, a theoretical justification for automating the examination of the quality of digital educational content as a new interdisciplinary scientific research area is presented, tasks are set, goals and methods are defined, and the first results obtained within this area are presented. It is shown that the development goal will be the formation of an expanded description of the process of examination of the quality of digital educational content, including proposals for expert procedures implemented only by automation means, description of the examination information model and interpretation of the results of automatic examination.The novelty of the results obtained lies in the formation of the theoretical foundations for automatic analysis of the digital educational content quality. This will form a fundamentally new quality of assessment procedures in relation to electronic means of teaching and education, based on objective and measurable qualitative characteristics and indicators, formalized stages (processes) of examination, and quantitatively qualified assessment results

цифровой образовательный контентэкспертизакачествоэлектронные обучающие системысовременный урокdigital educational contentexpertisequalitye-learning systemsmodern lessonСтатья публикуется в рамках государственного задания «Научно-педагогическое обеспечение современного урока» № 073-00064-24-01 от 19.01.2024 на 2024 год и на плановый период 2025 и 2026 годов.ReferencesБосов, А. В. Применение самоорганизующихся нейронных сетей к процессу формирования индивидуальной траектории обучения // Информатика и её применения. – 2022. – Т. 16. – №3. – С. 7–15. – DOI:10.14357/19922264220302Bosov, A. V., & Ivanov, A. V. (2022). Technology for classification of content types of e-textbooks. Informatika i ee primeneniya – Informatics and Applications, 16(4), 63–72. https://doi.org/10.14357/19922264220410Босов, А. В., Иванов, А. В. Технология классификации типов контента электронного учебника // Информатика и её применения. – 2022. – Т. 16. – № 4. – С. 63–72. – DOI:10.14357/19922264220410Bosov, A. V., & Ivanov, A. V. (2023). Multifactor classification technology of mathematical content of e-learning system. Informatika i ee primeneniya – Informatics and Applications, 17(4), 32–41. https://doi.org/10.14357/19922264230405Босов, А. В., Иванов, А. В. Технология многофакторной классификации математического контента электронной системы обучения // Информатика и ее применения. – 2023. – Т. 17. – № 4. – С. 32–41. – DOI:10.14357/19922264230405Bosov, A. V., & Ivanov, A. V. (2023). Two Approaches to E-Book Content Classification. In R. Silhavy & P. Silhavy (Eds.), Artificial Intelligence Application in Networks and Systems. CSOC 2023.Босов, А. В., Мартюшова, Я. Г., Наумов, А. В. Выбор направлений оценивания качества электронных средств обучения для организации учебного процесса вуза // Сибирский педагогический журнал. – 2022. – № 2. – С. 54–63. – DOI:10.15293/1813-4718.2202.05Lecture Notes in Networks and Systems, Vol. 724 (pp. 77–87). https://doi.org/10.1007/978-3-031-35314-7_6Босов, А. В., Мартюшова, Я. Г., Наумов, А. В. Особенности формирования контента электронных учебников на основе дидактических принципов их конструирования // Отечественная и зарубежная педагогика. – 2022. – Т. 1. – № 4 (85). – С. 34–45.Bosov, A. V., Martyushova, Ya. G., & Naumov, A. V. (2022a). Directions selection for assessing the quality of electronic learning tools for the organization of the educational process of the higher educational process. Sibirskiy pedagogicheskiy zhurnal – Siberian Pedagogical Journal, 2, 54–63. https://doi.org/10.15293/1813-4718.2202.05Босов, А. В., Мартюшова, Я. Г., Наумов, А. В., Сапунова, А. П. Байесовский подход к построению индивидуальной траектории пользователя в системе дистанционного обучения / // Информатика и ее применения. – 2020. – Т. 14. – № 3 – С. 89–96. – DOI:10.14357/19922264200313Bosov, A. V., Martyushova, Ya. G., & Naumov, A. V. (2022b). Peculiarities of e-textbook content formation on the basis of didactic principles of textbook design. Otechestvennaya i zarubezhnaya pedagogika – Domestic and Foreign Pedagogy, 1, 4(85), 34–45.Босов, А. В., Мхитарян, Г. А., Наумов, А. В., Сапунова, А. П. Использование модели гаммараспределения в задаче формирования ограниченного по времени теста в системе дистанционного обучения // Информатика и ее применения. – 2019. – Т.13. – № 4. – С. 11–17. – DOI:10.14357/19922264190402Bosov, A. V., Martyushova, Ya. G., Naumov, A. V., & Sapunova, A. P. (2020). Bayesian approach to the construction of an individual user trajectory in the system of distance learning. Informatika i ee primeneniya – Informatics and Applications, 14(3), 89–96. https://doi.org/10.14357/19922264200313Власова, Ю. Ю. Использование педагогом социальных сетей в воспитании школьников // Образование и саморазвитие. – 2021. – Т. 16. – № 3. – С. 278–288. – DOI:10.26907/esd.16.3.24Bosov, A. V., Mkhitaryan, G. A., Naumov, A. V., & Sapunova, A. P. (2019). Using the model of gamma distribution in the problem of forming a time-limited test in a distance learning system. Informatika i ee primeneniya – Informatics and Applications, 13(4), 11–17. https://doi.org/10.14357/19922264190402Власова, Ю. Ю., Пустыльник, М. Л., Вержбицкая, С. В. Воспитательный потенциал бренда образовательной организации // Отечественная и зарубежная педагогика. – 2021. – Т. 1. – № 1(74). – С. 125–142.Ivanova, E. O. (2015). Electronic textbook - subject information-educational environment of independent work of students. Obrazovanie i nauka – The Education and Science Journal, 5(124), 118–128. https://doi.org/10.17853/1994-5639-2015-5-118-128Иванова, Е. О. Электронный учебник – предметная информационно-образовательная среда самостоятельной работы учащихся // Образование и наука. – 2015. – № 5(124). – С. 118–128. – DOI:10.17853/1994-5639-2015-5-118-128Ivanova, E. O., & Osmolovskaya, I. M. (2014). Theory of learning in the information society. Prosveshchenie.Иванова, Е. О., Осмоловская, И. М. Теория обучения в информационном обществе. – М.: Просвещение, 2014. – 190 с.Ivanova, E. O., Osmolovskaya, I. M., & Shabalin, Y. E. (2017). Construction of textbooks for implementation of the learning process in the information and education environment. Institute for Strategy of Education Development of the Russian Academy of Education.Иванова, Е. О., Осмоловская, И. М., Шабалин, Ю. Е. Конструирование учебников для реализации процесса обучения в информационно-образовательной среде: монография. – М.: Институт стратегии развития образования РАО, 2017. – 188 с.Kiseleva, E. V. (2020). Pedagogical examination of the process of upbringing in an educational organization [Unpublished doctoral dissertation]. Institute for Strategy of Education Development of the Russian Academy of Education.Киселева, Е. В. Педагогическая экспертиза процесса воспитания в образовательной организации : дис. … д-ра пед. наук: 13.00.01 / Киселева Елена Васильевна. – М., 2020. – 270 с.Kiseleva, E. V., Kiselev, N. N., & Selivanova, N. L. (2019). Construction of the Concept of Developmental Pedagogical Expertise of Education Process. In S. K. Lo (Ed.), Education Environment for the Information Age, vol 69. European Proceedings of Social and Behavioural Sciences (pp. 416-423). Future Academy. https://doi.org/10.15405/epsbs.2019.09.02.48Конасова, Н. Ю. Общественная экспертиза качества школьного образования. – СПб: КАРО, 2023. – 208 c.Kiseleva, E. V., Selivanova, N. L., & Kiselev, N. N. (2018). Pedagogical Expert Assessment of Character Building Process. In S. K. Lo (Ed.), Education Environment for the Information Age, vol 46. European Proceedings of Social and Behavioural Sciences (pp. 301-308). Future Academy. https://doi.org/10.15405/epsbs.2018.09.02.35Лыгина, Н. И., Лауферман, О. В. Качество учебных материалов: проектирование, использование, оценка // Мир науки. Педагогика и психология. – 2020. – Т. 8. – № 1. – С. 27. – URL: https://mir-nauki.com/PDF/64PDMN120.pdf (дата обращения: 20.08.2024).Konasova, N. Yu. (2023). Public examination of the quality of school education. KARO.Мартюшова, Я. Г. Сценарный подход к разработке и использованию электронного учебника в вузе // Психологическая наука и образование. – 2017. – Т. 22. – № 6. – С. 45–55. – DOI:10.17759/pse.2017220604Lygina, N. I., & Lauferman, O. V. (2020). Quality of training materials: design, use, evaluation. Mir nauki. Pedagogika i psihologija – World of Science. Pedagogy and psychology, 8(1), 27. https://mirnauki.com/PDF/64PDMN120.pdfМартюшова, Я. Г. Теоретические основания конструирования электронных учебников для студентов технических университетов // Отечественная и зарубежная педагогика. – 2018. – Т. 1. – № 5(54). – С. 151–165.Martyushova, Ya. G. (2017). Scenario approach to the development and use of learning management system in universities. Psikhologicheskaya nauka i obrazovanie – Psychological Science and Education, 22(6), 45–55. https://doi.org/10.17759/pse.2017220604Педагогические практики подготовки школьников к олимпиаде по искусственному интеллекту: сборник аналитических материалов / Под ред. Ю.Ю. Пустыльник, И.И. Трубиной, Е.В. Чмыховой. – М.: Институт стратегии развития образования РАО, 2022. – 160 с.Martyushova, Ya. G. (2018). Theoretical bases of creation of learning management systems for students of technical universities. Otechestvennaya i zarubezhnaya pedagogika – Domestic and Foreign Pedagogy, 1, 5(54), 151–165.Соловьев, А. В., Кривцов, В. Е. Моделирование компетентности экспертов // Искусственный интеллект и принятие решений. – 2019. – № 3. – С. 32–39. – DOI:10.14357/20718594190304Mkhitaryan, G., Kibzun, A., Martyushova, Y., & Zharkov, E. (2020). Interdisciplinary Aspects of Development and Software Implementation of Electronic Textbooks for Students of Technical Universities. In V. Sukhomlin & E. Zubareva (Eds.), Modern Information Technology and IT Education. Communications in Computer and Information Science, Vol. 1201 (pp. 110–120). Springer. https://doi.org/10.1007/978-3-030-46895-8_9Степанов, П. В., Круглов, В. В., Степанова, И. В., Черкашин, Е. О., Шустова, И. Ю., Парфенова, И. С., Селиванова, Н. Л., Нуруллова, А. Ю. Научно-методические рекомендации для педагогов образовательных организаций о возможностях и рисках использования цифровых технологий в развитии личности школьника / Под ред. П.В. Степанова. – М.: Институт стратегии развития образования РАО, 2022. – 98 с.Pustylnik, Yu. Yu., Trubina, I. I., & Chmykhova, E. V. (Eds). (2022). Pedagogical Practices of Preparing Schoolchildren for the Olympiads in Artificial Intelligence. Institute for Strategy of Education Development of the Russian Academy of Education.Суховиенко, Е. А. Электронный учебник: конструирование, обучение, диагностика : монография. – Челябинск: Образование, 2005. – 148 с.Rasch, G. (1980). Probabilistic models for some intelligence and attainment tests. The University of Chicago Press.Сычев, О. А., Денисов, М. Е. Метод автоматического конструирования учебных упражнений для электронных обучающих систем // Искусственный интеллект и принятие решений. – 2024. – № 1. – С. 38–51. – DOI:10.14357/20718594240104Selivanova, N. L., Stepanov, P. V., Kruglov, V. V., & Parfyonova, I. S. (2021). Risks of Modern Digital Environment Hindering the Implementation of Upbringing Programs. In Е. Tareva & T. Bokova (Eds.), ARPHA Proceedings 4: TSNI 2021 – Textbook: focus on students' national identity (pp. 766–779). ARPHA Proceedings. https://ap.pensoft.net/article/22085/download/pdf/550004Трубина, И. И., Пустыльник, Ю. Ю. Искусственный интеллект в российской школе: монография. – М.: Педагогический поиск, 2023. – 144 с.Shisharina, N., Ivantsova, N., Romm, T., Selivanova, N., & Podlinyaev, O. (2020). Hygienic Evaluation of Innovative Educational Technologies. In N. L. Shamne, S. Cindori, E. Yu. Malushko, O. Larouk, & V. G. Lizunkov (Eds.), Individual and Society in the Modern Geopolitical Environment, vol 99. European Proceedings of Social and Behavioural Sciences (pp. 839–847). European Publisher. https://doi.org/10.15405/epsbs.2020.12.04.96Bosov, A. V. Adaptation of Kohonen's Self-Organizing Map to the Task of Constructing an Individual User Trajectory in an E-Learning System // Data Science and Algorithms in Systems. CoMeSySo 2022. Lecture Notes in Networks and Systems. – 2022. – Vol. 597. – P. 554–564. – DOI:10.1007/978-3-031-21438-7_44Solov'ev, A. V., & Krivcov, V. E. (2019). Expert Competency Modeling. Iskusstvennyy intellekt i prinyatie resheniy – Artificial Intelligence and Decision Making, 3, 32–39. https://doi.org/10.14357/20718594190304Bosov, A. V., Ivanov, A. V. Two Approaches to E-Book Content Classification // Artificial Intelligence Application in Networks and Systems. Proceedings of 12th Computer Science Online Conference (CSOC 2023). – 2023. – Vol. 3. – P. 77–87. – DOI:10.1007/978-3-031-35314-7_6Stepanov, P. V., Kruglov, V. V., Stepanova, I. V., Cherkashin, E. O., Shustova, I. Yu., Parfenova, I. S., Selivanova, N. L., & Nurullova, A. Yu. (2022). Scientific and methodological recommendations for teachers of educational organizations about the possibilities and risks of using digital technologies in the personal development of a school student. Institute for Strategy of Education Development of the Russian Academy of Education.Kiseleva, E. V., Selivanova, N. L., Kiselev, N. N. Pedagogical expert assessment of character building process // EEIA 2018 – International Conference “Education Environment for the Information Age” / S. K. Lo (Ed.). – European Publisher, 2018. – 888 p. – P. 301–308. – DOI:10.15405/epsbs.2018.09.02.35Sukhovienko, E. A. (2005). Electronic textbook: Design, Training, Diagnostics. Obrazovaniye. Sychev, O. A. & Denisov, M. E. (2024). Method of automatic constructing training exercises for electronic tutoring systems. Iskusstvennyy intellekt i prinyatie resheniy – Artificial Intelligence and Decision Making, 1, 38–51. https://doi.org/10.14357/20718594240104Kiseleva, E. V., Kiselev, N. N., Selivanova, N. L. Construction of the concept of developmental pedagogical expertise of education process // EEIA 2019 – International Conference “Education Environment for the Information Age”. The European Proceedings of Social & Behavioural Sciences EpSBS / S. K. Lo (Ed.). – Vol. LXIX. – European Publisher, 2019. – 1054 p. – P. 416–423. – DOI:10.15405/epsbs.2019.09.02.48Trubina, I. I., & Pustylnik, Yu. Yu. (2023). Artificial Intelligence in the Russian School. Pedagogicheskiy poisk. Bosov, A. V. Adaptation of Kohonen's Self-Organizing Map to the Task of Constructing an Individual User Trajectory in an E-Learning System // Data Science and Algorithms in Systems. CoMeSySo 2022. Lecture Notes in Networks and Systems. – 2022. – Vol. 597. – P. 554–564. – DOI:10.1007/978-3-031-21438-7_44Mkhitaryan, G., Kibzun, A., Martyushova, Y., Zharkov, E. Interdisciplinary Aspects of Development and Software Implementation of Electronic Textbooks for Students of Technical Universities // Communications in Computer and Information Science. – 2020. – Vol. 1201. – P. 110–120. – DOI:10.1007/978-3-030-46895-8_9Bosov, A. V., Ivanov, A. V. Two Approaches to E-Book Content Classification // Artificial Intelligence Application in Networks and Systems. Proceedings of 12th Computer Science Online Conference (CSOC 2023). – 2023. – Vol. 3. – P. 77–87. – DOI:10.1007/978-3-031-35314-7_6Rasch, G. Probabilistic models for some intelligence and attainment tests. – Chicago: The University of Chicago Press, 1980. – 186 p.Kiseleva, E. V., Selivanova, N. L., Kiselev, N. N. Pedagogical expert assessment of character building process // EEIA 2018 – International Conference “Education Environment for the Information Age” / S. K. Lo (Ed.). – European Publisher, 2018. – 888 p. – P. 301–308. – DOI:10.15405/epsbs.2018.09.02.35Selivanova, N. L., Stepanov, P. V., Kruglov, V. V., Parfyonova, I. S. Risks of Modern Digital Environment Hindering the Implementation of Upbringing Programs // ARPHA Proceedings 4: TSNI 2021 – Textbook: focus on students' national identity / Tareva, Е., Bokova, T. (Eds.). – Sofia: ARPHA Proceedings, 2021. – 1150 p. – P. 766–779. – URL: https://ap.pensoft.net/article/22085/download/pdf/550004 (дата обращения 01.09.2024).Kiseleva, E. V., Kiselev, N. N., Selivanova, N. L. Construction of the concept of developmental pedagogical expertise of education process // EEIA 2019 – International Conference “Education Environment for the Information Age”. The European Proceedings of Social & Behavioural Sciences EpSBS / S. K. Lo (Ed.). – Vol. LXIX. – European Publisher, 2019. – 1054 p. – P. 416–423. – DOI:10.15405/epsbs.2019.09.02.48Shisharina, N., Ivantsova, N., Romm, T., Selivanova, N., Podlinyaev, O. Hygienic Evaluation Of Innovative Educational Technologies // European proceedings of social and behavioural sciences (EpSBS) : II International Scientific and Practical Conference / Shamne, N. L., Cindori, S., Malushko, E. Yu., Larouk, O., Lizunkov, V. G. (Eds.). – Vol. 99. – European Publisher, 2020. – 1040 p. – P. 839–847. – DOI:10.15405/epsbs.2020.12.04.96Mkhitaryan, G., Kibzun, A., Martyushova, Y., Zharkov, E. Interdisciplinary Aspects of Development and Software Implementation of Electronic Textbooks for Students of Technical Universities // Communications in Computer and Information Science. – 2020. – Vol. 1201. – P. 110–120. – DOI:10.1007/978-3-030-46895-8_9Van der Linden, W. J. A Lognormal Model for Response Times on Test Items // Journal of Educational and Behavioral Statistics. – 2006. – Vol. 31. – No. 2. – P. 181–204.Rasch, G. Probabilistic models for some intelligence and attainment tests. – Chicago: The University of Chicago Press, 1980. – 186 p.Selivanova, N. L., Stepanov, P. V., Kruglov, V. V., Parfyonova, I. S. Risks of Modern Digital Environment Hindering the Implementation of Upbringing Programs // ARPHA Proceedings 4: TSNI 2021 – Textbook: focus on students' national identity / Tareva, Е., Bokova, T. (Eds.). – Sofia: ARPHA Proceedings, 2021. – 1150 p. – P. 766–779. – URL: https://ap.pensoft.net/article/22085/download/pdf/550004 (дата обращения 01.09.2024).Selivanova, N. L., Stepanov, P. V., Kruglov, V. V., Parfyonova, I. S. Risks of Modern Digital Environment Hindering the Implementation of Upbringing Programs // ARPHA Proceedings 4: TSNI 2021 – Textbook: focus on students' national identity / Tareva, Е., Bokova, T. (Eds.). – Sofia: ARPHA Proceedings, 2021. – 1150 p. – P. 766–779. – URL: https://ap.pensoft.net/article/22085/download/pdf/550004 (дата обращения 01.09.2024).Shisharina, N., Ivantsova, N., Romm, T., Selivanova, N., Podlinyaev, O. Hygienic Evaluation Of Innovative Educational Technologies // European proceedings of social and behavioural sciences (EpSBS) : II International Scientific and Practical Conference / Shamne, N. L., Cindori, S., Malushko, E. Yu., Larouk, O., Lizunkov, V. G. (Eds.). – Vol. 99. – European Publisher, 2020. – 1040 p. – P. 839–847. – DOI:10.15405/epsbs.2020.12.04.96Shisharina, N., Ivantsova, N., Romm, T., Selivanova, N., Podlinyaev, O. Hygienic Evaluation Of Innovative Educational Technologies // European proceedings of social and behavioural sciences (EpSBS) : II International Scientific and Practical Conference / Shamne, N. L., Cindori, S., Malushko, E. Yu., Larouk, O., Lizunkov, V. G. (Eds.). – Vol. 99. – European Publisher, 2020. – 1040 p. – P. 839–847. – DOI:10.15405/epsbs.2020.12.04.96Van der Linden, W. J. A Lognormal Model for Response Times on Test Items // Journal of Educational and Behavioral Statistics. – 2006. – Vol. 31. – No. 2. – P. 181–204.Van der Linden, W. J. A Lognormal Model for Response Times on Test Items // Journal of Educational and Behavioral Statistics. – 2006. – Vol. 31. – No. 2. – P. 181–204.

The authors declare that there are no conflicts of interest present.