Для обучения и тестирования нейросети исследователи использовали 3000 фотографий спины взрослых людей (18-40 лет) и школьников младших классов. Ключевые точки на всех фотографиях определялись с помощью оптических технологий, которые анализируют изображение поверхности тела человека. Так можно дистанционно и бесконтактно определить форму туловища пациента с нарушениями опорно-двигательного аппарата.
«Мы разработали нейросетевой алгоритм, который определяет 16 специальных точек по фотографии спины. Расположение точек относительно друг друга позволяет сделать вывод о наличии различных нарушений осанки. Нейросетевую модель мы сверяли с ранее созданной пространственной трехмерной моделью, основанной на методе фотограмметрии. С его помощью по видеосъемке спины камерой смартфона с разных ракурсов можно восстановить объемную модель», — поделился кандидат физико-математических наук, доцент кафедры «Вычислительная математика, механика и биомеханика» ПНИПУ Владислав Никитин.
«Врач или сам человек сможет открыть установленную программу (приложение) и выбрать вариант диагностики. Экспресс-анализ определит нарушения с помощью искусственного интеллекта всего по одному фото, а расширенный вариант — по видеофайлу поверхности спины, снятой с разных ракурсов. В итоге человек получит расшифровку значений и рекомендации по профилактическим упражнениям», — объясняет ассистент кафедры «Вычислительная математика, механика и биомеханика» ПНИПУ Иван Шитоев.
Исследователи отмечают, что после проведения клинических испытаний и доработки программы приложение будет готово к запуску на компьютерах и телефонах. Его сможет использовать как врач, так и обычный человек для определения сколиоза.
Разработка ученых ПНИПУ достигает 85% точности. Обученная нейросеть может использоваться в клинической медицине, специалисты которой заинтересованы в появлении новых и валидных инструментов для диагностики деформации позвоночника.