Фото: freepik.com
Группа исследователей из Швеции разработала нейросеть Dessie, способную расшифровывать язык тела лошадей и преобразовывать его в понятные для человека данные.
Модель на основе машинного обучения анализирует позы, движения и распределение веса животных в реальном времени, помогая выявлять ортопедические проблемы, травмы или стресс на ранних стадиях — до появления явных симптомов.
Традиционные методы диагностики, такие как визуальный осмотр или МРТ, часто запаздывают или зависят от субъективной оценки. Dessie решает эту проблему, преобразуя 2D-видео в 3D-модели, изолируя ключевые параметры (форма тела, поза) и игнорируя фоновый шум.
Для обучения ИИ учёные использовали синтетический генератор данных DessiePIPE, создающий изображения лошадей в разных позах и условиях. Это позволило избежать сбора тысяч реальных снимков.
Система работает даже с простыми камерами, что делает её доступной для сельских клиник. В тестах Dessie превзошла аналоги (MagicPony, Farm3D) в точности определения суставов и прогнозировании движений.
Модель также показала универсальность: она анализирует коров, оленей и даже мультперсонажей, открывая возможности для защиты редких видов без инвазивного мониторинга.
Ограничения включают трудности с нестандартными формами тела и групповыми сценами. Учёные уже работают над улучшенной версией — VAREN. Dessie также генерирует «речь» на основе поз лошади, что может революционизировать взаимодействие человека и животных.
Полностью исследование опубликовано на портале arxiv.org по ссылке - [2410.03438] Dessie: Disentanglement for Articulated 3D Horse Shape and Pose Estimation from Images