Исследователи представили улучшенный метод симуляции инфракрасных изображений с беспилотников на базе открытого ПО AirSim. Ключевое новшество — использование сегментированных 3D-моделей объектов, что позволило значительно повысить детализацию и качество симулированных ИК-снимков по сравнению с базовым методом.
На основе нового метода был создан набор данных IR-TSS, содержащий более 11 000 размеченных объектов 7 различных классов (люди, велосипеды, автомобили и др.). Съемка велась с высот 40, 70, 90 и 120 метров под углами 90° и 60°.
Для работы с датасетом исследователи разработали специальную нейросеть EfficientNCSP-Net. В тестах она показала точность распознавания объектов (mAP50) 96.2%, что превосходит результаты популярных моделей вроде YOLOv10 и RT-DETR.
Важно отметить, что новый метод симуляции не требует дорогостоящего проприетарного ПО и может быть реализован на базе открытых инструментов. Это делает его доступным для широкого круга исследователей и разработчиков.
Источник новости и обложки: www.nature.com