Исследователи из Yamaha Motor и Университета Карнеги-Меллон разработали систему глубокого обучения, которая автоматически генерирует плавные и безопасные траектории для беспилотников при аэросъемке. Это ещё один шаг к созданию автономного дрона, который сможет полностью самостоятельно снимать видео.
Команда обучила сверточную нейронную сеть на датасете COCO и собственном наборе данных с помощью графических процессоров NVIDIA GeForce GTX 1080 и PyTorch с ускоренной cuDNN. Всего использовались 70 000 изображений с размеченными данными. Теперь беспилотник предсказывает движения актеров и генерирует плавную траекторию, которая позволяет избегать столкновений.
Во время испытаний были собраны видеозаписи с полутора часами полёта, в течение которых беспилотник менял траекторию, избегал препятствий и/или окклюзии 65 раз. Максимальная скорость составляла 7,5 м/с. На видео команда демонстрирует работу дрона и нейронной сети в реальных условиях с разными движениями актеров и формами препятствий.
