Команда биологов NT Fisheries совместно с Microsoft разработали и применили технологию для автономного отслеживания видов и подсчета количества рыбы даже в мутной воде. Разработка поможет упростить исследования морских биологов, особенно работающих в местах с повышенной опасностью — в водоёмах, где обитают хищные рыбы и аллигаторы.
Технология разработана в Microsoft и основана на Azure Cognitive Service. Усовершенствованная модель сегментации позволяет распознавать виды рыб в мутной воде с точностью от 95% до 99%. Исходный код модели доступен на GitHub.
Распознавание видов рыб
Департамент сырьевой промышленности Австралии управляет сырьевыми ресурсами, к которым относится и рыбная ловля, разрабатывает рекомендации по ловле и сохранению видов рыб. Для этого работникам нужно ежедневно мониторить количество рыбы, отслеживать резкие изменения в количестве и поведении отдельных видов.
Команда исследователей NT Fisheries использует приманку, а затем снимают приплывшую рыбу на видео с помощью подводных камер. После того как материалы собраны, ученым приходится отсматривать терабайты данных (1 терабайт равен примерно 500 часам видео) и маркировать виды рыб вручную.
В Microsoft создали автоматическую систему помощи исследователям в отслеживании и классификации видов. Разработчики столкнулись с необычными проблемами. Например, как компьютер определит вид золотой трески, которая способна менять цвет, чтобы подстроиться под окружающую среду? Результаты очень сильно зависят от обучающей выборки, поэтому ученые разработали модель, которая обучается непрерывно. После трех месяцев обучения и тестирования, технология распознает 15 видов рыбы.
Хотя уже есть разговоры об использовании AI для создания глобальной базы данных о видах рыб, команда NT Fisheries сосредоточена на работе с существующими проблемами. «У нас много видов рыб, находящихся под угрозой исчезновения, и видов, о которых не хватает данных» — поясняют исследователи. В Microsoft надеются, что их наработки помогут странам начать эффективно использовать водные ресурсы и управлять ими.
