Науковці розробили систему машинного зору, що дозволить дронам літати без керування операторами

Inter­st­ing Engi­neer­ing інформує: науковці розробили нову технологію нейроморфного зору-до-керування, яка дозволяє дронам літати автономно. Вся справа у системах, що імітують біологічну обробку мозку через спайкові нейронні мережі.

Дослідницька команда з Технічного університету Делфта у Нідерландах розробила п’ятирівневу спайкову нейронну мережу з 28 800 нейронів для обробки сирих даних від подійно-орієнтованої камери. Ця мережа оцінює 3D рух камери у її середовищі. Вона значно компактніша та енергоефективніша у порівнянні з іншими системами бачення для дронів, які використовують штучні нейронні мережі.

Дрон з новою системою здатен автономно контролювати своє положення у просторі, зависати, приземлятися та маневрувати вбік. За словами дослідників, нейроморфний процесор споживає всього 0,94 вати у режимі очікування та додаткові 7–12 міліват під час роботи мережі.

Попри те, що чинні нейроморфні процесори обмежені розмірами мережі та складнощами тренування спайкових нейронних мереж, даний проект показав, як можна повністю використовувати нейроморфний зір-до-керування для польоту дрона.

Технологія була реалізована на нейроморфному процесорі Loi­hi від Intel і використана на маленькому летючому роботі для навігації на основі машинного зору. Дрон успішно слідував за встановленими точками его-руху без зовнішніх допомог. Розробники певні — система, що забезпечує стабільний візуальний потік на частоті 200 Гц, може стати основою для створення розумних роботів розміром з комах.

Дослідження, опубліковане у фаховому науковому журналі Sci­ence Robot­ic.