Вчені створили робота повара, який навчається на відео з Youtube

Дослідники з Кембридзького університету створили робота повара, який навчається на кулінарних відео з Youtube. Вчені вже навчили робота простих рецептів салатів за допомогою відео. У результаті експерименту робот розпізнав та приготував новий рецепт, якому його не вчили.

Дослідники розробили вісім простих рецептів салатів, зняли, як вони їх готують та опублікували. Потім вони використовували загальнодоступну нейронну мережу для навчання свого кухаря. Нейронна мережа була запрограмована на визначення ряду різних об'єктів, включаючи фрукти та овочі, які використовуються у восьми рецептах салатів (броколі, морква, яблуко, банан та апельсин).

Використовуючи методи комп’ютерного зору, робот проаналізував кожен кадр відео та зміг ідентифікувати різні об'єкти та особливості, такі як ніж та інгредієнти, а також руки, кисті та обличчя людини.

Правильно визначаючи інгредієнти та дії кухаря-людини, робот міг визначити, який із рецептів готувався. Наприклад, робот міг зробити висновок, якщо людина тримає ніж в одній руці, а моркву в іншій, морква буде нарізана. З 16 переглянутих відео робот розпізнав правильний рецепт у 93% випадків, хоча він виявив лише 83% дій людини-кухаря.

Робот зміг визначити, що невеликі зміни в рецепті, такі як приготування подвійної порції або звичайна людська помилка, були варіаціями, а не новим рецептом. Також робот правильно розпізнав демонстрацію нового, дев’ятого салату, додав його до своєї кулінарної книги та приготував.

Кухарі-люди можуть вивчати нові рецепти за допомогою спостереження за тим, як готує інша людина, або перегляду відео на YouTube. Програмування робота-кулінара потребує великих витрат та часу. Втім, результати дослідження показують, що візуальне навчання роботів приготуванню їжі цілком можливе, підсумували дослідники.