Ученые из Вашингтонского университета и Института Аллена разработали нейросеть, которая может предугадывать действия собак, анализируя изображения окружающей среды. Алгоритм «натаскали» на реальных видеозаписях действия собак от первого лица и научили правильно предугадывать действия на пять кадров вперед, сказано на arXiv.org.
В общей сложности исследователи создали три нейросетевые модели различной архитектуры для трех главных подзадач. Одна предсказывает движения животного, основываясь на предыдущих. Вторая планирует движения, а третья — классифицирует объекты в кадре и определяет зоны, где собака может перемещаться.
Модели созданы на основе долгой краткосрочной памяти и нейросети ResNet, которую уже использовали для таких задач. К примеру, швейцарские специалисты научили с ее помощью дроны летать, используя записи с видеорегистраторов.
Ученые считают, в будущем алгоритм можно будет испытать на данных с большого числа собак.
VK
OK
Дзен
MAX