ТехнологииКак Amazon обучает свой робот сортировать посылки (+Видео)

Ежедневно через центры выполнения заказов Amazon проходят тысячи посылок. Все больше и больше таких посылок собирает, сканирует и сортирует робот-манипулятор по имени Робин.

Робин берет посылки с конвейерной ленты с помощью вакуумного захвата, сканирует их, а затем помещает на мобильный робот, который доставляет их к нужному погрузочному отделу. Работа Робина особенно сложна из-за быстро меняющейся среды. В отличие от других роботов-манипуляторов, он не просто выполняет серию заранее заданных движений, он реагирует на окружающую среду в режиме реального времени.

«Робин имеет дело с миром, в котором все вокруг меняется. Он понимает, какие объекты там находятся — коробки разного размера, пакеты, конверты поверх других конвертов — решает, что из этого ему нужно и берет это», — сказал Чарльз Свон, старший менеджер по разработке программного обеспечения в Amazon Robotics. «Он делает все эти вещи без участия человека, который должен прописывать каждое его движение. То, что делает Робин, не является чем-то новым для исследователей. Но это новинка для производства».

Команда Amazon решила применить уникальный подход, обучив Робина распознавать посылки, идущие по конвейерной ленте. Вместо того, чтобы подключать алгоритмы компьютерного зрения и сегментировать изображение на отдельные элементы, команда позволила системе самостоятельно пытаться найти объекты на изображении. После того, как робот находит объект, команда предоставляет обратную связь о том, насколько он был точен.

Начав с простых элементов, таких как края и плоскости, команда постепенно научила Робина, как идентифицировать широкий спектр посылок, с которыми он будет работать.

«Все происходит в беспорядке размеров и форм, некоторые поверх других, некоторые в тени», — сказал Бхавана Чандрашекхар, менеджер по разработке программного обеспечения в Amazon Robotics. «Иногда различия между одной посылкой и другой трудно увидеть даже человеку. У вас может быть белый конверт на другом белом конверте, и оба измяты, так что вы не можете сказать, где начинается один и заканчивается другой».

Эти изображения используются для постоянного переобучения Робина, но это не единственный способ, с помощью которого команда добивается максимально возможной точности своего робота. Робин может дать обратную связь о том, насколько он уверен в своих решениях. Изображения, которые робот помечает как ненадежные, автоматически отправляются для аннотации, а затем добавляются в тренировочную колоду команды.

Робин также знает, когда он сделал ошибку. Если он уронит пакет или случайно положит два пакета на один сортировочный робот, Робин попытается исправить проблему. Если не сможет, то вмешается человек.

В настоящее время робот тестируется понемногу, но стремление команды к точности означает, что дальше - больше. Манипулятору еще есть чему поучиться. Робин проходит переобучение каждые несколько дней с новыми показателями и требованиями, и команда надеется, что сможет выпускать обновления для робота несколько раз в неделю.