Новая технология позволит роботам Яндекса и автономному транспорту выйти на новый уровень.
Компания объявила о создании первого в России физического искусственного интеллекта, способного воспринимать материальный мир, взаимодействовать с ним и адаптироваться к изменениям. Это откроет новые горизонты для человекоподобных роботов и робомобилей Яндекса.
«Физический искусственный интеллект разрабатывают команды „Яндекс роботикс“ и „автономный транспорт“. Накопленный опыт в использовании роботов внутри помещений и на дорогах, в сочетании с технологиями Яндекса, позволит научить их комплексно обрабатывать мультимодальные данные — изображение, видео, звук, текст. Это сделает их восприятие более человечным», — сообщили в компании.
В рамках проекта уже разработали и обучили модель VLA (Vision-Language-Action), которая преобразует голосовые, текстовые команды и данные с камер в конкретные действия. Сейчас модель выполняет более 10 базовых команд, таких как «взять», «положить», «переместить» и другие. В будущем их количество вырастет до сотни. Также разрабатывается система Yandex RMS, которая определяет, какие действия робот должен выполнять самостоятельно, а какие — в сотрудничестве с другими машинами.
«Люди смогут взаимодействовать с роботами привычными способами — голосом, жестами и текстом. Это упростит роботизацию бизнеса: компании не придётся обучать персонал или кардинально перестраивать процессы. Например, достаточно будет показать роботу инструкцию для людей, и он поймёт, что нужно сделать», — отметили в Яндексе.