Роботу-пылесосу Matic теперь можно просто показать пальцем, где нужно убрать. Новая функция Matic Cues объединяет голосовое управление с компьютерным зрением: владелец зовёт робота фразой «Hey, Matic», дожидается, пока пылесос повернётся в его сторону, указывает на грязный участок и просит убрать здесь. Вместо выбора комнаты или зоны на карте робот ориентируется на направление жеста.
Разработчики Matic занимаются распознаванием жестов с 2017 года. Оба основателя компании раньше работали инженерами компьютерного зрения над камерами Google Nest. Для новой функции отдельные датчики не понадобились: Matic использует пять уже установленных камер, а изображение обрабатывает непосредственно на роботе. Поэтому управление жестами смогут получить и ранее проданные устройства.
Точность зависит от того, откуда человек показывает на пол. При жесте с высоты обычного роста Matic воспринимает указанную область шире и убирает более крупный участок. Для небольшой зоны приходится присесть и показать ближе к нужному месту. Робот также умеет следовать за человеком. После команды «Hey Matic, иди за мной» владелец может привести пылесос к грязному участку, указать на него и сразу начать уборку.
Такой способ решает одну из неудобных задач роботов-пылесосов : быструю очистку конкретного места. Обычно для точечной уборки приходится открывать приложение и выделять область на карте квартиры. Границы зоны не всегда удаётся задать точно, особенно если нужно собрать несколько крошек или очистить небольшой участок пола. Некоторые модели принимают голосовую команду «убери здесь», но определяют цель по примерному положению человека. Matic дополнительно видит жест и получает более точное указание.
Вместе с Matic Cues появился встроенный голосовой помощник. Голосовое управление давно используют роботы Roborock, Ecovacs, Narwal и других производителей, а многие модели работают с Alexa, Google Assistant или Siri. Однако встроенные помощники часто распознают ограниченный набор заранее предусмотренных фраз. Простую команду вроде «пропылесось кухню» запомнить легко, но для менее привычной задачи приходится подбирать формулировку, понятную конкретной системе.
Matic использует Gemini API и принимает команды на естественном языке. Владельцу не нужно вспоминать точную фразу из инструкции. Например, пылесос можно попросить убрать внутреннюю часть ковра, чтобы не заезжать на бахрому, очистить только твёрдый пол или пройти вдоль цоколя кухонной мебели. Голосом Matic не отвечает. Небольшой экран показывает, что команда распознана, а затем сообщает, какое действие собирается выполнить устройство.
Жесты и голосовые команды обрабатываются по-разному. Matic способен выполнять основные функции без подключения к интернету, а распознавание жестов полностью работает на устройстве. Активационная фраза «Hey, Matic» тоже распознаётся локально, поэтому обычные разговоры рядом с пылесосом не отправляются на сервер.
В дальнейшем Matic планирует перенести на сам робот примерно 20–30 наиболее популярных команд. Для их распознавания подключение к облачному сервису уже не потребуется. Matic Cues включается по желанию владельца, а функцию и микрофоны можно отключить в настройках.
У Roborock, например, помощник Hey Rocky обрабатывает команды непосредственно на устройстве, но работает с более жёстким набором формулировок. Matic выбрала другой вариант: свободную речь разбирает облачная модель, а камеры и жесты остаются локальными. В результате владелец может не искать нужную зону в приложении и не запоминать специальную команду. Для точечной уборки достаточно подозвать пылесос и показать рукой на нужный участок пола.