Японское аэрокосмическое агентство JAXA готовит необычного робота-трансформера, которого собирается отправить на Луну.

Этого робота агентство создает совместно с Sony, Doshisha University и производителем игрушек Tomy. Доставка необычного груза запланирована на 2029 год, причем робота запустят вместе с пилотируемым ровером. Последний создают совместно с Toyota.

Вес трансформера составляет всего 250 грамм. На Луну он приземлится в шарообразной форме, а затем раскроется в своей полной конфигурации, в которой сможет фотографировать. Sony отвечает именно за качество фотографий, а игровой бренд Tomy должен помочь сделать корпус крепким и миниатюрным.

Если миссия будет успешной, то Япония сможет вступить в эксклюзивный «космический клуб», которые имеют свои луноходы. На данный момент в нём только СССР, США и Китай.

Кажется, что у Netflix все больше планов по порабощению мира. Во всяком случае сервис к внушительному списку аниме собирается добавить фильм про Mobile Suit Gundam в формате Live Action. Права официально куплены у Sunrise Origin Studio.

Режиссером выступит Джордан Вогт-Робертс, а Брайан Кей Вонан выступит в роли исполнительного продюсера и автора сценария. Интересно, что в Китае планируется премьера в кинотеатрах.

Компания Panasonic представила робота Никобо, который может стать верным другом и собеседником, особенно для тех, кто сильно страдал от потери общения во время самоизоляции и карантина вследствие пандемии COVID-19.

По сути, это подушка — стационарный «обнимательный» робот. У него нет ног или колес, но при этом он активно крутится на месте и кивает головой, а также моргает своими круглыми глазами и помахивает хвостом. Умный гаджет сделан из приятного вязанного материала, а внутри робота серьезная техническая «начинка».

Например, у него есть камера с функцией распознавания лиц, которая позволяет Никобо идентифицировать своего хозяина. Также тут есть датчик освещения: благодаря ему робот может понять в какой стороне находится солнце и попросить хозяина отнести себя погреться.

Никобо был разработан Panasonic совместно с Мичио Окада, профессором Университета технологий Тоёхаси.

Робот прошёл краудфандинговую кампания на японской платформе Makuake. Идея понравилась пользователям и первый тираж в количестве 320 умных роботов был разобран в первый же день. Стоимость Никобо на платформе составила 39 800 йен ($376), расчетный срок поставки – март 2022 года. Panasonic рассмотрит возможность более массового производства и продажи умного робота в зависимости от уровня интереса и спроса.

Пока робот будет поддерживать ограниченный набор слов на японском, но будут обучаться. Он также может иногда грустить или злиться и потому не отвечать на обращения к нему. Также он может привлекать внимание хозяина.

Никобо работает от аккумуляторов. Масса робота 1,2 – 1, 3 кг. Поддерживает Wi-fi подключение к интернету, может управляться с приложения на смартфоне.

Французский стартап Pollen Robotics в прошлом году представил на выставке CES 2020 робота Ричи (Reachy). Это открытый проект робота-гуманоида (как минимум верхней его части).

В этом году Ричи вернулся, но на этот раз его движениями управляли в виртуальной реальности — рядом сидел человек в VR-шлеме и Reachy полностью повторял его движения.

Пользователь видит то, что видит робот через свои фронтальные камеры. А контроллировать руки робота можно с помощью VR-контроллеров. С помощью этого можно удалённо управлять всевозможными функциями: например, можно обслуживать пользователей в ресторане удалённо — наливать им воду, вино, а также разогревая еду. В то же время подобный «способ ввода» позволяет быстро программировать робота, по сути обучая его вручную.

С прошлого года у Reachy улучшилися камеры и процессор, а также появилась стоимость автоматона, который обойдётся в 17 тысяч долларов США.

Компания Samsung рассказала о своей концепции будущего в рамках выставки CES 2021.

В результате изменившейся реальности домашние устройства начали играть большую роль. В итоге в 2021 году компания представила и новый MicroLED телевизор диагональю 110 дюймов, и интерьерные ТВ из серии LifeStyle TV, а также тренировки Smart Trainer на телевизорах 2021 модельного года.

Но пожалуй самой яркой новинкой стали интерьерные холодильники с четырьмя двирями линейки Bespoke Flex. Это необычный кастомизируемый холодильник, который получил сразу 4 двери и, как следствие, возможность выбор разноцветных панелей на каждую из створок. Можно выбирать разные цвета и даже материалы.

Bespoke Flex также получил новый отсек Beverage Center, включающий диспенсер для воды и автоматически заполняемый кувшин. В последний наливается фильтрованная вода и охлаждает. Тут же располагается двойной ледогенератором, который делает не только стандартные кубики льда, но и кусочки меньших размеров Ice Bites для домашних коктейлей.

Забавно, что например в LG предложили опцию в виде больших шаров льда…

Также компания представила несколько робототехнических продуктов: робот-пылесос JetBot 90 AI, повседневный помощник Samsung Bot Care, способный распознавать поведение и изучать распорядок и привычки пользователя, а также Samsung Bot Handy, который может помогать в уборке, сервировке стола и многом другом. Этот бот умеет распознавать различные предменты и материалы, из которых они сделаны.

Напомним, что завтра должен состояться анонс новых чипов Samsung, а 14 января мы ждём анонс флагманской линейки смартфонов Samsung Galaxy S21.

Мы запускаем камеру на смартфоне, наводим на объект и видим маленькую иконку внизу. Смартфон понимает — что именно мы снимаем. Вы когда-нибудь задумывались, как это работает?

Беспилотные автомобили спокойно объезжают машины и тормозят перед пешеходами, камеры видеонаблюдения на улицах распознают наши лица, а пылесосы отмечают на карте, где лежат тапочки — всё это не чудеса. Это происходит прямо сейчас. И всё благодаря компьютерному зрению.

Поэтому сегодня разберем, как работает компьютерное зрение, чем оно отличается от человеческого и чем может быть полезно нам, людям?

Для того чтобы хорошо ориентироваться в пространстве человеку нужны глаза, чтобы видеть, мозг, чтобы эту информацию обрабатывать, и интеллект, чтобы понимать, что ты видишь. С компьютерным или, даже вернее сказать, машинным зрением, такая же история. Для того, чтобы компьютер понял, что он видит, нужно пройти 3 этапа:

1. Нам нужно как-то получить изображение
2. Нам нужно его обработать
3. И уже только потом проанализировать

Пройдёмся по всем этапам и проверим, как они реализованы. Сегодня мы будем разбираться, как роботы видят этот мир, и поможет нам в этом робот-пылесос Roborock S6 MaxV, который напичкан современными технологиями компьютерного зрения.

Этап 1. Получение изображения

В начале компьютеру надо что-то увидеть. Для этого нужны разного рода датчики. Насколько много датчиков и насколько они должны быть сложные зависит от задачи. Для простых задач типа детектора движения или распознавания объектов в кадре достаточно простой камеры или даже инфракрасного сенсора.

В нашем пылесосе есть целых две камеры, они находятся спереди. А вот, например, для ориентации в трехмерном пространстве понадобятся дополнительные сенсоры. В частности 3D-сенсор. Тут он тоже есть и расположен сверху. Но что это за сенсор?

LiDAR

Вообще с названиями 3D-сенсоров есть небольшая путаница, одно и тоже часто называют разными словами.

Эта штука сверху — называется LDS или лазерный датчик расстояния, по-английски — Laser Distance Sensor. Подобные датчики вы наверняка могли заметить на крышах беспилотных беспилотных автомобилей. Это не мигалка, это лазерный датчик расстояния, такой же как на роботе пылесосе.

Вот только в мире беспилотников такой сенсор принято называть лидаром — LIDAR — Light Detection and Ranging. Да-да, как в новых iPhone и iPad Pro.

А вот в Android-смартфонах вместо лидаров используется термин ToF-камера: ToF — Time-of-flight.

Но, как ни называй, все эти сенсоры работают по одному принципу. Они испускают свет и замеряет сколько ему понадобится времени, чтобы вернуться обратно. То есть прямо как радар, только вместо радиоволн используется свет.

Есть небольшие нюансы в типах таких сенсоров, но смысл технологии от этого не меняется. Поэтому мне, чисто из-за созвучия с радаром, больше всего нравится название LiDAR, так и будем называть этот сенсор.

Кстати, лидары использует не только в задачах навигации. Благодаря лидарам сейчас происходит настоящая революция в археологии. Археологи сканируют территорию с самолета при помощи лидара, после чего очищают данные ландшафта от деревьев. И это позволяет находить древние города, скрытые от глаз человека!

Также помимо статических лидаров, направленных в одну сторону, бывают вращающиеся лидары, которые позволяют сканировать пространство вокруг себя на 360 градусов. Такие лидары используется в беспилотных автомобилях, ну и в этом роботе-пылесосе.

Еще 8 лет назад такие сенсоры стоили каких-то невероятных денег, под 100 тысяч долларов. А теперь у вас по дому может спокойно ездить маленький беспилотник.

Лидар в пылесосе

Окей, тут лидар используется для построения карты помещения и это не новая история. Такую технологию мы видели еще года 3-4 назад.

Благодаря лидару и построенной карте, пылесос ездит не рандомно как скринсейвер в Windows, стукаясь об углы, а аккуратно проезжая всю площадь (модели без лидаров обычно катаются странно).

Но внутри пылесоса стоит, на секундочку, восьмиядерный Qualcomm Snapdragon 625 (Qualcomm APQ8053), поэтому у него хватает мозгов не только построить карту, но и ориентироваться по ней.

Более того пылесос может хранить в памяти до четырёх карт и распознаёт этажи. Это существенно ускоряет уборку. Потому при переносе с этажа на этаж пылесос это может поять и не тратит время, чтобы построить карту заново.

Также каждую из 4 карт можно поделить на 10 специальных зон. Для которых можно настроить свои параметры уборки: мощность всасывания (до 2500 Па), количество проходов и прочее. А куда-то можно вообще запретить ездить. Можно даже выбирать сухую и влажную уборку для разных зон. Правда для этого не нужно подключать/отключать отдельный резервуар с водой. И всё это стало возможно благодаря лидару.

Тем не менее у технологии есть некоторые недостатки — очень разреженные данные. Пространство сканируется линиями. В больших автомобильных радарах разрешение — от 64 до 128 линий. Плюс ко всему у лидар есть мертвая зона. Если лидар стоит на крыше — то он не видит, что творится в достаточно большом радиусе вокруг него.

Также в роботе-пылесосе лидар тут сканирует пространство всего одним лучом. Поэтому, всё что он видит — это тонкая линия на высоте где-то 9-10 сантиметров от пола. Это позволяет определять где стены и мебель, но он не видит того, что валяется на полу.

Две камеры

Поэтому, чтобы исправить этот недочет лидаров. как в автомобили, так и в пылесосы ставят дополнительные камеры. Тут камеры сразу две, и они обеспечивают стереоскопическое зрение. Да-да, у пылесоса всё как у людей — два глаза.

Две камеры, во-первых, позволяют убрать мертвую зону впереди пылесоса. А во вторых позволяют достаточно точно определять расстояние до валяющихся на полу предметов.

Это позволяет пылесосу обнаруживать предметы размером не менее 5 см в ширину и 3 см в высоту и объезжать их.

Этап 2. Обработка

Итак, мы получили достаточно данных с различных сенсоров. Поэтому переходим ко второму этапу компьютерного зрения — обработке.

Данные с лидара мы получаем в виде трехмерного облака точек, которые фактически не нуждаются в дополнительной обработке.

Как получить стерео с двух камер тоже понятно — высчитывается разница между изображениями снятыми чуть под разным углом и так строится карта глубины. Это несложно.

Но вот совместить данные с разных сенсоров — это нетривиальная задача.

Например, пылесос на полу обнаружил какой-то предмет. Дальше ему нужно понять где именно он находится на карте построенной при помощи лидара. А также нужно предположить какие у него габариты по проекции с одной стороны. То есть нам нужно поместить предмет в некий объёмный куб правильного размера.

Эту задачу можно решить разными способами. Один из способов называется “усеченная пирамида”. Сначала на камере обнаруживаются предметы. Потом эти предметы помещаются в конус, а объем этого конуса вычисляется нейросетью.

Поэтому даже, казалось бы, такая тривиальная задача требует серьёзных вычислений и решается при помощи нейросетей.

А раз мы заговорили про нейросети, значит мы уже немного зашли на 3-й этап компьютерного зрения — анализ.

Этап 3. Анализ

За распознавание, сегментацию и классификацию объектов на изображении в современном мире в основном отвечают нейросети. Мы даже делали подробный ролик о том как это работает, посмотрите.

Если кратко, нейросеть — это такое большое количество уравнений, связанных между собой. Загружая в нейросеть любые данные — ты обязательно получишь какий-то ответ.
Но, например, если постоянно загружать в нейросеть фотографии кошечек, и указать ей, что ответ должен быть — кошка. В какой-то момент, нейросеть перестает ошибаться на обучающей выборке. И тогда ей начинают показывать новые незнакомые изоражения и если на них она тоже безошибочно определяет кошек — нейросеть обучена.

Дальше нейросеть оптимизируется для того, чтобы она стала меньше, быстро работала и не жрала много ресурсов. После этого она готова к использованию.

Что-то похожее происходит с нейронными связями в человеческом мозге. Когда мы чему-то учимся или запоминаем, мы повторяем одно и то же действие несколько раз. Нейронные связи в мозге постепенно укрепляются и потом нам это легко даётся!

Например, в данном пылесосе за работу нейросети отвечает встроенный NPU-модуль. Всё-таки внутри Snapdragon, пылесос может себе такое позволить.

Нейронка предобучена определять различные предметы домашнего обихода: игрушки, тапочки, носки, всякие удлинители, зарядки и даже неожиданности от домашних животных.

Распознавание предметов происходит при помощи гугловской библиотеке Tensorflow. Алгоритм самообучается и умнеет от уборки к уборке.

Практика

В Roborock технология распознавания называется Reactive AI. Мы протестировали насколько она хорошо работает на практике.

Кайфовая штука, что все найденные предметы пылесос отмечает не карте. Поэтому теперь, я не обещаю, но такое возможно, вы всё-таки обнаружите логово пропавших носков.

Проследить за тем, что видит пылесос всегда можно через фирменное приложение или Mi Home от Xiaomi. Можно даже просто кататься по дому управляя пылесосом слать на него голосовые сообщения. Управлять пылесосом можно также через Google Ассистента или Алису. Всё на русском языке.

С недавних пор бренд начал официально продаётся в России, поэтому устройства полностью локализованные.

Внутри кстати стоит батарейка на 5200 мАч, которая способна выдержать до 3 часов уборки.

Итоги

Ребят, ну вы сами всё видели. Правда, стоит обратить внимание, что пока корректное распознавание предметов работает только если запускать пылесос через приложение Roborock. И это нюанс, поскольку оно пока недоступно в Play Market Россия. Но в течение нескольких месяцев оно появится, а пока его можно скачать и установить в виде apk-файла.

Hyundai Motors по информации Korea Economic Daily приобретает компанию Boston Dynamics за 1 триллион корейских вон или почти 1 миллиард долларов (917 миллионов). Официально это должны объвить сегодня на встрече совета директоров. Компании Softbank, которой Boston Dynamics принадлежит сейчас, и Hyundai обсуждают продажу уже с раннего ноября.

Таким образом, компания Boston Dynamics, которая буквально вышла из Массачусестского Технологического Института, проделала уже крайне интересный путь. В 2013 году её приобрела Google, в 2017 года уже Alphabet продал её Softbank, а далее в 2020 или 2021 году она окажется под крылом Hyundai Motor Company.

Последняя сильно интересуется и инвестирует в робототехнику в последние пару лет. Собственно, к 2025 году она планирует вложить почти 1,5 миллиарда долларов США в эту индустрию.

В то же время Boston Dynamics — известное имя на этом рынке с двумя рабочими «устройствами» — роботами Spot и Atlas.

Компания Disney Research занимается созданием роботов аниматронов. Gizmodo сообщил, что компания добилась серьёзных успехов в робототехнике — они создали гуманоида, который реалистично имитирует человеческий взгляд и движения головы. Автоматон без кожи, но с настоящими глазами выглядит странно и напоминает кибернетического зомби.

Интересно, что на груди у автоматона специальный фотосенсор, который немного напоминает Kinect.

Благодаря морганию, движению глаз робот напоминает живое существо, а не камеру с искусственным интеллектом.

https://youtu.be/SvjDrFqwNCs

Скорее всего данная технология разрабатывается для тематических парков и аттракционов таких как Disneyland и других. Скорее всего его прокачают, натянув кожу и он не будет пугать посетителей парка, а наоброт будет служить им: общаться и информировать посетителей, а также заботиться об одиноких.

Американская компания Boston Dynamics выпустила своего робота Spot в свободную продажу для американских компаний. Цена на виральный «гаджет» составит 74500 долларов США. До этого компания раздала 150 четвероногих роботов в лизинг.

Интересно, что модель робота Spot Explorer лишь начинается с отметки в 74 500 долларов и её можно платно «допилить», чтобы увеличить функциональность. Данная модель отлично подходит для исследования территории и патрулирования. Модель поступила в продажу в том числе благодаря карантину — дело в том, что Boston Dynamics сделали за это время необходимые апдейты софтверной части.

В рамках продажи также будет действовать некий тест-драйв в штаб-квартире компании в штате Массачусетс.

Сделать заказ можно на сайте Boston Dynamics. На данный момент действует ограничение — не более двух роботов в одни руки. Большие партии должны быть отдельно оговорены.

Из нового Droider Show можно узнать про операционную систему Kirin OS и запрет в США вышеупомянутой компании из КНР, а также посмотреть на изображения с 3 флагманскими смартфонами от Samsung.

Кроме того, Борис Веденский разыгрывает модем и годовой запас интернета от Yota.