Сейчас во все мобильные процессоры впихивают нейронные модули. Neural Engine в процессорах Apple, DaVinci NPU у HUAWEI, AI Engine в Snapdragon’ах. Но что полезного они делают реально непонятно. Обычно всё сводится к всевозможным безумным бьютификациям и улучшайзерам.

Но нейронки сейчас могут творить абсолютно невероятную дичь! И могут нехило прокачать возможности наших смартфонов.

Сегодня мы покажем для чего в будущем будет использоваться нейронный модуль внутри вашего смартфона и какие крутые фишки можно делать уже сейчас!

Obstructional Removal

Начнем с камеры! Сейчас в приложении камеры на любом телефоне, есть масса бесполезных и “интеллектуальных” фич, типа определение сцены. Вот собачка, а вот цветочек говорит нам искусственный интеллект. И что? Мы это и так знаем!

Но вот чего не хватает, так это вот этой штуки: нейросеть удаляет с фотографий мешающие отражения и различные преграды, типа сетчатых заборов. Незаменимая вещь для любителей пофотографировать стройки и зоопарки.

Работает это очень интересно. Рассмотрим пример с отражением.

Во-первых, для того чтобы всё получилось нужно несколько кадров. Зачем? Чтобы вычислить оптический поток пикселей, т.е. движение в кадре. Дальше нейронка понимает, ага вот эти пиксели движутся что-то совсем не туда. Значит это отражение.

А дальше начинается настоящая магия. На основе данных о движении, нейронка восстанавливает два изображения: фон и отражение. Дальше вычитает отражение из фона и готово!

Думаете, такие фичи в смартфонах появятся еще не скоро. Обрадую вас, например в HUAWEI P40 Pro уже показали подобную функцию. Назвали это всё очень по-азиатски — Golden Snap. Она умеет удалять отражения и даже лишних людей из кадра! По-моему неплохо, ждём теперь реализацию от Гугла а потом и всё подтянутся!

Real Time Person Removal

Кстати, уже есть нейронка которая убирает людей из видео! В реалтайме! Вот тебе и кибер версия социального дистанцирования.

Алгоритм, таскающий картинки

Но мы то с вами что в кадре может мешать не только забор или человек. В кадре может быть лишним вообще всё! В этом случае поможет вот эта волшебная нейросеть.

Как это чудо работает? В нейронную загружается две вещи, изображение и разбивка на объекты в виде масок. То есть немного руками всё равно придётся поработать, но зато потом начинается настоящая услада.

Сначала нейронка определяет порядок объектов. Потом додумавает форму перегороженных объектов. А щзатем достраивает их!

Дальше остается только наслаждаться: можно передвигать объекты по кадру, менять их порядок, удалить всё что хочешь, и даже добавлять на снимок что-то новое.

Ну что тут скажешь, ждем когда алгоритм научат самостоятельно определять границы объектов и можно заворачивать в мобильное приложение. Революция фотожаб не за горами.

Кекфейс

И напоследок, из того что можно пощупать прямо сейчас! Есть масса нейросетей, оживляющих фотки. Но чтобы поиграться с ними нужно копаться на GitHub или в лучшем случае веб-интерфейсе, короче неудобно.

Но вот недавно появился бот в Телеграм @EORA_kekface_bot, который из любой фотки делает прикольные анимированные гифки. Зачем нужны анимоджи? Если можно свой набор стикеров на все случаи жизни.

Как думаете кто из крупных компаний первый догадается что-то такое сделать? Я ставлю на Samsung или HUAWEI, не всё же им за Apple повторять.

Итоги

Естественно, то о чём мы рассказали — это капля в море. В плене нейронок, что-то интересное происходит каждый день.

Например недавно Google показал чат-бот, который умеет осознанно общаться на любые темы! И его не отличить от человека.

Ребята сделали дипфейк Илона Маска в Zoom’е. То есть можно им стать, общаясь с друзьями в видеочате.

А еще, добрые люди омолодили, Мону Лизу и, “наше всё” Александра Сергеевича Пушкина.

Кстати мы, много подсмотрели на канале Neural Shit в Telegram.

В свежем выпуске Борис Веденский поведает о будущих смартфонах с круглым вырезом под фронтальную камеру, а также о флагманском процессоре Qualcomm и искусственном интеллекте Nvidia.

Кстати, за обложку к Droider Show стоит благодарить Бенджамина Гескина, дизайнера и инсайдера.

В Droider Show можно узнать все слухи о смартфонах, над которыми тайно работает Google. Кроме того, можно увидеть прототип складного «планшетофона», официально продемонстрированного Samsung.

На десерт Борис Веденский расскажет об искусственном ведущем новостей, которого не отличить от обычного человека.

О существовании «нейронных сетей», «искусственного интеллекта» и «машинного обучения» слышали все, кто более-менее интересуется современными технологиями. Однако не каждый знает о реальном применении этих словосочетаний. Борис Веденский решил разобраться, что к чему.

Ещё больше информации про AI, ML и IoT можно будет узнать на RAIF 2018, который пройдет 23 октября в Москве.

Компания решила выпустить Зеленого робота с пирогом в качестве официального десерта именно сегодня.

Напомним, что Android 9.0 Pie обладает нативной поддержкой «моноброви», переработанным экраном многозадачности, интуитивной функцией Do Not Disturb и множеством других нововведений.

Первыми смартфонами, которые получат юбилейную ОС по воздуху, стали линейка Pixel и Essential Phone. Кстати, файлы заводской прошивки для «пиксельфонов» уже доступны на сайте Google.

Далее до конца осени обновление будет доступно обладателям моделей из линейки Android One, Xperia XZ2 от Sony, Mi Mix 2S от Xiaomi, Nokia 7 Plus от HMD Global, R15 Pro от Oppo, X21 от Vivo и OnePlus 6.

Источник: Android

Неофициальные источники поделились информацией о том, что гарнитура будет обладать более широким углом обзора и новыми сенсорами Kinect. Кроме того, сможет работать с дополненной и виртуальной реальностями.

Согласно ранним слухам, HoloLens 2 (она же Sydney) получит чип HPU, отвечающий за голограммы, поддержку искусственного интеллекта и машинного обучения, процессор ARM, модем LTE, специальную версию Windows 10 под названием Oasis.

Анонс AR-девайса Microsoft ожидается в 2018 году, а старт продаж — в 2019 году. Стоимость будет значительно ниже, чем у прошлого поколения.

Источник: TheVerge

Сегодня южнокорейская компания скромно представила очередную вариацию V30, анонсированного в 2017 году. Главными особенностями новинки стали: технология DTS:X для лучшего звука, защищенность по военному стандарту MIL-STD 810G и фотовозможности, усиленные искусственным интеллектом.

V35 ThinQ получил 6-дюймовый OLED-экран с разрешением 2880 х 1440 пикселей, защитное Gorilla Glass 5 от Corning, процессор Snapdragon 845 от Qualcomm, поддержку microSD, аккумулятор 3 300 мАч, быструю и беспроводную зарядки, основную 16 Мп + 16 Мп и фронтальную 8 Мп камеры, модуль NFC, порт USB Type-C, дактилоскопический и лицевой сканеры, защиту от воды на уровне IP68, Android Oreo под прошивкой UX 6.0.

Старт продаж намечен на июнь. Будут доступны 2 версии смартфона LG:

• 6 ГБ оперативной и 64 ГБ встроенной памяти;
• 6 ГБ оперативной и 128 ГБ встроенной памяти.

Источник: LG

Борис Веденский рассказывает и показывает особенности свежеанонсированной Android 9.0 P, а также сравнивает с ОС от Apple.

Напомним, что в марте на канале Droider уже выходил видеообзор, посвященный новинке от Google.

Как и было заявлено, сегодня стартовала I/O в Калифорнии. Посмотреть прямой эфир с Борисом Веденским можно было тут. А мы расскажем о самых горячих анонсах своими словами.

Android P

Напомним, что в 2018 году операционная система отмечает 10 лет, поэтому команда Google постаралась для того, чтобы Android P получился запоминающимся. Кроме того, о чем было рассказано на канале Droider, от новейшего Зеленого робота стоит ожидать:

• функция Adaptive Brightness подстраивает яркость экрана под программы и окружение;
• функция Do Not Disturb помогает отойти ко сну, приглушая цвета дисплея до монохромного;
• функция Slices делает поиск более полезным, предоставляя дополнительные сведения. Если написать «Uber», то продемонстрируется не только история компании, но и расположение ближайших такси;
• меню Dashboard отображает время пользования гаджетом и приложениями. Доступ к некоторым ресурсам можно ограничить. Это создано для того, чтобы бороться с зависимостью от смартфонов и социальных сетей;
• карточки приложений перемещаются горизонтально, а не вертикально;
• управление с помощью жестов на навигационной панели внизу экрана;
• уведомления отображают не только последнее, то и несколько предшествующий сообщений для понимания контекста;
• оптимизация расхода зарядки в зависимости от привычек владельца.

Попробовать Android 9.0 уже могут обладатели Pixel, Sony, Xiaomi, Nokia, OnePlus, Oppo и других мобильных телефонов. Подробнее об участии в бета-тестировании — здесь. Официальный релиз произойдет в июле-сентябре.

Android Things

Новая ОС призвана помочь разработчикам создавать продукты для «интернета вещей». Google проследит за частым и продолжительным (до 3 лет) выходом обновлений, их установкой на устройства без участия пользователя.

Android Things 1.0 совместима с процессорами от Qualcomm, MediaTek и Raspberry. Заинтересованность в проекте уже подтвердили LG, Lenovo и JBL. Аппараты дебютируют уже в 2018 году.

Wear OS

«Операционка» для смарт-часов получила более тесную взаимосвязь с виртуальным Assistant. Например, есть отображение на дисплее подсказок по запросу и последующее поддержание диалога через динамик или Bluetooth-наушники.

Assistant

Сундар Пичаи, глава корпорации, поведал о технологии Duplex, в рамках которой голосовой помощник сможет звонить от имени пользователя и естественно беседовать с оппонентом. Например, чтобы записаться в парикмахерскую.

https://youtu.be/2D-8NsZuhHY

Ещё Assistant понимает несколько запросов сразу и научился командам Actions on Google. То есть может управлять гаджетами из «умного» дома. Всего дружественных устройств насчитывается около 5 000.

Кстати, отныне фразу «Окей, Google» нужно произносить только в начале беседы. А самое приятное — это то, что ассистент станет доступен в России до конца года.

Gmail

Электронной почте досталась функция Smart Compose, которая подразумевает «умный» набор текста и ответы: приветствия, заключительные реплики и характерные фразы. Обещано соблюдение контекста и правописания. Отметим, что подсказки можно игнорировать.

Всё это стало возможным благодаря машинному обучению. Рядовые пользователи получат апдейт Gmail до конца месяца.

Photos

Пожалуй, наиболее интересным апдейтом сервиса стало раскрашивание черно-белых фотографий с помощью ИИ. Приложение автоматически проанализирует кадр и предложит несколько вариантов расцветки.

Кроме того, в Google Photos расширена система подсказок. Теперь можно быстро получить совет по настройке экспозиции или архивированию.

Все нововведения появятся к сентябрю.

News

Агрегатор новостей создан на основе имеющегося сервиса. Главной особенностью новинки стало наличие искусственного интеллекта, который анализирует интересы пользователя и выбирает по 5 подходящих заметок в формате Newscasts. По сути, это отображение материала в виде карточек с текстом, снимком или видеороликом.

Кроме новостных материалов, читатель увидит в Google News «свежатинку» из каналов на YouTube и Google+, если имеет подписки. Релиз на Android и iOS состоится в мае.

Lens

Приложение покажет больше сведений о вещах и явлениях в окружающем мире. К примеру, узнает марку лампы, поможет найти и скопировать сведения об этом предмете интерьера.

Обновление Google Lens выйдет к концу месяца.

Maps

Картографический ресурс приобщился к дополненной реальности благодаря Visual Positioning System. Новая система объединяет местность, расположение, камеру и изображения Street View. В результате человек видит AR-подсказки в режиме реального времени.

Глобальный доступ к усовершенствованиям Google Maps откроется летом.

На этом мы закончим повествование. Будем ждать репортажей от Валерия Истишева с места событий.

Как и ожидалось, сегодня в Сиэтле открыла двери ежегодная конференция. В первый день спикеры сосредоточились на ближайших планах, связанных с ПО и коллаборациями. И не забыли похвастаться достижениями. Так, Windows 10 установлена уже на 700 миллионов устройств, а пакетом Office 365 пользуются 135 миллионов человек.

Рассмотрим ключевые моменты презентации:

1. В осеннем обновлении операционной системы появятся Sets. Грубо говоря, это вкладки, объединяющие несколько похожих программ Microsoft в одном окне.

2. Функция Timeline, позволяющая проследить последовательность взаимодействия с файлами и утилитами, получит поддержку Android и iOS.

3. Приложение Launcher для Android обновится, чтобы стать удобным для корпоративных клиентов. Например, можно будет удаленно управлять рабочими файлами.

4. Готово к закрытому тестированию приложение Your Phone, предназначенное для синхронизации контента и общения между компьютером и смартфоном.

5. Анонсировано приложение Layout, которое позволит пользователям создавать и визуализировать реальные пространства при помощи очков, гарнитур и шлемов Mixed Reality.

6. Анонсирован профессиональный мессенджер Remote Assist для HoloLens. Теперь несколько человек смогут одновременно трудиться над смешанной реальностью через видеозвонки.

7. Возродится Project Kinect. Сенсоры будут встраиваться в гаджеты с искусственным интеллектом и «облачными» сервисами. Производители получат доступ к готовой системе сканирования помещений и распознавания телодвижений.

8. Основана инициатива AI for Accessibility, в которую за 5 лет будет инвестировано 25 миллионов долларов. Суть состоит во внедрении ИИ в технологии для людей с ограниченными возможностями.

Кроме того, было объявлено о тесном партнерстве Microsoft с:

• Amazon (произойдет объединение виртуальных ассистентов. То есть через смарт-колонки Echo можно будет позвать Cortana, а через технику на Windows спросить Alexa);
• Qualcomm (будет развита технология Azure IoT Edge, позволяющая сторонним компаниям производить девайсы с более совершенным компьютерным зрением);
• DJI (будет сделан SDK, облегчающий написание приложений для дронов на компьютерах с Windows).

Посмотреть 3,5-часовую трансляцию Build Developer Conference 2018 на английском языке можно здесь.