Один из лучших способов понять потенциал помощника Google. это посмотреть, как быстро помощник, активируемый голосом, теперь может открыть страницу Бейонсе в Instagram.

«Привет, Google». говорит Мегги Холленджер, менеджер программ Google, используя слова, которые запускают ПО для компьютера на ее смартфоне. Тогда это к гонкам, поскольку она стреляет из 12 команд в быстрой стрельбе подряд.
«Откройте New York Times… Откройте YouTube… Откройте Netflix… Откройте календарь… Установите таймер на пять минут… Какая сегодня погода?… Как насчет завтра?…. Покажите мне Джон Легенд в Twitter… Покажите мне Бейонсе в Instagram… Включите» фонарик. Выключи его. Приведи Убер в мой отель. "
Когда она делает кто запрос, в телефоне появляется новая информация. Вся последовательность занимает 41 секунду. Ей вы не будете повторять слова бодрствования между командами. Когда она делает запрос, чтобы узнать, чем занимается Бейонсе, Ассистент не только лишь запускает приложение Instagram, но и дополнительно автоматически переносит нас прямо на страницу поп-звезды, чтобы я мог видеть последние фотографии, которыми она поделилась с 127 миллионами подписчиков. Аналогичным образом, когда Холленгер просит Uber, ПО для компьютера уже знает, где она находится.
Спустя три года когда директор Сундар Пичай представил миру своего помощника, основанного на искусственном интеллекте, Google анонсирует помощника следующего поколения на своей ежегодной конференции разработчиков устройств ввода-вывода во вторник. Новая версия может доставлять ответы до 10 раз быстрее, чем лет эдак 30. Значительное повышение скорости поможет изменить представление что, что голосовые помощники слишком медлительны и неточны. Это большая проблема, если такие компании, как Google и Amazon, хотят продвинуть этих цифровых помощников в мейнстрим.
Успех Google Assistant. это ключ к крупнейшей в области поисковой службе, которая предоставляет ответы на более триллион запросов за год. Большинство из нас уходят от поиска информации, печатая на наших компьютерах, и вместо этого разговаривают со всеми нашими смартфонами и умными динамиками. Сейчас Google участвует в гонках с Amazon и его голосовым помощником Alexa, а Apple с Siri, чтобы дать нам мгновенное удовлетворение, которое все мы чаще ожидаем от наших постоянно подключенных гаджетов.
По этой причине Google пригласил меня в свою глобальную штаб-квартиру в Маунтин-Вью, штат Калифорния, в течение нескольких дней до ввода-вывода, чтобы увидеть наиболее масштабное обновление своего помощника «сделай или сломай».
Это увлекательно. и немного страшно.
ПО для компьютера следующего поколения является хедлайнером в новом наборе функций, которые демонстрируют первоклассные возможности искусственного интеллекта и инженерии Google. Помощник не только лишь быстрее, но и одновременно умнее, поскольку Google рассчитывает на прорывы, которые он сделал в исследованиях нейронных сетей и распознавании речи в течении последних пять лет, чтобы выделиться среди своих конкурентов.
Все это становится более личным. Возможно добавить членов семьи в список близких контактов. Например, когда вас интересует у помощника дорогу к дому вашей мамы, он знает, кто ваша мама. а кроме того где она живет. Дополнительная функция, обновление прошлогоднего жутко звучащего человека дуплексного голосового консьержа, позволяет помощнику автоматически заполнять формы в Интернете если вы сделаете устный запрос на такие действия, как бронирование автомобиля на прокат или заказ билетов в кино.
«Мы потенциально можем увидеть мир, где реальные разговаривать с системой скорее, чем звонить по телефону». говорит Мануэль Бронштейн, вице-президент по продукту Google Assistant. «И если это произойдет. когда это произойдет. не представит труда увидеть чем просто людей, вовлеченных».
Мануэль Бронштейн, вице-президент по продукту Assistant, хочет сделать голосовой поиск быстрее, чем прослушивание на телефон.
Увы такое подчеркивает огромный объем данных, которые Google уже хранит миллиарды людей в мировой практике. Это также подчеркивает, сколько личной информации нам нужно будет собрать от нас, чтобы реализовать истинное видение своего помощника.
Ассистент теперь работает на 1 миллиарде устройств, по большей части поскольку он предустановлен на телефонах работающие под Android, самой популярной в области мобильной ОС. Некоторые другие сервисы Google. Gmail, YouTube, Карты, браузер Chrome. также обслуживают более 1 миллиарда человек за месяц. Эти сервисы являются полезными и инновационными, однако их жизненная сила. это данные, которые вы ежедневно предоставляете компании через историю поиска, e-mail, привычки просмотра видео и маршруты проезда.
Это, все основано на том, что Ассистент хотя работает по счету. Google не позволил мне попробовать это себе, и мне и моим коллегам не разрешили записать видео демо. Вместо этого Google предоставил нам рекламный ролик перед съемкой. Холленгер также читает из сценария, следуя шпаргалке письменных команд. Поэтому неясно, насколько ловким имеется ПО для выполнения при извилистых запросов обычных людей.
Демо даже было несколько спотыканий. Хотя переходы от приложения к приложению происходят быстро, Холленгер должен был повторять запросы один по другому пару раз, поскольку программа не обрабатывала ее запросы с первой попытки. В других демонстрациях, однако, Холленгер использовал Ассистента, чтобы диктовать тексты и электронные письма точно. Система также может определить разницу по большому счету, что она хочет записать в электронном письме, и тем, что является общей командой. Например, когда она говорит «Отправить это», ПО отправляет электронное письмо вместо того, чтобы вводить «Отправить это» в теле письма.
Тем чем двух, помощник, несомненно, будет предметом обсуждения. и, вам, споров.
«Есть положительные и отрицательные стороны и компромиссы». говорит Бетси Купер, директор Aspen Tech Policy Hub. «С помощью Google Assistant, поскольку он всегда выслушивает [пробуждение слова], всегда бывают вероятность, что они бывают вариации злоупотребить этой привилегией».
«Ваш индивидуальный Google»
Новый помощник является кульминацией пятилетней работы, говорит Франсуаза Бофай, главный ученый в Google. Это дольше, чем был ассистент. За эти пять лет исследователи Google достигли значительных успехов в области распознавания звука, речи и языка искусственного интеллекта.
«То, что мы сделали, это заново изобрели весь стек, используя одну нейронную сеть, которая делает все это». говорит Бофэйс.
Это серьезный технологический прорыв, сокративший необходимое пространство с 100 гигабайт до менее половины гигабайта. Тем не менее, расширенный цифровой помощник требует огромных вычислительных мощностей для телефона, поэтому он будет доступен только на устройствах высокого класса. Google представит продукт на следующей премиум-версии своего флагманского телефона Pixel, который ожидается осенью.
За несколько дней до того, как он представил помощника в мае 2016 года, я сел с Пичаем в его офисе со стеклянными стенами, в уединенном месте в обширном Googleplex, чтобы услышать его слух. Поисковый гигант, уже на годы опоздавший на игру с цифровым голосовым помощником, наконец готовился к выходу на ринг с Сири и Алексой.
С самого начала Пикхай был непреклонен, это было намного больше, чем это. Для Google помощник. это прорыв легендарной белой домашней страницы компании и ее технические новшества в каждую принадлежащую вам технологию. ваш телефон, машину, стиральную машину.
«Google спрашивает пользователей:« Привет. Чем я могу помочь? ». сказал он в то время. «Думайте об этом как о создании своего собственного индивидуального Google».
Теперь, когда Pichai вступает в новый этап для Ассистента. включая функцию, которая знает конкретные детали о вашей семье. становится яснее, чем когда-либо, когда он сказал «ваш собственный Google», он имел в виду это.
Google не сделает Pichai доступным для интервью для этой истории.
Изменение времени
Конечно, мир сильно отличается от того, что было три года назад.
Начнем с того, что конкуренция с Amazon теперь является полноценной конкуренцией. По данным исследовательской компании eMarketer, когда речь заходит об интеллектуальных колонках, устройства Amazon Echo на базе Alexa владеют почти 67% рынка. Устройства Google Home, управляемые Помощником, составляют почти 30%.
Затем идут публичные дебаты о конфиденциальности и безопасности. Законодатели и потребители стали более внимательно относиться к политике крупных технологических компаний после скандала Facebook с Cambridge Analytica, который вывел проблемы сбора данных на первый план на протяжении 2018 года. Только в прошлом месяце Google подвергся критике за свою базу данных Sensorvault, которая помогает измерять эффективность прибыльной деятельности. целевые объявления показываются вам на основе личной информации, которую Google знает о вас. Оказывается, что полицейские управления по всей стране использовали Sensorvault для получения данных о местонахождении, пытаясь взломать уголовные расследования. В ответ комитет Палаты представителей США направил письмо Пичаю с просьбой дать ответы о базе данных. Законодатели обратились с просьбой о проведении личного брифинга до 10 мая.
Когда я спросил во время брифинга по продукту на прошлой неделе, что бы сделал Google, если бы правоохранительные органы запросили данные о семейных отношениях и другую информацию, собранную Assistant, представитель сказал, что Google не имеет ничего, чтобы поделиться на этом фронте.
Франсуаза Бофэйс (Francoise Beaufays), ведущий ученый из Google, говорит, что исследования, проводимые ассистентом следующего поколения, ведутся пять лет назад
Бронштейн, руководитель продукта Assistant, говорит, что Google постоянно ведет «очень хорошие споры» о хранении данных в рекламных целях. Он говорит, что философия такова: «Не храните информацию ради ее хранения. Храните ее, потому что вы думаете, что она может приносить пользу».
Он добавляет: «Мы хотим быть очень прозрачными со всеми этими вещами, чтобы вы знали, когда это будет использоваться для рекламы или никогда не будет использоваться для рекламы».
Но эксперты по конфиденциальности говорят, что Google должен лучше донести свою политику до потребителей.
«Я не знаю, насколько хорошо люди на самом деле понимают». сказала Джен Кинг, директор по защите конфиденциальности потребителей в Стэнфордском центре Интернета и общества. Она добавляет, что компания должна дать людям больше возможностей отказаться от сбора данных, вместо того, чтобы объединять все вместе.
У Google уже были проблемы с прозрачностью. В прошлом году Associated Press сообщило, что Google отслеживал местоположение людей даже после того, как они отключили совместное использование местоположения на своих смартфонах. Данные были сохранены с помощью функции Google Maps, называемой «История местоположений», которая также используется в базе данных Sensorvault. Критики, такие как ACLU, заявили, что Google неискренне раскрывает информацию. Позже компания пересмотрела справочную страницу на своем веб-сайте, чтобы уточнить, как работают настройки. На прошлой неделе Google анонсировал функцию, которая позволяет людям автоматически удалять местоположение, историю веб-приложений и приложений.
Бронштейн также говорит, что «небольшая часть» голосовых запросов от помощника передается команде Google, которая работает над улучшением системы искусственного интеллекта, если пользователи допускают это в настройках. Он не предоставил никаких подробностей о том, сколько «маленьких». Но он сказал, что в этих случаях личная информация удаляется из голосового аудио.
Эволюция дуплекса
Помимо повышения скорости работы помощника, Google также обновляет проект, вызвавший наибольшее количество споров на прошлогодней конференции: дуплекс.
Эта функция использует невероятно человеческое программное обеспечение ИИ, чтобы звонить компаниям, чтобы забронировать бронирование и встречи от имени пользователей Google Assistant. Его ИИ имитирует человеческую речь, используя такие словесные тики, как «э» и «гм». Он говорит с ритмом реального человека, делает паузу перед ответом и удлиняет определенные слова, как будто это время для размышлений.
Прошлогодняя демоверсия сразу подняла флаги для специалистов по этике ИИ, наблюдателей и потребителей, которые беспокоятся о способности робота обманывать людей. Позже Google сказал, что это будет способствовать раскрытию информации, чтобы люди знали, что они разговаривают с автоматизированным программным обеспечением.
Эта новая итерация намного сложнее.
Обновление до Google Duplex похоже на автозаполнение на стероидах.
Google во вторник обновляет Duplex, чтобы упростить бронирование для большего количества типов вещей, таких как прокат автомобилей и билеты в кино. Но на этот раз нет роботов, звучащих по-человечески. Это в основном автоматизирует процесс заполнения форм, которые вы найдете в мобильном Интернете. думайте об этом, как автозаполнение на стероидах.
Вот как это работает: вы говорите что-то вроде: «Привет, Google, дай мне прокатный автомобиль от National для моей следующей поездки». Затем помощник открывает веб-сайт National на вашем телефоне и начинает заполнять поля в режиме реального времени.
Хотя эта версия, вероятно, вызовет меньшую отдачу, широко распространенная отдача в прошлом году стала ключевым моментом для Google, сказал мне ранее в этом году Скотт Хаффман, глава отдела разработки Google Assistant. «Сила реакции удивила меня». сказал он. «Это дало нам понять, насколько важны эти социальные вопросы».
Для Ассистента есть и другие вещи. Google во вторник также представила новый «режим вождения» для телефонов Android. Когда вы активируете его, пользовательский интерфейс помещает несколько пунктов вперед и в центр, которые вы, вероятно, будете использовать во время вождения. К ним относятся навигационные указания для карт Google и Waze, элементы управления музыкой и напоминания о пропущенных вызовах. Когда у вас есть навигационные указания вверху, элементы управления музыкой или телефонными вызовами находятся в нижней части экрана, поэтому вам не нужно возиться с телефоном, чтобы найти их.
‘Правила дорожного движения’
В целом, новые объявления Google Assistant могут оказать серьезное влияние на то, как мы используем технологии.
Упрощение и ускорение голосовых команд может изменить наше взаимодействие с устройствами, точно так же, как смартфоны во главе с iPhone от Apple стали популярными более десяти лет назад и вызвали эпоху сенсорных экранов.
Возможно, мы можем оглянуться на это как на первый шаг к миру, в котором люди постоянно разговаривают с неодушевленными предметами. (Это напоминает мне о тех видеофильмах о том, как малыши держат в руках журналы, пытаясь размахивать ими, словно они айпады. В будущем дети могут разговаривать со свечой или стулом и удивляться, когда они не разговаривают.)
Режим Google Assistant Driving выделяет навигацию и музыку.
Помощник следующего поколения может также заложить основу для новых привычек в отношении голосовых запросов. В прошлом году Google объявил о «продолжении разговора» для голосовых команд, в результате чего микрофон остается открытым в течение восьми секунд после запроса, чтобы вы могли задать дополнительный вопрос. Помощник следующего поколения опирается на эту концепцию и может в конечном итоге проложить путь к избавлению от пробужденных слов. (Хаффман сказал мне ранее в этом году, что он думает, что такие фразы, как «Привет, Google», «действительно странные» и неестественные.)
Этот открытый микрофон, скорее всего, вызовет проблемы с конфиденциальностью. Бронштейн говорит, что полезно держать микрофон открытым какое-то время. компания все еще настраивает, как долго это будет продолжаться. но он хочет, чтобы люди были «намеренными», когда они разговаривают с ним. «Вы не обязательно хотите, чтобы эта вещь расшифровывала все, что вы говорите». говорит он. «Потому что ты не будешь чувствовать себя комфортно».
Есть много других способов, которыми Google мог продвинуть Помощника. Ранее в этом году Хаффман сказал мне, что он заинтересован в том, чтобы программное обеспечение запомнило точное обсуждение, которое вы провели с ним вчера, чтобы сегодня вы могли продолжить с того места, на котором остановились. Он даже хочет, чтобы помощник мог определить ваше настроение и тонус.
Страшно это или нет, но именно так Google думает о развитии Помощника. На данный момент, однако, Бронштейн говорит, что он сосредоточен на том, чтобы сделать опыт более плавным и выяснить, какие функции будут полезны для пользователей, прежде чем добавлять эти перспективные вещи.
В то же время, люди должны будут решить все проблемы, связанные с крупномасштабным сбором данных и более умными технологиями, и Google это знает. Как Хаффман сказал мне ранее: «С ИИ мы в конечном итоге придем к тому, что общество продумает некоторые правила дорожного движения».