Почувствуйте, как будто вы там, вместе
Исследования
18 мая 2021 г.
минут чтения
Клэй Бавор
ПО, Google
Людям нравится быть вместе — делиться, сотрудничать и общаться. И в прошлом году, с ограниченным количеством поездок и увеличением удаленной работы, быть вместе никогда не было так важно.
На протяжении многих лет мы создавали продукты, которые помогают людям чувствовать себя более связанными. Мы упростили работу с электронной почтой с помощью Gmail, упростили обмен важной информацией с помощью Google Фото и повысили эффективность работы с Google Meet. Но несмотря на то, что за прошедшие годы в этих и других средствах коммуникации произошел прогресс, все они далеки от того, чтобы сесть и поговорить лицом к лицу.
Мы рассматривали это как важную и нерешенную проблему.
Чтобы решить эту проблему, мы несколько лет работали над проектом Starline — технологическим проектом, который сочетает в себе достижения в области аппаратного и программного обеспечения, чтобы друзья, семьи и коллеги чувствовали себя вместе, даже если они находятся в городах (или странах). ) отдельно.
Представьте, что вы смотрите через какое-то волшебное окно, и через это окно вы видите другого человека в натуральную величину и в трех измерениях. Вы можете говорить естественно, жестикулировать и смотреть в глаза.
Чтобы сделать этот опыт возможным, мы применяем исследования в области компьютерного зрения, машинного обучения, пространственного звука и сжатия в реальном времени. Мы также разработали революционную систему отображения светового поля, которая создает ощущение объема и глубины, которое можно ощутить без дополнительных очков или наушников.
Эффект — ощущение человека, сидящего прямо напротив вас, как будто он тут же.
Формат видео не поддерживается
Основные достижения включают трехмерное изображение, сжатие в реальном времени и трехмерное отображение.
Мы больше всего гордимся тем, что как только вы садитесь и начинаете говорить, технологии отходят на второй план, и вы можете сосредоточиться на самом важном: человеке перед вами.
Project Starline в настоящее время доступен только в нескольких наших офисах и опирается на изготовленное на заказ оборудование и узкоспециализированное оборудование. Мы считаем, что именно в этом может и должна развиваться технология общения между людьми, и со временем наша цель — сделать эту технологию более доступной и доступной, в том числе внедрить некоторые из этих технических достижений в наш набор коммуникационных продуктов.
Проект Starline используется в одном из наших офисов Google.
Чтобы начать это путешествие, мы потратили тысячи часов на тестирование проекта Starline в Google, связывая коллег из района залива Сан-Франциско, Нью-Йорка и Сиэтла. Мы также проводили демонстрации с избранными корпоративными партнерами в таких областях, как здравоохранение и средства массовой информации, чтобы получить ранние отзывы о технологии и ее приложениях. Мы планируем пробное развертывание с корпоративными партнерами в конце этого года.
Мы очень рады прогрессу, которого мы добились в проекте Starline, и потенциалу технологии для решения важной проблемы желания быть вместе с кем-то, даже если вы физически не можете этого сделать. Мы с нетерпением ждем возможности поделиться ими позже в этом году.
10:25
ОПУБЛИКОВАНО В: Анализ: Starline от Google показывает перспективы и опасности 3D-чатов -мир пандемии, но еще предстоит пройти долгий путь, чтобы органично сочетать личное и виртуальное, говорят три человека, которые использовали систему.
ФОТОГРАФИЯ: вывеска возле офиса Google рядом со штаб-квартирой компании в Маунтин-Вью, Калифорния, США, 8 мая 2019 г. все рассматривают «смешанную реальность», как ее иногда называют, как следующую большую новую волну в вычислительной технике — вслед за смартфонами — и все делают ставку на новую почву.
Starline использует дорогие камеры, датчики и ультрасовременные экраны для создания иллюзии глубины, позволяя пользователям, сидящим в специальных кабинах в разных местах, видеть друг друга «в натуральную величину и в трех измерениях», как говорит Google. «Вы можете говорить естественно, жестикулировать и смотреть в глаза».
Генеральный директор Google Сундар Пичаи рекламировал Starline на ежегодной конференции разработчиков компании на прошлой неделе, заявив, что технология разрабатывалась годами и может похвастаться прорывными датчиками глубины, дисплеями и мультимедийными алгоритмами.
Но Starline остается на ранней стадии: Google заявила, что планирует испытания с медийными и медицинскими компаниями, но не назвала их, не объявила цены и не сообщила, когда система станет общедоступной.
Ссылаясь на внутреннюю презентацию прошлого года, один источник сказал, что каждая единица Starline стоит десятки тысяч долларов, что соответствует оценкам экспертов.
Три источника сказали, что встречи, которые они проводили со Starline, были очень похожи на личные встречи — до тех пор, пока система работала правильно.
«Текстура, одежда… все было идеально», — сказал один из них. Но два источника сообщили о пиксельных изображениях, когда их коллега двигалась.
Google отказался от комментариев.
Однако не все делают ставку на 3D. Алагу Перияннан, соучредитель и вице-президент компании BlueJeans, принадлежащей Verizon Communications Inc, сказал, что пользователям нужны более простые способы проведения «специальных разговоров, которые способствуют творчеству, а не организованные взаимодействия, требующие специализированного оборудования в специально построенных офисах».
Тем не менее, университетские исследователи и технологические гиганты конференц-связи, такие как Cisco Systems Inc, уже давно пытаются сделать онлайн-чаты более захватывающими.
Недавние скачки в области камер с датчиками глубины и технологий обработки изображений сделали это возможным, и стартапы, такие как Looking Glass Factory и Wooptix, разрабатывают ключевые компоненты с меньшими затратами, чем когда-либо.
«Панель качества больше не является аргументом в пользу того, почему технология не существует», — сказал Ави Бар-Зеев, консультирующий компании по технологиям смешанной реальности.
В марте Microsoft выпустила Mesh, набор программного обеспечения для компаний, которые разрабатывают иммерсивные приложения, работающие на различных типах устройств, включая гарнитуры HoloLens компании. Сетка позволяет настраивать 3D-дисплеи для совместной работы над виртуальными проектами или документами на рабочем месте.
Продажи инструментов для конференц-связи резко выросли в Zoom Video Communications Inc, Cisco и Microsoft за последний год из-за удаленной работы, и ожидается, что спрос останется высоким, поскольку компании внедряют планы гибридной работы в долгосрочной перспективе.
Сотрудники Google, возглавлявшие проект Starline, ранее работали над гарнитурами виртуальной реальности, такими как Cardboard и Daydream, производство которых было прекращено в последние месяцы из-за попыток найти аудиторию.
Как уже было продемонстрировано, Starline может оказаться полезным в здравоохранении. Грегорий Курилло, инженер-исследователь из Калифорнийского университета в Сан-Франциско, сказал, что Starline может позволить пациенту в кабинете врача общаться с удаленным специалистом без необходимости путешествовать.
Но неясно, достаточно ли надежен Starline, скажем, для виртуального занятия фитнесом или для приема более двух человек.
Привередливая природа технологии привела к неожиданным проблемам. Starline в какой-то момент провалила демонстрацию для руководителей, потому что она была настроена для людей среднего роста, а многие из них были выше, согласно источнику, проинформированному об инциденте в прошлом году.
Команда разработчиков Starline, которая в то время называлась Stargate, заявила, что изменит дизайн, чтобы удовлетворить потребности более высоких людей, поскольку, по словам источника, ожидается, что руководители будут первым рынком клиентов для кабин, и некоторые исследования показывают, что руководители корпораций обычно выше среднего.