ТЕХНОЛОГИИ ВИРТУАЛЬНОЙ, ДОПОЛНЕННОЙ И СМЕШАННОЙ РЕАЛЬНОСТИ - 2/ФЕВРАЛЬ 2021
←
→
Транскрипция содержимого страницы
Если ваш браузер не отображает страницу правильно, пожалуйста, читайте содержимое страницы ниже
ТЕХНОЛОГИИ ВИРТУАЛЬНОЙ, ДОПОЛНЕННОЙ И
СМЕШАННОЙ РЕАЛЬНОСТИ
№2/ФЕВРАЛЬ 2021
СОДЕРЖАНИЕ ЗНАЧИМЫЕ СОБЫТИЯ В ОБЛАСТИ ВИРТУАЛЬНОЙ, ДОПОЛНЕННОЙ И СМЕШАННОЙ РЕАЛЬНОСТИ В РОССИИ .............................................................................. 3 В России впервые применили очки виртуальной реальности при отборе на военную службу............................................................................................................................................. 3 В российские тренажёры для космонавтов добавили виртуальную реальность .................... 3 Виртуальная реальность: уроки в VR-шлемах захватывают приморских школьников ......... 4 Роскосмос планирует выпуск гражданского VR-оборудования ............................................... 5 Разработана первая в России цифровая операционная со смешанной реальностью .............. 6 Российский рынок AR/VR достиг 1,4 млрд руб. ........................................................................ 6 Реалистично и эффективно: как инспекторы Госинспекции по недвижимости учатся на VR-тренажерах ............................................................................................................. 8 ЗНАЧИМЫЕ СОБЫТИЯ В ОБЛАСТИ ВИРТУАЛЬНОЙ, ДОПОЛНЕННОЙ И СМЕШАННОЙ РЕАЛЬНОСТИ ЗА РУБЕЖОМ ...................................................................... 10 Гарвардские учёные разработали тонкие металинзы для очков дополненной и виртуальной реальности ............................................................................................................. 10 Ultraleap выпустила предварительную версию трекинга рук Gemini .................................... 11 HoloLens 2 Industrial Edition: прежние очки с добавками для промышленности ................. 12 Xerox купила сервис для дистанционной помощи с дополненной реальностью CareAR ... 12 Arvizio разработала решение для совместной работы над AR-объектами во время онлайн-конференций ................................................................................................... 13 Apple вместе с TSMC тайно работают над прорывным микродисплеем для устройств дополненной реальности ............................................................................................................ 14 MAXST запустила VPS-платформу для дополненной реальности ........................................ 15 Центр по контролю и профилактике заболеваний США внедряет VR-обучение ................16 Платформа дистанционного сотрудничества учёных Nanome привлекла 3 млн долл. ........ 16 Операции в смешанной реальности – хирургия будущего? .................................................... 17 Qualcomm представила эталонный дизайн лёгких AR-очков с подключением к смартфону .................................................................................................................................. 19 Концепт AR-очков от Samsung ..................................................................................................20 В 2021 году nReal выпустит корпоративные очки и начнёт продажи в США ...................... 21
3
ЗНАЧИМЫЕ СОБЫТИЯ В ОБЛАСТИ ВИРТУАЛЬНОЙ,
ДОПОЛНЕННОЙ И СМЕШАННОЙ РЕАЛЬНОСТИ В РОССИИ
В России впервые применили очки виртуальной реальности при отборе
на военную службу
В России впервые применили очки виртуальной реальности
при проведении отбора на военную службу по контракту. Об этом сообщила
пресс-служба министерства обороны РФ.
В Центральном военном округе (ЦВО) первыми в России применили
очки виртуальной реальности при проведении профессиональной ориентации
и отбора будущих контрактников. Апробация прошла на пункте отбора
на военную службу по контракту в Екатеринбурге.
При проведении информирования кандидатов впервые были
применены технологии виртуальной реальности, позволяющие
почувствовать себя на месте стрелка, пулеметчика, гранатометчика,
механика-водителя и командира танка, а также химика-разведчика, имея
обзор 360°.
Также на пункте отбора ЦВО впервые применяют методику
исследования будущих контрактников при помощи компьютерной методики
БОС-ТЕСТ, позволяющей определить способность кандидата
к саморегуляции в стрессовой ситуации. На руку испытуемого помещается
датчик частоты сердечных сокращений, который заменяет клавиатуру или
мышь. Будущий контрактник должен контролировать частоту сердечных
сокращений, чтобы управлять персонажем на экране компьютера.
Источник: pln-pskov.ru, 01.02.2021
В российские тренажёры для космонавтов добавили виртуальную
реальность
Специалисты МГУ им. Ломоносова и Центра подготовки космонавтов
(ЦПК) им. Гагарина, как сообщает ТАСС, разработали новую систему
управления аэрокосмическими тренажёрами. В её основе лежат передовые
технологии виртуальной реальности (VR).
Речь, в частности, идёт о центрифуге. Предложенное VR-решение
впервые предоставляет возможность управления её работой космонавту,
находящемуся непосредственно внутри капсулы.
4
«Эта разработка, с возможностью задействовать прямое управление
центрифугой с использованием технологий виртуальной реальности и
системы подвижности на основе центрифуги с управляемым подвесом
кабины – ключ к новым экспериментам с непосредственным участием
космонавтов, что существенно снижает задержки и повышает качество
визуализации виртуальной среды», – говорят авторы проекта.
Ключевая составляющая комплекса – шлем виртуальной реальности
TotalVision VR2 (рис. 1) российского производства со средствами
определения ориентации в пространстве. Кабина центрифуги оснащена
аналогичным блоком отслеживания ориентации. Программная часть
использует специальные алгоритмы для построения корректного
изображения при вращении капсулы и изменении положения головы
космонавта.
Рис. 1. Очки виртуальной реальности TotalVision VR2
Предполагается, что новая VR-платформа позволит поднять качество
подготовки российских космонавтов. А это положительно отразится
на безопасности полётов в целом. Кроме того, сократятся финансовые
затраты на обучение и подготовку.
Источник: 3dnews.ru, 01.02.2021
Виртуальная реальность: уроки в VR-шлемах захватывают приморских
школьников
Уроки в VR-шлемах захватили приморских школьников. Начался
второй этап всероссийской программы апробации виртуальной реальности
в образовании. Как оценивают эксперимент учителя, и какой предмет
школьники изучают с помощью VR-очков?
Всего один шаг – надеть шлем – и из привычного класса можно
перенестись в любую точку Земли, поучаствовать в научных экспериментах
или пообщаться с носителем иностранного языка.
5
Теперь английский язык в этом классе – увлекательное приключение.
За время урока школьники успевают побывать на виртуальных
баскетбольных площадках, в кафе и магазинах.
Сейчас по всей стране проходит второй этап всероссийской программы
апробации виртуальной реальности в образовании. Курсы в VR-шлемах
на деле оценивают учителя общеобразовательных школ.
«Я за пределами школы была немного знакома с VR, следила
за разработками Центр НТИ ДВФУ. Поэтому мы не могли остаться
в стороне», – рассказала ГТРК «Владивосток» директор МБОУ «СОШ
№64» Марина Феденева.
«В Приморье это первая школа, которая принимает участие,
и отзывы исключительно положительные, учителя в восторге, детям
нравится», – прокомментировала научный сотрудник центра Национальной
технологической инициативы ДВФУ Юлия Хукаленко.
Всего к программе подключились более 950 школ со всей страны.
Химия, физика, ОБЖ, информатика, математика – лишь часть предметов,
которые теперь можно изучать и в виртуальной реальности.
Источник: vesti.ru, 11.02.2021
Роскосмос планирует выпуск гражданского VR-оборудования
Дмитрий Рогозин, генеральный директор Роскосмоса, в своём аккаунте
в Facebook сообщил о планах госкорпорации наладить производство
оборудования виртуальной реальности для образовательной сферы.
«Планируем в ближайшие два года расширить производство
высокотехнологичной гражданской продукции (легкорельсовый транспорт,
системы управления для беспилотников, силовое оборудование для ТЭК,
медоборудование, VR-оборудование для обучения школьников и студентов)».
Рогозин и представители корпорации не конкретизировали планы
относительно виртуальной реальности. Тем не менее, в Роскосмосе активно
используют технологию в образовательных целях, для лётных симуляторов и
моделирования космических миссий, а также для снятия психического
напряжения с космонавтов после сложных выходов в открытый космос.
В данном же случает особый интерес вызывает то, что директор
Роскосмоса высказал планы по выпуску решений для гражданского
применения.
Источник: holographica.space, 12.02.2021
6
Разработана первая в России цифровая операционная со смешанной
реальностью
Для того, чтобы изучить орган, на котором предстоит операция, хирург
оценивает результаты компьютерной томографии или МРТ на мониторе.
Хирург может уточнять особенности строения органа: во время операции он
смотрит на результаты МСКТ или МРТ, но для этого ему нужен ассистент,
который будет переключать медиафайлы на экране, так как руки хирурга
должны оставаться стерильными.
Чтобы упростить работу хирурга, специалисты Центра компетенций
НТИ по направлению «Технологии компонентов робототехники и
мехатроники» на базе Университета Иннополис разработали продукт HLOIA.
Он может превратить орган в 3D-модель с помощью видео и изображения, на
основе данных МРТ.
Далее информация сохраняется в облачном хранилище, а потом
с помощью новой программы выгружает на очки смешанной реальности
нужные модели и файлы для использования во время операции.
Очки можно использовать в операционной и с помощью жестов
запустить приложение, чтобы повторно наблюдать за моделью органа,
увеличивая его и вращая на 360° – это помогает ориентироваться при
подготовке и во время лапароскопической операции, когда все манипуляции
проводятся под кожей через небольшие надрезы. Настройка очков занимает
пару минут. Такой же алгоритм возможен при любой операции.
Первые операции урологи провели на пациентах с локализованным
раком почки с помощью очков смешанной реальности Microsoft HoloLens 1
поколения, затем перешли на Microsoft HoloLens 2 поколения. В феврале
2020 года разработку опробовали во время лапароскопической операции
на поджелудочной железе.
Источник: hightech.fm, 16.02.2021
Российский рынок AR/VR достиг 1,4 млрд руб.
Аналитическое агентство «ТМТ Консалтинг» совместно с компанией
Huawei подготовило отчет «Российский рынок дополненной и виртуальной
реальности». Рынок включает затраты на приобретаемые решения и
собственные разработки предприятий и организаций, доходы от рекламы
в приложениях, расходы частных пользователей на покупку оборудования и
приложений, посещение VR-аттракционов.
7
Российский рынок AR/VR находится на начальной стадии развития,
большая его часть формируется отдельными проектами, вместе с тем число
таких проектов устойчиво растет, а также сформировался довольно
обширный пул разработчиков, включающий как создателей аппаратного
обеспечения, разработчиков ПО и решений на заказ — от небольших студий
до подразделений в ведущих отечественных системных интеграторах.
На мировом рынке также высока активность операторов связи,
предлагающих собственные и партнерские продукты: VR-видео и игры,
AR-книги, AR-приложения для покупок и подбора интерьера, также
реализуются пилотные проекты с промышленными предприятиями,
образовательными и культурными организациями. Можно ожидать, что
в перспективе российские операторы также станут заметными игроками
данного рынка.
Российский рынок AR/VR в 2020 году вырос на 16% и достиг
1,4 млрд руб. Из них на сегмент виртуальной реальности пришлось
1,1 млрд руб, на сегмент дополненной реальности – 0,3 млрд руб.
При этом сегмент AR в 2020 году рос опережающими темпами
по отношению к VR – 40% против 10%. Низкая динамика в сегменте VR
объясняется приостановкой развития из-за пандемии в сегментах, связанных
с ивентами и прочими маркетинговыми инициативами, а также с созданием
развлекательного контента.
Основной спрос на решения виртуальной и дополненной реальности
в России формируют коммерческие организации. Свыше половины проектов
приходится на производственные предприятия и компании топливно-
энергетического комплекса. Промышленные AR/VR-проекты в России
сосредоточены в первую очередь на поддержке массового обучения в части
выработки soft skills: тренажеры и симуляторы для обучения специалистов
по оборудованию (операторов, ремонтников), пилотов, цифровые
инструкции, а также дистанционной экспертизе.
В госсекторе реализуются отдельные программы, включающие AR/VR
технологии, в сферах образования, здравоохранения и культуры.
В сегменте частных пользователей распространение VR сдерживается
высокой стоимостью оборудования и ограниченным выбором контента –
можно ожидать развития в этом сегменте по мере появления коммерчески
доступных качественных продуктов. Вместе с тем использование
AR-приложений на смартфонах в России уже сейчас можно назвать
массовым явлением.
В пятилетней перспективе ожидается рост рынка AR/VR средними
темпами 37% в год (CAGR). Как следствие, к 2025 году объем рынка
увеличится в 5 раз до 7 млрд руб. Драйверами рынка будут выступать
8
внедрения AR/VR в промышленности, проекты в сферах маркетинга и
рекламы, решения для ритейла, медицины и образования.
В прогнозном периоде соотношение AR/VR будет меняться в сторону
увеличения доли AR, который продолжит расти быстрее VR за счет роста
спроса на эффективные промышленные AR-решения, увеличение
востребованности классического AR в розничном сегменте (индустрия
развлечений, путешествия, культура и искусство, образование), а также
ввиду развития сегмента мобильного AR и появления в дальнейшем
практичных, удобных и недорогих AR-очков. Согласно оценкам, по итогам
2025 года AR достигнет 38% в структуре рынка.
Источник: content-review.com, 24.02.2021
Реалистично и эффективно: как инспекторы Госинспекции
по недвижимости учатся на VR-тренажерах
Технологии виртуальной реальности для обучения инспекторов начали
применять в Государственной инспекции по контролю за использованием
объектов недвижимости города Москвы. С помощью VR-тренажеров можно
отработать ключевые профессиональные навыки и воссоздать условия,
приближенные к рабочим.
«С помощью VR-системы можно виртуально пройти по московской
улице, осмотреть бизнес-центр, магазин или кафе. Панорамный формат и
обзор на 360° дает полное ощущение нахождения на объекте.
Для эффективного обучения в виртуальной среде максимально реалистично
смоделированы различные рабочие ситуации: обследование зданий,
выявление самостроя, контроль за соблюдением требований к размещению
сезонных кафе, взаимодействие с собственниками и арендаторами. Проект
поможет быстрее адаптироваться новичкам и наработать необходимые
умения и навыки, повысить квалификацию действующих сотрудников,
научиться управлять конфликтными ситуациями, эффективно выявлять
нарушения в земельно-имущественных отношениях и делать наш город еще
безопаснее», – рассказал заместитель Мэра Москвы по вопросам
экономической политики и имущественно-земельных отношений Владимир
Ефимов.
Ведомство активно использует в своей работе современные
технологии – программные алгоритмы, квадрокоптеры и искусственный
интеллект. Применение VR-технологий в обучении сотрудников стало
следующим шагом в развитии этой стратегии.
9
Для исследований инспектор может выбрать соответствующий
инструмент: планшет для фотофиксации строений или дальномер
для измерения параметров здания.
«В случае выявления признаков самостроя инспектор сможет
провести диалог с 3D-персонажами, которые выполняют роль
собственников недвижимости, а также с помощью джойстика виртуально
воспользоваться удостоверением и вручить им предписание об устранении
нарушения. Сценарии допускают различные варианты развития событий, и
инспектор должен выбрать правильную версию, верный ответ.
При этом дополнительные персонажи – прохожие на улице, животные,
птицы – помогут создать максимально реалистичную городскую
обстановку», – отметил начальник Госинспекции по недвижимости
Владислав Овчинский.
После обучения участники получат оценку своих решений и действий
в предложенных ситуациях. Специальные тренажеры разработаны
в Московском городском университете управления Правительства Москвы.
Источник: mos.ru, 24.02.202110
ЗНАЧИМЫЕ СОБЫТИЯ В ОБЛАСТИ ВИРТУАЛЬНОЙ,
ДОПОЛНЕННОЙ И СМЕШАННОЙ РЕАЛЬНОСТИ ЗА РУБЕЖОМ
Гарвардские учёные разработали тонкие металинзы для очков
дополненной и виртуальной реальности
Оптические линзы являются ключевыми компонентами очков
виртуальной реальности. Характеристики оптики напрямую влияют
на размеры очков, их обзорность и качество изображения. Группа
исследователей Гарвардской школы инженерных и прикладных наук имени
Джона А. Полсона разработала компактные линзы с плоской поверхностью и
наноструктурами для фокусировки света.
В 2018 году эта команда представила ахроматические металинзы без
аберраций, которые работают во всём видимом спектре света. Но они имели
всего несколько десятков микрон в диаметре, то есть слишком малы для
практического использования в системах виртуальной и дополненной
реальности. Теперь исследователи создали двухмиллиметровую
ахроматическую металинзу, которая может фокусировать красный, синий и
зелёный цвета без аберраций.
«Мы демонстрируем линзы на основе метаповерхностей
миллиметрового диаметра, с высокой числовой апертурой и субмикронной
толщины, которые обеспечивают ахроматическую фокусировку основных
цветов с ограничением дифракции, используя конструктивную
интерференцию света из нескольких зон и технологию дисперсии. Чтобы
проиллюстрировать возможности этого подхода, мы демонстрируем
систему виртуальной реальности, основанную на самодельном
оптоволоконном сканирующем дисплее для размещения у глаза».
Исследование опубликовали в Science Advances. Новая плоская линза,
по словам учёных, должна заменить громоздкие линзы современных
оптических устройств: это самая большая на сегодняшний день
ахроматическая RGB-металинза. Она «является доказательством концепции,
согласно которой эти линзы можно масштабировать до сантиметрового
размера, производить массово и интегрировать в коммерческие платформы».
Как и в предыдущих моделях металинз, в этой используются массивы
нановолокон из диоксида титана для равной фокусировки длин волн света и
устранения хроматической аберрации. Разработав форму и узор
наномассивов, исследователи смогли контролировать фокусное расстояние
красной, зелёной и синей областей спектра. Чтобы интегрировать оптику11
в очки виртуальной реальности, команда разработала сканирующий
оптоволоконный дисплей.
Источник: holographica.space, 01.02.2021
Ultraleap выпустила предварительную версию трекинга рук Gemini
Ultraleap выпустила предварительную версию Gemini, новой версии
движка для отслеживания рук. Разработчикам обещают резкое улучшение
способностей камер Leap Motion для более точного и стабильного
взаимодействие с интерфейсами при помощи рук.
Gemini доступен в версии Developer Preview для Windows 10 и работает
со всеми контроллерами Leap Motion, а также с новейшим модулем камеры
Stereo IR 170 (рис. 2) от Ultraleap.
Рис. 2. Датчик отслеживания движения рук Stereo IR 170
По сравнению с Orion (V4), который выпустили в июне 2018 года,
Gemini (V5) должен усилить плавность, точность считывания позы и
отслеживания. Он также улучшает ручную инициализацию и обеспечивает
«значительно лучшую производительность при взаимодействии двумя
руками», сообщает Ultraleap. С новым софтом гораздо меньшую проблему
представляет окклюзия, когда руки и пальцы перекрывают друг друга.
Компания намерена интегрировать Gemini в очки дополненной и
виртуальной реальности, включая Varjo VR-3 и XR-3, а также в Snapdragon
XR2 5G Reference Design, в котором уже есть оборудование Ultraleap.
Разработчики движка также выражают уверенность в том, что с камерой
IR 170 «руки почти наверняка будут отслеживаться до того, как появятся
в поле зрения» пользователя.
Это выглядит как большой прорыв в использовании ручного ввода,
который появился на нескольких устройствах, таких как Quest и Quest 2,
но не стал стандартным средством взаимодействия с системой и, главное,
со сторонними приложениями. Технология Ultraleap даёт надежду на то, что
это изменится по крайней мере в следующем поколении очков.
Источник: vrgeek.ru, 03.02.202112
HoloLens 2 Industrial Edition: прежние очки с добавками
для промышленности
Microsoft представила новую версию HoloLens 2 (рис. 3), которая
«разработана, создана и протестирована для поддержки регулируемых
промышленных сред».
Рис. 3. Гарнитура HoloLens 2 Industrial Edition
HoloLens 2 Industrial Edition добавляет к привычному комплекту
несколько стандартов и сертификатов, а также изменения в условиях
гарантии и замены устройства. Industrial Edition соответствует стандарту
совместимости с чистыми помещениями ISO 14644-1 Class 5–8, а также
стандарту искробезопасности с UL Class I, Division 2.
Компания даёт двухлетнюю гарантию и вводит «Программу быстрой
замены», которая, по словам Microsoft, «сводит к минимуму время простоя за
счёт заблаговременной замены и ускоренной доставки».
Оригинальные HoloLens 2 от ноября 2019 года стоят 3500 долл. Купить
их можно напрямую у Microsoft. Industrial Edition выйдут на рынок весной
2021 года и будут дороже – по 4950 долл. за штуку. Предзаказы уже открыты
на всех рынках присутствия HoloLens. Бизнес-заказчикам предстоит
рассчитать, стоят ли того сертификаты и замена устройства по гарантии.
Источник: holographica.space, 04.02.2021
Xerox купила сервис для дистанционной помощи с дополненной
реальностью CareAR
Корпорация Xerox Holdings расширила свой портфель программного
обеспечения приобретением CareAR, компании, которая разрабатывает
платформу дистанционной помощи с дополненной реальностью, аналога
таких решений, как Librestream Onsight и FASTEP.
Платформа CareAR обеспечивает корпоративным пользователям связь
с экспертами и доступ к информации. Через мобильное приложение люди13
могут видеть ситуацию и подсказывать решения с помощью стандартных и
произвольно рисуемых указателей. Софт работает с очками, смартфонами,
планшетами и рабочими станциями.
По данным Xerox, сегодня треть обращений в службу технической
поддержки на местах требует дистанционной помощи, но эффективно
передать контекст не получается. Это вызывает задержки и увеличивает
время простоя оборудования. Час простоя может обойтись в десятки тысяч
долларов.
По словам Стива Бандровчака, президента и операционного директора
Xerox, программные решения корпорации удовлетворяют потребности
клиентов в управлении контентом, цифровой трансформации и
персонализированных коммуникациях, а теперь в обойму добавили
корпоративную дополненную реальность в связке с DocuShare и XMPie.
Соучредитель и бывший генеральный директор CareAR Сэм Вайсберг
возглавит недавно расширенное программное подразделение Xerox. Он
также стал вице-президентом и генеральным менеджером по цифровым
услугам корпорации.
Параллельно CareAR интегрируют с платформой ServiceNow, одним из
самых популярных в мире продуктов в сфере управления рабочими
процессами на предприятиях. В ServiceNow говорят, что приобретение
CareAR позволит Xerox поможет расширить возможности для модернизации
выездного обслуживания, поддержки клиентов и ИТ-услуг.
Xerox также утверждает, что ServiceNow вместе с Deloitte работает над
предоставлением сервиса CareAR их совместным клиентам.
CareAR предлагает бесплатный пробный период сервиса, но
выпадающее меню выбора страны в форме запроса содержит лишь одну
страну – Соединённые Штаты Америки.
Цена поглощения остаётся неизвестной.
Источник: holographica.space, 09.02.2021
Arvizio разработала решение для совместной работы над AR-объектами
во время онлайн-конференций
Arvizio, разработчик решений дополненной и смешанной реальности
для совместной работы и визуализации в реальном времени, объявила
о запуске своего проекта Immerse 3D. Он предназначен для использования и
взаимодействия с 3D-моделями в AR при работе с платформами Microsoft
Teams, Zoom и другими. Компания заявила, что с этим запуском клиенты14
смогут добавить к своим виртуальным встречам сессии обзора моделей CAD,
BIM и 3D-моделей.
Такое решение отчасти обусловлено пандемией коронавируса, которая
привела к тому, что многие бизнесы были вынуждены включить
возможности удаленной работы в качестве долгосрочной бизнес-модели.
Разработчики провели серьезную работу по оптимизации передачи
данных для построения сложных объектов с учетом большого количества
подключаемых удаленных клиентов. Решение в первую очередь
ориентировано на энергетику, промышленный дизайн, производство,
аэрокосмическая отрасль.
«Использование дополненной реальности на рабочих встречах
обеспечивает более впечатляющий визуальный, интерактивный и
захватывающий опыт», – сказал Джонатан Ривз, генеральный директор
Arvizio. «Мы расширяем возможности наших клиентов применять полезный
AR в ежедневной практике».
Приложение компании доступно для IPhone, IPad, Android-устройств,
Microsoft Hololens 2 и Magic Leap.
Источник: vr-j.ru, 10.02.2021
Apple вместе с TSMC тайно работают над прорывным микродисплеем
для устройств дополненной реальности
Apple заключила контракт с тайваньским подрядчиком TSMC (Taiwan
Semiconductor Manufacturing) на разработку и производство передовых
дисплеев Micro OLED, которые будут использоваться в грядущих
устройствах дополненной реальности. Об этом сообщает CNET со ссылкой
на японское издание Nikkei Asia.
TSMC уже давно производит аппаратные комплектующие
для компании из Купертино, теперь партнёр будет заниматься производством
самого главного элемента любых очков смешанной и дополненной
реальности. Как сообщает Nikkei, в TSMC будут производиться дисплейные
панели Micro OLED размером менее дюйма по диагонали и выполненные
на сгибаемой подложке. Плотность пикселей на их поверхности будет
в сто раз выше обычного, благодаря этому разрешение матриц будет
огромным и пользователю будет сложнее разглядеть отдельные пиксели.
По заявленным характеристикам Micro OLED можно считать
настоящим прорывом для устройств виртуальной или дополненной
реальности. Правда, чтобы устройства с такими экранами дошли15
до прилавков, потребуется несколько лет, так как сейчас дисплеи Micro
OLED находятся на стадии тестового производства.
Как сообщает Nikkei, Apple также рассматривает перспективу
производства матриц Micro LED с неорганическими светодиодами. Это
совпадает со слухами, в которых говорилось, что в ближайшем будущем
компания планирует перевести свои некоторые устройства на новые дисплеи.
Стоит отметить, что Apple не единственная компания, которая
заинтересована в производстве матриц Micro OLED. Известно, что
дисплейные подразделения Sony и Samsung также заняты тестовым
производством таких дисплеев.
Как сообщают CNET источники из Китая, Apple должна была
представить гарнитуры смешанной и виртуальной реальности ещё
в 2020 году, однако пандемия коронавируса замедлила производство и
разработку данных устройств. Недавно в интернете появилась информация и
схематичные изображения одной из таких гарнитур от компании Apple,
которую должны показать широкой публике в ближайший год-два.
Источник: 3dnews.ru, 10.02.2021
MAXST запустила VPS-платформу для дополненной реальности
Южнокорейская компания MAXST, поставщик одноимённого SDK
дополненной реальности, объявила о запуске платформы визуального
позиционирования MAXST VPS.
VPS (visual positioning service, служба визуального
позиционирования) – это технология, которая определяет местоположение
пользователя и направление его взгляда с помощью алгоритмов ИИ
в помещениях и на улице для непрерывного опыта дополненной реальности.
Сервис создаёт трёхмерную карту окружения и в реальном времени
обновляет её по изображению с камеры при поддержке двухмерных карт
Google и GPS.
MAXST VPS готов к использованию в сетях 5G MEC (Multi-access
Edge Computing, периферийные вычисления с множественным доступом),
когда для сокращения задержек данные хранятся и обрабатываются
не в ЦОД, а на периферии сотовой сети.
Сервис доступен разработчикам в форме SDK для Android и iOS
с поддержкой Unity.
Компания MAXST появилась на рынке в 2010 году. В 2012 году она
выпустила первую версию SDK дополненной реальности, а в 2015 году
подоспел SDK 2.0. 2016 год запомнился разработчикам раундом инвестиций16
на 2 млн долл., а в 2017 году вышел MAXST AR SDK 3.0 с трёхмерной
навигацией в пространстве, за которым последовал раунд на 3 млн долл.
В 2018 г. компания выпустила корпоративный сервис дистанционной
поддержки сотрудников VIVAR.
Источник: holographica.space, 11.02.2021
Центр по контролю и профилактике заболеваний США
внедряет VR-обучение
Центр по контролю и профилактике заболеваний США (CDC) внедрил
новое VR-приложение, которое можно использовать в качестве учебного
курса по лабораторной безопасности.
Оно доступно как в рамках онлайн-учебного ресурса, так и в качестве
бесплатной версии для Steam. Курс длится около 60 мин под названием
LabTraining VR: Biosafety Cabinet Edition. Он позволит пользователям
«применить знания в области создания и работы биологических
лабораторий в виртуальной реальности».
«Будущие обновления этого курса позволят учащимся выйти за рамки
книжного обучения и практиковать реальные навыки, такие как создание и
очистка растворов, проведение процедур аварийного отключения
системы», – сказано в заявлении государственного органа.
CDC говорит, что курс разработан в ответ на «меняющиеся
потребности в обучении из-за пандемии коронавируса». Кроме того, проект
продолжит развиваться. Ближайшее обновление добавит возможности
обучения работе со средствами индивидуальной защиты.
После прохождения курса, ученик должен сдать квалификационный
экзамен, который построен по принципу сценариев. Это позволит
проанализировать навыки человека, предложив ему уникальные ситуации.
Источник: vr-j.ru, 12.02.2021
Платформа дистанционного сотрудничества учёных Nanome привлекла
3 млн долл.
Если вы ищете способ работать в команде с помощью глубокого
погружения в процесс в виртуальной реальности, у вас большой выбор таких
платформ. От комплексной Glue до мультиплатформенной Spatial,
от браузерной Hubs до модульной Vive XR Suite. Но как насчёт ниши17
совместных научных исследований? Решение нашлось и здесь, и ему только
что обеспечил перспективу крупный инвестиционный раунд.
Платформа Nanome привлекла 3 млн долл. в раунде под руководством
Bullpen Capital с участием Formic Ventures, соучредителя Oculus Михаила
Антонова и других бизнес-ангелов. Приложение Nanome доступно
с 2018 года в Oculus Store и Steam, а новые средства пойдут на расширение
команды и развитие партнёрских отношений.
Разработчики видят своей целью оптимизацию дистанционного
сотрудничества учёных – состоявшихся и будущих. Первоначально Nanome
начиналась как инструмент визуализации для облегчения исследований и
разработок для медицинских и вычислительных химиков и структурных
биологов, а затем превратилась в открытую платформу для виртуального
взаимодействия.
Приложения Nanome бесплатны для личного использования,
поддерживают очки Oculus Rift, HTC Vive и Valve Index. Есть специальные
лицензии для академического или коммерческого использования.
Источник: vrgeek.ru, 16.02.2021
Операции в смешанной реальности – хирургия будущего?
9-10 февраля Microsoft провела онлайн-трансляцию 12 операций,
выполненных в смешанной реальности. Хирурги из 13 стран использовали
очки гибридной реальности Microsoft HoloLens 2. Все операции были
ортопедическими и в сумме длились 24 ч. В каждой из них участвовала
коллегия врачей, которые использовали очки гибридной реальности и
приложение Microsoft Dynamics 365 Remote Assist. Это позволяло им:
видеть всю необходимую информацию – например, снимок КТ
или УЗИ – в дополненной реальности (AR);
транслировать саму операцию коллегам в режиме онлайн;
обмениваться опытом с коллегами: получать консультации и
рассказывать о своих действиях.
Помимо самой операции, прошло 25 онлайн-дискуссий, где врачи
обсуждали новейшие технологии в медицине. Кроме врачей к мероприятию
присоединились более 70 экспертов в области медицины и здравоохранения.
Трансляцию посмотрели 15 тыс. зрителей из 130 стран.
Хирургами управлял Тома Грегори – профессор ортопедической
хирургии Университета Сорбонна-Париж-Нор и завотделением
ортопедической и травматологической хирургии больницы Авиценна
в Париже. Он же проводил первую подобную операцию в 2017 году –18
для 80-летней пациентки с разрывом сухожилий. Операция длилась
90 минут. В процессе Грегори делился происходящим с четырьмя другими
хирургами в США и Великобритании по Skype.
На момент окончания вуза около 30% хирургов не могут оперировать
самостоятельно, а их знания и навыки сильно отстают от новейших
технологий в медицине. При этом число людей, которым нужна операция,
к 2025 году вырастет с 34 тыс. до 88 тыс. человек – это приведет к дефициту
хороших хирургов.
С помощью смешанной реальности новички могут видеть, как
оперируют их опытные коллеги по всему миру. В MR видны трехмерные
модели оперируемых органов и вся необходимая информация, а сам хирург
комментирует свои действия в режиме онлайн. Поэтому интернам и
ординаторам легче воспринимать и запоминать ход операции. С помощью
3D-моделей в гибридной реальности можно также обучать будущих медиков
анатомии и другим дисциплинам, воспроизводя любые повреждения и
патологии.
С помощью смешанной реальности можно визуализировать любые
диагностические снимки: КТ, МРТ, рентген или УЗИ. Поместив их перед
собой в виде трехмерной модели и увеличивая по мере необходимости,
проще находить патологии и ставить диагноз.
Такие вмешательства часто применяют в микрососудистой хирургии
или артроскопии – поврежденный сустав оперируют с помощью артроскопа
через микронадрез. Обычно хирургу приходится управлять операцией
с помощью видео, получаемого через микрокамеры внутри, и тщательно
выверять каждое движение. Объемные голограммы в смешанной реальности
делают процесс намного удобнее, позволяют действовать точнее и
минимизируют риски.
3D-модели оперируемых органов помогают отработать каждый шаг
перед операцией. Во время операции можно наложить голограмму
непосредственно на орган и консультироваться с коллегами, которые
подключаются через онлайн-приложение.
Массовое внедрение гарнитур смешанной реальности позволит
медучреждениям и исследовательским институтам по всему миру
обмениваться информацией о диагностике и лечении. Это поможет привести
медицину к единым стандартам в развитых и развивающихся странах,
а также ускорит ее развитие.
Онлайн-консультации с элементами VR или MR будут особенно
востребованы с развитием телемедицины. Врач сможет подключиться
к лечению пациента из любой точки, мгновенно получив все данные
диагностики и осмотрев пораженные органы в виде трехмерной голограммы.19
При этом ему даже не нужен ноутбук или LED-монитор для просмотра
снимков.
С помощью MR, VR и AR опытные хирурги могут помогать менее
опытным коллегам из регионов, в которых проблематично найти хорошего
специалиста. Это сделает качественную медицину широко доступной.
Microsoft также планирует собирать большие массивы данных об
операциях, чтобы обучать HoloLens на основе готовых алгоритмов. Очки
смогут по движению глаз врача определять, что он затрудняется в принятии
решения, и подсказывать ему верное действие.
Источник: trends.rbc.ru, 17.02.2021
Qualcomm представила эталонный дизайн лёгких AR-очков
с подключением к смартфону
Компания Qualcomm в первую очередь известна как производитель
чипов, но сегодня она представила новый эталонный дизайн очков
дополненной реальности (рис. 4). Устройства на его основе можно будет
подключать к смартфону или компьютеру посредством разъёма USB-C.
Система, получившая название XR1 Smart Viewer, будет лёгкой и
компактной. Её дизайн приближён к обычным солнцезащитным очкам.
Сообщается, что первое устройство на базе XR1 Smart Viewer будет
выпущено уже в середине этого года.
Рис. 4. Эталонный дизайн очков дополненной реальности XR1 Smart Viewer
XR1 Smart Viewer разработан как аксессуар для смартфона или
компьютера, а не как самостоятельный продукт. Устройство использует два
OLED-дисплея с разрешением Full HD и частотой обновления 90 Гц. В очках
применяется массив камер и датчиков, что позволяет реализовать такие
возможности, как отслеживание положения рук пользователя в пространстве,
а также обнаружение плоскостей в окружающей среде. Благодаря этому
устройство позволит пользователю, к примеру, вывести несколько
виртуальных окон на стену, или разместить виртуальный объект на столе и20
взаимодействовать с ним при помощи жестов. Тем не менее, как и
большинство очков дополненной реальности, XR1 Smart Viewer имеет
достаточно узкий угол обзора в 45°, что примерно соответствует показателю
Microsoft HoloLens 2.
Lenovo уже анонсировала продукт, основанный на эталонном дизайне
XR1 Smart Viewer. Речь идёт об очках ThinkReality A3, которые были
представлены на выставке CES 2021 в январе. Устройство выйдет на рынок
в середине этого года, однако его цена пока неизвестна.
XR1 Smart Viewer отличается от представленных ранее платформ
Snapdragon XR1 и XR2, представляющих собой полноценные наборы
микросхем для очков виртуальной и дополненной реальности. Новое
устройство полагается на компьютер или смартфон и не может
функционировать самостоятельно. Именно благодаря такому компромиссу
XR1 Smart Viewer приближается по габаритам к обыкновенным очкам.
Qualcomm последние пару лет активно продвигает технологии
дополненной реальности. Компания уверена, что AR-гарнитуры могут
стимулировать зарождающийся рынок 5G за счёт популяризации
приложений смешанной реальности, нуждающихся в высокой пропускной
способности сетей. Ранее Qualcomm сотрудничала с китайской компанией
Neral, разрабатывающей AR-гарнитуры для потребительского рынка.
Гарнитура Neral Light в конце прошлого года дебютировала в Южной Корее
и Японии, а в этом году ожидается её выход на рынки США и Европы. Как и
в случае с XR1 Smart Viewer, для работы устройства необходимо
подключение к смартфону. Стоит отметить, что планы по запуску подобного
устройства в этом году озвучивала и Facebook.
Источник: 3dnews.ru, 23.02.2021
Концепт AR-очков от Samsung
В сети появилось видео, на котором изображено два устройства (рис. 5)
дополненной реальности от Samsung (https://youtu.be/gg-ZakMEwDU).
На данный момент это лишь концептуальное представление, а не готовые
функционирующие продукты. Тем не менее, становится очевидно, что
корейский технологический гигант готовится конкурировать с Facebook и
Apple, которые все ближе к выпуску собственных гарнитур.
За публикацией стоит известный блогер Walking Cat, прославившийся
многочисленными «сливами». Именно он показал первые реальные
фотографии Oculus Quest 2 до запуска.21
На видео продемонстрировано первое устройство для повседневного
потребления медиа, получившее название Samsung Glasses Lite. Среди
возможностей мы видим просмотр видео на традиционных плоских дисплеях
в AR.
Рис. 5. Концепты AR-очков Samsung AR Glasses и Samsung Glasses Lite
Интересным решением является «активное затенение» картинки,
благодаря которому гарнитура может не только компенсировать яркое
освещение окружения, но имитировать функционал обычных
солнцезащитных очков. То есть компания хочет сделать их устройствами
для повседневной носки.
Вторая гарнитура, Samsung AR Glasses, обладает расширенными
функциями. Она имеет шесть степеней свободы (DoF) и возможность
осуществлять голографических звонков.
Опять же – скорее всего это лишь видео-концепт. Похоже, что AR-очки
не будут включать в себя никакого оптического слежения и окажутся
простыми пластиковыми рамками без видимого дисплея. Несмотря
на массивные пластиковые дужки, в целом, они довольно небольшие.
Если бы AR-гарнитура от Samsung существовала в том виде, в котором
она представлена на видео, это означало бы огромный скачок в технологиях.
Возможность вместить используемые процессоры, аккумуляторы и датчики
в такой небольшой форм-фактор в настоящее время является только мечтой,
нежели реальностью.
Источник: vr-j.ru, 23.02.2021
В 2021 году nReal выпустит корпоративные очки и начнёт продажи
в США
nReal анонсировала очки для корпоративных пользователей, релиз
Light в США и новое партнёрство. nReal Enterprise Edition (рис. 6) выйдут
в 2021 году. Устройство умеет отслеживать движения глаз пользователя и
распознаёт жесты рук. Вычислительно-аккумуляторные мощности вынесены22
в отдельный блок, который соединяется с очками по кабелю, а ободок
должен обеспечить удобную посадку.
Рис. 6. Гарнитура nReal Enterprise Edition
Компания целится в бизнес-заказчиков в сферах производства,
розничной торговли, туризма, образования, логистики и автомобильного
рынка и предлагает дорабатывать аппаратное и программное обеспечение
под запросы клиента.
Новым партнёром китайской компании стала Finch Technology,
разработчик контроллера FinchRing. Аксессуар поддерживает шесть степеней
свободы и может работать как в поле зрения камер, так и за его пределами.
nReal также поделилась подробностями запуска Light в Южной Корее.
Продажи начались с 20 розничных магазинов LG Uplus и с тех пор
расширились на 220 точек по всей стране. LG Uplus также расширила свой
каталог приложений, совместимых с очками, с 700 до 3000. Пользователи
проводят в Light в среднем 49 мин в день, а 20% самых активных – 120 мин.
Данные по релизу в Японии компания пока не раскрывает.
Запуск продаж в Европейском союзе, по примеру Кореи и Японии,
запланирован при поддержке двух «ведущих» операторов связи, одним
из которых является Vodafone. Релиз в США состоится во втором квартале
2021 года.
Компания пока не раскрывает объём продаж. На сегодняшний день
в неё вложили 71 млн венчурных долларов, включая недавний раунд
на 40 млн. долл. В штате работает 250 сотрудников.
Источник: holographica.space, 24.02.2021Вы также можете почитать
