Плановете на смесената реалност на Microsoft надхвърлят холоните

Когато Microsoft обяви изненадващото обявяване на нов продукт с допълнителна реалност (AR) на събитие под Windows 10 в началото на 2015 г., самата слушалка на Microsoft HoloLens не беше първото нещо, което публиката видя. Когато представи новата технология пред света, Алекс Кипман от Майкрософт - създател както на контролера за движение на Microsoft Kinect, така и на HoloLens - вместо това показа лого за Windows Holographic - софтуерната платформа за Windows 10, която подкрепя AR амбициите на Microsoft.

Повече от две години по-късно софтуерът, захранващ нарастващата екосистема на AR на Microsoft, все още е най-добрият индикатор за това, къде компанията планира да поеме бъдещето си на „смесена реалност“ (MR). Сега има различно име; Microsoft преназначи Windows Holographic на Windows Mixed Reality, но целта не се промени. Microsoft иска да изгради оперативно съвместима мрежа от AR, VR и слушалки със смесена реалност от различни производители, всички разговарящи помежду си и работещи с Windows 10 Universal Apps.

Има три стъпки към този подход: първоначалният хардуер на Microsoft (HoloLens), развиващият се софтуерен стек, разположен в платформата Windows Mixed Reality, и хардуерните партньорства на Microsoft с Acer, Asus, Dell, HP и Lenovo за изграждане на $ 299 слушалки със смесена реалност, работещи под Windows 10. Първата от тях, слушалката за смесени реалности Acer Windows Axed Windows, вече се доставя към разработчиците.

Какво е смесена реалност?

Microsoft не е единствената AR компания, която е започнала да използва термина смесена реалност, за да направи разлика между различни точки от AR / VR спектъра. От едната страна имате монокулярните очила, които виждате от компании като Vuzix, и AR-базирани на смартфони, популяризирани от приложения като Pokemon Go.

От друга страна, има по-потапящите бинокулярни изживявания с глава (показва се в двете очи с 360-градусово зрително поле) на устройства като HoloLens, очилата ODG R-9 или все още невиждания Magic Leap. С прекалено опростени термини можете да мислите за AR като добавяне на наслагвана информация или виртуални обекти по-двуизмерен начин на върха на това, което е пред вас.

Но континуумът, в който съществуват подобни технологии, отива по-дълбоко от това. Ако си представите спектър с физическия свят от едната страна и истинската виртуална реалност от друга, ще изглежда така:

Физически свят -> Увеличена реалност -> Смесена реалност <- Увеличена виртуалност <- Виртуална реалност

(Не се тревожете твърде много за разширената виртуалност в момента. Все още не сме много).

В момента индустрията е затънала в объркване на терминологията, но отделянето на всички жаргони е важно не само за разбирането на екосистемата, но и за идентифицирането на всички точки, в които Microsoft планира да се включи в нея. Ако визията на технологичния гигант се сбъдне, софтуерът за смесена реалност на Microsoft може да работи в слушалки, вариращи от 299 до 3000 долара, вградени в потребителския и корпоративния опит в областта на игрите, електронната търговия, индустриалния дизайн и производството, интерактивните визуализации на данни за предприятия, лекарства и отвъд.

Как изграждате смесена операционна система

По време на неотдавнашен брифинг с Microsoft, PCMag получи шанс да провери за кратко новата слушалка на Acer за слушалки. Получихме и разбивка на софтуерния стек на Windows Mixed Reality, включително някои поглед върху това как Microsoft работи с OEM производители за създаване на слушалки от 299 долара и какво актуализираха последните актуализации на Windows 10 Creators за приложения на Windows със смесена реалност на редица различни компютърни устройства.

Платформата на Windows Mixed Reality се разпада на няколко различни слоя. В горната част на стека имате монтиран на главата дисплей (HMD) с шест степени на свобода (6DoF), представляващ поддържаното ниво на триизмерно движение и проследяване на позицията. HoloLens използва онова, което Microsoft извиква 6DoF, което означава проследяване на позицията, което комбинира данни от множество входни сензори и камери с алгоритми, за да поддържа работата безпроблемна.

За контекст, несвързаните VR слушалки, които използват дисплей на смартфон, включително Samsung Gear VR и Google Daydream View, в момента поддържат 3DoF, понякога известен като pitch-yaw-roll. Свързаните VR слушалки като Oculus Rift и HTC Vive имат проследяване на позицията 6DoF.

Актуализацията на Windows 10 Creators включва поддръжка за контрол на движение 6DoF в Acer и други предстоящи OEM слушалки. Смесената реалност за развитие на Acer Windows включва две предни камери за проследяване на позицията и двойни дисплеи, в сравнение с четирите камери, които ще намерите на по-скъпите HoloLens (двете добавени камери HoloLens се използват за пространствено картографиране), но всичките пет партньори слушалки ще поддържат 6DoF. Актуализация, идваща по-късно тази година, ще добави поддръжка за интегрирани графични чипове в слушалки със смесена реалност, въпреки че хардуерът ще се нуждае от сравнително скорошен чип на 7 ^-то поколение на Intel, за да получи актуализацията.

Следващите слоеве в стека на Windows Mixed Reality управляват вход, междинен софтуер и интерфейси за програмиране на приложения (API) за смесена реалност и пространствено възприятие. Входният слой обработва всички визуални, жироскопични, гласови и пространствени входни данни, които AR / VR устройство събира във всеки даден момент. Това може да обхваща данни от източници, включително координационни системи, поглед и насоченост, жестове, гласов вход, пространствен звук и пространствено картографиране.

Средният софтуер и слоевете на API са ключови за разбирането как платформата започва да се свързва с останалата екосистема на софтуера AR / VR. Документацията за разработчици на Windows Mixed Reality вече включва инструкции за изграждане на холографски приложения с помощта на популярни платформи, включително Unity (двигател за разработка на крос-платформа), Vuforia (платформа за разработка на AR) и протокол за междинен софтуер за изграждане на MR приложения, използващи Microsoft DirectX време на изпълнение.

Платформата сама по себе си не е отворена - трябва да играете по Универсалните правила на приложението на Microsoft за Microsoft - но Microsoft предоставя редица опции за включване в своя пакет от софтуер за MR. Един пример за това са VR слушалки на Project Alloy VR, очаквани по-късно тази година, които изпълняват версия на софтуера Windows Mixed Reality.

Последните слоеве на стека добавят персонализиран потребителски интерфейс (UI) Microsoft нарича "черупка", заедно с облачни услуги като автентификация и синхронизиране на Xbox Live и съвместни съобщения чрез услуги като Skype. В изданието за смесена реалност на Acer Windows разгледахме накратко, „черупката“ беше по същество операционна система, разположена като стаи в къща.

След това потребителят може да се телепортира в различни стаи и да стартира различни приложения, показвани като плаващи икони или заемащи плочка на стена. Това могат да бъдат прости приложения като снимки, филми и телевизия, Microsoft Edge или дори пълноценно меню за стартиране на Windows 10, в което можете да се ориентирате в рамките на опита, работещ с контролер Xbox. Разбира се, има и някои забавни възможности за 3D интерактивно моделиране, както при HoloLens. Демонстрационни примери варираха от слонове и тигри, които се скитат наоколо до размахващ се астронавт, който можете да поставите в стаята, и приложение, което ви пуска в 3D слънчева система. Това са само няколко примера, като се има предвид, че OEM слушалките могат да работят с универсално приложение за Windows. От софтуерна гледна точка Microsoft вижда всички тези устройства като компютри с Windows 10 за главата ви.

Компанията може да пусне стандартна хардуерна спецификация за смесена реалност в някакъв момент надолу по пътя, но в момента Microsoft се фокусира върху софтуерния стек и съвместно проектира идващата вълна от слушалки за партньори. Ако разгледате по-отблизо изданието на Windows 10 Anniversary Release (и HoloLens Commercial Suite в него), можете също да видите софтуерните функции, които Microsoft добавя под капака, за да направи HoloLens, насочен към предприятието, по-привлекателен за масовото разгръщане на бизнеса.

HoloLens Commercial Suite укрепва основния набор от функции на изданието HoloLens Development Edition, което позволява на предприятията да третират слушалките със смесена реалност като просто друго устройство в корпоративната си ИТ мрежа. Microsoft пуснаха HoloLens Commercial Suite миналия август за цена от 5000 долара, а за тези допълнителни $ 2K получавате функции, включително по-задълбочено управление на мобилни устройства (MDM) с Microsoft Intune, заедно с Kiosk Mode, който ще стартира HoloLens директно в конкретно приложение опит за целите на демонстрация в магазина в среда на дребно.

Търговският пакет също се предлага с Microsoft BitLocker Drive Encryption и достъп до защита на виртуална частна мрежа (VPN), която сега е по-важна от всякога. Лъскавият хардуер винаги ще получи по-голямо внимание, особено Asus, Dell, HP и Lenovo през следващите месеци ще разгърнат собствените си слушалки за партньори. Но за най-ясната картина накъде се насочва стратегията на смесената реалност на Microsoft, следете внимателно софтуера.