У дома Appscout Бързо напред: q & a с главния учен на Dolby, макова крума

Бързо напред: q & a с главния учен на Dolby, макова крума

Видео: Dolby Presents: Sight And Sound | Dolby (Септември 2024)

Видео: Dolby Presents: Sight And Sound | Dolby (Септември 2024)
Anonim

Виртуалната и разширена реалност бяха горещи теми на SXSW тази година, но разговорите се разшириха извън слушалките. За да бъдете наистина потапящи, преживяванията трябва да включват всичките пет сетива. Зрение, звук, докосване, мирис и дори вкус.

Никоя компания не знае повече за технологиите и човешките сетива от Dolby, която е пионер на всичко - от съраунд звук до HDR изображения. Имах щастието да седна с главния учен на лабораторията на Dolby, Poppy Crum, на изложението.

Крум е също така доцент в университета в Станфорд в Центъра за компютърни изследвания в музиката и акустиката и програмата по символни системи. Crum беше в SXSW като част от серията IEEE Tech for Humanity. Тя разбира звук и много повече.

Коста: Мак, много благодаря, че се присъедини към нас днес.

Крум: Благодаря ти, че ме взе. Страхотно е да съм тук.

Така че ние ще говорим за акумулатори, ще говорим за разширена реалност, ще говорим за може би малко виртуална реалност, може би ще говорим за онези безболезнени мигрени, които двамата изживяваме от време до време. На първо място, вашата роля в Dolby. Как изглежда работен ден за вас? Какво правите, когато стигнете до офиса?

Имаме голям екип от компютърни невролози и хора, които са експерти в сетивното възприятие. Ако погледнете назад към историята на Dolby и се върнете назад, дори 50 години, в основата на компанията, това винаги е било разбиране на човешкия опит. Мисля, че това помогна да се разграничи как мислим за строителната технология.

И така, ежедневно, хората от моя екип и хората, с които работя, разглеждаме технологии. Вече не просто звучим, всъщност става въпрос за холистичен смисъл. Имаме лаборатории и има много експерименти, които продължават през целия ден.

Новата ни сграда има до 100 лаборатории, но имаме няколко невероятни биофизични лаборатории. Моят произход е като неврофизиолог - същото е с много хора от нашите екипи. И има човешка физиология, която се случва ежедневно, за да мислим за нови технологии, и се случва някаква много семинална работа върху мисленето за това как преживяваме информация, която е многосезонна и наистина търси как да консумираме съдържание в бъдеще, което е толкова богато и какво това ще означава за това как влияе върху телата ни, как се отразява как взаимодействаме с другите и сетивата си.

Едно от нещата, за които сте говорили по време на изложението и че сме обхванали много повече на PCMag, е този сегмент за консумативи. Чувствителността не е дума, която мисля, че голяма част от нашата публика е запозната. Когато чуете думата "целители", какво включва това? Какво означава?

В момента мисля, че това е термин, който все още се определя. Обичам да го приемам като много голям подмножество от продукти и възможности. Това е безжично устройство или в някои случаи дори окабелено. Тъй като Amazon Echo ще се обадя на издържан и е включен, но това е устройство, което има микрофони или сензори, но заснема данни от околната среда, използвайки тези данни по някакъв начин, за да подобри вашето преживяване. Също така в момента има доста компании, които мислят в носимото пространство, устройство, което е безжично, носено на тялото ви, но има и статични натрупвания, ако погледнем Google Home и Amazon Echo, и те са трансформационни.

Изключителното не означава непременно, че става въпрос само за подобряване на звуците около вас. Възможно е да приемате информация за звуците около себе си и да използвате това, за да ви даде някакво подобрено изживяване в света. Бихте могли да помислите за това, че улови… ухото, оказва се, е чудесно място за събиране на биофизична информация, така че да можете да уловите много информация там. Очевидно можете да си представите, че аналитиката улавя информация само за звуците около вас, вашите разговори, използвайки това като начин да подобрите деня си или да ви оптимизирате.

Има и доста притеснения с това. Едно нещо, което виждаме, според мен си струва да се обадим, и мисля, че това е, което ще се трансформира и ще помогне да се определи какво е това пространство са промените в регулациите.

В момента слуховите апарати са неизчерпаеми. Слуховите апарати са устройство с увеличена реалност, но имате този клас потребителски устройства, които имат способността да помогнат за смекчаване на загубата на слуха, имат възможност да бъдат устройство с увеличена реалност за някой с нормален слух, имат възможност дори да бъдат игрални устройства, Получавате кръстосването на тези полета медицинското устройство, което попада в този по-голям клас и ще имате клас потребителски устройства, който ясно преминава тези граници и прави много подобна обработка за нас.

По отношение на слуховите апарати хората мислят за слуховите апарати, като веднъж започнете да губите слух, след това можете да получите слухов апарат, който след това ще ви върне част от слуховия апарат, но има много интересни неща, които биха могли да се случат, ако хората започнаха да увеличават слуха си с… имат нормален слух, но искат да имат нещо повече от нормалния слух.

Абсолютно. Винаги съм голям вярващ в това, че не създавам тази произволна граница, където казваме: „Сега имам загуба на слуха“. Нашият слух, поради много елементи в света и звук, дори аспиринът е ототоксик, който трябва да бъдете -

Това вярно ли е?

Абсолютно. Комбинацията от елементи, която влагате в нашия слух, започва да се разгражда в началото на 20-те години и вероятно дори по-рано с някои от силните звуци, които хората слушат.

Особено на юг от югозапад.

Да. Слуховете имат толкова много различни възможности, които можете да имате. Независимо дали контролирате потока на съдържанието си директно към вашето устройство - безжично - контрол на елементи, пространствеността на информацията. Неща, за които говорим -. имаше голям тласък в поемането на информация, увеличаване на зрителния ни усет с Google Glass или някои от тези устройства от други компании и наистина - това, което искаме - звуковият компонент на това може да бъде много критичен, за да ни позволи да преодолеем това, което ние може да извика ограничение на капацитета. И да вземем информация от нашия свят и наистина да я представим като звук.

Струва ми се, че нещото, което кара хората да мислят по различен начин за звука и гласовите контроли и гласовите взаимодействия, но също така и за поверителността, са устройства като Google Home и Amazon Echo, които наистина са първите главни интерфейси, които имаме за този дигитален свят и идва с всички тези различни последици, които мисля, че тепърва започваме да подреждаме. Къде виждате заглавието на пазара?

Това е чудесен въпрос. Трябва да кажа, мисля, че тези устройства са трансформационни по толкова много начини и аз съм силен потребител и силен участник в тях, отчасти и за да разбера и да разбера къде ще се развият и как ги използвам в ежедневието ми. Идеята, че хората са готови да имат микрофони винаги, това е голям скок. Какво можем да направим с това?

В момента гласът е прекрасно нещо. Това дава контрол на хората; вкарват ги на борда, за да имат това устройство като помощник в живота си. Десет години по-надолу не искам да контролирам повече неща в живота си. Искам моите устройства да… Ще се доверя на данните си повече, отколкото ще ми се доверяват, за да знам от какво се нуждая в някои случаи и искам устройствата да бъдат…

Изпреварващо.

Абсолютно. Искам те да бъдат проактивни и да улавят много информация за звуците около мен, независимо дали съм кашлял и съм си модулирал температурата. Или просто да си уговоря срещите за мен, когато трябва, или да мога също така просто да направим живота си напред, без да се налага да контролираме всички устройства.

Можете да си представите, че Ехото може да открие дали сте смъркали. Той би могъл да открие дали не звучиш, че имаш болки в гърлото или ако си кашлял, и тогава ще ти даде да разбереш, че звучи като настинка.

За да продължите напред и да планирате назначаването на лекар за вас преди вас. Това звучи като малко далеч, за да искам това, но в същото време мисля, че ще стигнем до там. Мисля, че стъпката да имаме гласов контрол, интегрирането им в нашия живот ще ни направи удобни с него.

В бъдеще единственото време, в което ще ни е неудобно, е когато нещата не работят и кога ги няма и когато отсъстват.

Имах опит с Echo, който ми позволи да разбера колко е надхвърлил взаимодействията, които имам и може да помогне на хората в различни демографски данни. Но да, мисля, че хората са мислили за тези устройства много за достъпност, което е прекрасно. Подобно на достъпа, който може да предостави както на много малки деца или различни възрастови групи, така и на различни хора, които…

Хора с увреждания или недостатъци или пропуски, които биха могли да бъдат попълнени с помощта на технологията.

Абсолютно. В моя случай имах роднина, която беше в болницата и той почина преди няколко седмици. Бях го купил, точно когато излезе Ехо; Купих му Ехо като устройство за достъпност. Ето трансформацията. Занесох го в болницата и устройства като това са феноменални за болнична обстановка. Проблемите с поверителността стават важни за обмисляне, но ние го използваме предимно за музика, която свири в тази обстановка.

Но в този момент и моят роднина не беше много вокален, не говореше и бяхме пускали музика на Ехото, което решихме, че той би искал да чуе, Бах и много успокояваща музика и честно казано, някои от последните думи, които той каза, и не се шегувам, които си спомням, бяха: „Алекса, играй Ал Грийн“. Той искаше към нея Ал Грийн, Хитър и Семейният камък и това устройство му осигури такава достъпност. Това беше овластяване и във време, когато беше много мощно.

Там има много технологии. Имате факта, че Al Green е на разположение и че има тази огромна музикална библиотека, която е на гласова команда и след това имате самата гласова команда, което позволява той да го поиска лично. Така че там се случва много.

Мисля, че когато повдигате въпроса за поверителността, това е още един въпрос, че преди Алекса да назначи назначенията на нашия лекар, подозирам, че някоя фармацевтична компания ще ни предложи да ни предостави студена таблица с лекарства или нашите алергии се задействат и предлагат Zyrtec, и мисля, че това е почти междинна стъпка, която трябва да преодолеем къде ще контролира всички онези данни, които се заснемат и които раздаваме в този аудио формат.

Трябва да го прегърнем. Ако не мислим за регулаторната страна и не мислим как ще улесним хората да ви предоставят още повече данни, отколкото сме в момента. Мисля, че в момента Amazon казва: "Ние слушаме само когато кажеш Алекса", но тези устройства, за да правят това, което наистина могат, трябва да слушате непрекъснато.

В момента има голяма тенденция на компании, застрахователни компании, независимо дали става въпрос за автомобилна застраховка или здравна застраховка, предлагаща на потребителите сделка или начин за по-ниски тарифи, ако позволяват проследяването на техните данни - ако предоставят своите данни. Мисля, че е много мощен. Мисля, че това ще бъде част от нашето бъдеще, няма въпрос за това, но това бъдеще на това, какви са последствията от споделянето на тези данни, които все още не са дефинирани и е трудно да се предвиди. Така че наистина трябва да мислим как изглежда това бъдеще.

Освен това мисля, че има проблем с постоянството, където хората са: „Нямам нищо против, ако дам на моята здравна компания или на моя застрахователен доставчик броя стъпки, които правя всяка седмица“, но тази информация не стига до никъде и стъпките която правите тази седмица ще бъде търсена и индексирана след 30 години и тази идея за цифрова постоянство, с която живеем днес, която наистина в човешката история никога не се е случвала преди. Когато добавите факта, че бихте могли да имате микрофон в кухнята си през цялото време, всички тези данни няма да отидат никъде. Амазонка винаги ще го има.

Това бъдеще е неписано и ние не знаем последствията. Ние не сме дефинирали тези регламенти, но те могат дори да се променят в бъдеще, защото много неща могат да се променят.

И ето още нещо. Мисля, че в културно отношение ЕС се опита да въведе много по-голямо законодателство за защита на потребителите в момента, но не е ясно какво означава, защото данните съществуват. Трябва да гарантираме оперативна съвместимост, когато пътувате. Нуждаем се от сигурна сигурност за малки IoT устройства. Това е наистина критично нещо. Мисля, че групи като NIST са много активни да решат това.

Когато погледнете какво прави Dolby и всички технологии, върху които работят, започвате да виждате общи теми и една от тях е, че компанията наистина се опитва да даде на хората супер сетивно възприятие, свръхчовешки сили. Звучи отгоре. Звучи хиперболично, но има куп примери за хора, които получават свръхчовешки сили, използвайки технология. Можем ли да говорим само за няколко такива?

Абсолютно. И така идвам от опит като неврофизиолог, който мисли как да интегрираме тези неща в технологията и има няколко важни неща. Когато се замислим какво е разширената реалност или каква технология може да направи за нас днес… когато за пръв път се присъединих към Dolby, може би бяхме в процес на работа над Dolby Vision, а Dolby Vision е висок динамичен диапазон и по-широка технология за цветови гами за изображения, Само за да добиете представа, типичният дисплей, който бихте закупили преди около три години, би бил от 300 до 400 кандели на квадратен метър. Луната, естествената луна е около една до две хиляди, слънчева светлина върху черна настилка, получавате до 15 000 кандели на квадратен метър.

Така че технологията на дисплея беше много далеч от това, което нашата реална сензорна система може да се справи. И в процеса на разработка работехме с някакво съдържание и устройства, които ни позволиха да получим до 20 000 кандели на квадратен метър при яркостта, която беше произведена -

И това не е непременно контраст, това не е разделителна способност, това е яркостта.

Да, от гледна точка на възприятието и сензорната гледна точка, за много зрителни разстояния, ние сме доста омагьосани в това, което нашите сензорни системи, вашата възприемателна система могат да се справят по отношение на разделителната способност. Но по отношение на яркостта и цветовата гама, ние не бяхме наблизо. Така че е доста вълнуващо да бъдем, "добре, че има тази област, която можем да подобрим опита и можем да водим в тази област." Това е доста вълнуващо.

Така че, правейки тези проучвания, мисля, че това, което ме накара да осъзная колко мощен може да бъде това, и също така да предефинирам това, за което смятах, че трябва да става въпрос за потапяща технология, е това. Гледахме някакво съдържание на огън и кандели. Мисля, че свирехме на около четири до шест хиляди кандели на квадратен метър и го гледах и усетих как лицето ми реагира само на огъня. Този човек биеше пламък към мен, така че има този голям зрял, наистина ярък пламък и си помислих: "О". Самият дисплей трябва да произвежда топлината. Затова разговарях с един от ключовите разработчици и го попитах. Той беше като: „Трябва да е постоянно“. Така че получавам термокамера и използвам термични изображения, за да проследя екрана. Беше напълно постоянно. Но успяхме да покажем последователни промени в лицата на хората, които зависеха от съдържанието.

Така само въз основа на яркостта, която достигаше до ретината, мозъкът ми казва: „Добре, никога не съм изпитвал пламък, който е бил толкова ярък, който не е истински, така че вероятно е мозъкът ми да се държи с този огън, сякаш е истинско."

Така че сега, когато мислим за потапящи технологии и създаване на суперсили и създаване на преживявания, можем да мислим как те да ангажират физиологичната ни система по естествен, автентичен начин и тогава можем да ги подобрим. Ние имаме способността да надхвърлим онова, което бихте могли да изпитате в естествения свят и това става доста мощно.

Да, чудесен пример. Освен това говорихме малко за това как в PCMag тествахме куп ER системи. Там има много обещаващи технологии. Винаги се фокусираме върху това как изглежда на екрана, върху разделителната способност, но аудио компонентът към виртуалната и разширената реалност е също толкова важен, колкото и визуалният компонент и помага да се продаде опитът. Можете ли да поговорите малко за това, което намирате там и доколко това допринася за преживяването?

Страхотна тенденция не само в нашата компания, но и в други, е това признание, че не можете да изучавате един смисъл без другия. Ако гледаме към бъдещи устройства и цялостни устройства в AR и VR. В момента всички основни VR устройства са визуални, но според мен слуховият апарат, макар че може да не искат да се наричат ​​това, е устройство с допълнителна реалност. Опитва се да увеличи от основната физиологична система състоянието на нея. Кохлеарните импланти са едно от първите имплантирани биофизични устройства.

Ако се замислите какво искаме в разширената реалност? Искаме да подобрим нашия опит в света. Искаме да не е нещо, което пречи и ни дава твърде много данни, че не можем да правим нещата, които сме използвали. В момента сме в тенденция за наистина страхотни преживявания, но не сме се подобрили и не сме докоснали по начина, по който с нетърпение очаквам да подобрим ежедневните дейности в нашия живот. И ни позволява да бъдем по-ангажирани с хората, защото тези неща са засилени. Ще дам пример с това за секунда, но наистина искаме да сме свързани. Искаме да бъдем ангажирани с живота си. Искаме да можем да вземем повече информация. Искаме да имаме засилени преживявания и искаме да можем да имаме контрол върху това колко богати са тези преживявания.

Така че, ако вземем всички данни, които можем да заснемем или… повече данни не винаги са по-добри, но ако се опитваме да подобрим нашето визуално… Виждал съм това да се случва във военните, виждал съм го се случва с технологията, при която искам да създам AR, и вземам информация, която се опитвам да подобря, и влагам всичко в моята визуална система. Слагам всичко в чаши или го поставям на места, където трябва да го гледам. Е, мозъкът ни не може да обработва толкова много информация. Не можем да го вземем едновременно.

Значи там е звукът… имаме ограничение на капацитета в един смисъл, но познайте какво? Имаме и други сетива. И изведнъж отваряме целия този магазин, който можем да отидем и наистина да използваме, за да подобрим опита си и познайте какво? Това е клише, но що се отнася до създаването на физиологично преживяване, какво да правя, когато гледам страшен филм и се плаша? Изключвам звука Така че не само това е наистина висцерална част, това е цяла възможност да подобрим и обогатим начина си на живот по отношение на това колко информация можем да поемем и колко информация можем да обработим. Просто като разделени гласове или звукови елементи пространствено разграничени, ние можем да ги обработваме едновременно, вместо да имаме мозъка си и информацията да бъде напълно безполезна. Пречи ни да имаме целия си мозъчен и когнитивен капацитет <възприет като правим това едно нещо. Това наистина отваря нашата ситуационна осъзнатост и какво можем да направим.

Аудио компонентът и всички тези VR неща, когато започнем да ги тестваме, това е нещо, което влагаме във всеки преглед, е, че изглежда така, звучи така и тогава двете обикновено трябва да добавят към нещо по-голямо от сума на частите.

Има толкова много различни неща, които можем да направим със звук в AR или VR. Очевидно създаването на пространствено преживяване е важно, но е ключова част от него. Dolby Atmos е пример за обектно-базирана доставка и предаване на звук. Така че, когато нещата са авторски в Atmos и звуковите елементи живеят с пакет данни, към него е прикрепен поток от данни. Така че, можете да си представите, това може да бъде много мощно. Това може да ви каже къде трябва да бъде звук. Независимо как пресъздавате този звук, той има това местоположение. Той има ширина, има силен звук, но може и GPS координати. Може да има и всякакъв вид информация. В бъдеще можем да имаме емоционално съдържание за това как би трябвало да ви повлияе, ако знаем нещо за взаимодействието, което се случва.

Това са типовете бъдещи неща, които биха могли да се случат. Ако мислите за AR устройство, то може да предостави много информация. В момента използваме карти, за да погледнем към телефона си или в кола. Тези неща могат да бъдат направени в лаборатория много лесно, за да се създаде умалена версия, която ви дава информация за проследяване и ви казва, не устно, но ви дава пингове, които ви казват къде са звуците, къде трябва да отидете. Проблемът е, че трябва да сме сигурни, че е здрав и постоянен за всички потребители и това е по-сложен проблем.

Съпоставянето е чудесен пример, че той все още е основен на екрана и когато Google Glass излезе, можете да видите цялата тази информация, този малък мъничък прозорец във вашия визуален дисплей. Това, което наистина исках, беше да ми каже в ухото дали трябва да завивам надясно или наляво.

Да.

И ти си точно там, точно до ухото, можеш просто да ми дадеш гласовата команда. Мислех, че е по-добра аудио система и озвучителна система от визуалната система по отношение на носими решения.

Абсолютно. И отново, добре, не отново, мисля, че сте се ударили по основната точка, която е това са всички инструменти, и точно сега, днес имаме инструменти, които можем да използваме по невероятни начини, включително невроконтрол и неща, но Въпросът не е да даваме… той подбира правилните инструменти за данните, за технологията, за потребителското изживяване, към което се опитвате да се насочите. Необходимо е контекстуално да оптимизирате и персонализирате за вашия индивид и за това, което той се опитва да постигне, и това е голяма пропаст в това, което изграждаме в момента. Невероятна технология и тя просто ще стане по-богата. Но това ще се движи наоколо и мисля, че трябва да приемем това, до което се опитваме да стигнем, и да помислим как, като човешка система, можем да преживеем това най-добре.

Едно от най-любимите ми неща е да разгледам други видове. Можете да погледнете дали е жаба или муха или прилеп, видове, които имат тези невероятни суперсили да правят неща, които надхвърлят онова, което физическите им тела и грубият поглед към мозъка им биха могли да ви кажат. Разбирането как те решават този проблем и много повече, защо еволюцията им е решила този проблем за тях, ни дава представа. Трябва да мислим по този начин. Трябва да мислим повече за това какъв е натискът върху околната среда върху нашите системи и как технологиите ще ни помогнат най-добре да решим това?

И предоставянето на повече и повече данни вероятно не винаги е правилното решение.

Рядко, рядко. Искам да кажа, че това, което ни прави успешен човек, е това, което мозъкът ни изхвърля. Винаги говоря за илюзии, обичам илюзии. Те са забавни, но те също са толкова красива представа за това, когато мозъкът ни се обърка. Ако преживеем данните точно такива, каквито са в света, вие всъщност се оказвате с патологично състояние, което не сте функционални в света. И това, което мозъкът ни постоянно прави, ни помага да претегляме определена информация и дори да не забелязваме различна информация. Ако забелязахме всички промени в осветеността, създадени от светлината, никога нямаше да видим холистични предмети. Ние трябва да функционираме и трябва да знаем върху какво да действаме и това е мощното.

Нека ви задам някои въпроси, които задавам на всичките си гости. Първо, кое е нещото, което те поддържа през нощта? Каква технологична тенденция най-много се притеснявате за напред?

Две неща. Един, който смятам, че вече сме се докоснали, има толкова много сила в създаването на този вид суперсили и какво можем да направим с AR и VR. Надявам се, че ние гледаме на всички технологии, които изграждаме като инструменти, и мислим да използваме правилните инструменти в най-простите и най-добрите, казвам стабилни, но това е последователно за всички наши потребители, за да стигнат до опита, който е предназначен а не този, който е най-секси и лъскав.

Другото обаче е - наистина става въпрос за данните. Има толкова много сила, че микрофоните винаги да слушат, които ще движат нашата технология напред, ще движат живота ни напред. Но ние трябва да сме доволни от това, което се случва с тези данни. Трябва да се съобразяваме с разпоредбите, независимо дали става въпрос за самостоятелно шофиране на автомобили или акумулатори или просто за сигурността в IOT устройства. Ако нямаме строги регулации и стандарти и разбиране и в много случаи прозрачност на алгоритмите, задвижващи някои от тези вероятни решения и AI зад някои от тези устройства, мисля, че това ще забави и ще задържи иновациите. Това може да забави възможностите на технологията да окаже голямо влияние в положителна посока за толкова много хора. Искам да видя това да се случи. Така че мисля, че ще става въпрос за стандарти и разпоредби, които да помогнат за това да оживеят.

От положителна страна, какво ви вълнува най-много? Какво мислиш, че ще промени света и ще те вълнува от това да ходиш на работа всеки ден?

Има тенденция и промяна, която не мислим за един смисъл. Холистично мислим за технологията. Обмисляме влиянието, което оказва върху зрението и звука заедно. Ние мислим за цялата ни физиологична система и, мисля, как се чувстваме, нашите емоции. Нещата, от които хората се интересуват сега, и начинът, по който описваме въздействието на технологиите, е много по-богат по отношение на това какво означава за човешката връзка и какво означава само силата, която може да има върху нашия опит. Това е нещо, което определено смятам, че е нова посока.

Така че по отношение на продукт, услуга, технологична джаджа, която обичате, това промени живота ви. Има ли нещо, което да ви открои, че сте като: "Това е нещото, което прави живота ми всеки ден по-добър?"

Статични сменяеми устройства. Аз използвам Echo всеки ден и съм виждал, че се използва в такава широка пропаст от поколения и случаи на използване. Наистина съм развълнуван там, където отиват такива технологии и в момента, той наистина е в началния си стадий от въздействието, което ще има.

Така че, ако хората слушат този разговор и се интересуват от вашата работа, как могат да ви намерят онлайн, да взаимодействат с вас?

Можете да ме намерите онлайн на LinkedIn, Poppy Crum. Можете да ме намерите и в Twitter @poppycrum.

Бързо напред: q & a с главния учен на Dolby, макова крума