Příběhy z virtuality – výzkum v karanténě v MIT Media Lab

(19. května 2020)

Joe Paradiso, absolvent ETH v Curychu a profesor na MIT

Uznání: Joe Paradiso

Kaskáda kauzality COVID-19 pro mě začala na konci února , když se severní Itálie začala setkávat s pandemií. Právě jsem se vrátil do Bostonu z týdne v tomto regionu, kde jsem měl řadu přednášek a vzal si několik dní dovolené. Když jsme sledovali, jak se tam krátce po návratu staví krize, jakýkoli kašel nebo dopravní zácpy se cítily jako významný příznak, ale již to mělo mnoho příznivějších příčin. Zdálo se, že jsme to nepřinesli s sebou – jen skvělé vzpomínky, několik lahví dobrého italského vína, obvyklé suvenýry a mnoho CD ostrého italského rocku a jazzu, jak sbírám / div> neobvyklá hudba všude, kam jdu , zvyk, který se datuje od doby, kdy jsem před čtyřmi desetiletími žil ve Švýcarsku. Virus však již nacházel jiné cesty do oblasti Bostonu. Zdá se, že první „superspreading“ událostí v této oblasti bylo Biogen Annual Leadership Meeting , které se zde konalo týden poté, co jsme se vrátili.

Jeden z mých kolegů z fakulty v laboratoři Media Lab je biochemik, který strávil většinu svého profesního života zaměřeného na infekční choroby, a proto jsme měli včasnou předpovědi toho, co se rychle blíží. Doporučili jsme našim zaměstnancům a studentům, aby pracovali na dálku, kde to bylo možné, již počátkem března, a většina MIT ji následovala o týden nebo dva později. Než hodiny v úterý 17. března dorazily o půlnoci, byla budova MIT Media Lab spolu s většinou MIT zamčena. Všechny třídy MIT byly na týden 16. března zrušeny a po skončení jarních prázdnin o týden později byly zcela virtuální. To poskytlo pedagogickým a pedagogickým pracovníkům dva týdny na to, aby vše přesunuli online. Nástroje, které někteří z nás prozkoumali prostřednictvím platforem Stellar, MITx a OpenCourseWare od MIT, byly zavedeny do brokovnicových sňatků s platformami Zoom, Jitsi, Google Hangout a dalšími škálovatelnými videokonferenčními platformami a výuka na MIT proběhla do 30. března prakticky jako virtuální. Normálně bych učil své vlajková loď senzorů tento termín, ale odloženo, protože jsem v posledním semestru nesl další pedagogické povinnosti. Tuto třídu by bylo velmi obtížné plně virtualizovat, protože zahrnuje rozsáhlé praktické laboratoře a finální projekt náročný na hardware. Moji kolegové, kteří vyučují projektové kurzy na MIT a dalších univerzitách, které zahrnují hardware, mají komponenty dodávané studentům doma a běží virtuální kritiky. Na druhou stranu se moji přátelé z katedry fyziky MIT, kteří učí svou slavnou třídu „Junior Lab“ (poněkud podobnou třídě Physik Praktikum, kterou jsem učil na ETH), považují za štěstí, že studenti již vzali většinu dat, která potřeba a mohla by se soustředit na analýzu (i na MIT je obtížné poslat rentgenové přístroje, radioaktivní zdroje, NMR zařízení atd. do domovů studentů).

Uznání: Joe Paradiso a studenti skupiny Responsive Environments

At MIT, as na našich sesterských technických univerzitách po celém světě se výzkum nikdy nezastaví. Proto jsem potřeboval rychle virtualizovat svůj tým přibližně 20 studentů a výzkumných pracovníků, kteří přišli se mnou pracovat z celého světa, aby udrželi naše projekty v chodu. Velká část výzkumu v mé skupině s responzivním prostředím zahrnuje hardware a je zde laboratoř elektroniky světové úrovně, na kterou se spoléháme (a mnoho dalších skupin v budově). V souladu s tím jsme týden před odstavením začali stěhovat zařízení z budovy a moji studenti se navzájem dohodli, kdo bude co strážcem. Improvizované laboratoře vyrůstající v rozích bytů členů mého týmu – jak můžete vidět na fotomontáži našich domácích pracovních zón, studenti sdílejí svůj životní prostor pomocí 3D tiskáren, přetékacích pecí, testovacích / montážních stanic elektroniky , sady pro vývoj vestavěných systémů, pole GPU pro hluboké učení (které také pomáhají vytápět jejich byt), systémy VR a dokonce i elektronická hudební výbava (někteří z nich jsou také hudebníky a do své práce zapojují zvukové mapování). V souladu s tím byla velká část naší fyzické práce schopna pokračovat navzdory své rozmanitosti – například létáme dva experimenty na Mezinárodní vesmírné stanici (jeden právě skončil a vstupuje do analýzy dat, zatímco druhý právě odeslal našim spolupracovníkům v JAXA v Japonsku, abychom se připravili na uvedení na trh) a chystáme se s jedním z našich průmyslových partnerů vyrobit 20 párů bezdrátových brýlí nabitých senzory, které jsou určeny k měření vlastností souvisejících se stavem pozornosti nositele.Několik mých studentů ve spolupráci s dalšími týmy Media Lab prototypuje doma otevřené systémy s cílem zmařit hmatové infekční cesty pro COVID-19 . Patří mezi ně ultra-levné nositelné senzory založené na ultrazvuku nebo magnetickém snímání, které poskytují varování, pokud se vaše ruce přiblíží k vašemu obličeji, a postřikovač na rameni, který se automaticky aktivuje, když se vaše prsty přiblíží k povrchu a / nebo uděláte speciální gesto .

Protože máme mnoho projektů zaměřených na interakci mezi člověkem a počítačem (HCI), uživatelské studie nás zasáhly mnohem tvrději. Získání významného počtu lidí do společného prostoru pro sdílení zařízení (ať už je to HoloLens s inteligentním průvodcem AR nebo s inteligentním rozhraním) nebude s největší pravděpodobností možné před termínem prací, takže já a moji studenti tvořivě brainstormujeme třídění . Hodně z Media Lab běží na podpoře našich průmyslových členů, kteří navštěvují dvakrát ročně na obrovská setkání, kde každý hrdě ukazuje své nejnovější ukázky. Atmosféra je během těchto klíčových událostí vždy elektrická, ale bohužel, protože ji nyní nelze udržet ve fyzickém světě, snažíme se vymyslet způsoby, jak uchovat vzrušení ve virtuálním prostředí.

Uznání: Joe Paradiso

Změna v mém vlastním rutina byla drastická. Před březnem bylo cestování velkou částí mého života. Jako mnoho vyšších akademických pracovníků jsem často byl v letadle na schůzi výboru nebo na přednášce v různých koutech světa, a když jsem místní, spěchám na schůzky po celém kampusu. Nyní jsem vždy doma. Toto omezení však vedlo k jiné úrovni produktivity – hromada prací, prací a návrhů, které musím napsat / recenzovat / revidovat, se začíná zmenšovat a já jsem konečně dokázal (téměř) dokončit svou domácí hudbu syntetizátorové studio, úkol, na který se čeká roky. Aby byl můj tým soudržný, plánujeme podle potřeby schůzky Zoom a střídavé pátky pořádáme skupinové hangouty. Zbývající pátky jsou však zcela věnovány 1–1 výzkumným schůzkám se všemi členy mého týmu – i když se jedná o skutečný maraton, jsou to možná jedny z nejvíce stimulujících a naplňujících dnů, jaké jsem kdy měl.

Ve fyzickém světě existuje příliš mnoho věcí, které mohou tento druh setkání rozptýlit, narušit nebo odložit, zatímco ve virtuální sféře je to čistě intenzivní 20–30minutové sezení zaměřené na myšlenky, koncepty, strategii a pokrok. Máme štěstí, že do našich výzkumných a akademických programů na MIT přilákáme velké talenty, a tato setkání to pro mě vždy znovu potvrzují.

Náš život založený na Zoom se vyvinul zvláštním způsobem, jak vidím morfovat své kolegy z fakulty na obrazovce. Naše vlasy se všechny prodlužují a některým přibývají nové vousy. Původně jsme fyzický svět drželi v pozadí – byli jsme voyeurs navzájem do obývacích pokojů, studií, kuchyní nebo dokonce na venkovní paluby, pokud to počasí dovolilo. Nyní je větší pravděpodobnost, že uvidíte něčí strop nebo fotografické pozadí, které sahá od alpského prostředí po mraky; měníme je jako trička na památku. Poté, co jsem viděl některé z mých kolegů ve správě MIT, kteří sportovali Marscapes převzaté z roverů JPL jako pozadí, rozhodl jsem se ponořit se do fantazie a objevit se proti pohledu na usazeného Marsu z The Expanse (vynikající televizní seriál neo-vesmírné opery, který jsem pohltil) během karantény), Rigel 7 z původního Star Treku, a dokonce naskenovali některé starožitné tisky ukazující idylické evropské krajiny z před staletí, které jsem koupil, když jsem žil ve Švýcarsku a nyní mohu obývat. Jelikož mi velmi chybí zkušenost s účastí na koncertech, jednou z mých oblíbených kulis je fotka, kterou jsem pořídil během show Hawkwind v nádherném Roundhouse v Londýně, zatímco ve městě před několika lety přednášel na EE na Imperial College.

Nyní jsem hostil a účastnil se všech způsobů důležitých setkání bosý. Než jsem minulý měsíc představil jednoho ze svých doktorandů na jeho obhajobě Zoom práce, zvedl jsem nohu k fotoaparátu, abych tuto skutečnost podtrhl – bylo to mírně vhodné, protože jeho práce byla kolem opětovné vykreslení zvuku z hustých polí mikrofonů ve skutečném světě, abyste mohli posluchače bezchybně pustit do analogického virtuálního prostředí, a chtěl jsem zdůraznit, jak se stala převládající virtualita. Populární analogie nás všech žijících ve světě „sci-fi“ nyní zasáhla domov, když jsme se krčili v lidské blízkosti a kokonu kolem našich virtuálních monitorů. Snad ranou předzvěstí lze najít v příběhu E.M. Forstera z roku 1909 „Stroj se zastaví“, ale okamžitě mě napadnou scény z románu Isaaca Asimova z roku 1956 „Nahé slunce“, který jsem pohltil na základní škole.

Kredit: Gershon Dublon

Velká část práce v mém výzkumném týmu za posledních 15 let se točila kolem různých způsobů připojení lidí k streamování informací ze zabudovaných senzorů stále více všude a jak to může změnit povahu přítomnosti, téma, které nyní získalo okamžitý význam. Před deseti lety jsme nainstalovali kamery, streamovací mikrofony obtěžující řeč a další senzory do našeho komplexu budov Media Lab pro výzkum distribuované a vzdálené interakce, který vyvrcholil naším projektem DoppelLab – předchůdce toho, co se nyní komerčně nazývá DigitalTwin, mohli návštěvníci procházet naší virtuální budovou odkudkoli a vidět / slyšet zvuky a podněty tunelování v reálném čase z odpovídajících míst na fyzické stránce.

Jak některé z těchto kamer a senzorů jsou stále funkční, otevřeli jsme jejich streamy pro členy Media Lab, aby je viděli jako okolní pozadí. Vidět den v našem téměř prázdném komplexu nám připomíná náš společný domov a omlazuje slib našeho čekajícího návratu.

Kredit: Brian Mayton

Populárnější jsou však živé mediální streamy z našeho Tidmarsh project , kde jsme distribuovali kamery, mikrofony a stovky bezdrátových senzorů po obnovené mokřadní přírodní rezervaci v Plymouthu, hodinu jízdy jižně od Bostonu, abychom navíc podpořili ekologický výzkum zkoumání nových hranic ve virtualizaci . Zde, z karantény omezené na váš domov kdekoli na světě, se můžete připojit ke krásné přírodní krajině buď v reálném životě, nebo prostřednictvím virtuálního ponoření. Stále trávím hodiny s jednou ze svých obrazovek přivázanou k rybímu rybímu sledu , poslouchám husy, ptáky, hmyz a žáby a doufám, že zahlédnu visí tam internetová hvězdná volavka, která často vypadá, že hamuje pro kameru. Náš nedávný Projekt zprostředkované atmosféry vytvořil místnosti, které se automaticky transformují mezi přirozeným nastavením pomocí vykresleného osvětlení, promítaného obrazu a zvuku podle toho, jak na ně obyvatelé reagují – jak jsme my všichni spolupracují doma na obrazovkách, tato iniciativa má stále větší význam.

Ačkoli se můžeme k místům připojit virtuálně různými způsoby, které přinášejí určitou míru spokojenosti, připojení k lidem představuje zcela odlišné výzvy. Naše současné životy strávené zíráním na ploché montáže Hollywood-Squares nabízené společností Zoom a dalšími online konferenčními platformami začínají mít vyčerpávající daň. Pro malé schůzky pouze s několika lidmi mohou tyto zkušenosti fungovat, ale větší skupiny se rozpadnou a způsobí to, co vidím jako paranoiu vyvolanou Zoomem. Naše mozky jsou postaveny tak, aby věnovaly zvláštní pozornost obličejům, ale nemůžeme správně zpracovat celou řadu tváří, které na nás nejasně hledí ze společné ploché obrazovky. Kdy bychom se měli pustit do rozhovoru a jaké reakce ve skutečnosti dostáváme? Jak mohu šeptat sousedovi nebo se přirozeně dostat do samostatné konverzace s vedlejší skupinou lidí, jako bych to udělal na večírku nebo recepci? Zjistil jsem, že je to docela znepokojivé, například když mluvím na Zoom, abych viděl fotografie kolegů (obvykle s úsměvem), kteří mají video vypnuté vedle sebe a živé video kanály lidí, kteří ukazují skutečné výrazy a reakce – srovnání vás může přimět si myslet, že lidé se skutečným streamováním nejsou šťastní, i když jsou jejich výrazy přinejmenším neutrální. Třídy Media Lab jsou obvykle velmi poutavé a se spoustou diskusí – několik mých kolegů, kteří tento termín učí, si všimlo břemene tříd ve stylu Zoom, které čím dál tím více slábnou nadšení studentů.

Jak náš kolektivní nervy se začínají třást od tohoto nepřirozeného sociálního / kognitivního přetížení, je zřejmé, že existuje obrovská výzkumná příležitost, jak můžeme vhodně reprezentovat nuance lidské přítomnosti způsobem, který přirozeně roste. Můžeme také virtualizovat náhodné a spontánní interakce mezi lidmi na pracovištích, ve školách, v centrech měst atd., Které fungují jako podprahové sémantické lepidlo, které nás spojuje dohromady a vytváří sdílenou identitu? A co můj velmi zmeškaný zážitek z pobytu na koncertě? Sledování video streamu i na nádherné televizi s úžasným zvukem není totéž jako ve skutečnosti být v pronikavém tisku lidstva, kteří kolektivně sdílejí a zesilují své vzrušení prostřednictvím jemných signálů, kterým stále stěží rozumíme.

Vzpomínám si na populární rozkvět sdílených světů 3D VR, jako je SecondLife, před dobrým nebo více deseti lety, a na to, jak velké podniky jako IBM na ně sázejí jako na budoucnost telekonferencí.Ano, bylo to brzy a my jsme tehdy nebyli úplně připraveni na Cyberspace – primitivní vykreslování, problémy s latencí, nedostatek kvalitních platforem VR / AR atd. Omezovaly tato prostředí hlavně na vyhrazené uzly uživatelů, kteří hrají pohlcující hraní her nebo sledují poněkud mezeru. zkušenosti. Nyní však vidíme důležitost abstrahování lidské interakce a základní technologie je mnohem schopnější, než byla tehdy. Ti z nás, kteří pracují v HCI, už nějakou dobu škrábali na tomto zámku, ale oblast vzdálené spolupráce a abstraktní přítomnosti je připravena na renesanci. Prostřednictvím prostředí COVID-19 jsme se kolektivně změnili a po návratu do práce se virtualizační jehla úplně nevynuluje.

Kredit: Nan Zhao

Stejně jako mnoho dalších pracujících ve vestavěném snímání, i vzrušení, které jsem cítil v době rozkvětu všudypřítomné práce na počítači a internetu věcí vedlo k obavám, když začneme vidět prvky této infrastruktury používané alarmujícím způsobem. Právě jsem o tom dokončil rozšířený úvod pro editory hostů pro nadcházející vydání IEEE Pervasive Computing Magazine , protože toto číslo se zaměřuje na dvojí stránky pozornosti, které tvoří krize v náš síťový svět – nechtěná pozornost věnovaná mně [dohled] vs moje vlastní pozornost byla nevědomky odkloněna [manipulace]. Ačkoli síťové kamery a senzory, které rychle zaplňují svět, tuto krizi pozvaly, poskytly také prostředky, které nás drží v izolaci, a mohou připravit cestu k návratu k normálu v příštích měsících, protože tyto informace využíváme ke sledování potenciálně infikovaných lidí například prostřednictvím monitorování polohy a síťového snímání teploty.

Žijeme ve výjimečné době, která zdůraznila naše osobní, profesionální, kulturní a ekonomické systémy. Poskytl nám však také jiný pohled na to, kam lidstvo směřuje, a zdůraznil ještě více nebezpečí, ale také odhalil nové sliby a nové příležitosti. Těším se na setkání výzkumných komunit světové kapely, které přivedou lidstvo do minulosti v éře COVID-19 a do ještě světlejší budoucnosti.

Tento příspěvek je také uveden na blog ETH Curych a Web společnosti Media Lab .

Napsat komentář

Vaše e-mailová adresa nebude zveřejněna. Vyžadované informace jsou označeny *