Tales from Virtuality —MITメディアラボでの検疫下の調査ラボ

(2020年5月19日)

ジョーパラディソ、ETHチューリッヒ卒業生およびMIT教授

クレジット:Joe Paradiso

COVID-19因果関係カスケードは2月末に始まりました、北イタリアがパンデミックに遭遇し始めたとき。私はその地域の1週間からボストンに戻ったばかりで、そこで一連の講義を行い、数日間の休暇を取りました。帰国後すぐに危機が発生するのを見ると、咳や鼻づまりは重大な症状のように感じられましたが、それはすでに多くの良性の原因がありました。 どこに行っても珍しい音楽。40年前にスイスに住んでいた頃の習慣です。しかし、ウイルスはすでにボストン地域への他の方法を見つけていました。この地域での最初の「スーパースプレッダー」イベントは、私たちが戻ってから1週間後にここで開催されたバイオジェン年次リーダーシップ会議だったようです。

Media Labの私の同僚の1人は、感染症に焦点を当てて職業生活の多くを過ごしてきた生化学者です。そのため、私たちはすぐに何が起こるかについての厳しい早期予測をしました。私たちはスタッフと学生に、可能な限りリモートで作業することを奨励しました。すでに3月の初めに、MITの大部分が1、2週間後に追随しました。 3月17日火曜日の深夜に時計が鳴るまでに、MITメディアラボの建物はほとんどのMITとともに閉鎖されました。すべてのMITクラスは、3月16日の週にキャンセルされ、1週間後の春休みの終了後に完全に仮想化されました。これにより、教職員と教育スタッフはすべてをオンラインに移行するのに2週間かかりました。 MITのStellar、MITx、OpenCourseWareプラットフォームを介して探索したツールは、Zoom、Jitsi、Googleハングアウト、その他のスケーラブルなビデオ会議プラットフォームとのショットガンの結婚に押し込まれ、MITでの教育は3月30日までにすべて仮想化されました。フラッグシップセンサーは今期を分類しますが、私が前学期に追加の教育責任を負ったため延期されました。このクラスは、大規模なハンズオンラボとハードウェアを多用する最終プロジェクトが含まれるため、完全に仮想化することは非常に困難でした。 MITやその他の大学でハードウェアを使用するプロジェクトベースのクラスを教えている私の同僚は、コンポーネントを自宅の学生に出荷し、仮想批評を行っています。一方、MIT物理学部の友人が有名な「ジュニアラボ」クラス(ETHで教えていたPhysik Praktikumクラスにいくらか似ています)を教えているのは、学生がすでにほとんどのデータを取得しているという点で幸運です。必要であり、分析に集中できます(MITでも、X線装置、放射能源、NMR機器などを学生の家に送ることは困難です)。

クレジット:JoeParadisoとResponsiveEnvironmentsグループの学生

MITで世界中の姉妹工科大学では、研究が止まることはありません。そのため、プロジェクトを継続するために、世界中から一緒に仕事に来た約20人の学生と研究者のチームをすばやく仮想化する必要がありました。私のResponsiveEnvironmentsグループの研究の多くはハードウェアに関係しており、私たち(および建物内の他の多くのグループ)が依存している世界クラスの電子機器ラボを収容しています。そのため、シャットダウンの1週間前に建物から機器を移動し始め、生徒たちは誰が何の管理者になるかについてお互いに話し合いました。私のチームメンバーのアパートの隅にある即席のラボ—自宅の作業ゾーンのフォトモンタージュでわかるように、学生は3Dプリンター、リフローオーブン、電子機器のテスト/組み立てステーションと生活空間を共有しています、組み込みシステム開発スイート、ディープラーニング用のGPUアレイ(アパートの暖房にも役立ちます)、VRシステム、さらには電子音楽機器(そのうちのいくつかはミュージシャンでもあり、仕事にオーディオマッピングを含みます)。したがって、私たちの物理的な作業の多くは、その多様性にもかかわらず継続することができました。たとえば、国際宇宙ステーションで2つの実験を行っています(1つは終了してデータ分析を開始し、もう1つはJAXAの共同研究者に出荷したばかりです)。日本では打ち上げの準備をしています)。私たちは、着用者の注意状態に関連する特徴を測定するように設計された、当社の産業パートナーの1つとセンサー搭載ワイヤレスグラスを20ペア製造しようとしています。私の学生の何人かは、他のMedia Labチームと協力して、COVID-19の触覚感染経路を阻止するために、自宅でオープンソースシステムのプロトタイプを作成しています。これらには、手が顔に近づくと警告を発する超音波または磁気センシングに基づく超低コストのウェアラブルセンサー、指が表面に近づいたり特別なジェスチャーをしたりすると自動的に作動する腕に取り付けられた消毒剤スプレーが含まれます。

ヒューマンコンピュータインタラクション(HCI)を中心とした多くのプロジェクトがあるため、ユーザー調査は私たちに大きな打撃を与えました。装置を共有するためにかなりの数の人々を共通のスペースに入れること(インテリジェントなARツアーガイドまたはスマートファブリックインターフェイスを実行しているHoloLens)は、これらの期限が切れる前にほとんど不可能であるため、私の学生と私はトリアージを創造的にブレインストーミングしています。メディアラボの多くは、誰もが誇らしげに最新のデモを披露する大規模な会議に年に2回訪問する、私たちの産業メンバーからのサポートに基づいて運営されています。これらの重要なイベントの間、雰囲気は常に電気的ですが、残念ながら、現在は現実の世界では開催できないため、仮想環境で興奮を維持する方法を考えようと奮闘しています。

クレジット:Joe Paradiso

自分自身の変化ルーチンは抜本的です。 3月以前は、旅行は私の人生の大部分を占めていました。多くの上級学者のように、私はしばしば世界のさまざまな場所で委員会の会議や講義に飛行機で行き、地元のときはキャンパス中の会議に急いでいました。今、私はいつも家にいます。しかし、この制約により、生産性のレベルが異なります。執筆/レビュー/改訂が必要な論文、論文、提案の山が減り始め、ようやくホームミュージックを(ほぼ)完成させることができました。シンセサイザースタジオ、何年も待っていた仕事。チームの一貫性を保つために、必要に応じてZoomミーティングをスケジュールし、毎週金曜日にグループ全員でハングアウトを行います。ただし、残りの金曜日は、チームメンバー全員との1対1の研究会議に完全に専念しています。これは本物のマラソンですが、おそらくこれまでで最も刺激的で充実した日です。

現実の世界では、この種の会議の邪魔をしたり、妨害したり、延期したりする可能性のあるものが多すぎますが、仮想の領域では、アイデア、概念、戦略、およびを対象とした純粋に20〜30分の集中的なセッションです。進捗。 MITの研究および学術プログラムに優れた才能を引き付けることができて幸運です。これらの会議は、私にとって常にそれを再確認します。

ズームベースの生活は、同僚が変身するのを見ると、奇妙な方法で進化しました。画面上で。私たちの髪はすべて長くなっていて、いくつかは新しいあごひげを生やしています。もともと、私たちは現実の世界を背景に置いていました。天気が良ければ、お互いの居間、書斎、キッチン、さらには屋外のデッキに盗撮することもありました。これで、高山の設定から雲景まで、誰かの天井や写真の背景が表示される可能性が高くなります。お土産のTシャツのように変えています。マサチューセッツ工科大学の同僚の何人かがJPLローバーから取った火星を背景としてスポーツしているのを見た後、私はファンタジーを掘り下げて、エクスパンス(私が食い尽くした優れたネオスペースオペラTVシリーズ)からの定住した火星の眺めに立ち向かうことにしました。検疫中)、元のスタートレックのリゲル7、そしてスイスに住んでいて今住むことができる何世紀も前の牧歌的なヨーロッパの風景を示すいくつかのアンティークプリントをスキャンしました。コンサートに参加した経験がとても恋しいので、私のお気に入りの背景の1つは、数年前にインペリアルカレッジでEE講義をするために、ロンドンの素晴らしいラウンドハウスでホークウィンドショー中に撮った写真です。

私は今、あらゆる種類の重要な会議を裸足で主催し、出席しました。先月のズーム論文の防衛で博士課程の学生の1人を紹介する前に、その事実を強調するためにカメラに足を上げました。彼の仕事はであったため、これはやや適切でした。現実の世界で高密度のマイクアレイからオーディオを再レンダリングするので、リスナーを類似の仮想環境に完璧に落とすことができます。私は、仮想化がどのように普及しているかを強調したいと思いました。 「サイエンスフィクション」の世界に住む私たち全員の一般的な例えは、仮想モニターの周りで人間の近くや繭に身をかがめると、今や家に帰ります。初期の前触れは、E.M。フォースターの1909年の物語「機械は止まる」にあるかもしれませんが、私が小学校で食べたアイザックアシモフの1956年の小説「はだかの太陽」のシーンをすぐに思い浮かべます。

クレジット: Gershon Dublon

過去15年間の私の研究チームでの作業の多くは、埋め込まれたセンサーからストリーミングされる情報に人々を接続するさまざまな方法を中心に展開されてきました。ますますどこでも、そしてこれがプレゼンスの性質をどのように変えることができるか、今すぐに関連性を獲得したトピック。 10年前、私たちはMedia Labの複合施設全体にカメラ、音声を難読化するストリーミングマイク、その他のセンサーを設置し、分散型およびリモート型の相互作用を研究して、 DoppelLabプロジェクト —現在商業的にDigitalTwinと呼ばれているものの先駆けであり、訪問者はどこからでも仮想の建物を歩き回り、物理的なサイトの対応する場所からリアルタイムの音と刺激のトンネリングを見る/聞くことができます。

Asこれらのカメラとセンサーの一部はまだ機能しているため、MediaLabメンバーが周囲の背景として表示できるようにストリームを公開しました。ほぼ空の複合施設で1日が経過するのを見ると、私たちの共通の家を思い出し、保留中の帰国の約束を活性化させます。

クレジット: Brian Mayton

ただし、より人気があるのは、

Tidmarshプロジェクトでは、ボストンから南へ車で1時間のところにあるプリマスの復元された湿地野生生物保護区全体にカメラ、マイク、数百のワイヤレスセンサーを配布し、さらに生態学的研究を支援しました。 仮想化の新しいフロンティアを探る。ここでは、世界中のどこにいてもあなたの家の隔離された範囲から、あなたは実生活または仮想没入のいずれかで美しい自然の風景に接続することができます。 ヘリングポンドに接続された画面の1つを使って、ガチョウ、鳥、昆虫、カエルの声を聞きながら、そこにぶら下がっているインターネットスターのサギは、カメラをハミングしているように見えることがよくあります。最近の

Mediated Atmospheres Project は、居住者の反応に応じて、レンダリングされた照明、投影された画像、音声を介して自然環境を自動的に変換する部屋を開発しました。自宅で画面を囲んでいるこのイニシアチブは、これまで以上に関連性があります。

さまざまな方法で場所に接続してある程度の満足度を得ることができますが、人との接続にはまったく異なる課題があります。 Zoomやその他のオンライン会議プラットフォームが提供するフラットなHollywood-Squaresモンタージュを見つめて過ごした現在の生活は、大変な犠牲を払うようになりました。数人しかいない小規模な会議の場合、これらの経験は機能しますが、大規模なグループは崩壊し、ズームによって引き起こされるパラノイアとして私が見ているものを引き起こします。私たちの脳は顔に特別な注意を払うように作られていますが、一般的なフラットスクリーンからぼんやりと私たちを見つめている顔のパノラマを適切に処理することはできません。いつ会話に入る必要があり、実際にどのような反応がありますか?パーティーやレセプションのように、どうすれば隣人にささやいたり、サイドグループの人々との別の会話に自然に流れ込んだりできますか?たとえば、Zoomで話しているときに、実際の表現や反応を示している人々のライブビデオフィードと一緒にビデオオフを並べた同僚(通常は笑顔)のストックフォトを見ると、かなり戸惑うことがわかりました。比較すると、次のように思われるかもしれません。実際のストリーミングの人々は、彼らの表現が少なくとも中立であるにもかかわらず、満足していません。 Media Labのクラスは通常、多くの議論に非常に熱心に取り組んでいます。この用語を教えている私の同僚の何人かは、用語が進むにつれて、ズームスタイルのクラスの責任が学生の熱意をますます衰えさせていることに気づきました。

この不自然な社会的/認知的過負荷から集団神経がほつれ始め、自然にスケーリングする方法で人間の存在のニュアンスを適切に表現する方法に途方もない研究の機会があることが明らかになります。また、職場、学校、都心などの人々の間の偶然で自発的な相互作用を仮想化して、サブリミナルセマンティックグルーとして機能させ、私たちを結び付けて共有アイデンティティを確立することもできますか?そして、コンサートに出かけるという私の非常に見逃された経験はどうですか?素晴らしいサウンドの壮大なテレビでさえビデオストリームを見るのは、私たちがまだほとんど理解していない微妙な信号を介して興奮を共有し増幅する人類の刺激的な報道に実際にいるのと同じではありません。

10年以上前のSecondLifeのような共有3DVRの世界の人気の全盛期と、IBMのような大企業が電話会議の未来としてそれらに大きく賭けていたことを覚えています。はい、それは初期の段階であり、サイバースペースの準備が整っていませんでした。プリミティブレンダリング、レイテンシーの問題、高品質のVR / ARプラットフォームの欠如などにより、これらの環境は主に没入型ゲームを行うユーザーやややニッチなユーザーの結び目に制限されていました。経験。しかし今では、人間の相互作用を抽象化することの重要性が認識されており、基盤となるテクノロジーは以前よりもはるかに優れています。 HCIで働いている私たちの人々は、しばらくの間このロックに引っかかってきましたが、リモートコラボレーションと抽象的なプレゼンスの分野はルネッサンスの準備ができています。 COVID-19の経験を通じて、私たちは集合的に変化しました。仕事に戻っても、仮想化の針は完全にはリセットされません。

クレジット: Nan Zhao

組み込みセンシングで働いている他の多くの人と同じように、私が感じた興奮ユビキタスコンピューティングとモノのインターネットの全盛期には、このインフラストラクチャの要素が驚くべき方法で使用されているのを目にするようになり、懸念が生じています。 IEEE Pervasive Computing Magazine の次の版の拡張ゲストエディター紹介を終えたところです。この問題は、私たちのネットワーク化された世界—私に望まない注意が払われた[監視]対私自身の注意が無意識のうちにそらされた[操作]。世界を急速に埋め尽くすネットワーク化されたカメラとセンサーがこの危機を招きましたが、それらは私たちを隔離する手段も提供し、感染の可能性のある人々を追跡するためにその情報を活用することで、今後数か月で通常に戻る道を開く可能性がありますたとえば、位置監視やネットワーク化された温度検知を通じて。

私たちは、個人的、専門的、文化的、経済的システムにストレスを与えてきた例外的な時代に生きています。しかし、それはまた、人類がどこに向かっているのかについての異なる見方を私たちに提供し、さらに多くの危険を浮き彫りにし、それでもまた、新たな約束と新しい機会を明らかにしました。 COVID-19時代を過ぎて、さらに明るい未来に人類をもたらすために、世界のバンドの研究コミュニティが一堂に会するのを楽しみにしています。

この投稿はにも掲載されています。 ETHチューリッヒブログ および MediaLabのウェブサイト

コメントを残す

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です