Experience Sharing Box

2025
XR
Haptics
No items found.

Conventional digital media utilized for memory sharing have been predominantly restricted to visual and auditory modalities, notably lacking the critical dimensions of tactile and physical sensation. The Experience Sharing Box (ESB) serves as an end-to-end platform and compact hardware system engineered to capture, store, and play back "multisensory memories," seamlessly integrating haptic feedback into the user experience.

The physical architecture of the ESB comprises a spatial display rigidly mounted within a cube-shaped enclosure, complemented by specialized wearable haptic gloves utilized for both recording and playback functionalities. Orchestrated by the Experium Platform, the system achieves precise synchronization of spatial video, haptic data, and muscle activity. These multimodal data streams are linked to a unique Experience ID, ensuring seamless management across distributed local and cloud-based storage architectures. Furthermore, by securing the spatial display within the enclosure, the system ensures that captured world coordinates are exactly aligned during playback. This design effectively eliminates spatial drift and rigorously preserves the realism of the original event.

This system introduces a broad spectrum of applications for experience sharing across temporal and spatial boundaries. It facilitates the vivid sharing of everyday interactions—such as arm wrestling with a child—among remote family members, while simultaneously offering a robust framework for archiving and transmitting invaluable cultural crafts, such as traditional pottery techniques, to future generations.

記憶や体験の共有に用いられる従来のデジタルメディアは、主として視覚および聴覚情報に限定されており、触覚や身体的感覚といった重要な要素が欠落していました。「Experience Sharing Box(ESB)」は、これらの触覚情報を含む「多感覚的記憶(Multisensory Memory)」の記録、保存、および再生を実現するために開発された、エンドツーエンドのプラットフォームおよびコンパクトなハードウェアシステムです。

ESBのハードウェア構成は、キューブ状の筐体内部に固定された空間ディスプレイと、記録および再生の双方に用いられる専用のウェアラブル触覚グローブから成ります。ソフトウェア基盤である「Experiumプラットフォーム」の制御により、空間ビデオ、触覚データ、および筋活動データの精緻な同期を達成します。これらのマルチモーダルなデータは固有の「Experience ID」に紐付けられ、ローカルおよびクラウドストレージを跨いだシームレスな一元管理が可能となります。さらに、空間ディスプレイを筐体内部に固定する設計により、記録時と再生時における空間座標の完全な一致を保証します。これにより空間的なズレ(ドリフト)が排除され、元の事象のリアリティを損なうことなく追体験することが可能となります。

本システムは、時間的および空間的な制約を超えた体験共有の幅広い応用可能性を提示します。例えば、遠隔地に住む家族間で子どもとの腕相撲といった日常の場面を身体的感覚を含めて共有できるだけでなく、伝統的な陶芸技法をはじめとする価値ある文化的な手仕事や技能を記録し、後世へと伝承していくためのプラットフォームとしての貢献可能性を示します。

Contributors

Haruomi Higashi, 東 治臣
Yufan Zhu, 朱 宇凡
Jack Brophy, ブロフィー ジャック
Ismael Rasa, ラサ イシュマエル
Jinsuke Morita, 森田 迅亮
Takatoshi Yoshida, 吉田 貴寿
Arata Horie, 堀江 新
Kouta Minamizawa, 南澤 孝太

Collaborators
Exhibitions & Publications
Media & Awards
More Info