日本の科学技術やイノベーションを推進するムーンショット型研究開発事業。そこでの目標のひとつ「2050年までに、人が身体、脳、空間、時間の制約から解放された社会」を実現するうえで鍵となる存在が、サイバネティック・アバターです。
その新たな身体性を通して、人々が自身の能力を最大限に発揮し、多彩な技能や経験を共有できる未来社会像「サイバネティック・ビーイング/身体的共創」を探求する活動が始動しCybernetic being Meetupのが開催されています。
第2回の今回では「身体の限界を突破する」と題して、ロボットアバターをはじめとしたテクノロジーによって身体機能を補綴・拡張する技術についてセッションが展開されました。
分身ロボット技術による“もうひとつの身体”
「皆さんは身体が動かなくなったときのキャリアを考えたことはあるでしょうか?」。
分身ロボットOriHimeや、OriHimeを遠隔操作することで接客を行う「分身ロボットカフェ DAWN ver.β」などを開発する株式会社オリィ研究所の代表でありプロジェクトメンバーの吉藤健太朗は、現代社会は働くにしても遊びに行くにしても人間が「身体を運ぶこと」を前提にデザインされているといいます。
プロジェクトメンバーの吉藤は、2013年にALS患者に出会ったことをきっかけに筋電や視線入力の研究開発を開始。今回のミートアップにも参加している武藤将胤さんとは2015年に出会い、ALS患者をはじめとするユーザーに向けた意思伝達装置「OriHime eye」の開発をともに進めてきました。
「分身ロボットカフェでは、ロボットが自動で動いているわけではありません。離れた場所にいる人間が実際に操作をして、店頭でコミュニケーションをしています。元バリスタのALS患者が自宅からロボットを動かすことで、そのバリスタにしか出せない味を店舗で提供するという試みも行っています。分身ロボットカフェのメンバーには、OriHimeを遠隔操作することで大学の講義に参加したり、就職後にOriHimeを介して企業の受付を務めている人もいます。また身体の障害や寝たきりの人だけでなく、精神的な障害で人前に出ることが難しいという方々も、OriHimeという“もうひとつの身体”を使って働くことを実現しています」(吉藤)。
また最近では、OriHimeを使った新しいスポーツのあり方を提案しているといいます。
「パラリンピックには、身体が動く人しか参加することができません。しかし、寝たきりであってもプレイヤーとしてスポーツを楽しめるかたちがあるのではないかと思うんです。今は自分の身体で動かすことができる私も、いずれ歳をとって身体を動かすことができなくなったり寝たきりになったりする。身体拡張の技術を用いることで、自分らしく働いたり社会と関わって生きる選択肢や時間軸を拡張していけるはずです。自分の介護を自分自身で行う未来があってもいい。寝たきりの“先輩”である武藤さんと私たちが進めている研究開発が、いつか全人類にとってのヒントになると思っています」(吉藤)。
身体機能を拡張するテクノロジー
ALS(筋萎縮性側索硬化症)にかかったことをきっかけに一般社団法人WITH ALSを2016年に立ち上げ、クリエイティブの力でALS患者が抱える課題の解決に取り組んでいる武藤将胤さん。今回のMeetupでは、視線入力技術と自身の音声データを駆使してプレゼンテーションを行いました。
「全ての人が自分らしく挑戦できるBORDERLESSな社会」をミッションに掲げるWITH ALSは、ALS啓発音楽イベント「MOVE FES.」の主催やアパレルのプロデュース、テクノロジーの共同研究・開発、訪問介護事業のサービスなどさまざまな活動を行っています。武藤さん自身も闘病を続けながら、当事者としての経験や視点を活かして、視線入力や脳波を活用したインターフェースの研究開発を行ってきました。2022年には、脳波で分身ロボットを操作して接客を行うアパレルストアの公開実験に世界で初めて成功しました。
また、アバター技術を駆使した身体拡張への挑戦も行っています。2023年には世界最高峰のメディアアートの祭典「アルスエレクトロニカ」(オーストリア)において筋電(筋肉が動いたときに微細に発生する電流)によって操作するアバターを用いたライブを成功させました。世界初となったこの「身体拡張ライブ」は、国内外の19のクリエイティブアワードを受賞しました。
「脳波と分身ロボット技術の融合をとおして、失った身体機能の補完を超えて、身体を拡張できる未来をつくっていきたいです。車椅子や義手義足と同じように、ブレインテックや分身ロボット、ロボットアームが日常生活において当たり前の選択肢になることを目指してプロジェクトを進めています」(武藤)。
進化するブレイン・コンピューター・インターフェース
脳の活動を読み取ってコンピューターを操作する技術「ブレイン・コンピューター・インターフェース(BCI)」を研究する脳科学者の荻野幹人さん(東京大学特任研究員)は、吉藤さんや武藤さんとともに研究開発を進めるひとりです。
「人間の脳では神経細胞が電気信号で情報の伝達をしています。BCIは、頭皮上に現れる電気信号と脳波を脳波計で増幅し、それらをAIを使いながら解読していきます。脳活動の計測手法には他にもfMRIなどがありますが、脳波の計測はセンサーを頭皮に付けるだけなので、安全で安価で高速という利点があります」(荻野)。
BCIで扱う身体情報には、身体の運動を想像することで生じる運動想起型電位(MI)、聴覚などの刺激への反応で生じる事象関連電位(ERP)、低周波などの刺激による定常状態誘発電位(SSEP)の3種類があり、荻野さんが武藤さんと研究を進めるなかで主に扱っているのは、ERPを用いた技術です。これは聴覚や視覚を使い、特定の音や画像に反応した脳波を読み取ることでコンピュータを操作できるものです。研究を重ねるなかで、三択制のコマンドを武藤さんが選択する意図に対してコンピュータは90%近い読み取り精度で結果を出せるようになったといいます。
「私が研究者として目指すのは、誰もが身体的制約にとらわれず互いにつながる世界の実現です。またそのような私の想いと同時に、研究には、それを必要とする社会や使い手という存在も必要です。ALS患者である武藤さんが先頭に立ってくれていることは、科学研究と社会を結ぶ大きな起点になっています」(荻野)。
いつまでもチャレンジが可能になる社会
クロストークでは、プロジェクトメンバーの吉藤と武藤さん、荻野さん、そして3人が携わる「BRAIN BODY JOCKEY(B2J)」プロジェクトディレクターである安藤良一さんを迎えて、身体拡張の未来について議論が展開されました。
「B2Jは、サイバネティック・アバター技術を用いて人間の能力を拡張しようという取り組みのひとつです。これまで皆さんが話してきたような技術を使って、身体拡張による新しいエンターテインメントやパフォーマンスの実現を目指しています。武藤さんを縛っている身体的制約を取り払って、彼が思い描く表現、クリエイティビティを解放する試みでもあります」(安藤)。
「ロボットアームを武藤さんの身体の一部にするという目標もありました。身体の一部にするということは、デバイスがファッションになることだと思ったんです。ALSによって身体機能を失った武藤さんは、視線入力を介して服をデザインし、自らも着用しています。その服を彼の意思通り動かせられるならば、その服は自他の共有認知として武藤さんの腕になり得るかもしれないと考えています」(吉藤)。
「B2Jでの技術的なチャレンジは、選択肢数を増やす、スピードを上げる、精度を上げるの3つでした。今は10秒ほどかかっているひとつの挙動を、5秒、3秒と縮めたいと思っています。“個人への特化”がキーワードです。脳波は人によって違うので、まずは武藤さんだけのデータを大量に取得・蓄積し、武藤さんに特化したシステムを構築するフェーズを踏んでいます。また、ALS患者はだんだん運動野の働きが失われてしまうといわれていますが、例えば前頭前野など運動野以外の部分でロボットアームを操作するシステムも今後は開発されていくと思っています」(荻野)。
スポーツやエンターテインメントなど活用の場面が広がるアバター技術。Meetup会場では、教育における活用可能性について、参加者からの質問が挙がりました。
「教育委員会と協力して特別支援学校などでの活用も模索しているところです。身体が動かないことで、進学や就職が厳しい子どもたちがたくさんいます。そこで、OriHimeを遠隔操作することでお年寄りの話し相手を務めたり、寝たきりの子にスポーツ大会に参加してもらい、働くことや社会を体験する取り組みを行っています」(吉藤)。
「障害によって自分の感情表現が難しい子どもたちに対して、脳波で感情を読み取るといった試みも行われており、ニューロフィードバックという研究が教育の場面で使われることもあります。例えば、日本人は英語のLとRの聞き分けが苦手と言われますが、脳波を見ながら音を聞くことで早く覚えられるといわれています」(荻野)。
「我々は、誰かを必要とし、誰かに必要とされることで生きることができる存在であると思っています。身体を動かすことが難しくなっても仲間とともに働き続けることができる、必要とされ続ける未来の実現をあらゆる領域で目指しています」(吉藤)。
セッションの終盤にはモデレーターより登壇者それぞれに向けて「身体の限界を突破する」ことの解釈を問う質問が投げかけられました。
「人間の限界を決める大きな要因のひとつに、自己認知があります。自身の可能性を縛ってしまうような認識を解放するために、日常から脳の活動や脳波を可視化することに可能性を感じています。その可能性を探るためにも、これからもニューロフィードバックに関する研究を続けていきたいと思っています」(荻野)。
「AIをはじめとするテクノロジーの発達に伴って、われわれ人間のできることが増え続けています。だからこそ、できないことや、できなくて悔しいと思えることを見つけることにも価値がある時代です。限られた人生の中でひとつでもふたつでも、そのようなできないことをミッションに掲げて挑戦すること。テクノロジーを携えながら身体の解放に挑戦していくことが当たり前の選択肢としてある社会を、次世代に向けてつくっていきたいです」(吉藤)。
「限界は自分が限界をつくったときに初めてできるもの。仲間とともにテクノロジーとクリエイティブによって限界を超える挑戦を続けます。挑み続ける限り、限界などないというのが私たちの考えです」(武藤)。
■登壇者の武藤さんが代表を務める一般社団法人WITH ALSは、ALS啓発を目的とした音楽フェス「MOVE FES. 2024」を、11/24(日)、LINE CUBE SHIBUYA(東京都渋谷区)にて開催いたします。
日本最大の難病ALS啓発音楽フェスMOVE FES.2024、11/24(日)にLINE CUBE SHIBUYA(渋谷公会堂)で開催!チケット好評発売中!
ミートアップの内容を詳しく知りたい方は、下記の配信アーカイブから、当日の様子をご覧いただけます。
Cybernetic being Meetup vol.02 身体の限界を突破する
文/長谷川智祥
Breaking Physical Boundaries: Exploring the Future of Human Augmentation – Cybernetic Being Meetup vol.02 Report
The Moonshot Research and Development Program in Japan, dedicated to promoting scientific and technological innovation, is set on one ambitious goal: to create a society by 2050 where people are free from the limitations of body, mind, space, and time. One of the key technologies driving this vision is the cybernetic avatar, designed to enable individuals to transcend their physical limitations.
As part of exploring a future society where people can share diverse skills and experiences to their fullest, the Cybernetic being Meetup series has been organized. The event’s second gathering, themed “Breaking Physical Boundaries,” featured discussions on technologies that extend and augment physical capabilities, especially through robotic avatars.
Creating “Alternative bodies” through Robotic Avatars
“Have you ever considered your career if you couldn’t physically move?” asked Kentaro Yoshifuji of Ory Laboratory Inc.,a member of Project Cybernetic being and the creator of the avatar robot OriHime and the remote-operated “Avatar Robot Café DAWN ver.β,” which enables remote communication with customers through robotic avatars. Yoshifuji explained that modern society assumes physical presence as a prerequisite for both work and play.
After meeting an ALS (Amyotrophic Lateral Sclerosis) patient in 2013, Yoshifuji began developing control systems for robotic avatars using myoelectric and gaze input technologies. In 2015, he met Masatane Muto, who also attended this event and has collaborated with him to create the “OriHime eye,” a communication tool for ALS patients.
“At Avatar Robot Cafe DAWN ver.β, it isn’t automation; real people are embodied into the robots to interact with customers. For example, an ex-barista with ALS operates a robot to serve coffee remotely, ensuring a personalized experience. Some operators participate in university classes, while others use OriHime for front-desk roles after being hired. This virtual ‘second body’ allows people with physical disabilities—or those with social anxiety that makes in-person interactions challenging—to work in ways that would otherwise be impossible,” Yoshifuji shared.
Recently, Yoshifuji’s work has expanded to envision new sports that uses OriHime as an avatar. “The Paralympics, for instance, only includes athletes who can still physically move. But I believe there’s a way to engage people who are bedridden in competitive sports. Using body-augmentation technologies, we can extend the scope of work, social participation, and even the time in life when one can pursue their passions,” he explained.
Technology for Physical Augmentation
After being diagnosed with ALS, Masatane Muto founded WITH ALS in 2016. He has since been addressing challenges faced by ALS patients through creative solutions. For this event, Muto used eye-tracking technology and his pre-recorded voice to deliver his presentation.
WITH ALS is dedicated to a mission of “creating a BORDERLESS society where everyone can be their true selves.” It hosts the awareness-raising music festival MOVE FES, designs apparel, collaborates on technology research, and provides home-care services. Muto has worked on developing interfaces driven by eye-tracking and brain waves. In 2022, he became the world first to successfully operate an apparel store via brain-controlled avatar technology.
Muto continues to pursue body-augmentation projects, and in 2023, he performed in Austria’s Ars Electronica festival using a myoelectric-powered avatar—winning acclaim with 19 creative awards. “By merging brainwave technology with avatar technology, I hope to go beyond restoring lost functions to expand new forms of bodily expression,” Muto said.
Advancing Brain-Computer Interface Technology
Cybernetic Being Meetup also welcomed Dr. Mikito Ogino, a neuroscience researcher at the University of Tokyo, who is advancing Brain-Computer Interface (BCI) technologies alongside Yoshifuji and Muto.
Ogino explained, “The BCI reads neural electrical signals from the scalp, decoding them with AI. Among the neural data we analyze are Motor Imagery (MI), Event-Related Potentials (ERP), and Steady-State Evoked Potentials (SSEP). I mainly focus on ERP, which reads brainwaves that respond to specific sounds or images.”
Through research with Muto, Ogino has developed a system that allows Muto to select commands with up to 90% accuracy. “My goal as a researcher is to build a world where everyone is connected, free from physical constraints,” Ogino added.
A society where lifelong challenges are possible
Avatar technology is expanding into sports and entertainment. At the meetup, participants raised questions about the potential applications in education.
“We are exploring collaboration with local education boards and considering uses in special education schools. Many children who face challenges in moving their bodies encounter barriers when it comes to advancing academically or finding employment. Through remote operation of OriHime, we’re enabling students to engage with the elderly or participate in sports events by giving them opportunities to experience work and society firsthand,” explained Yoshifuji.
“In cases where children with disabilities struggle to express their emotions, there are attempts to use neurofeedback to interpret their feelings based on brain waves. Research on neurofeedback is also being applied in educational settings. For example, it is said that Japanese speakers often have difficulty distinguishing the English sounds ‘L’ and ‘R,’ but using brain wave monitoring while listening to sounds has shown promise in accelerating their learning,” noted Ogino.
“We believe that our existence thrives on both needing others and being needed by others. Even if physical movement becomes difficult, our goal is to continue working with others and create a future where everyone can feel necessary, across all spheres of life,” added Yoshifuji.
Toward the end of the session, the moderator asked each panelist to share their perspective on what it means to “surpass the limits of the body.”
“One of the major factors that defines human limits is self-perception. I see potential in visualizing brain activity and brainwaves in daily life as a way to free ourselves from beliefs that limit our abilities. That’s why I intend to continue my research on neurofeedback to explore these possibilities further,” Ogino remarked.
“As technology continues to develop, especially AI, the range of things we humans can do only grows. This is precisely why there is value in identifying the things we cannot do or the things that evoke frustration. If, within our limited lives, we can take on one or two of these challenges as missions, we can create a society where challenging bodily limitations with technology is an accessible choice for the next generation,” said Yoshifuji.
“Limits only come into existence when we create them ourselves. Alongside our partners, we will continue to use technology and creativity to push beyond these boundaries. We believe that as long as we keep challenging ourselves, there are no limits,” concluded Muto.
■The nonprofit organization WITH ALS, led by speaker Muto, will host MOVE FES. 2024, a music festival aimed at raising awareness for ALS, on Sunday, November 24, at LINE CUBE SHIBUYA in Shibuya, Tokyo.
For more details on the day’s event, check out the archived stream on YouTube: Cybernetic Being Meetup vol.02 Breaking Physical Boundaries.
Text by Tomoyoshi Hasegawa