ドリームキャスト のぷるぷるぱっく。ユーザーの手を通して触覚的フィードバックを提供する。
ハプティクス (英 : haptics )とは、利用者に力 、振動 、動きなどを与えることで皮膚感覚 フィードバックを得るテクノロジーである[ 1] 。触覚技術 (英 : haptic technology)とも。そのような機械的刺激をコンピュータシミュレーション 内で仮想オブジェクトを作る補助として使うことができ、仮想オブジェクトを制御したり、機械などの遠隔制御(テレロボティクス )を強化したりできる。「視覚におけるコンピュータグラフィックス と同じ役割を皮膚感覚で果たす」と説明されてきた[ 2] 。ハプティクスを応用したデバイスは、そのインタフェース上にユーザーが与える力を計測するセンサ を組み込んでいることもある。
ハプティクスを使って微妙に制御された触覚を伴う仮想オブジェクトを作ることができ、それによって人間の触覚がどのように働くのかという研究を可能にした。そういったオブジェクトで、それまで困難だった人間の触覚機能を体系的に精査できるようになった。そうした研究ツールは、触覚とその背後にある脳機能がどのように働くのかを理解することに貢献している。
haptic という語はギリシア語 の ἅπτικός (haptikos ) に由来し、「触覚 について」という意味であり、さらにはギリシア語の「触る」を意味する動詞 ἅπτεσθαι (haptesthai ) が語源である。
歴史
初期のハプティクスの応用例として、大型航空機 で動翼 を操作するのにサーボ機構 を使った例がある。そのようなシステムは「一方向」の傾向があり、動翼に空気力学 的外力が加わっても制御側では感知できないことが多い。そこで、そのような外力をシミュレートするためにばねと錘が使われた。それ以前のサーボ機構を使っていない軽量な航空機では、失速 しそうになると空気力学的バフェッティング(振動)がパイロットの操縦桿で感じられていたため、それが危険な飛行状態への便利な警報になっていた。この操縦桿の震えはサーボ機構では感じられない。この感覚刺激の代替として迎角 を測定し、それが失速の危険のある角度にまで達したとき "stick shaker"(アンバランスな回転する錘)が起動して操縦桿を振動させる。これを「フォースフィードバック」と呼ぶ。フォースフィードバックは試験的に油圧ショベル にも実装されており、土や粘土の中に大きな岩が埋まっているような場合に操縦者にそれを感じさせることができ、作業効率向上に寄与している。
1973年、Thomas D. Shannon が触覚電話の特許をアメリカで取得している[ 3] 。
設計
ハプティクスでは、触覚フィードバックやコントローラに力を加えるのにアクチュエータ を利用している。
アクチュエータは電気信号に応じて機械的動きを生じる。初期の触覚フィードバックは振動モーターなどの電磁技術を採用しており、携帯電話のバイブレータ などがある。そういった電磁モーターによるフィードバックは強いことが多く、広範囲な感覚を生み出すことはできない。その後、新世代のアクチュエータ技術が登場し、素早い応答特性によってより広範囲な触感を生み出せるようになってきた。次世代のハプティクス用アクチュエータ技術として、人工筋肉 、圧電式 ・静電式 ・亜音速音響波によるサーフェスアクチュエーションなどがある。
アクチュエータには制御が必要であり、初期のハプティクス応答システムではデバイス全体を振動させることが多かった。第二世代の触覚制御アルゴリズムとチップが開発され、位置ごとに固有の応答を生成できるようになった[ 4] 。
アクチュエータを必要としない新たな技法を reverse-electrovibration と呼ぶ。デバイスからユーザーの身体に弱電流を流す方式である。指先の皮膚の周辺で発振する電界を生じさせると、アクチュエータがなくとも振動する触感が得られ、その触感は信号の形状・周波数・振幅によって変化する[ 5] 。
実用例
遠隔操作とシミュレータ
遠隔操作 (teleoperation) や遠隔制御ロボットで、接触力が操縦者側で複製される場合、「触覚遠隔操作」(haptic teleoperation) と呼ぶ。世界初の電気駆動の遠隔操作機械は、1950年代にアルゴンヌ国立研究所 のレイモンド・ゲルツ (英語版 ) が放射性物質を遠隔から取り扱うために開発した。その後、水中探索機などのさまざまな遠隔操作機械でフォースフィードバックが広く使われるようになっていった。
そのような遠隔操作機械をコンピュータでシミュレートする場合(操縦者の訓練用)、実際の操縦において感じられるフォースフィードバックを提供できればより有効である。その場合、操縦対象の物体は物理的には存在しないので、力はフィードバックされるのではなく、制御装置内で生成される。そのようにハプティクスを使い、触覚を表すデータをセーブしたり、再生したりできる。ハプティクスを応用したシミュレータとして、医療用シミュレータやパイロット訓練用フライトシミュレータ がある。
ビデオゲーム
ハプティクスは、アーケードゲーム 、特にレースゲーム でよく見られる。1976年のセガ のバイクゲーム Moto-Cross [ 6] 、またの名を Fonz [ 7] は、別のバイクと接触・衝突するとハンドルが振動するというハプティクスを採用している[ 8] 。1983年には辰巳電子工業 の TX-1 でカーレースゲームにフォースフィードバックが導入された[ 9] 。
単純なハプティクスは、ゲームコントローラ やジョイスティック などに採用されている。初期の実装形態はオプションであり、NINTENDO64 用コントローラの「振動パック 」がある。その後当初からコントローラやジョイスティックにフィードバック装置を組み込むようになった。ソニー の DUALSHOCK などがある。自動車のハンドル型のコントローラには、道路の状態を感じられるような仕組みを持つものもある。ターンや加速の際にしっかりグリップしているかスリップしていかをハンドルから感じられるという。
1997年、 マイクロソフト は、ForceFeedbackジョイスティックシリーズとこれに連携した各種ゲームを発表し、ゲーム内での搭乗機の慣性や、攻撃、被弾、破損と言った衝撃をジョイスティックの反動で表現出来るようにした。これらは単に振動が伝わるだけではなく、状況に合わせてX-Y軸にかかる反動を DirectInput APIで調節しながらモーターを駆動することで、ゲーム内で発生する力が実際に発生しているかのように感じ、反力で操作する事が出来る[ 10] 。
2007年、ノビント (英語版 ) がリリースした世界初のコンシューマ向け3Dタッチデバイス Falcon は高解像度の3次元フォースフィードバック機能を備えている。オブジェクトの表面の手触りや動きをシミュレートでき、ゲーム内のオブジェクトの存在を感じることができる[ 11] [ 12] 。
パーソナルコンピュータ
2013年09月04日、ミネベア は、Touching Feedbackを実現したCOOL LEAFキーボード を発表[ 13] 、同年10月より発売した。
2015年3月9日、Apple はMacBook [ 14] とMacBook Pro [ 15] で感圧タッチトラックパッド (Force Touch) を導入した[ 16] [ 17] 。
2020年12月1日、レノボ がYOGA Slim 950iのタッチパッドに導入した[ 18] 。
携帯機器
ハプティクスは携帯電話 でもよく使われている。LG やモトローラ などのメーカーはそれぞれ異なる種類の触覚技術を採用している。これは多くの場合、画面のタッチに対する振動という形で使われている。
Taptic Engine
2015年9月に発表されたiPhone 6s /6s Plus では、圧力検知機能の3D Touchと触覚フィードバック機能を実現するTaptic Engineが組み込まれている。
バーチャルリアリティ
ハプティクスはバーチャルリアリティ システムの重要な部分を担いつつあり、それまで視覚一辺倒だったバーチャルリアリティに触覚が加わっている。多くの場合スタイラス ベースの触覚再現を行っており、仮想世界とのユーザインタフェースにツールまたはスタイラスを使い、今日のハードウェアで計算量的に現実的な相互作用の形態を実現している。3Dモデリングやデザインのインタフェースにハプティクスを利用するシステムが開発されており、物理的な造形の仮想体験をアーティストに与えることを意図している。東京大学 では、3Dホログラムに超音波 によるフィードバックで触感を与える研究がなされた[ 19] 。篠田裕之をリーダーとする研究チームがこの技術をニューオーリンズ で開催された2009年のSIGGRAPH で発表した[ 20] 。
研究
高速振動などの刺激を使い、様々な触感をシミュレートする研究がなされてきた。例えば振動するピンを格子状に配置したパッドで、表面に触ることで様々な触感を生じさせるというものである。それらは現実味のある触感は生み出せなかったが、フィードバックとしては便利であり、様々な形・きめ・弾力を識別することができる。研究用にハプティクスAPI もいくつか開発されており、Chai3D、OpenHaptics、H3DAPI などがある。
医療
医療シミュレーションのためのハプティクスインタフェースは、腹腔鏡 検査やインターベンショナルラジオロジー (英語版 ) といった身体に負担が少ない医療行為の訓練に特に有効であり[ 21] 、遠隔手術 (英語版 ) にも有効である。これには、外科医があまり疲れずに似たような手術の回数をこなせるようになるという利点もある。ハプティクスはリハビリテーション 用ロボット でも応用されている。
オハイオ大学 のオステオパシー のカリキュラムでは、Virtual Haptic Back (VHB) というハプティクスを利用した医療シミュレーションが採用されている[ 22] 。研究によれば、VHBは触診の学習に多大な効果があったという。VHBは人間の背中 の外形と堅さをシミュレートし、2つの触覚インタフェースを使って触診を訓練できる。ハプティクスは義肢 や装具 にも適用されてきた。義肢から着用者に必須なフィードバックを提供すべく研究が続けられてきた。アメリカ合衆国教育省 とアメリカ国立衛生研究所 は、この分野の研究プロジェクトをいくつか行っている。Psyonic社は、2021年9月、触覚フィードバックを有する唯一の、かつ、市場で最速の人工義手Ability Hand[ 23] を製品として世に出した。
ロボット
Shadow Hand (英語版 ) は人間の手の強さ・繊細さ・複雑さを再現すべく、触感・圧力・位置などを把握するロボットハンドである[ 25] 。ロンドンの Richard Greenhill のチームが The Shadow Project の一部として開発したもので、今では Shadow Robot Company として企業化している。現在も進行中の開発計画は、誰もが納得する世界初の人工ヒューマノイド を完成させることを目標としている。初期のプロトタイプはNASA のヒューマノイド型ロボットあるいはロボノート のコレクションで見られる[ 26] 。Shadow Hand には各関節と指の腹に触覚センサがあり、それらの情報が中央コンピュータに送られ、処理・解析される。カーネギーメロン大学 とドイツのビーレフェルト大学 (英語版 ) は、触覚についての研究に Shadow Hand を利用している。
バーチャルリアリティ内のオブジェクトに触ることができるという初期の技術 PHANTOM は、MIT の Ken Salisbury の指導する学生だった Thomas Massie が1993年ごろ開発した[ 27] 。
アートとデザイン
触覚は単なる感覚ではなく、仮想オブジェクトとのリアルタイムの相互作用を可能にする。そのためハプティクスは、音響合成 、グラフィックデザイン 、コンピュータアニメーション といったバーチャルアートでも使われている。触覚デバイスにより、アーティストはリアルタイムで音響や画像を生成する仮想機器と直接的接触を持つことができる。例えば、バイオリンの弦のシミュレーションでは触覚デバイスとしての弓をアーティストが持ち、仮想の弦への圧力や表現性によってリアルタイムの振動を生み出す。この場合は物理モデル音源 を使う。
高い自由度のある入力機器 に触覚フィードバックを備えたもので、デザイナーやアーティストが作っている仮想の「表面」を感じさせることで、素早くかつ自然な造形が可能となる[ 28] 。
ハプティクスを制作に使っている著名なアーティストとしては、Christa Sommerer と Laurent Mignonneau[ 29] 、Stahl Stenslie [ 30] などがいる。
将来の応用
ハプティクスは今後、人間とテクノロジーの様々な領域での相互作用に関わっていくと考えられる。21世紀初頭の現在は、ホログラム や遠隔のオブジェクトとの触覚による相互作用に熟達することが研究の中心であり、それが成功すればゲーム・映画・製造業・医療をはじめとする様々な産業での応用が生まれる[要出典 ] 。医療業界では仮想手術や遠隔手術が可能になれば、医療の幅が広がる。衣料の小売業界では、インターネット経由で衣服に触ることができれば、インターネット販売の可能性が広がる[ 31] 。ハプティクスが将来発展すれば、従来は現実的でなかった新産業が生まれるかもしれない。
ホログラフィーとの相互作用
東京大学の篠田裕之の研究チームでは、ホログラフィー の投影に触覚フィードバックを加える研究を行っており、2008年に発表した。このフィードバックによってユーザーはホログラムで投影された物体に触っているかのような感覚を得ることができる。この研究では超音波 の音響放射圧 (英語版 ) を使って触感を生み出している[ 20] 。ハプティクスはホログラム自体には影響せず、単に触覚を加えるだけである。2008年の時点では、この技術はまだ製品化できていないが、産業界からの反応もある[ 32] 。この技術はユーザーが特殊なグローブなどを装着する必要がなく、通常の姿でそのまま使えるという利点がある[ 32] 。
将来の医療への応用
医療の分野では、遠隔手術への応用の研究が進んでいる。現場の看護スタッフがマシンをセットアップし、患者の準備をし、外科医は手術室には行かずに手術するという形になる。それによって専門医の治療を受ける可能性が広がり、専門の外科医がどこにいても働けるようにする。ハプティクスは遠隔手術の際に外科医に触覚フィードバックを提供する。
2003年、スタンフォード大学 の研究者らが訓練目的で手術のシミュレーション技術を開発した。手術のシミュレーションにより、外科医や外科の学生がより多くトレーニングできるようになる。ハプティクスは手術のシミュレーションでリアルな触感を生み出すのに使われる。遠隔手術でもシミュレーションでも、リアルな触感がなければメスを入れるのも困難である。計算機科学 と外科の教授である J. Kenneth Salisbury Jr. が率いるチームは、手術のシミュレーションのためにリアルな内臓を創りだすことを目標としているが Salisbury はそれが容易ではないと語っている[ 31] 。この研究の背景には、旅客機のパイロットが実際に旅客を乗せる前にフライトシミュレータで訓練するように、外科医も実際に誰かの身体を切る前に訓練できるようにすべきだ、という考え方がある[ 31] 。
ランセット に掲載されたボストン大学 の論文によれば、靴の内底がノイズのように無作為に振動するようにすると、年齢に従って衰えていくバランス制御が改善するという[ 33] 。
脚注
出典
^ Gabriel Robles-De-La-Torre. “International Society for Haptics: Haptic technology, an animated explanation ”. Isfh.org. 2010年2月26日 閲覧。
^ “Robles-De-La-Torre G. Virtual Reality: Touch / Haptics. In Goldstein B (Ed.), "Sage Encyclopedia of Perception". Sage Publications, Thousand Oaks CA (2009). ” (PDF). 2010年2月26日 閲覧。
^ https://www.google.com/patents?id=uMMtAAAAEBAJ&pg=PA1&lpg=PA1&dq=tactile+telephone+patent+thomas+shannon&source=bl&ots=gLutl2_hTx&sig=MxVX294trpCSeLNghCseRrZtc8A&hl=en&sa=X&ei=3M0sUP-IDOGvyQGXvoCgDg&sqi=2&pjf=1&ved=0CDEQ6AEwAA#v=onepage&q=tactile%20telephone%20patent%20thomas%20shannon&f=false
^ Rob, Ashwell (2011年12月8日). “Haptic controller chips offer low latency” . EE Times Asia . http://www.eetasia.com/ART_8800648990_480500_NP_3765a2c2.HTM 2012年10月5日 閲覧。
^ “REVEL: Tactile Feedback Technology for Augmented Reality ”. 2012年10月9日 閲覧。
^ Moto-Cross at the Killer List of Videogames
^ Fonz at the Killer List of Videogames
^ Mark J. P. Wolf (2008), The video game explosion: a history from PONG to Playstation and beyond , p. 39, ABC-CLIO, ISBN 0-313-33868-X
^ TX-1 at the Killer List of Videogames
^ 「SideWinder Force Feedback Pro」体感レポート ゲームソフトインプレッション, PC Watch, Impress
^ Wood, Tina (2007年4月5日). “Introducing the Novint Falcon | Tina Wood | Channel 10 ”. On10.net. 2010年2月26日 閲覧。
^ http://eduhaptics.org/index.php/HapticDevices/HomePage
^ COOL LEAFキーボード第2弾、10月日本発売決定!
^ “Apple、まったく新しいMacBookを発表 ”. Apple Newsroom (日本) . 2022年2月26日 閲覧。 “この新しいトラックパッドは感圧センサーを内蔵し、どこをクリックしても触覚機能フィードバックにより、すぐれた反応と統一された感覚をもたらします。このフィードバックの感覚は、各クリックを設定するときに感圧の度合いを変更することでカスタマイズすることもできます。”
^ “Apple、13インチMacBook Pro RetinaディスプレイモデルとMacBook Airをアップデート ”. Apple Newsroom (日本) . 2022年2月26日 閲覧。
^ 新「MacBook Pro Retinaディスプレイモデル」レビュー--13インチ、「Force Touch」トラックパッド搭載
^ 新「MacBook」の第一印象--刷新されたキーボードやトラックパッドを試してみた
^ “レノボ、薄軽ノートPC「YOGA Slim」にTiger Lakeモデル - 966gのCarbon含む2機種 ”. マイナビニュース (2020年12月1日). 2022年2月26日 閲覧。 “タッチパッドにはクリックする部分が存在しない代わりに、ハプティクス(触覚)技術によるクリック感を実現している”
^ 篠田裕之. “触覚フィードバックのある空中映像 ”. 2012年10月9日 閲覧。
^ a b “Touchable Hologram Becomes Reality (w/ Video) ”. Physorg.com (2009年8月6日). 2010年2月26日 閲覧。
^ Jacobus, C., et al., Method and system for simulating medical procedures including virtual reality and control method and system, US Patent 5,769,640
^ “Honors And Awards ”. Ent. ohiou.edu. 2008年4月2日時点のオリジナル よりアーカイブ。2010年2月26日 閲覧。
^ “Psyonic Ability Hand ”. 2022年3月27日 閲覧。
^ “Shadow Robot Company: The Hand Overview ”. Shadowrobot.com. 2010年2月26日 閲覧。
^ “Robonaut ”. Robonaut.jsc.nasa.gov. 2010年2月26日 閲覧。
^ Geary, James (2002). The body electric: an anatomy of the new bionic senses . Rutgers University Press. p. 130. ISBN 0-8135-3194-2
^ “FreeForm Systems ”. Sensable. 2010年2月26日 閲覧。
^ Laurent Mignonneau and Christa Sommerer
^ Stahl Stenslie Homepage
^ a b c “Haptic technology simulates the sense of touch — via computer ”. News-service. stanford.edu (2003年4月2日). 2010年2月26日 閲覧。
^ a b “Technology | Ultrasound to give feel to games ”. BBC News (2008年9月2日). 2010年2月26日 閲覧。
^ Attila A Priplata, James B Niemi, Jason D Harry, Lewis A Lipsitz, James J Collins. "Vibrating insoles and balance control in elderly people" The Lancet , Vol 362, October 4, 2003.
参考文献
Klein. D, D. Rensink, H. Freimuth, G. J. Monkman, S. Egersdörfer, H. Böse & M. Baumann. Modelling the Response of a Tactile Array using an Electrorheological Fluids. Journal of Physics D: Applied Physics , vol 37, no. 5, pp794–803, 2004.
Klein. D, H. Freimuth, G. J. Monkman, S. Egersdörfer, A. Meier, H. Böse M. Baumann, H. Ermert & O. T. Bruhns. Electrorheological Tactile Elements. Mechatronics Vol 15, No 7, pp883–897. Pergamon, September 2005.
Monkman. G. J. An Electrorheological Tactile Display. Presence (Journal of Teleoperators and Virtual Environments ) Vol. 1, issue 2, pp. 219–228, MIT Press, July 1992.
Robles-De-La-Torre G. Principles of Haptic Perception in Virtual Environments. In Grunwald M (Ed.), Human Haptic Perception , Birkhäuser Verlag, 2008 .
Vashisth, A.; Mudur, S. (2008). “Deforming point-based models using an electronic glove” . Proceedings of the 2008 C3S2E conference : 193. doi :10.1145/1370256.1370288 . http://doi.acm.org/10.1145/1370256.1370288
GOODRICH, JOANNA (March 2022). “Haptic Hand Gives Amputees Sense of Touch”. IEEE Spectrum 59 (3).
関連項目
外部リンク