JP5987387B2 - Head mounted display and surgical system - Google Patents
Head mounted display and surgical system Download PDFInfo
- Publication number
- JP5987387B2 JP5987387B2 JP2012065602A JP2012065602A JP5987387B2 JP 5987387 B2 JP5987387 B2 JP 5987387B2 JP 2012065602 A JP2012065602 A JP 2012065602A JP 2012065602 A JP2012065602 A JP 2012065602A JP 5987387 B2 JP5987387 B2 JP 5987387B2
- Authority
- JP
- Japan
- Prior art keywords
- wearer
- image
- display
- housing
- window
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 210000001508 eye Anatomy 0.000 claims description 75
- 210000003128 head Anatomy 0.000 claims description 18
- 238000012545 processing Methods 0.000 claims description 9
- 238000003384 imaging method Methods 0.000 claims description 8
- 238000000034 method Methods 0.000 description 25
- 238000003780 insertion Methods 0.000 description 15
- 230000037431 insertion Effects 0.000 description 15
- 238000005516 engineering process Methods 0.000 description 10
- 210000001061 forehead Anatomy 0.000 description 9
- 210000001747 pupil Anatomy 0.000 description 9
- 238000002674 endoscopic surgery Methods 0.000 description 8
- 238000001356 surgical procedure Methods 0.000 description 8
- 230000000007 visual effect Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 5
- 230000002093 peripheral effect Effects 0.000 description 5
- 238000011282 treatment Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 239000004973 liquid crystal related substance Substances 0.000 description 4
- 230000033001 locomotion Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 101100347655 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) NAB3 gene Proteins 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 239000004033 plastic Substances 0.000 description 3
- 239000011521 glass Substances 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000000465 moulding Methods 0.000 description 1
- 239000003973 paint Substances 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 239000005060 rubber Substances 0.000 description 1
- 230000001954 sterilising effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0176—Head mounted characterised by mechanical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0149—Head-up displays characterised by mechanical features
- G02B2027/0154—Head-up displays characterised by mechanical features with movable elements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0181—Adaptation to the pilot/driver
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
Description
本技術は、医療用として用いることができるヘッドマウントディスプレイに関する。 The present technology relates to a head mounted display that can be used for medical purposes.
装着者が頭部に装着して画像を観賞等するための、ヘッドマウントディスプレイ(HMD)が知られている。例えばHMDとして、右目用、左目用の画像表示面及び表示素子をそれぞれ有する構成が知られている(特許文献1参照)。このような構成のHMDは、視差のある画像を左右の表示面から装着者の左右の目にそれぞれ表示することができるため、クロストークの無い三次元(3D)画像を提供することができる。 2. Description of the Related Art A head mounted display (HMD) that is worn by a wearer on a head to view an image or the like is known. For example, as an HMD, a configuration having an image display surface and a display element for right eye and left eye is known (see Patent Document 1). The HMD having such a configuration can display a parallax image from the left and right display surfaces to the left and right eyes of the wearer, and thus can provide a three-dimensional (3D) image without crosstalk.
一方、医療用として用いられる内視鏡装置等においても、3D画像を提供できる3D内視鏡装置の実用化が検討されている。内視鏡手術は、通常の外科手術よりも患者に対して低侵襲性であり、近年盛んに行われている。一方で、手術時には、画像を通してのみ患部を確認することとなるため、従来の二次元(2D)画像では奥行き方向の把握が難しいことがあった。そこで、3D画像を提供できるHMDを3D内視鏡装置に接続して用いることにより、リアルな患部の画像を見つつ、より正確かつ迅速な内視鏡手術ができると期待される。 On the other hand, practical application of a 3D endoscope apparatus capable of providing a 3D image is also being studied for endoscope apparatuses used for medical purposes. Endoscopic surgery is less invasive to patients than normal surgery, and has been actively performed in recent years. On the other hand, at the time of surgery, since the affected part is confirmed only through the image, it is sometimes difficult to grasp the depth direction in the conventional two-dimensional (2D) image. Therefore, it is expected that by using an HMD that can provide a 3D image connected to a 3D endoscope apparatus, a more accurate and quick endoscopic operation can be performed while viewing a realistic image of the affected area.
ここで、上記構成のHMDを装着する際には、典型的には、装着者が表示面に表示される画像を見ながら、画像のブレやピントずれがない位置、すなわち表示面と左右の目とが対向する位置にHMDの装着位置を調整する必要があった。 Here, when wearing the HMD configured as described above, typically, the wearer looks at the image displayed on the display surface, and is in a position where there is no blurring or defocusing of the image, that is, the display surface and the left and right eyes. Therefore, it is necessary to adjust the mounting position of the HMD to a position opposite to the HMD.
しかしながら、術者(装着者)は、術中にHMDを装着する際、衛生上の問題からHMDに触れることができないため、自身で装着位置を調節することができない。そこで、装着者以外の者が装着を助ける必要があるが、この場合、装着者の目と表示面との位置関係を確認することが難しいため、HMDの装着者に対する相対位置の調整が困難であった。 However, the surgeon (wearer) cannot adjust the mounting position by himself / herself because he / she cannot touch the HMD due to hygiene problems when mounting the HMD during the operation. Therefore, it is necessary for a person other than the wearer to assist wearing, but in this case, since it is difficult to confirm the positional relationship between the wearer's eyes and the display surface, it is difficult to adjust the relative position of the HMD with respect to the wearer. there were.
以上のような事情に鑑み、本技術の目的は、表示画像を確認せずとも、装着者に対する相対位置の調整が可能なHMDを提供することにある。 In view of the circumstances as described above, an object of the present technology is to provide an HMD capable of adjusting a relative position with respect to a wearer without confirming a display image.
上記目的を達成するため、本技術の一形態に係るヘッドマウントディスプレイは、本体と、参照部と、を具備する。
上記本体は、筐体と、第1の軸方向に画像光を出射することが可能に構成される表示面を含む画像表示部と、上記筐体に取り付けられ装着者の頭部に装着可能に構成された装着部と、を有する。
上記参照部は、上記本体に配置され、上記本体と装着者の目との相対位置を外部へ表示する。
In order to achieve the above object, a head mounted display according to an embodiment of the present technology includes a main body and a reference unit.
The main body includes a housing, an image display unit including a display surface configured to emit image light in the first axial direction, and can be attached to the wearer's head attached to the housing. A configured mounting portion.
The reference unit is disposed on the main body and displays a relative position between the main body and the eyes of the wearer to the outside.
上記ヘッドマウントディスプレイは、参照部により、本体と装着者の目との相対位置を外部へ表示することができるため、参照部を参照しつつ、装着者に対する本体の相対位置を適切な位置に調整することが可能となる。 The head-mounted display can display the relative position of the main body and the wearer's eyes to the outside by means of the reference portion, so that the relative position of the main body with respect to the wearer is adjusted to an appropriate position while referring to the reference portion. It becomes possible to do.
上記参照部は、上記装着者の目を外部へ露見させるように構成され上記筐体に配置される窓部を有してもよい。
これにより、装着者の目の位置を外部から把握することが可能となり、窓部の配置等を参照することにより本体との相対位置の調整が容易になる。
The reference unit may include a window unit configured to expose the wearer's eyes to the outside and disposed in the housing.
As a result, the position of the wearer's eyes can be grasped from the outside, and the relative position with respect to the main body can be easily adjusted by referring to the arrangement of the window portion and the like.
さらに上記参照部は、上記窓部に配置され、上記表示面の位置と上記第1の軸方向とを指標する指標部を有してもよい。
これにより、指標部を参照しつつ、窓部を介して露見される装着者の目と表示面とを第1の軸方向に対向させるように調整することで、適切な相対位置とすることが可能となる。
Furthermore, the reference unit may include an indicator unit that is disposed in the window unit and that indicates the position of the display surface and the first axial direction.
Thereby, it can be set as an appropriate relative position by adjusting the eye of the wearer exposed through the window portion and the display surface to face each other in the first axial direction while referring to the indicator portion. It becomes possible.
また、上記窓部は、透光状態と、遮光状態とを切り替え可能に構成されてもよい。
これにより、上記相対位置を調整する場合は、透光状態とすることで装着者の目を外部から確認することができ、一方で画像を観察する場合は、遮光状態とすることでより明瞭な画像を提示可能な状態とすることができる。
Moreover, the said window part may be comprised so that a light transmission state and a light-shielding state can be switched.
Thereby, when adjusting the relative position, the wearer's eyes can be confirmed from the outside by setting the light-transmitting state. On the other hand, when observing the image, it is clearer by setting the light-shielding state. An image can be presented.
上記筐体は、上記第1の軸方向と直交する第2の軸方向に対向する第1及び第2の側面をさらに含み、
上記窓部は、上記第1及び第2の側面のうち少なくともいずれか一方に配置されてもよい。
これにより、側方より装着者の目の位置を確認することができ、表示面に対する高さ方向(すなわち第1及び第2の軸方向に直交する方向)の相対位置の調整が容易な構成とすることができる。
The housing further includes first and second side surfaces facing a second axial direction orthogonal to the first axial direction,
The window may be disposed on at least one of the first and second side surfaces.
Thereby, the position of the wearer's eyes can be confirmed from the side, and the relative position in the height direction (that is, the direction orthogonal to the first and second axial directions) can be easily adjusted with respect to the display surface. can do.
また、上記本体は、上記窓部を閉塞する第1の位置と上記窓部を開放する第2の位置との間を移動可能に構成される可動部材をさらに有してもよい。
これにより、可動部材によって窓部の開閉を行うことができる。したがって、画像を観察する場合は、可動部材を第1の位置とすることで窓部からの外光の入射を抑制し、より明瞭な画像を提示することができ、一方、第2の位置とすることで窓部を介して装着者の目が外部へ露見され、上記相対位置の調整をすることが可能となる。
The main body may further include a movable member configured to be movable between a first position for closing the window portion and a second position for opening the window portion.
Thereby, opening and closing of a window part can be performed by a movable member. Therefore, when observing an image, by making the movable member the first position, it is possible to suppress the incidence of external light from the window portion and present a clearer image, while the second position and By doing so, the wearer's eyes are exposed to the outside through the window portion, and the relative position can be adjusted.
具体的には、上記可動部材は、上記窓部を開閉する第1の領域と、上記表示面を支持する第2の領域とを有し、
上記表示面は、上記第1の位置で上記第1の軸方向に画像光を出射してもよい。
これにより、表示面から画像光が出射される場合には窓部が閉塞され、装着者により明瞭な画像を提示することができる。一方で、第2の位置においては、表示面を退避させ、装着者の周辺視野を確保することが可能な構成とすることができる。したがって、装着者に画像が提示される画像表示モードと、装着者の視野が開放される周辺視野確保モードとを迅速に切り替え可能な構成とすることができる。
Specifically, the movable member has a first region that opens and closes the window, and a second region that supports the display surface.
The display surface may emit image light in the first axial direction at the first position.
Thereby, when image light is emitted from the display surface, the window portion is closed, and a clearer image can be presented to the wearer. On the other hand, in the 2nd position, it can be set as the structure which can retract | save a display surface and can ensure a wearer's peripheral visual field. Therefore, it can be set as the structure which can switch rapidly between the image display mode in which an image is shown to a wearer, and the peripheral visual field ensuring mode in which a wearer's visual field is open | released.
さらに上記筐体は、上記第1の位置において上記第2の領域と対向する開口部を有してもよい。
これにより、可動部材を第2の位置としたときに、装着者の視野をより広く確保することが可能な構成とすることができる。
Furthermore, the housing may have an opening facing the second region at the first position.
Thereby, when the movable member is set to the second position, the wearer can have a wider field of view.
また、上記装着部は、上記筐体と上記装着部とを着脱自在に連結する連結部をさらに有し、
上記参照部は、上記装着部に配置され、上記連結部に対する装着者の目の相対位置を外部へ表示してもよい。
これにより、装着者があらかじめ装着部のみ装着しておくことで、必要に応じて筐体を連結することができる。さらに、参照部を参照して装着部を装着しておくことにより、筐体連結時に適切な相対位置とすることができ、筐体連結時ごとの相対位置の調整が不要な構成とすることができる。したがって、装着時間を大幅に短縮することが可能となる。
Further, the mounting portion further includes a connecting portion that detachably connects the housing and the mounting portion,
The reference unit may be disposed on the mounting unit and display a relative position of the wearer's eyes with respect to the connecting unit to the outside.
Thereby, a wearer can connect a housing | casing as needed by mounting | wearing only a mounting part beforehand. Furthermore, by mounting the mounting portion with reference to the reference portion, it is possible to obtain an appropriate relative position at the time of housing connection, and a configuration that does not require adjustment of the relative position at every time of housing connection. it can. Therefore, it is possible to greatly reduce the wearing time.
以上のように、本技術によれば、表示画像を確認せずとも、装着者に対する相対位置の調整が可能なHMDを提供することができる。 As described above, according to the present technology, it is possible to provide an HMD capable of adjusting a relative position with respect to a wearer without confirming a display image.
以下、本技術に係る実施形態を、図面を参照しながら説明する。 Hereinafter, embodiments according to the present technology will be described with reference to the drawings.
<第1の実施形態>
[内視鏡システム]
図1は、本技術の一実施形態に係る内視鏡システムの構成例を模式的に示す図である。本実施形態に係る内視鏡システム100は、ヘッドマウントディスプレイ(HMD)1と、内視鏡装置2と、プロセッサユニット3と、を有する。本実施形態に係る内視鏡システム100は、内視鏡手術の際、HMD1を装着した術者(装着者)が、患者の体内に内視鏡装置2を挿入し、内視鏡装置2によって撮像された患部の様子をHMD1によって確認しながら、患部に対して切除等の処置をするために用いられる。
<First Embodiment>
[Endoscope system]
FIG. 1 is a diagram schematically illustrating a configuration example of an endoscope system according to an embodiment of the present technology. An
内視鏡装置2は、例えば挿入部21と、操作部22と、を有する。挿入部21は、体内に挿入されることが可能な管状の構造を有し、患部を撮像するための図示しないCMOSイメージセンサ等の撮像素子や、レンズ等の光学系を内蔵している。また、本実施形態において、撮像素子及び光学系等は、視差を有する右目用、左目用の画像を撮像するために、2個ずつ配置されている。これにより、患部を立体的に表示できる3D画像のデータを取得することができる。
The
さらに、挿入部21には、患部を切除、あるいは把持するためのメスや鉗子等が挿入される。操作部22は、手術助手等に把持され、挿入部21の操作等が可能に構成される。また、操作部22は、ケーブル23を介してプロセッサユニット3に接続されている。
Further, a scalpel or forceps for excising or grasping the affected part is inserted into the
プロセッサユニット3は、例えば内視鏡装置2によって取得された画像の処理等を行う画像処理部31や、内視鏡装置2による撮像時に患部を照射する光源32、あるいはHMD1へ出力する画像に関する信号を変換処理するための変換部33等を含む。光源32から照射された光は、例えば挿入部21の内部に配置された導光用のファイバ等を介して挿入部21の先端へ導光される。
The
また、画像処理部31では、撮像された右目用及び左目用の画像を重ね合わせ、3D画像データとして処理することができる。当該3D画像データは、例えばケーブル36等を介してモニタ装置Mに出力され、HMD1を装着した装着者以外の補助者等にも、術中の患部が確認できるように構成される。
Further, the
HMD1は、プロセッサユニット3と電気的に接続され、内視鏡装置2を操作する手術助手等に対し内視鏡画像を観察しながら指示を行う装着者に装着される。HMD1とプロセッサユニット3との接続方法は、有線でも無線でも特に限られないが、本実施形態では、例えばHDMI端子により出入力されるケーブル35によって有線で接続されている。
The
内視鏡装置2によって撮像された右目用及び左目用の画像に関する信号は、画像処理部31によって画像信号として処理された後、変換部33でHMD1に適合する画像データとしてそれぞれ処理され、ケーブル35を介してHMD1に出力される。なお、プロセッサユニット3は、ケーブル35を介してHMD1へ駆動電力を供給するよう構成されてもよい。
Signals relating to the right-eye and left-eye images captured by the
なお、HMD1への出力信号を処理する変換部33は、画像処理部31等と同一の筐体に含まれる図示の例に限られず、画像処理部31等とは別個の筐体に収容されることも可能である。
The
次に、本実施形態に係るHMD1の詳細な構成について説明する。
Next, a detailed configuration of the
[HMD]
図2〜7は、本実施形態に係るHMD1の構成を示す図であり、図2は概略側面図、図3は概略正面図、図4、図5は装着者が装着した態様を示す概略側面図、図6は装着者が装着した態様を示す概略正面図、図7は画像表示部の構成を示すブロック図、である。HMD1は、本体4と、参照部6と、を有する。本実施形態に係るHMD1は、例えばゴーグル形状の非透過型のHMDで構成される。
[HMD]
2-7 is a figure which shows the structure of HMD1 which concerns on this embodiment, FIG. 2 is a schematic side view, FIG. 3 is a schematic front view, FIG. 4, FIG. 5 is a schematic side view which shows the aspect which the wearer wore. FIG. 6 is a schematic front view showing an aspect worn by the wearer, and FIG. 7 is a block diagram showing a configuration of an image display unit. The
なお、図中のx軸方向及びy軸方向はHMD1が属するxyz座標系における水平方向を示す。x軸方向(第2の軸方向)は、本体4の左右方向とする。y軸方向(第1の軸方向)は、x軸方向と直交する本体4の前後方向とする。z軸方向は、x軸方向とy軸方向とに直交する方向を示し、本体4の上下方向とする。
Note that the x-axis direction and the y-axis direction in the figure indicate the horizontal direction in the xyz coordinate system to which the
また、図中のX軸方向及びY軸方向は装着者が属するXYZ座標系における水平方向を示し、XY平面は「水平面」を示す。すなわち、X軸方向は装着者から見た左右方向、Y軸方向はX軸方向と直交し装着者から見た前後方向(装着者の正面−背面方向)を示す。Z軸方向はX軸方向及びY軸方向と直交し、鉛直方向を示す。 In the drawing, the X-axis direction and the Y-axis direction indicate the horizontal direction in the XYZ coordinate system to which the wearer belongs, and the XY plane indicates a “horizontal plane”. That is, the X-axis direction is the left-right direction as viewed from the wearer, and the Y-axis direction is orthogonal to the X-axis direction and indicates the front-rear direction (front-back direction of the wearer) as viewed from the wearer. The Z-axis direction is orthogonal to the X-axis direction and the Y-axis direction and indicates the vertical direction.
以下、各部の構成について説明する。 Hereinafter, the configuration of each unit will be described.
(本体)
本体4は、筐体41と、画像表示部42と、装着部5と、を有する。本体4は、装着部5が装着者の頭部に装着されることで、筐体41が装着者の左右の目の前に配置されるよう、構成される。
(Body)
The
筐体41は、全体として、装着者の左右の目を被覆して顔面にフィットするように構成される。筐体41は、x軸方向にそれぞれ対向する左側面(第1の側面)411、右側面(第2の側面)412と、y軸方向にそれぞれ対向する前面413、接眼面414と、z軸方向にそれぞれ対向する上面415、下面416と、を含む。
The
接眼面414は、装着者の左右の目の前に近接して対向するように構成され、例えば中央部には、装着者の鼻の形状にあわせて切り欠きが形成されていてもよい。一方前面413は、HMD1を装着した装着者の正面に配置され、例えば矩形状に構成される。左側面411、右側面412は、装着時において、それぞれ装着者の顔面の左側方、右側方に配置され、例えば装着者の左右のこめかみ付近まで被覆するように構成されてもよい。
The
このような構成の筐体41により、装着時に装着者の眼前をほぼ完全に被覆することができ、外光を遮光し、より鮮明な画像を提示ことができる。
The
なお、筐体41は上記の構成に限られず、例えば、接眼面414を除く左右の側面411、412、前面413、上面415及び下面416が、滑らかに連接して一つの外表面を形成するように構成されてもよい。
The
図7は、画像表示部42の構成を示すブロック図である。画像表示部42は、左右の表示面421,422と、画像生成部44と、左右の表示素子431,432と、を含む。画像表示部42は、全体として筐体41の内部に配置され、内視鏡装置2によって撮像された所定の画像を装着者に提示する画像表示装置として構成される。具体的には、まず、画像生成部44が、プロセッサユニット3を介して取得された画像データに基づき、左右の表示素子431,432へそれぞれ出力するための画像信号を生成する。次に、表示素子431,432が、これらの画像信号に応じた画像光をそれぞれ表示面421,422へ出射し、装着者に画像が提示される。
FIG. 7 is a block diagram illustrating a configuration of the
表示面421,422は、x軸方向に沿って接眼面414上に配置され、装着者の左目用及び右目用の画像を、それぞれの目に表示することが可能に構成される。表示面421,422の形状及び大きさは特に限られないが、本実施形態において、縦約16mm、横約30mmの矩形状でそれぞれ構成される。表示面421,422を形成する材料は、透過性を有すれば特に限られず、例えばプラスチック板、ガラス板等が採用される。
The display surfaces 421 and 422 are disposed on the
画像生成部44は、本実施形態において、プロセッサユニット3から送信された右目用及び左目用の画像データをHMD1用の画像信号に変換する、画像データ変換回路等で構成される。画像生成部44は、ケーブル35と接続されたHDMI(High-Definition Multimedia Interface)入力端子441から内視鏡画像データを取得する。
In this embodiment, the
さらに画像生成部44は、当該画像データに所定のずらし処理等を行い、HMD1に適した左目用及び右目用の画像信号を生成してもよい。これにより、装着者に対し所望の3D画像を提示することが可能となる。当該ずらし処理におけるずらし量は、例えばHMD1の表示素子431,432と目の距離、両目の間隔、あるいは後述する虚像位置等から算出される。
Further, the
画像生成部44は、生成された左目用及び右目用の画像データを、左右の表示素子431,432にそれぞれ出力する。
The
左右の表示素子431,432は、画像生成部44から入力された画像データに基づいて、左右の表示面421,422へ向かって画像光を出射する。表示素子431,432は、例えば、表示面421、422とy軸方向に対向してそれぞれ配置される。これにより、表示素子431,432及び表示面421,422から出射される画像光の光軸は、y軸方向と平行になる。
The left and
表示素子431,432は、本実施形態において、有機EL(Electroluminescence)素子で構成される。表示素子431,432として有機EL素子を採用することで、小型化、高コントラスト及び迅速な応答性等を実現することができる。
In the present embodiment, the
表示素子431,432は、例えば複数の赤色有機EL素子,緑色有機EL素子,青色有機EL素子等がマトリクス状に配置された構成を有する。これらの各素子は、アクティブマトリクス型、あるいは単純(パッシブ)マトリクス型等の駆動回路によって駆動されることで、それぞれ所定のタイミング、輝度等にて自発光する。また、表示素子431,432は、上記駆動回路が画像生成部44で生成された画像信号に基づいて制御されることで、表示素子431,432全体として所定の画像が表示されるよう、構成される。
The
なお、表示素子431,432は上記構成に限られず、例えば、液晶表示素子(LCD)等を採用することも可能である。
Note that the
表示素子431,432と表示面421、422との間には、光学系として、例えば図示しない複数の接眼レンズがそれぞれ配置される。これらの接眼レンズと装着者の目とを所定距離で対向させることにより、装着者に対し、所定位置(虚像位置)に表示されるように見える虚像を観察させることが可能となる。虚像位置及び虚像の大きさは、表示素子431,432及び光学系の構成等によって設定され、例えば、虚像の大きさが映画館サイズの750インチであり、虚像位置が装着者から約20m離れた位置とするように設定される。
Between the
ここで、装着者に虚像を観察させるためには、表示素子431,432からy軸方向を光軸方向として出射される画像光が、接眼レンズ等により左右の目の網膜上にそれぞれ結像するように、筐体41を装着者に対して配置する。
Here, in order to make the wearer observe a virtual image, image light emitted from the
このことから、装着者に所定の画像を観察させるためには、装着者の目線が画像光の出射方向と略一致するように、すなわち、表示面421,422と装着者の左右の目とがそれぞれy軸方向に対向するように筐体41を配置する必要がある。以下、このような筐体41の装着者に対する相対位置を「適切な相対位置」と表すこととする。
From this, in order for the wearer to observe a predetermined image, the eyes of the wearer are substantially coincident with the emission direction of the image light, that is, the display surfaces 421 and 422 and the left and right eyes of the wearer are aligned. The
筐体41の配置が適切な相対位置でない場合には、ピントがぼけた画像となったり、3D画像にブレが生じたりすることで、装着者は所望の画像を見ることができない。したがって、HMD1の装着に際し、筐体41を適切な相対位置に調整し、さらに装着している間、当該位置がずれないように筐体41を頭部に固定する必要がある。本実施形態においては、以下の装着部5によって筐体41の相対位置が調整及び固定される。
When the arrangement of the
装着部5は、バンド51,52と、調整部53と、左右の取付部材541,542と、額当てパッド55と、を有する。装着部5は筐体41に取り付けられ、筐体41が装着者に対し適切な相対位置となるよう、すなわち、y軸方向に表示面421,422と装着者の左右の目とが相互に対向するように、装着者の頭部に装着可能に構成される。
The mounting
図4,5を参照し、本実施形態に係る装着部5の概略構成について説明する。バンド51,52は、筐体41と取付部材541,542を介して取り付けられ、例えば筐体41の左側面411から装着者の頭頂部及び後頭部をそれぞれ通り、右側面412に至るよう、構成される。さらに、調整部53により、バンド51,52の長さを調節可能に構成されることから、筐体41の装着者に対する高さ方向及び前後方向の相対位置を調整することができる。また、額当てパッド55が装着者の額に当接可能に構成され、後頭部を通るバンド52の長さを調節することで、額当てパッド55とバンド52とによって装着者の前後方向の相対位置を固定することが可能となる。
A schematic configuration of the mounting
バンド51、52は、いずれも、例えば取付部材541、542にそれぞれ取り付けられる2本の短いバンドを含み、これらの短いバンド同士が所定の長さで重なるように固定されることで、全体として一本のバンドになるようそれぞれ構成される。当該固定には、後述する調整部53が用いられる。またバンド51、52を形成する材料は、強度や柔軟性を鑑み、例えば、ゴム、プラスチック、布等が採用される。
Each of the
調整部53は、本実施形態において、装着者に対する筐体41の相対位置を調整する。調整部53は、例えば、バンド51、バンド52にそれぞれ取り付けられ、取付部材541から取付部材542に至るこれらの長さをそれぞれ調節することが可能な調節部材531、532を有する。
In the present embodiment, the
調節部材531,532としては、例えばベルト等に用いられるバックルや、片ラッチ等の構成を採用することができる。このような構成により、バンド51,52のそれぞれの2本の短いバンドの重なりの長さを任意に固定及び解除することができ、バンド51,52の長さを可変とすることができる。調節部材531,532の構成は特に限られず、バンド51,52の素材、形状等に応じて適宜選択することができる。
As the adjusting
左右の取付部材541,542は、本実施形態において、左右の側面411,412にそれぞれ配置される。取付部材541,542の構成は特に限られず、例えばバンド51,52の一端部同士をそれぞれ重ね合わせて筐体41に取り付ける、カシメ状の構成としてもよい。また取付部材541,542は、筐体41に対してバンド51,52を所定角度範囲でそれぞれ回動自在とするように構成されてもよい。
In the present embodiment, the left and
額当てパッド55は、例えば筐体41の接眼面414から、上面415の上方へ突出するように取り付けられる。額当てパッド55の構成は特に限られず、装着者の装着感等を鑑み、装着者と当接する面にクッション状の構成が採用される。また、必要に応じて、筐体41に対する角度やz軸方向の高さ位置を調整可能に構成されてもよく、必要に応じて取り外し可能に構成されてもよい。
The
(参照部)
参照部6は、本実施形態において、窓部61と、指標部(マーク)62と、を有する。参照部6は、窓部61により外部へ露見される装着者の目を、マーク62の位置を指標として調整することで、装着者に対する本体4の相対位置を調整することが可能に構成される。
(Reference part)
The
窓部61は、本実施形態において、筐体41の左側面411に配置され、より具体的には、装着時において装着者の左側方からx軸方向に装着者の目と略対向する位置に配置される。また、窓部61は、典型的には矩形状で構成されるが、その形状及び大きさは、後述する透光状態において十分装着者の目を露見できれば、特に限られない。
In the present embodiment, the
窓部61は、本実施形態において、透光状態と、遮光状態と、が切り替え可能に構成される。図4、5は、装着者がHMD1を装着した態様を示す概略側面図であり、図4は、窓部61を透過状態とした態様を示し、図5は、窓部61を遮光状態とした態様を示す。窓部61は、本実施形態において、液晶シャッタで構成される。これにより、窓部61は、図示しない駆動源からの駆動電圧が制御されることにより、透光状態と遮光状態とを切り替えられることが可能となる。窓部61に係る透光状態と遮光状態との切り替えは、例えば筐体41、あるいはプロセッサユニット3に配置されたスイッチ等により行われるよう、構成されてもよい。
In the present embodiment, the
例えば窓部61は、相対位置の調整時において透光状態とされることにより、装着者の目を外部へ露見させることができる。一方、画像観察時に遮光状態へ切り替えられることにより、筐体41と装着者の目との間への外光の入射を抑制し、鮮明な画像を提示することが可能に構成される。
For example, the
マーク62は、例えば窓部61に配置され、表示面421,422の位置と、画像光の出射方向であるy軸方向とを指標する。例えば、マーク62は、表示面421,422の位置として、表示面421,422の中心(すなわち対角線の交点)のz軸方向に沿った高さ位置(以下、単に「高さ位置」とする)を指標する。具体的には、表示面421,422の中心の高さ位置において、y軸方向に延在するように配置された、1本の直線で構成される。このようなマーク62により、表示面421,422の配置及び表示面421,422から出射される画像光の出射方向を確認することができる。
The
マーク62は、例えば窓部61上に貼付されたシール等で構成されてもよいし、塗料等により窓部61上に直接描かれてもよい。あるいは、透明板を二色成形等することでマーク62を形成し、当該透明板を窓部61上に配置してもよい。
The
上記構成の参照部6により、装着者の目の位置を窓部61を介して確認しつつ、装着者の目に対する筐体41の相対位置を調整することができる。具体的には、目の中心(瞳の位置)をマーク62に重ね合わせ、装着者の目線(眼球の表面と略直交する方向)をマーク62の延在方向と一致させるように調整する。これにより、装着者の目と表示面421,422とをy軸方向、すなわち表示面421,422からの画像光の出射方向に対向させることができ、本体4を装着者に対し適切な相対位置とすることができる。
With the
以下、本実施形態に係るHMD1の装着方法の例について説明する。ここでは、内視鏡装置2を用いて内視鏡手術を行おうとする装着者が、既に手指を滅菌しており、自身でHMD1の相対位置を調節できない場合において、周囲にいる手術助手等の装着補助者(以下、単に補助者とする)が装着者にHMD1の装着を行う例について説明する。
Hereinafter, an example of a mounting method of the
[装着方法例]
まず、HMD1は、補助者により、バンド51,52を装着時に想定される長さよりも長く調節され、準備されている。この際HMD1の本体4及び窓部61は、予め起動されていてもよい。これにより、窓部61を透光状態とすることができる。また補助者は、例えば装着者の左側方に立ち、HMD1の装着の補助をしやすい高さとなるよう適宜台に乗って準備している。
[Example of installation]
First, the
次にHMD1は、補助者により装着者の上方から頭部に装着され、調節部材531、532によりバンド51,52の長さを仮調節される。この際のバンド51,52の長さは、装着者に対するHMD1の相対位置が固定されず、相対位置を調整可能な程度に余裕を持たせた長さとする。また、バンド51は装着者の頭頂部に、バンド52は装着者の後頭部に、それぞれ装着される。
Next, the
さらに、HMD1の装着者に対する相対位置が調整される。この際、補助者は、窓部61を透光状態とすることにより、装着者の左側方から窓部61を介して装着者の(左)目の位置を確認することができる。さらに、マーク62を参照し、装着者の目をマーク62に重ね合わせ、目線をマーク62の延在方向に一致させるように本体4の相対位置を調整する。これにより、表示面421,422と装着者の目とがy軸方向に略対向するように、本体4が配置される。この際、必要に応じてバンド51の長さが調節部材531により調節されてもよい。またここでは、バンド51,52が余裕のある長さに調節されているため、本体4の相対位置の調整を容易に行うことができる。
Further, the relative position of the
本体4の配置が適切な相対位置となるように調整された後、HMD1の当該相対位置が固定されるようにバンド52の長さが調節される。ここでは、バンド52の長さが調節部材532によってより短く調節され、額当てパッド55とバンド52とが装着者の頭部の前後方向を挟み込むことで、本体4の装着者に対する前後方向の相対位置が決定される。
After the arrangement of the
以上のように、本実施形態に係るHMD1は、窓部61を介して確認される装着者の目をマーク62とx軸方向に重なるように装着されることにより、表示面421,422と装着者の目とをy軸方向、すなわち画像光の出射方向に対向させることができる。これにより、装着者の目と表示面411,412との位置関係を把握しにくい補助者であっても、マーク62を参照しつつHMD1の相対位置を調整し、装着者に対して適切な相対位置とすることが可能となる。
As described above, the
したがって、例えば手術中にHMD1を装着する必要がある場合であっても、装着者自身がHMD1に触れることなく、HMD1が適切な相対位置として装着されることが可能となる。また、これにより、装着者は、快適な3D画像を見ながら、円滑に内視鏡手術を行うことが可能となる。
Therefore, for example, even when it is necessary to wear the
また、装着者が補助者の方へ顔の正面を向けることができない場合であっても、窓部61及びマーク62が筐体41の左側面411に配置されているため、補助者が装着者の側方から相対位置を容易に調整することが可能となる。
Even when the wearer cannot turn the front of the face toward the assistant, since the
さらに、本実施形態に係る窓部61は、液晶シャッタにより透光状態と遮光状態とを切り替え可能に構成されているため、画像を観察する際には遮光状態とし、外光の入射を抑制することができる。これにより、装着時には装着者の目を露見させ、相対位置の調節が可能になるとともに、画像観察時には装着者と筐体41との間を遮光状態とし、表示面421,422により表示される画像をより見やすいものとすることができる。
Furthermore, since the
加えて、上記構成の装着部5により、バンド51,52の長さが容易に変更できるため、補助者は、装着及び相対位置の調整、固定等を容易に行うことが可能となる。
In addition, since the lengths of the
<第2の実施形態>
図8〜13は、本技術の第2の実施形態に係るHMD10の構成を示す図であり、図8、9は概略側面図、図10、11は概略正面図、図12、13は装着者が装着した態様を示す概略側面図、である。なお、図において上述の第1の実施形態と対応する部分については同一の符号を付し、その詳細な説明は省略するものとする。
<Second Embodiment>
8-13 is a figure which shows the structure of HMD10 which concerns on 2nd Embodiment of this technique, FIG.8, 9 is a schematic side view, FIG.10, 11 is a schematic front view, FIG.12, 13 is a wearer It is a schematic side view which shows the aspect which mounted | wore. In the figure, portions corresponding to those of the first embodiment described above are denoted by the same reference numerals, and detailed description thereof is omitted.
本実施形態において第1の実施形態と異なる主な点は、本体40が、参照部60の窓部610を開閉するように構成された可動部材450を有する点である。可動部材450は、表示面421,422を支持し、窓部610が閉塞される位置において、装着者に画像を提示するように構成される。
In the present embodiment, the main point different from the first embodiment is that the
本実施形態に係る筐体410は、第1の実施形態と同様に左側面4110と、右側面4120と、前面4130と、上面4150と、下面4160と、を有しており、一方で接眼面は有していない。前面4130と、左右の側面4110、4120とには、開口部4170が形成されている。筐体410に含まれない接眼面及び表示面4210,4220は、後述する可動部材450に配置される。
The
本体40は、開口部4170の深さ方向内部に、空間Sが形成されている。空間Sは、後述する第1の位置で可動部材450を収容可能に構成される。さらに、筐体410の上面4150、左右の側面4110、4120及び前面4130に囲まれた内部には、第2の位置での可動部材450の一部を収容可能に構成される収容領域4180が形成されている。
In the
一方、第1の実施形態と同様に、左側面4110には窓部610が配置されている。窓部610には、例えば第1の実施形態と同様の形状のマーク620が配置されている。窓部610は、本実施形態において開口部4170と連続して、一体に形成される。
On the other hand, as in the first embodiment, a
開口部4170及び窓部610は、例えば透光性のプラスチック板、ガラス板等で構成される。これにより、開口部4170及び窓部610が透光性を有し、装着者の視野が確保できるとともに、窓部610から装着者の目を露見されることが可能となる。さらに、本体40の強度を高めるとともに、空間S内への異物の侵入等を防止し、より安全性の高い構成とすることができる。
The
可動部材450は、窓部610を閉塞する第1の位置と、窓部610を開放する第2の位置との間を移動可能に構成される。図8、10、12は、それぞれ可動部材450が第1の位置にある態様を示す概略側面図及び正面図であり、図9、11、13は、それぞれ可動部材450が第2の位置にある態様を示す概略側面図及び正面図である。
The
本実施形態において、第1の位置では、装着者が表示面421,422により内視鏡画像等を提示されるように構成される。一方、第2の位置では、開口部4170により装着者の前方及び側方への視野が確保されるとともに、窓部610を介して外部の補助者等に装着者の目が露見され、本体40の相対位置の調整が可能となるように構成される。
In the present embodiment, the first position is configured such that the wearer is presented with an endoscopic image or the like on the display surfaces 421 and 422. On the other hand, in the second position, the
すなわち、可動部材450は、x軸方向に対向する2枚の可動板(第1の領域)451,452と、可動板451,452と連接し表示面421、422を支持する可動筐体(第2の領域)453と、を有する。可動板451,452は、第1及び第2の位置間の移動に伴い、窓部610を開閉する。また、可動筐体453は、第1の位置において開口部4170と対向する。
That is, the
さらに本実施形態において、可動部材450は、可動板451、452を本体40に対して回動させることが可能に配置されx軸方向に延在する可動軸454を有する。これにより、可動部材450は、可動軸454(x軸)まわりに回動し、第1の位置と第2の位置との間を移動可能に構成される。具体的には、空間Sに収容される第1の位置からx軸まわりに鉛直方向上方に回動し、第2の位置に移動するように構成される。
Furthermore, in the present embodiment, the
可動部材450の駆動方法については特に限られない。例えば、装着者あるいは補助者の手動により駆動されるように構成されることも可能である。これにより、装置構成を簡略なものとすることができる。
The method for driving the
あるいは、可動部材450は、モータ等の駆動源により、自動で移動可能としてもよい。これにより、例えば手術中等であって、装着者あるいは補助者がHMD10に直接触れることができない場合であっても、プロセッサユニット3等に配置されたスイッチ等により、移動可能とすることができる。
Alternatively, the
可動筐体453は、第1の位置において空間Sに収容される。具体的には、可動筐体453は、第1の位置でx軸方向に対向するように配置される左右の側面4531、4532と、第1の位置でy軸方向に対向するように配置される前面4533及び接眼面4532と、を含む。左右の側面4531、4532は、それぞれ可動板451,452に支持される。
The
また、可動筐体453の接眼面4534には、左右の表示面421、422が配置される。また、可動筐体453の内部には、画像表示部42の画像生成部44と、左右の表示素子431,432と、が配置される。これにより、可動筐体453は、第1の位置において、表示面421、422からy軸方向に画像光が出射されるように構成される。
In addition, left and right display surfaces 421 and 422 are arranged on the
また第1の位置において、可動板451,452は、窓部610と、開口部4170の一部と、を閉塞するように構成される。また、第1の位置において、可動筐体453の前面4533及び左右の側面4531、4532も、それぞれ開口部4170と対向し、閉塞するように構成される。本実施形態において、可動板451,452、前面4533及び左右の側面4531、4532は、連接して配置されるため、第1の位置においては、窓部610及び開口部4170の全体が閉塞されることとなる。したがって、第1の位置において装着者へ画像が提示される際には、外光が遮光され、装着者に鮮明な画像を提示することが可能となる。
In the first position, the
第2の位置では、可動筐体453は、筐体410内部に形成された収容領域4180に収容される。これにより、開口部4170が開放され、空間Sを介して装着者の前方及び左右側方の視野を確保することができる。
In the second position, the
また第2の位置では、可動板451,452が可動軸454まわりに回動することにより、窓部610が開放され、窓部610から装着者の目が露見される。これにより、装着者の目の位置を窓部610を介して確認しつつ、装着者の目に対する本体40の相対位置を調整することができる。
In the second position, the
以上の実施形態においては、本体40が可動部材450を有することにより、例えば装着者に画像が提示される画像表示モードと、装着者の視野が開放される周辺視野確保モードとを切り替え可能な構成とすることができる。これにより、HMD10を装着した状態にあっても、可動部材450を移動させることにより、周辺の視野を確保することができる。したがって、例えば内視鏡手術以外の処置を行う場合であってもHMD10を装着した状態で行うことができ、可動部材450の位置を移動させるだけで迅速に内視鏡手術に移行することが可能となる。
In the above embodiment, the
また、本実施形態においても、第1の実施形態と同様に、参照部60を有していることから、可動部材450を第2の位置とした状態で窓部610を開放し、装着者に対する筐体410の相対位置を適切な位置に調整することができる。
Also in this embodiment, as in the first embodiment, since the
さらに、参照部60を参照して筐体410を適切な相対位置とした後は、第1の実施形態と同様の構成の装着部5により、当該相対位置が維持できるため、画像表示モードに切り替える度ごとの相対位置の調整が不要となる。したがって、例えば一刻を争う手術中にあっても、内視鏡手術とそれ以外の処置との間をより迅速に移行可能な構成とすることができる。
Further, after the
<第3の実施形態>
図14〜17は、本技術の第3の実施形態に係るHMD1Aの構成を示す図であり、図14、15は概略側面図、図16、17は装着者が装着した態様を示す概略側面図、である。なお、図において上述の第1の実施形態と対応する部分については同一の符号を付し、その詳細な説明は省略するものとする。
<Third Embodiment>
14-17 is a figure which shows the structure of HMD1A which concerns on 3rd Embodiment of this technique, FIG.14, 15 is a schematic side view, FIG.16, 17 is a schematic side view which shows the aspect which the wearer wore. . In the figure, portions corresponding to those of the first embodiment described above are denoted by the same reference numerals, and detailed description thereof is omitted.
また、図14、16は、それぞれ装着部5Aと筐体41Aとが分離した態様を示す概略側面図であり、図15,17は、それぞれ装着部5Aと筐体41Aとが連結した態様を示す概略側面図である。本実施形態において第1の実施形態と異なる主な点は、装着部5Aが、筐体41Aと装着部5Aとを着脱自在に連結する連結部7を有する点である。また、参照部6Aは、装着部5Aに配置され、連結部7に対する装着者の目の相対位置を外部へ表示するように構成される。
14 and 16 are schematic side views showing a state in which the mounting
装着部5Aは、本実施形態において、装着者の頭頂部及び後頭部にそれぞれ装着されるバンド51A,52Aと、さらに装着者の前頭部に装着されるバンド56Aを有する。バンド51A,52Aは、バンド56Aと取付部材541A,542Aを介して取り付けられ、第1の実施形態と同様の構成の調整部53A(調節部材531A,532A)が取り付けられている。
In the present embodiment, the mounting
一方、バンド56Aは、装着者の前頭部(例えば額)に装着される。さらに、バンド56Aには、連結部7が配置されている。また、本実施形態において、バンド56バンド53AAには、参照部6Aが配置される。
On the other hand, the
参照部6Aは、本実施形態において、装着部5Aから筐体41Aが分離された状態、すなわち装着部5Aのみ装着された状態において、連結部7に対する装着者の目の相対位置を外部へ表示するように構成される。
In the present embodiment, the
具体的には、参照部6Aは、窓部61Aと、マーク62Aと、を有する。窓部61Aは、透光性の矩形のパネル形状を有し、装着部5Aを装着した際に装着者の目(例えば左目)が透過されるように、例えばバンド56Aの連結部7の左下方に配置される。一方、マーク62Aは、第1の実施形態と同様の構成を有する。すなわち、マーク62Aは、窓部61A上に配置され、連結後の筐体41Aに配置される表示面421、422の中心とx軸方向に対向する高さ位置に配置され、y軸方向に延在する1本の直線状の構成を有する。
Specifically, the
参照部6Aによる連結部7に対する装着者の目の相対位置の調整は、第1の実施形態と同様、目の中心(瞳の位置)をマーク62Aにx軸方向に重ね合わせ、目線の方向とマーク62Aの延在方向に一致させるようにすることで行われる。これにより、連結部7によって装着部5Aと筐体41Aとが連結された際、装着者の目と表示面421,422とをy軸方向、すなわち表示面421,422からの画像光の出射方向に対向させることが可能となる。
The adjustment of the relative position of the wearer's eyes with respect to the connecting
連結部7は、装着部5Aと筐体41Aとを着脱自在とし、かつ、装着部5Aが適切な相対位置として装着され装着部5Aと筐体41Aとが連結された後に、表示面421,422と装着者の目とがy軸方向に対向するように連結され、配置を固定するように構成される。
The connecting
連結部7の構成は、装着部5Aに対し筐体41Aの相対的な配置が固定できれば、特に限られない。例えば、ワンタッチ継ぎ手等と同様の構成を用いることができる。具体的には、バンド56Aに配置された被挿入部71と、筐体41A側に取り付けられ被挿入部71に挿入されることが可能な挿入端部72と、を有する。
The configuration of the connecting
被挿入部71は、例えば、y軸方向に挿入端部72が挿入されることが可能に構成される。さらに、被挿入部71は公知のバネ構造等からなるロック機構を有し、所定量挿入された挿入端部72の配置を固定することが可能に構成される。このような構成により、筐体41A側の挿入端部72を被挿入部71に挿入することで、装着部5Aに対する筐体41Aの配置が固定される。
For example, the
なお、本実施形態に係る筐体41Aは、全体として第1の実施形態と同様の構成を有する。すなわち、筐体41Aは、x軸方向にそれぞれ対向する左側面(第1の側面)411A、右側面(第2の側面)412Aと、y軸方向にそれぞれ対向する前面413A、接眼面414Aと、z軸方向にそれぞれ対向する上面415A、下面416Aと、を含む。
The
左右の側面411A、412Aは、装着者の目の左右の側方を被覆するように構成される。これにより、左右の側面411A、412Aにより装着者の目が左右の側方から被覆されて外光が遮光され、より鮮明な画像を観察することができる。また、連結後は参照することのない参照部6Aが、左右の側面411A,412Aの内方に収容されるように構成することができる。
The left and right side surfaces 411A and 412A are configured to cover the left and right sides of the wearer's eyes. Accordingly, the wearer's eyes are covered from the left and right sides by the left and right side surfaces 411A and 412A, the external light is shielded, and a clearer image can be observed. Further, the
次に、本実施形態に係るHMD1Aの装着方法例について説明する。ここでは、手術前に装着者自身が、鏡等を見ながら分離された状態の装着部5Aのみを装着し、手術中に、補助者等によって筐体41Aが連結される場合について説明する。
Next, an example of a method for mounting the
まず、HMD1Aは、筐体41Aと装着部5Aとが分離された状態で準備される。ここでは第1の実施形態と同様に、バンド51A,52Aを装着時に想定される長さよりも長く調節されている。
First, the
次に、装着部5Aは、装着者により装着者の上方から頭部に装着され、調節部材531A、532Aによりバンド51A,52Aの長さを仮調節される。バンド51Aは装着者の頭頂部に、バンド52Aは装着者の後頭部に、またバンド56Aは装着者の前頭部に、それぞれ装着される。
Next, the mounting
さらに、HMD1Aの装着者に対する相対位置が調整される。ここでは、装着者自身が左側方から窓部61Aを介して自身の(左)目の位置を確認し、さらにマーク62Aを参照することで、マーク62Aと自身の目とをx軸方向に重ね合わせるように被挿入部710の相対位置を調整する。これにより、連結後に、表示面421,422と装着者の目とがy軸方向に略対向するように本体4が配置されるよう、相対位置が調整される。
Further, the relative position of the
装着部5Aの配置が適切な相対位置となるように調整された後、当該相対位置が固定されるようにバンド52Aの長さが調節される。ここでは、バンド52Aの長さが調節部材532Aによってより短く調節され、額当てパッド55Aとバンド52Aとが装着者の頭部の前後方向を挟み込むことで、装着部5Aの装着者に対する前後方向の相対位置が決定される。
After the placement of the mounting
装着者は、装着部5Aのみ装着した状態で、HMD1Aを必要としない処置を行う。手術中に内視鏡手術が開始される際には、手指を滅菌している装着者に代わり、補助者が本体4Aの筐体41Aを連結部7により装着部5Aに連結する。例えば、筐体41A側の挿入端部72が、装着部5A側の被挿入部71にロックされるまでy軸方向に所定量挿入される。
The wearer performs a treatment that does not require the
これにより、迅速に筐体41Aと装着部5Aとが連結され、HMD1Aは装着者に対し内視鏡画像を提示することが可能となる。このとき、参照部6Aを参照することにより、既に装着部5Aが装着者に対して適切な相対位置に調整されているため、連結後に相対位置の調整をせずとも、HMD1A全体として適切な相対位置に調整される。
Thereby, the
以上のように、本実施形態に係るHMD1Aは、装着部5Aと筐体41Aとが連結部7により着脱自在に構成される。さらに、分離された装着部5Aのみを装着する際に、連結部7の装着者に対する相対位置が参照部6Aを参照することにより調整される。これにより、連結後に適切な相対位置としてHMD1Aを装着することができる。したがって、HMD1Aを装着する度ごとの相対位置の調整が不要となり、HMD1Aの装着時間を短縮することが可能となる。
As described above, in the
またこれにより、HMD1Aにより提示される画像を必要としない内視鏡手術以外の処置を行う場合には、装着部5Aのみの状態で処置を行うことができる。したがって、装着者の負担を低減することが可能になる。
Thereby, when performing treatments other than endoscopic surgery that do not require an image presented by the
また、本実施形態に係る参照部6Aは、装着部5Aに配置された連結部7との相対位置を調整することができるため、装着者自身が装着部5Aのみ装着した状態で、手術前等に自身で相対位置を調整することが可能となる。これにより、装着者自身の所望の装着感を得ることが可能となり、かつ、補助者等における本体4A(筐体41A)の装着補助の負担を低減することができる。
Moreover, since the
以上、本技術の実施形態について説明したが、本技術はこれに限定されることはなく、本技術の技術的思想に基づいて種々の変形が可能である。 The embodiment of the present technology has been described above, but the present technology is not limited to this, and various modifications can be made based on the technical idea of the present technology.
第1の実施形態において、参照部6は、窓部61と、マーク62と、を含み、マーク62は、表示面421,422の中心の高さ位置においてy軸方向に延在するように配置された1本の直線であると説明したが、表示面421,422の位置とy軸方向とを指標できれば、これに限られない。
In the first embodiment, the
図18(A),(B),(C),(D),(E),(F)は、参照部6の変形例を示した模式的な図である。(A)は、マーク62の変形例であり、マーク62aは、表示面421,422と装着者の目(瞳)とがy軸方向に対向した際に、瞳の下端が配置されるべき高さ位置において、y軸方向に延在する直線で構成される。これにより、瞳の下端をマーク62aに重ね合わせて目線の方向をマーク62aの延在方向に一致させることにより、調整可能となる。また、(B)は、マーク62bが矢頭で構成される例であり、マーク62bは瞳の中心の位置及びy軸方向を示すように構成される。
18A, 18 </ b> B, 18 </ b> C, 18 </ b> D, 18 </ b> E, and 18 </ b> F are schematic diagrams illustrating modifications of the
また、図18(C)は、半透過性の窓部61c上にマーク62と同様の構成のマーク62cが配置された例である。このような参照部6は、装着時には装着者の目を透過させ、相対位置の調整を可能とすることができる一方で、画像観察時には外光の入射量を抑制することが可能となる。これにより、透光状態及び遮光状態を切り替える必要がなく、装置構成を簡素なものとすることができる。一方、(D)は、窓部61dの瞳が配置されるべき高さ位置に、y軸方向と平行に形成された境界62dにおいて、透過度を変化させるように構成された例である。この場合、指標部62dは境界62dとなる。これによっても、瞳を境界62dと重ね合わせ、目線の方向を境界62dの延在方向と一致させることにより、相対位置の調整が可能となる。また、外光の入射量も抑制することが可能となる。
FIG. 18C shows an example in which a
図18(E)は、図18(B)で説明したような矢頭で構成されたマーク62eが、窓部61e上ではなく、窓部61eの周囲に配置されている例である。また、(F)は、指標部62fは、窓部61fの枠62fであり、枠62fに瞳の下端を重ね、枠62fの延在方向(y軸方向)に目線を一致させることにより、相対位置の調整が可能となる。
FIG. 18E shows an example in which the
なお、以上のような参照部6の変形例は、第2及び第3の実施形態においても適用可能である。
Note that the modification of the
以上の実施形態において、参照部がいずれも装着者の左側方に配置されると説明したが、これに限られない。例えば、右側方、左側方の両方に配置される構成とすることもできるし、右側方のみに配置される構成とすることも可能である。 In the above embodiment, although it was demonstrated that all the reference parts were arrange | positioned at the wearer's left side, it is not restricted to this. For example, it may be configured to be disposed on both the right side and the left side, or may be configured to be disposed only on the right side.
第1の実施形態において、窓部61が液晶シャッタであると説明したが、透光状態と遮光状態とを切り替え可能な他の構成を採用することができる。例えば、窓部61を開閉可能な物理的なシャッタ機構を配置することも可能である。また、窓部61から入射する外光が、画像観察の支障とならない場合には、窓部61は常に透光状態とすることも可能である。
In the first embodiment, it has been described that the
第2の実施形態において、可動部材450は可動軸454を有し、可動軸454のまわりに回動することにより第1及び第2の位置間の移動を行うと説明したが、これに限られない。例えば、第1及び第2の位置間の移動は上下方向の平行移動であってもよい。すなわち、第2の位置においては、空間Sから可動部材450が上方あるいは下方に退避することで、装着者の視野を確保することが可能となる。
In the second embodiment, it has been described that the
第2の実施形態における可動部材450を駆動させる際の指示方法として、スイッチ等による例を挙げたが、例えば以下の例を採ることができる。すなわち、本体40に装着者の動作に関する情報を取得することが可能な検出部を配置し、取得された情報に基づいて可動部材450の位置を切り替える構成とすることができる。これにより、装着者の意思に基づいて、HMD10に触れることなく可動部材450の位置を切り替え可能な構成とすることができる。
As an instruction method for driving the
検出部の具体例として、例えば、装着者の頭部の動作を検出することが可能な角速度センサや加速度センサを含む構成が挙げられる。具体的な例としては、装着者が一定の角度頭部を跳ね上げる動作をした際に、第1の位置から第2の位置へ移動可能と設定することにより、直感に即した動作によって画像表示モードと周辺視野確保モードとを切り替え可能な構成とすることができる。 As a specific example of the detection unit, for example, a configuration including an angular velocity sensor or an acceleration sensor capable of detecting the motion of the wearer's head can be given. As a specific example, when the wearer moves up the head at a certain angle, it is possible to move from the first position to the second position so that the image can be displayed in an intuitive manner. The mode and the peripheral visual field securing mode can be switched.
また、検出部としてマイクロフォンを含む構成を採用することにより、装着者等により発せられる所定の音声を認識し、可動部材450の位置を切り替える構成とすることも可能である。さらに、検出部として装着者の目を撮像可能な撮像素子を含む構成とし、装着者の瞬きや視線を検出することで、可動部材450の位置を切り替える構成とすることも可能である。
In addition, by adopting a configuration including a microphone as the detection unit, it is possible to recognize a predetermined sound emitted by a wearer or the like and switch the position of the
第3の実施形態における連結部7は、上述の構成に限られない。例えば、公知のスライドロック機構、強力な磁石を用いる構成等、筐体41Aと装着部5Aとが着脱自在であり、かつ連結後の配置の固定が可能な構成であれば、採用することができる。
The
なお、本技術は以下のような構成も採ることができる。
(1)筐体と、第1の軸方向に画像光を出射することが可能に構成される表示面を含む画像表示部と、上記筐体に取り付けられ装着者の頭部に装着可能に構成された装着部と、を有する本体と、
上記本体に配置され、上記本体と装着者の目との相対位置を外部へ表示するための参照部と
を具備するヘッドマウントディスプレイ。
(2)上記(1)に記載のヘッドマウントディスプレイであって、
上記参照部は、上記装着者の目を外部へ露見させるように構成され上記筐体に配置される窓部を有する
ヘッドマウントディスプレイ。
(3)上記(2)に記載のヘッドマウントディスプレイであって、
上記参照部は、上記窓部に配置され、上記表示面の位置と上記第1の軸方向とを指標する指標部をさらに有する
ヘッドマウントディスプレイ。
(4)上記(3)に記載のヘッドマウントディスプレイであって、
上記窓部は、透光状態と、遮光状態とを切り替え可能に構成される
ヘッドマウントディスプレイ。
(5)上記(2)または(3)に記載のヘッドマウントディスプレイであって、
上記筐体は、上記第1の軸方向と直交する第2の軸方向に対向する第1及び第2の側面をさらに含み、
上記窓部は、上記第1及び第2の側面のうち少なくともいずれか一方に配置される
ヘッドマウントディスプレイ。
(6)上記(5)に記載のヘッドマウントディスプレイであって、
上記本体は、上記窓部を閉塞する第1の位置と上記窓部を開放する第2の位置との間を移動可能に構成される可動部材をさらに有する
ヘッドマウントディスプレイ。
(7)上記(6)に記載のヘッドマウントディスプレイであって、
上記可動部材は、上記窓部を開閉する第1の領域と、上記表示面を支持する第2の領域とを有し、
上記表示面は、上記第1の位置で上記第1の軸方向に画像光を出射する
ヘッドマウントディスプレイ。
(8)上記(7)に記載のヘッドマウントディスプレイであって、
上記筐体は、上記第1の位置において上記第2の領域と対向する開口部をさらに有する
ヘッドマウントディスプレイ。
(9)上記(1)に記載のヘッドマウントディスプレイであって、
上記装着部は、上記筐体と上記装着部とを着脱自在に連結する連結部をさらに有し、
上記参照部は、上記装着部に配置され、上記連結部に対する装着者の目の相対位置を外部へ表示する
ヘッドマウントディスプレイ。
In addition, this technique can also take the following structures.
(1) A case, an image display unit including a display surface configured to emit image light in the first axial direction, and a structure attached to the case and attachable to the head of the wearer A body having a mounting portion,
A head-mounted display, comprising: a reference unit disposed on the main body and displaying a relative position between the main body and a wearer's eyes to the outside.
(2) The head mounted display according to (1) above,
The reference section includes a window portion configured to expose the eyes of the wearer to the outside and disposed in the housing. Head mounted display.
(3) The head mounted display according to (2) above,
The reference unit further includes an indicator unit that is disposed in the window unit and that indicates the position of the display surface and the first axial direction.
(4) The head mounted display according to (3) above,
The said window part is a head mounted display comprised so that a light transmission state and a light-shielding state can be switched.
(5) The head mounted display according to (2) or (3) above,
The housing further includes first and second side surfaces facing a second axial direction orthogonal to the first axial direction,
The window portion is a head mounted display arranged on at least one of the first and second side surfaces.
(6) The head mounted display according to (5) above,
The main body further includes a movable member configured to be movable between a first position for closing the window portion and a second position for opening the window portion.
(7) The head mounted display according to (6) above,
The movable member has a first region that opens and closes the window, and a second region that supports the display surface,
The display surface emits image light in the first axial direction at the first position.
(8) The head mounted display according to (7) above,
The housing further includes an opening facing the second region at the first position.
(9) The head mounted display according to (1) above,
The mounting part further includes a connecting part that detachably connects the housing and the mounting part,
The reference unit is disposed in the mounting unit, and displays a relative position of the wearer's eyes with respect to the connecting unit to the outside.
1,10,1A・・・ヘッドマウントディスプレイ
4,40,4A・・・本体
5,5A・・・装着部
6,60,6A・・・参照部
7・・・連結部
41,410、41A・・・筐体
42・・・画像表示部
421,422・・・表示面
61,610,61A・・・窓部
62,620,62A・・・指標部(マーク)
450・・・可動部材
451,452・・・可動板(第1の領域)
453・・・可動筐体(第2の領域)
4170・・・開口部
1, 10, 1A: Head mounted
450 ...
453 ... Movable housing (second region)
4170 ... opening
Claims (9)
前記本体であって、装着時に前記装着者の側方の位置に配置され、前記装着者の目を外部へ露見させる窓部と、前記表示面の位置と前記第1の軸方向とを指標する指標部と、を有する参照部と
を具備するヘッドマウントディスプレイ。 A housing, an image display unit including a display surface configured to emit image light in a first axial direction, and a mounting configured to be mounted on the head of the wearer attached to the housing A body having a portion,
The main body, which is disposed at a side position of the wearer at the time of wearing and exposes the wearer's eyes to the outside, and indicates the position of the display surface and the first axial direction. A head-mounted display comprising: a reference portion having an indicator portion.
前記窓部は、透光状態と、遮光状態とを切り替え可能に構成される
ヘッドマウントディスプレイ。 The head mounted display according to claim 1,
The window portion is configured to be switchable between a light-transmitting state and a light-shielding state.
前記筐体は、前記第1の軸方向と直交する第2の軸方向に対向する第1及び第2の側面をさらに含み、
前記窓部は、前記第1及び第2の側面のうち少なくともいずれか一方に配置される
ヘッドマウントディスプレイ。 The head mounted display according to claim 1,
The housing further includes first and second side surfaces facing a second axial direction orthogonal to the first axial direction,
The said window part is a head mounted display arrange | positioned in at least any one among said 1st and 2nd side surfaces.
前記本体は、前記窓部を閉塞する第1の位置と前記窓部を開放する第2の位置との間を移動可能に構成される可動部材をさらに有する
ヘッドマウントディスプレイ。 The head mounted display according to claim 3,
The main body further includes a movable member configured to be movable between a first position for closing the window portion and a second position for opening the window portion.
前記可動部材は、前記窓部を開閉する第1の領域と、前記表示面を支持する第2の領域とを有し、
前記表示面は、前記第1の位置で前記第1の軸方向に画像光を出射する
ヘッドマウントディスプレイ。 The head mounted display according to claim 4,
The movable member has a first region that opens and closes the window, and a second region that supports the display surface,
The display surface emits image light in the first axial direction at the first position.
前記筐体は、前記第1の位置において前記第2の領域と対向する開口部をさらに有する
ヘッドマウントディスプレイ。 The head mounted display according to claim 5,
The housing further includes an opening facing the second region at the first position.
前記装着部は、前記筐体と前記装着部とを着脱自在に連結する連結部をさらに有し、
前記参照部は、前記装着部に配置され、前記連結部に対する装着者の目の相対位置を外部へ提示する
ヘッドマウントディスプレイ。 The head mounted display according to claim 1,
The mounting portion further includes a connecting portion that detachably connects the housing and the mounting portion,
The reference unit is disposed in the mounting unit, and presents the relative position of the wearer's eyes to the connection unit to the outside.
第1の軸方向に画像光を出射することが可能に構成される表示面を含み、前記撮像装置によって撮像された画像を表示する画像表示部と、
術者の頭部に装着可能に構成された装着部とを有する本体と、
前記本体であって、装着時に装着者の側方の位置に配置され、前記装着者の目を外部へ露見させる窓部と、前記表示面の位置と前記第1の軸方向とを指標する指標部と、を含む参照部と
を有するヘッドマウントディスプレイと
を具備する手術システム。 An imaging device for imaging an affected area of a patient;
An image display unit that includes a display surface configured to emit image light in a first axial direction, and displays an image captured by the imaging device;
A main body having an attachment portion configured to be attachable to the surgeon's head;
The main body, which is disposed at a position on the side of the wearer at the time of wearing, and is an indicator for indicating the position of the display surface and the first axial direction, which exposes the wearer's eyes to the outside. And a head-mounted display having a reference portion including the same.
前記撮像装置によって撮像された画像の処理を行うプロセッサと、
前記撮像装置によって撮像された画像を前記術者以外の者が把握できるように表示する表示装置と、
をさらに具備する手術システム。 The surgical system according to claim 8, wherein
A processor for processing an image captured by the imaging device;
A display device that displays an image captured by the imaging device so that a person other than the operator can grasp the image;
A surgical system further comprising:
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012065602A JP5987387B2 (en) | 2012-03-22 | 2012-03-22 | Head mounted display and surgical system |
US13/792,490 US9507155B2 (en) | 2012-03-22 | 2013-03-11 | Head-mounted display |
TW102108677A TWI457602B (en) | 2012-03-22 | 2013-03-12 | Head-mounted display |
CN201310084174.6A CN103323949B (en) | 2012-03-22 | 2013-03-15 | Head mounted display |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012065602A JP5987387B2 (en) | 2012-03-22 | 2012-03-22 | Head mounted display and surgical system |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013198071A JP2013198071A (en) | 2013-09-30 |
JP2013198071A5 JP2013198071A5 (en) | 2015-04-16 |
JP5987387B2 true JP5987387B2 (en) | 2016-09-07 |
Family
ID=49192788
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012065602A Expired - Fee Related JP5987387B2 (en) | 2012-03-22 | 2012-03-22 | Head mounted display and surgical system |
Country Status (4)
Country | Link |
---|---|
US (1) | US9507155B2 (en) |
JP (1) | JP5987387B2 (en) |
CN (1) | CN103323949B (en) |
TW (1) | TWI457602B (en) |
Families Citing this family (99)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9952664B2 (en) | 2014-01-21 | 2018-04-24 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9965681B2 (en) | 2008-12-16 | 2018-05-08 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US20150205111A1 (en) | 2014-01-21 | 2015-07-23 | Osterhout Group, Inc. | Optical configurations for head worn computing |
US9298007B2 (en) | 2014-01-21 | 2016-03-29 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9229233B2 (en) | 2014-02-11 | 2016-01-05 | Osterhout Group, Inc. | Micro Doppler presentations in head worn computing |
US9366867B2 (en) | 2014-07-08 | 2016-06-14 | Osterhout Group, Inc. | Optical systems for see-through displays |
US9715112B2 (en) | 2014-01-21 | 2017-07-25 | Osterhout Group, Inc. | Suppression of stray light in head worn computing |
US9400390B2 (en) * | 2014-01-24 | 2016-07-26 | Osterhout Group, Inc. | Peripheral lighting for head worn computing |
US20140350643A1 (en) * | 2013-05-23 | 2014-11-27 | Apira Science, Inc. | Phototherapy apparatus for skin treatment |
WO2015051660A1 (en) * | 2013-10-13 | 2015-04-16 | 北京蚁视科技有限公司 | Head-mounted stereoscopic display |
WO2015066639A1 (en) * | 2013-11-04 | 2015-05-07 | Sidra Medical and Research Center | System to facilitate and streamline communication and information-flow in healthy-care |
CN105794201B (en) * | 2013-12-05 | 2019-05-31 | 索尼公司 | Show equipment |
US9529195B2 (en) | 2014-01-21 | 2016-12-27 | Osterhout Group, Inc. | See-through computer display systems |
US9810906B2 (en) | 2014-06-17 | 2017-11-07 | Osterhout Group, Inc. | External user interface for head worn computing |
US10191279B2 (en) | 2014-03-17 | 2019-01-29 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9299194B2 (en) | 2014-02-14 | 2016-03-29 | Osterhout Group, Inc. | Secure sharing in head worn computing |
US10684687B2 (en) | 2014-12-03 | 2020-06-16 | Mentor Acquisition One, Llc | See-through computer display systems |
US9829707B2 (en) | 2014-08-12 | 2017-11-28 | Osterhout Group, Inc. | Measuring content brightness in head worn computing |
US9594246B2 (en) | 2014-01-21 | 2017-03-14 | Osterhout Group, Inc. | See-through computer display systems |
US11227294B2 (en) | 2014-04-03 | 2022-01-18 | Mentor Acquisition One, Llc | Sight information collection in head worn computing |
US10254856B2 (en) | 2014-01-17 | 2019-04-09 | Osterhout Group, Inc. | External user interface for head worn computing |
US10649220B2 (en) | 2014-06-09 | 2020-05-12 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
US9939934B2 (en) | 2014-01-17 | 2018-04-10 | Osterhout Group, Inc. | External user interface for head worn computing |
US20160019715A1 (en) | 2014-07-15 | 2016-01-21 | Osterhout Group, Inc. | Content presentation in head worn computing |
US9671613B2 (en) | 2014-09-26 | 2017-06-06 | Osterhout Group, Inc. | See-through computer display systems |
US9448409B2 (en) | 2014-11-26 | 2016-09-20 | Osterhout Group, Inc. | See-through computer display systems |
US9841599B2 (en) | 2014-06-05 | 2017-12-12 | Osterhout Group, Inc. | Optical configurations for head-worn see-through displays |
US20150277118A1 (en) | 2014-03-28 | 2015-10-01 | Osterhout Group, Inc. | Sensor dependent content position in head worn computing |
US9575321B2 (en) | 2014-06-09 | 2017-02-21 | Osterhout Group, Inc. | Content presentation in head worn computing |
US11103122B2 (en) | 2014-07-15 | 2021-08-31 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
US9746686B2 (en) | 2014-05-19 | 2017-08-29 | Osterhout Group, Inc. | Content position calibration in head worn computing |
US11669163B2 (en) | 2014-01-21 | 2023-06-06 | Mentor Acquisition One, Llc | Eye glint imaging in see-through computer display systems |
US9529199B2 (en) | 2014-01-21 | 2016-12-27 | Osterhout Group, Inc. | See-through computer display systems |
US9766463B2 (en) | 2014-01-21 | 2017-09-19 | Osterhout Group, Inc. | See-through computer display systems |
US9615742B2 (en) | 2014-01-21 | 2017-04-11 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9651784B2 (en) | 2014-01-21 | 2017-05-16 | Osterhout Group, Inc. | See-through computer display systems |
US11487110B2 (en) | 2014-01-21 | 2022-11-01 | Mentor Acquisition One, Llc | Eye imaging in head worn computing |
US9811152B2 (en) | 2014-01-21 | 2017-11-07 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US9753288B2 (en) | 2014-01-21 | 2017-09-05 | Osterhout Group, Inc. | See-through computer display systems |
US20150206173A1 (en) | 2014-01-21 | 2015-07-23 | Osterhout Group, Inc. | Eye imaging in head worn computing |
US11892644B2 (en) | 2014-01-21 | 2024-02-06 | Mentor Acquisition One, Llc | See-through computer display systems |
US9836122B2 (en) | 2014-01-21 | 2017-12-05 | Osterhout Group, Inc. | Eye glint imaging in see-through computer display systems |
US11737666B2 (en) | 2014-01-21 | 2023-08-29 | Mentor Acquisition One, Llc | Eye imaging in head worn computing |
US9494800B2 (en) | 2014-01-21 | 2016-11-15 | Osterhout Group, Inc. | See-through computer display systems |
US12093453B2 (en) | 2014-01-21 | 2024-09-17 | Mentor Acquisition One, Llc | Eye glint imaging in see-through computer display systems |
US20150205135A1 (en) | 2014-01-21 | 2015-07-23 | Osterhout Group, Inc. | See-through computer display systems |
US9846308B2 (en) | 2014-01-24 | 2017-12-19 | Osterhout Group, Inc. | Haptic systems for head-worn computers |
US9401540B2 (en) | 2014-02-11 | 2016-07-26 | Osterhout Group, Inc. | Spatial location presentation in head worn computing |
US9691181B2 (en) | 2014-02-24 | 2017-06-27 | Sony Interactive Entertainment Inc. | Methods and systems for social sharing head mounted display (HMD) content with a second screen |
US20160187651A1 (en) | 2014-03-28 | 2016-06-30 | Osterhout Group, Inc. | Safety for a vehicle operator with an hmd |
US9651787B2 (en) | 2014-04-25 | 2017-05-16 | Osterhout Group, Inc. | Speaker assembly for headworn computer |
US10853589B2 (en) | 2014-04-25 | 2020-12-01 | Mentor Acquisition One, Llc | Language translation with head-worn computing |
US9423842B2 (en) | 2014-09-18 | 2016-08-23 | Osterhout Group, Inc. | Thermal management for head-worn computer |
US9672210B2 (en) | 2014-04-25 | 2017-06-06 | Osterhout Group, Inc. | Language translation with head-worn computing |
US20150312558A1 (en) * | 2014-04-29 | 2015-10-29 | Quentin Simon Charles Miller | Stereoscopic rendering to eye positions |
US10663740B2 (en) | 2014-06-09 | 2020-05-26 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
KR102230076B1 (en) * | 2014-09-01 | 2021-03-19 | 삼성전자 주식회사 | Head-mounted display apparatus |
US9684172B2 (en) | 2014-12-03 | 2017-06-20 | Osterhout Group, Inc. | Head worn computer display systems |
USD751552S1 (en) | 2014-12-31 | 2016-03-15 | Osterhout Group, Inc. | Computer glasses |
USD753114S1 (en) | 2015-01-05 | 2016-04-05 | Osterhout Group, Inc. | Air mouse |
US20160239985A1 (en) | 2015-02-17 | 2016-08-18 | Osterhout Group, Inc. | See-through computer display systems |
CN112346248B (en) | 2015-02-27 | 2022-12-20 | 索尼互动娱乐股份有限公司 | Head-mounted display |
GB2536650A (en) | 2015-03-24 | 2016-09-28 | Augmedics Ltd | Method and system for combining video-based and optic-based augmented reality in a near eye display |
JP2017011436A (en) * | 2015-06-19 | 2017-01-12 | セイコーエプソン株式会社 | Image display device |
CN105100712A (en) * | 2015-07-12 | 2015-11-25 | 顾雍舟 | Head-mounted stereo-display microsurgery operation system |
US20180136891A1 (en) * | 2015-07-30 | 2018-05-17 | Shenzhen Royole Technologies Co., Ltd. | Head-mounted electronic device |
EP3330767A4 (en) * | 2015-07-30 | 2019-03-20 | Shenzhen Royole Technologies Co., Ltd. | Head-mounted electronic device |
WO2017028284A1 (en) * | 2015-08-19 | 2017-02-23 | 深圳市柔宇科技有限公司 | Eye goggles and head-wearable electronic device having same |
US9298283B1 (en) | 2015-09-10 | 2016-03-29 | Connectivity Labs Inc. | Sedentary virtual reality method and systems |
GB2543277A (en) * | 2015-10-12 | 2017-04-19 | Bay Innovations Ltd | Wearable display system |
WO2017113245A1 (en) * | 2015-12-30 | 2017-07-06 | 深圳市柔宇科技有限公司 | Automatically-adjustable head-mounted display device and adjustment method therefor |
US9880441B1 (en) | 2016-09-08 | 2018-01-30 | Osterhout Group, Inc. | Electrochromic systems for head-worn computer systems |
US9826299B1 (en) | 2016-08-22 | 2017-11-21 | Osterhout Group, Inc. | Speaker systems for head-worn computer systems |
JP7090247B2 (en) | 2016-05-05 | 2022-06-24 | ディー. ワトソン,ロバート | Surgical stereoscopic visualization system with head-mounted movable display |
EP3551144B1 (en) * | 2016-12-07 | 2023-08-02 | Woermann, Bernd | Apparatus for protecting eyes from radiation |
JP2018129692A (en) * | 2017-02-08 | 2018-08-16 | 株式会社バンダイナムコエンターテインメント | Head mounted display device and simulation system |
EP3396436B1 (en) * | 2017-03-24 | 2020-10-07 | HTC Corporation | Head-mounted display device |
EP3787543A4 (en) | 2018-05-02 | 2022-01-19 | Augmedics Ltd. | Registration of a fiducial marker for an augmented reality system |
JP7138335B2 (en) * | 2018-06-25 | 2022-09-16 | 株式会社XrossVate | Video display device |
US11137612B2 (en) | 2018-09-12 | 2021-10-05 | Apple Inc. | Electronic device with adjustable support structures |
US11766296B2 (en) | 2018-11-26 | 2023-09-26 | Augmedics Ltd. | Tracking system for image-guided surgery |
KR102168295B1 (en) * | 2019-04-30 | 2020-10-21 | 정상훈 | A head mounted display that is viewing surroundings |
US12178666B2 (en) | 2019-07-29 | 2024-12-31 | Augmedics Ltd. | Fiducial marker |
US11980506B2 (en) | 2019-07-29 | 2024-05-14 | Augmedics Ltd. | Fiducial marker |
US11303988B2 (en) * | 2019-10-17 | 2022-04-12 | Sonos, Inc. | Portable device microphone status indicator |
US11644677B2 (en) * | 2019-11-28 | 2023-05-09 | Shenzhen Hongjiantou Technology Co., Ltd | Hooking device of VR data cable |
US11382712B2 (en) | 2019-12-22 | 2022-07-12 | Augmedics Ltd. | Mirroring in image guided surgery |
US11686948B2 (en) | 2020-03-27 | 2023-06-27 | ResMed Pty Ltd | Positioning, stabilising, and interfacing structures and system incorporating same |
US12178276B2 (en) | 2020-03-27 | 2024-12-31 | ResMed Pty Ltd | Positioning and stabilising structure and system incorporating same |
TWI748512B (en) * | 2020-06-12 | 2021-12-01 | 中強光電股份有限公司 | Head mounted display |
US11389252B2 (en) | 2020-06-15 | 2022-07-19 | Augmedics Ltd. | Rotating marker for image guided surgery |
GB202010326D0 (en) * | 2020-07-06 | 2020-08-19 | Palakollu Vamsee Krishna | A virtual reality headset |
US12239385B2 (en) | 2020-09-09 | 2025-03-04 | Augmedics Ltd. | Universal tool adapter |
JP7635000B2 (en) | 2021-01-08 | 2025-02-25 | キヤノン株式会社 | Head-Mounted and Gripping Devices |
EP4320476A1 (en) * | 2021-05-10 | 2024-02-14 | Apple Inc. | Fit detection system for head-mountable devices |
US11896445B2 (en) | 2021-07-07 | 2024-02-13 | Augmedics Ltd. | Iliac pin and adapter |
US12150821B2 (en) | 2021-07-29 | 2024-11-26 | Augmedics Ltd. | Rotating marker and adapter for image-guided surgery |
TWI783664B (en) * | 2021-09-03 | 2022-11-11 | 仁寶電腦工業股份有限公司 | Display module |
WO2024057210A1 (en) | 2022-09-13 | 2024-03-21 | Augmedics Ltd. | Augmented reality eyewear for image-guided medical intervention |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4873572A (en) * | 1987-02-27 | 1989-10-10 | Olympus Optical Co., Ltd. | Electronic endoscope apparatus |
US5546099A (en) * | 1993-08-02 | 1996-08-13 | Virtual Vision | Head mounted display system with light blocking structure |
US20010054989A1 (en) * | 1993-10-22 | 2001-12-27 | Matthew Zavracky | Color sequential display panels |
US7310072B2 (en) * | 1993-10-22 | 2007-12-18 | Kopin Corporation | Portable communication display device |
JPH08152576A (en) * | 1994-11-28 | 1996-06-11 | Seiko Epson Corp | Head-mounted display device |
JPH11102438A (en) * | 1997-09-26 | 1999-04-13 | Minolta Co Ltd | Distance image generation device and image display device |
JPH11142783A (en) * | 1997-11-12 | 1999-05-28 | Olympus Optical Co Ltd | Image display device |
US20050046617A1 (en) * | 1999-04-23 | 2005-03-03 | Kurtzer Stephen M. | Device and method for controlling flicker in liquid crystal shutter glasses |
JP2001104331A (en) * | 1999-10-06 | 2001-04-17 | Olympus Optical Co Ltd | Medical face-mounted image display device |
JP2000307973A (en) * | 2000-01-01 | 2000-11-02 | Atr Media Integration & Communications Res Lab | Head-mounted display |
JP3576985B2 (en) * | 2001-02-28 | 2004-10-13 | キヤノン株式会社 | Position adjustment mechanism and head mounted display device |
CN2724027Y (en) * | 2004-08-18 | 2005-09-07 | 晶奇光电股份有限公司 | head mounted display |
US20070273983A1 (en) * | 2006-05-26 | 2007-11-29 | Hebert Raymond T | Devices, methods, and systems for image viewing |
JP5179575B2 (en) * | 2008-04-30 | 2013-04-10 | パナソニック株式会社 | Scanning image display device, eyeglass-type head mounted display, and automobile |
JP2010050645A (en) * | 2008-08-20 | 2010-03-04 | Olympus Corp | Image processor, image processing method, and image processing program |
US8786520B2 (en) * | 2008-09-04 | 2014-07-22 | Innovega, Inc. | System and apparatus for display panels |
US8957835B2 (en) * | 2008-09-30 | 2015-02-17 | Apple Inc. | Head-mounted display apparatus for retaining a portable electronic device with display |
JP2010231119A (en) * | 2009-03-30 | 2010-10-14 | Brother Ind Ltd | Glasses-type image display device |
JP2011145488A (en) | 2010-01-14 | 2011-07-28 | Sony Corp | Head mount display |
US20110213664A1 (en) * | 2010-02-28 | 2011-09-01 | Osterhout Group, Inc. | Local advertising content on an interactive head-mounted eyepiece |
JP2012023495A (en) * | 2010-07-13 | 2012-02-02 | Olympus Corp | Jacket and head-mounted type optical system |
JP5577939B2 (en) * | 2010-08-20 | 2014-08-27 | ソニー株式会社 | Imaging apparatus, aberration correction method, and program |
JP4927208B2 (en) * | 2010-09-30 | 2012-05-09 | 株式会社ナナオ | Stereoscopic image display device |
-
2012
- 2012-03-22 JP JP2012065602A patent/JP5987387B2/en not_active Expired - Fee Related
-
2013
- 2013-03-11 US US13/792,490 patent/US9507155B2/en not_active Expired - Fee Related
- 2013-03-12 TW TW102108677A patent/TWI457602B/en not_active IP Right Cessation
- 2013-03-15 CN CN201310084174.6A patent/CN103323949B/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US9507155B2 (en) | 2016-11-29 |
JP2013198071A (en) | 2013-09-30 |
CN103323949A (en) | 2013-09-25 |
TW201400867A (en) | 2014-01-01 |
US20130249778A1 (en) | 2013-09-26 |
CN103323949B (en) | 2017-07-14 |
TWI457602B (en) | 2014-10-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5987387B2 (en) | Head mounted display and surgical system | |
JP5938977B2 (en) | Head mounted display and surgical system | |
JP6028357B2 (en) | Head mounted display and surgical system | |
JP6264087B2 (en) | Display control device, display device, and display control system | |
AU771368B2 (en) | Visual aid in the form of telescopic spectacles with an automatic focussing device | |
JP3905393B2 (en) | Surgical device | |
ES2899353T3 (en) | Digital system for capturing and visualizing surgical video | |
US10134185B2 (en) | Endoscopic surgery assisting system using head-mounted displays and associated methodology | |
WO2019093426A1 (en) | Observation device, observation unit, and observation method | |
JP4098535B2 (en) | Medical stereoscopic display | |
US20120330129A1 (en) | Medical visualization systems and related methods of use | |
US20040196553A1 (en) | Observation apparatus and observation system | |
JPH10221637A (en) | Head-mounted image display device | |
JP2017509925A (en) | 3D video microscope equipment | |
US20200089010A1 (en) | Medical magnification device | |
JP2012245056A (en) | Endoscope | |
JP2018075674A (en) | Joint driving actuator | |
JP2004320722A (en) | Stereoscopic observation system | |
JPH11318936A (en) | Microscopic device for operation | |
JP2004337247A (en) | Three-dimensional observation system | |
JPH10248807A (en) | Endoscope device | |
JP6793623B2 (en) | Observation equipment, observation equipment, observation unit and medical care unit | |
JP6617766B2 (en) | Medical observation system, display control system, and display control device | |
ZA200203746B (en) | Visual aid in the form of telescopic spectacles with an automatic focussing device. |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150225 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150225 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151008 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160209 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160328 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160517 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160620 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160712 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160725 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5987387 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |