KR101861380B1 - A Method of Providing Contents Using Head Mounted Display and a Head Mounted Display Thereof - Google Patents
A Method of Providing Contents Using Head Mounted Display and a Head Mounted Display Thereof Download PDFInfo
- Publication number
- KR101861380B1 KR101861380B1 KR1020120077352A KR20120077352A KR101861380B1 KR 101861380 B1 KR101861380 B1 KR 101861380B1 KR 1020120077352 A KR1020120077352 A KR 1020120077352A KR 20120077352 A KR20120077352 A KR 20120077352A KR 101861380 B1 KR101861380 B1 KR 101861380B1
- Authority
- KR
- South Korea
- Prior art keywords
- hmd
- state
- content
- digital device
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000004891 communication Methods 0.000 claims description 57
- 230000007704 transition Effects 0.000 claims description 6
- 238000005562 fading Methods 0.000 claims 2
- 239000003550 marker Substances 0.000 description 39
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 208000013057 hereditary mucoepithelial dysplasia Diseases 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 239000013585 weight reducing agent Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/02—Viewing or reading apparatus
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0123—Head-up displays characterised by optical features comprising devices increasing the field of view
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/16—Use of wireless transmission of display information
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Multimedia (AREA)
- Computer Hardware Design (AREA)
Abstract
본 발명은, 헤드 마운트 디스플레이(Head Mounted Display, HMD)를 이용한 컨텐츠 출력 방법에 관한 것으로, 더욱 상세하게는 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD로 출력하는 방법에 관한 것이다. 이를 위해 본 발명은, 컨텐츠를 디스플레이 하는 적어도 하나의 디스플레이 유닛을 구비하는 디지털 디바이스와의 페어링을 수행하는 단계, 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 화각 영역에 위치하지 않는 제 2 상태를 포함하는 위치 상태를 디텍트 하는 단계, 상기 디텍트 된 위치 상태에 기초하여, 상기 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 HMD로 출력하는 단계를 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법을 제공한다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a content output method using a head mounted display (HMD), and more particularly, to a method of outputting content to be displayed on a digital device to an HMD. To this end, the present invention provides a method comprising: performing a pairing with a digital device having at least one display unit for displaying content; a first state in which a display unit of the digital device is located in a pre- Detecting a position state including a second state in which the display unit of the digital device is not located in the field of view region; and outputting the content being displayed on the digital device to the HMD based on the detected position state (HMD), the method comprising the steps of:
Description
본 발명은, 헤드 마운트 디스플레이(Head Mounted Display, HMD)를 이용한 컨텐츠 출력 방법에 관한 것으로, 더욱 상세하게는 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD로 출력하는 방법에 관한 것이다.BACKGROUND OF THE
헤드 마운트 디스플레이(HMD)란 안경처럼 머리에 착용하여 영상을 볼 수 있도록 하는 각종 영상 표시 장치를 말한다. 디지털 디바이스의 경량화 및 소형화 추세에 따라, 다양한 웨어러블 컴퓨터(Wearable Computer)가 개발되고 있으며, 상기 HMD 또한 널리 사용되고 있다. HMD는 단순한 디스플레이 기능을 넘어 증강 현실 기술, N 스크린 기술 등과 조합 되어 유저에게 다양한 편의를 제공할 수 있다.The head-mounted display (HMD) refers to various image display devices that can be worn on the head like an eyeglass to view an image. 2. Description of the Related Art [0002] Various wearable computers (wearable computers) have been developed in accordance with the trend of weight reduction and miniaturization of digital devices, and such HMDs are also widely used. The HMD can be combined with augmented reality technology, N screen technology, etc., beyond the simple display function, to provide various convenience to the user.
HMD는 다양한 디지털 디바이스와 연계하여 사용 가능하다. HMD는 디지털 디바이스와 네트워크로 연결되어 해당 디지털 디바이스의 컨텐츠를 출력할 수 있으며, 상기 디지털 디바이스를 위한 유저 입력을 수신하거나 해당 디지털 디바이스와 연동한 작업의 수행도 가능하다.The HMD can be used in conjunction with various digital devices. The HMD can be connected to a digital device via a network to output the content of the digital device, receive user input for the digital device, or perform an operation linked to the digital device.
본 발명은 HMD와 연동된 디지털 디바이스에서 디스플레이 되는 컨텐츠를 최적의 상태로 유저에게 제공하기 위한 목적을 가지고 있다.An object of the present invention is to provide a user with contents displayed in an optimal state in a digital device interlocked with an HMD.
더욱 구체적으로, 본 발명은 HMD를 착용한 유저의 사용 상태, 예를 들면 HMD를 착용한 유저의 시선에 따라 적합하게 컨텐츠를 디스플레이 하는 방법을 제공하기 위한 목적을 가지고 있다.More specifically, the present invention has an object to provide a method of displaying contents in accordance with a usage state of a user wearing an HMD, for example, a user's eyes worn by an HMD.
또한, 본 발명은 HMD 및 이와 연동된 디지털 디바이스 간의 컨텐츠 출력 전환을 유저의 수동 입력이 아닌 자동으로 수행되도록 함으로 유저에게 편의성을 제공하기 위한 목적을 가지고 있다.In addition, the present invention has an object to provide convenience to a user by automatically switching content output between an HMD and a digital device interlocked with the HMD, not by manual input of a user.
상기와 같은 문제를 해결하기 위해, 본 발명의 실시예에 따른 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법은, 디지털 디바이스와의 페어링을 수행하는 단계, 상기 디지털 디바이스는 컨텐츠를 디스플레이 하는 적어도 하나의 디스플레이 유닛을 구비함; 상기 페어링 된 디지털 디바이스의 위치 상태를 디텍트 하는 단계; 상기 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 화각 영역에 위치하지 않는 제 2 상태를 포함함; 상기 디텍트 된 위치 상태에 기초하여, 상기 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 HMD로 출력하는 단계;를 포함하는 것을 특징으로 한다.In order to solve the above problems, a content output method using a head-mounted display (HMD) according to an embodiment of the present invention includes the steps of performing a pairing with a digital device, the digital device having at least one A display unit; Detecting a location state of the paired digital device; Wherein the position state includes a first state in which a display unit of the digital device is located in a predefined field of view region of the HMD and a second state in which a display unit of the digital device is not located in the field of view region; And outputting the content being displayed on the digital device to the HMD based on the detected position state.
또한, 본 발명의 실시예에 따른 헤드 마운트 디스플레이(HMD)는, 상기 HMD의 작동을 제어하는 프로세서; 상기 프로세서의 명령에 기초하여 영상을 출력하는 디스플레이 유닛; 및 상기 프로세서의 명령에 기초하여 적어도 하나의 디지털 디바이스와 데이터를 송/수신하는 커뮤니케이션 유닛을 포함하되, 상기 프로세서는, 컨텐츠를 디스플레이 하는 적어도 하나의 디스플레이 유닛을 구비한 디지털 디바이스와의 페어링을 수행하고, 상기 페어링 된 디지털 디바이스의 위치 상태를 디텍트 하되, 상기 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 화각 영역에 위치하지 않는 제 2 상태를 포함하고, 상기 디텍트 된 위치 상태에 기초하여, 상기 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 HMD의 디스플레이 유닛으로 출력하는 것을 특징으로 한다.Further, a head-mounted display (HMD) according to an embodiment of the present invention includes: a processor for controlling operation of the HMD; A display unit for outputting an image based on an instruction of the processor; And a communication unit for transmitting / receiving data to / from at least one digital device based on instructions of the processor, the processor performing a pairing with a digital device having at least one display unit for displaying content Detecting a positional state of the paired digital device, wherein the positional state is a first state in which a display unit of the digital device is located in a predetermined field of view area of the HMD, and a display unit of the digital device is located in the field of view And outputs the content being displayed on the digital device to the display unit of the HMD, based on the detected position state.
본 발명에 따르면, HMD와 연동중인 디지털 디바이스에서 디스플레이 되는 컨텐츠가 유저의 사용 환경에 따라 심리스(seamless)하게 HMD로 이동하므로 유저의 편의를 제공한다.According to the present invention, since the content displayed in the digital device interlocked with the HMD moves seamlessly to the HMD according to the user's use environment, the convenience of the user is provided.
즉, HMD를 착용한 유저의 시선이 상기 HMD와 연동된 디지털 디바이스에 향하지 않을 경우 자동적으로 해당 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD에서 디스플레이 함으로, 유저는 HMD로 편리하게 컨텐츠를 제공받을 수 있다.That is, when the user's line of sight wearing the HMD is not directed to the digital device interlocked with the HMD, the user is able to conveniently receive the contents by displaying the content being displayed on the digital device in the HMD.
또한, 본 발명에 따르면, HMD를 착용한 유저의 시선이 상기 HMD와 연동된 디지털 디바이스를 향할 경우 HMD에서의 컨텐츠 디스플레이를 수행하지 않음으로, 유저가 HMD의 디스플레이를 통한 간섭 없이 정확하게 디지털 디바이스의 컨텐츠를 제공받을 수 있다.In addition, according to the present invention, when the user's line of sight wearing the HMD faces the digital device interlocked with the HMD, the content display in the HMD is not performed. Thus, Can be provided.
또한, 본 발명에 따르면, 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD로 출력할지 여부에 대한 트리거링이 유저의 시선에 기초하여 자동적으로 전환되므로, 유저는 별도의 유저 입력 없이도 상기 디지털 디바이스의 컨텐츠를 지속적으로 제공받을 수 있다.Further, according to the present invention, since the triggering of whether to display the content being displayed on the digital device to the HMD is automatically switched based on the user's gaze, the user can continuously provide the content of the digital device without any additional user input Can receive.
또한, 본 발명의 다른 실시예에 따르면, 상기 HMD를 통한 유저의 시선이 디스플레이 유닛을 구비한 다른 외부 디바이스를 향할 경우 해당 외부 디바이스에서 상기 컨텐츠를 출력하도록 함으로, 유저는 컨텐츠의 디스플레이가 가능한 다양한 리소스를 통해 컨텐츠를 제공받을 수 있다.According to another embodiment of the present invention, when the user's line of sight through the HMD is directed to another external device having a display unit, the external device outputs the content, so that the user can select various resources The contents can be provided through the Internet.
도 1은 본 발명의 실시예에 따른 HMD, 상기 HMD를 착용한 유저 및 상기 HMD와 연동된 디지털 디바이스를 나타낸 도면.
도 2는 본 발명의 실시예에 따른 HMD를 나타낸 블록도.
도 3은 본 발명의 일 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타낸 순서도.
도 4는 본 발명의 다른 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타낸 순서도.
도 5 내지 도 7은 본 발명의 HMD를 이용하여 컨텐츠를 출력하는 구체적인 실시예를 나타내는 도면.
도 8 내지 도 10은 본 발명의 HMD를 이용하여 컨텐츠를 출력하는 다른 실시예를 나타내는 도면.
도 11은 본 발명의 또 다른 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타낸 순서도.
도 12 내지 도 13은 본 발명의 HMD를 이용하여 컨텐츠를 출력하는 또 다른 실시예를 나타내는 도면.1 is a view illustrating an HMD according to an embodiment of the present invention, a user wearing the HMD, and a digital device interlocked with the HMD.
2 is a block diagram illustrating an HMD according to an embodiment of the present invention;
3 is a flowchart illustrating a content output method using an HMD according to an embodiment of the present invention.
4 is a flowchart illustrating a content output method using an HMD according to another embodiment of the present invention.
5 to 7 are views showing a specific embodiment for outputting contents using the HMD of the present invention.
8 to 10 are views showing another embodiment of outputting contents using the HMD of the present invention.
11 is a flowchart illustrating a content output method using an HMD according to another embodiment of the present invention.
12 to 13 illustrate still another embodiment of outputting contents using the HMD of the present invention.
본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도, 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한 특정 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 아닌 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.As used herein, terms used in the present invention are selected from general terms that are widely used in the present invention while taking into account the functions of the present invention. However, these terms may vary depending on the intention of a person skilled in the art, custom or the emergence of new technology. Also, in certain cases, there may be a term arbitrarily selected by the applicant, and in this case, the meaning thereof will be described in the description of the corresponding invention. Therefore, it is intended that the terminology used herein should be interpreted relative to the meaning of the term rather than to the nomenclature of the term, and the entire content of the specification.
도 1은 본 발명의 실시예에 따른 HMD(100), 상기 HMD를 착용한 유저(10) 및 상기 HMD(100)와 연동된 디지털 디바이스(200)를 나타내고 있다.FIG. 1 shows an HMD 100, a
본 발명에서 디지털 디바이스(200)는 다양한 종류의 컨텐츠(1)를 출력할 수 있다. 예를 들어, 상기 디지털 디바이스(200)는 생방송, 영화, 음악, 드라마, 웹 페이지, 게임 또는 어플리케이션 등의 다양한 멀티미디어 컨텐츠를 출력할 수 있다. 상기 디지털 디바이스(200)는 적어도 하나의 디스플레이 유닛(220)을 구비하며, 디지털 디바이스(200)에서 출력되는 컨텐츠(1)는 상기 디스플레이 유닛(220)으로 디스플레이 될 수 있다. 한편, 디지털 디바이스(200)는 커뮤니케이션 유닛(미도시)을 구비할 수 있으며, 상기 커뮤니케이션 유닛을 통해 HMD(100) 및 기타 다른 외부 디바이스들과 데이터 송수신이 가능하다. 본 발명에서 디지털 디바이스(200)는 디스플레이 유닛 및 커뮤니케이션 유닛을 구비한 다양한 전자 디바이스들을 포함한다. 예를 들면, 디지털 디바이스(200)는 PC, PDA(Personal Digital Assistant), 노트북, 태블릿 피씨, 텔레비전 등 이미지 디스플레이가 가능하며 데이터 통신이 가능한 다양한 디바이스 들을 포함한다.In the present invention, the
한편, 도 1에 도시된 HMD(100)는 디지털 디바이스(200)와 연동하여 작동할 수 있다. 상기 HMD(100)와 디지털 디바이스(200)간의 연동을 위해 별도의 페어링 또는 통신 접속이 수행될 수 있으며, 이러한 페어링 또는 통신 접속 작업은 HMD(100) 또는 디지털 디바이스(200)를 통한 유저 입력에 의해 수행될 수 있다. 예를 들어, HMD(100)는 디지털 디바이스(200)와의 페어링 또는 통신 접속을 위한 별도의 버튼 또는 유저 인터페이스를 제공할 수 있으며, 유저는 상기 버튼 또는 유저 인터페이스를 이용한 유저 입력을 통해 HMD(100)와 디지털 디바이스(200) 간의 페어링 또는 통신 접속을 수행할 수 있다.Meanwhile, the HMD 100 shown in FIG. 1 can operate in conjunction with the
HMD(100)는 구비된 디스플레이 유닛을 통해 이미지 디스플레이가 가능하다. 예를 들어, HMD(100) 자체의 유저 인터페이스, 유저 입력에 대한 리스폰스 등을 디스플레이 할 수 있으며, 네트워크(300)로 연결된 디지털 디바이스(200)와 연동하여 다양한 컨텐츠를 디스플레이 할 수 있다. 본 발명의 실시예에 따르면, HMD(100)는 기 설정된 범위의 화각 영역(102)을 가질 수 있다. 상기 화각 영역(102)은 HMD(100)를 착용한 유저의 시야에 대응하는 기 설정된 영역으로서, HMD(100)의 전방 방향으로 일정한 각도 범위의 구간을 포함할 수 있다.The HMD 100 is capable of image display through a display unit provided therein. For example, it is possible to display a user interface of the HMD 100 itself, a response to user input, and the like, and display various contents in conjunction with the
본 발명의 실시예에 따르면, HMD(100)는 상기 HMD(100)와 연동된 디지털 디바이스(200)가 HMD(100)의 화각 영역(102)에 위치하는지 여부를 디텍트 할 수 있다. 즉, HMD(100)는 연동된 디지털 디바이스(200)의 위치 상태를 디텍트 할 수 있는데, 본 발명에서 상기 위치 상태는 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102)에 위치하는 제 1 상태와, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102)에 위치하지 않는 제 2 상태를 포함할 수 있다.According to an embodiment of the present invention, the HMD 100 can detect whether the
한편, 본 발명에서 네트워크(300)는 HMD(100)와 디지털 디바이스(200)간에 통신이 가능하도록 하는 다양한 형태의 유선 또는 무선 네트워크를 포함할 수 있다. 이때, 사용 가능한 무선 네트워크로는 NFC(Near Field Communication), Zigbee, 적외선 통신, 블루투스, 와이파이 등이 있으며, 본 발명은 이에 한정하지 않는다. 본 발명에서 HMD(100)와 디지털 디바이스(200)간의 통신은 앞서 열거된 네트워크(300) 중 어느 하나를 이용하여 이루어질 수도 있으며, 이들 간의 조합을 통하여 이루어질 수도 있다.In the present invention, the
도 2는 본 발명의 실시예에 따른 HMD를 나타낸 블록도이다.2 is a block diagram illustrating an HMD according to an embodiment of the present invention.
도 2를 참조로 하면, 본 발명의 HMD(100)는 프로세서(110), 디스플레이 유닛(120), 오디오 출력 유닛(130), 커뮤니케이션 유닛(140), 센서 유닛(150), 스토리지 유닛(160) 및 파워 유닛(180)을 포함할 수 있다.Referring to FIG. 2, the HMD 100 of the present invention includes a
먼저, 디스플레이 유닛(120)은 디스플레이 화면에 이미지를 출력한다. 상기 디스플레이 유닛(120)은 프로세서(110)에서 실행되는 컨텐츠 또는 프로세서(110)의 제어 명령에 기초하여 이미지를 출력할 수 있다. 또한, 본 발명의 실시예에 따르면 디스플레이 유닛(120)은 HMD(100)와 연동된 외부 디바이스 (예를 들면, 디지털 디바이스)의 제어 명령에 기초하여 이미지를 디스플레이 할 수 있다. 예를 들어, 디스플레이 유닛(120)은 HMD(100)와 연동된 디지털 디바이스가 실행중인 컨텐츠를 디스플레이 할 수 있다. 이때, HMD(100)는 커뮤니케이션 유닛(140)을 통해 상기 디지털 디바이스로부터 데이터를 수신하며, 수신 받은 데이터에 기초하여 이미지를 출력할 수 있다.First, the
다음으로, 오디오 출력 유닛(130)은 스피커, 이어폰 등의 오디오 출력 수단을 포함한다. 상기 오디오 출력 유닛(130) 또한 프로세서(110)에서 실행되는 컨텐츠 또는 프로세서(110)의 제어 명령에 기초하여 음성을 출력할 수 있다. 또한, 본 발명의 실시예에 따르면 오디오 출력 유닛(130)은 HMD(100)와 연동된 디지털 디바이스의 제어 명령에 기초하여 음성을 출력할 수 있다. 예를 들어, 오디오 출력 유닛(130)은 HMD(100)와 연동된 디지털 디바이스가 실행중인 컨텐츠에 기초하여 음성을 출력할 수 있다. 본 발명에서 오디오 출력 유닛(130)은 HMD(100)상에 선택적으로 구비될 수 있다.Next, the
다음으로, 커뮤니케이션 유닛(140)은 외부 디바이스와 다양한 프로토콜을 사용하여 통신을 수행하여 데이터를 송/수신할 수 있다. 또한, 커뮤니케이션 유닛(140)은 유선 또는 무선으로 네트워크에 접속하여, 컨텐츠 등의 디지털 데이터를 송/수신할 수 있다. 본 발명에서 HMD(100)는 커뮤니케이션 유닛(140)을 이용하여 디지털 디바이스와 페어링 및 통신 접속을 수행할 수 있으며, 상기 접속된 디지털 디바이스와 데이터를 송/수신할 수 있다. 한편, 본 발명의 일 실시예에 따르면, 커뮤니케이션 유닛(140)은 복수의 안테나를 포함할 수 있다. 상기 HMD(100)는 복수의 안테나를 이용하여, HMD(100)와 통신 접속된 디지털 디바이스의 위치 상태를 디텍트 할 수 있다. 즉, HMD(100)에 구비된 복수의 안테나를 통해 각각 송/수신되는 신호의 시간차, 위상차 등을 이용하여, HMD(100)와 접속된 디지털 디바이스의 디스플레이 유닛이 HMD(100)의 화각 영역에 위치하는지 여부를 디텍트 할 수 있다.Next, the
센서 유닛(150)은 HMD(100)에 장착된 복수의 센서를 사용하여 유저 인풋 또는 상기 HMD가 인식하는 환경을 프로세서(110)로 전달할 수 있다. 이때, 상기 센서 유닛(150)은 복수의 센싱 수단을 포함할 수 있다. 일 실시예로서, 복수의 센싱 수단은 중력(gravity) 센서, 지자기 센서, 모션 센서, 자이로 센서, 가속도 센서, 적외선 센서, 기울임(inclination) 센서, 밝기 센서, 고도 센서, 후각 센서, 온도 센서, 뎁스 센서, 압력 센서, 밴딩 센서, 오디오 센서, 비디오 센서, GPS(Global Positioning System) 센서, 터치 센서 등의 센싱 수단을 포함할 수 있다. 센서 유닛(150)은 상술한 다양한 센싱 수단을 통칭하는 것으로, 사용자의 다양한 입력 및 사용자의 환경을 센싱하여, 프로세서(110)가 그에 따른 작동을 수행할 수 있도록 센싱 결과를 전달할 수 있다. 상술한 센서들은 별도의 엘리먼트로 HMD(100)에 포함되거나, 적어도 하나 이상의 엘리먼트로 통합되어 포함될 수 있다.The
또한, 본 발명의 또 다른 실시예에 따르면, 센서 유닛(150)은 촬상 센서(미도시)를 포함할 수 있다. 상기 촬상 센서는 HMD(100)의 기 설정된 화각 영역 내의 이미지를 디텍트하여 프로세서(110)에 제공할 수 있다. 본 발명의 일 실시예에 따르면, 프로세서(110)는 상기 촬상 센서를 통해 디텍트 된 이미지를 기초로 하여, HMD(100)의 화각 영역 내에 HMD(100)와 연동된 디지털 디바이스(또는, 해당 디지털 디바이스의 디스플레이 유닛)가 존재하는지 여부를 디텍트 할 수 있다. 상기 촬상 센서는 본 발명의 목적에 따라 적외선 센서 등으로 대체될 수 있다.Further, according to another embodiment of the present invention, the
다음으로, 본 발명의 스토리지 유닛(160)은, 비디오, 오디오, 사진, 동영상, 애플리케이션 등 다양한 디지털 데이터를 저장할 수 있다. 스토리지 유닛(160)은 플래시 메모리, RAM(Random Access Memory), SSD(Solid State Drive) 등의 다양한 디지털 데이터 저장 공간을 나타낸다. 본 발명의 실시예에서, 스토리지 유닛(160)은 커뮤니케이션 유닛(140)을 통해 디지털 디바이스로부터 수신된 데이터를 임시적으로 저장할 수 있다. 이때, 상기 스토리지 유닛(160)은 디지털 디바이스로부터 수신된 데이터 또는 컨텐츠를 HMD(100) 상에서 출력하기 위한 버퍼링을 위해 사용될 수 있다. 본 발명에서 스토리지 유닛(160)은 HMD(100)상에 선택적으로 구비될 수 있다Next, the
파워 유닛(170)은 디바이스 내부의 배터리 또는 외부 전원과 연결되는 파워 소스로, HMD(100)에 파워를 공급할 수 있다.The
본 발명의 프로세서(110)는 데이터 통신을 통해 수신된 컨텐츠, 또는 스토리지 유닛(160)에 저장된 컨텐츠 등을 실행할 수 있다. 또한, 다양한 애플리케이션을 실행하고, 디바이스 내부의 데이터를 프로세싱 할 수 있다. 이에 더하여, 상기 메인 컨트롤 유닛(110)은 상술한 HMD(100)의 각 유닛들을 제어하며, 유닛들 간의 데이터 송수신을 제어할 수도 있다.The
도 2에 도시된 HMD(100)는 본 발명의 일 실시예에 따른 블록도로서, 분리하여 표시한 블록들은 디바이스의 엘러먼트들을 논리적으로 구별하여 도시한 것이다. 따라서 상술한 디바이스의 엘러먼트들은 디바이스의 설계에 따라 하나의 칩으로 또는 복수의 칩으로 장착될 수 있다.The
도 3은 본 발명의 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타낸 순서도이다. 이하 설명하는 도 3의 각 단계는 도 2에 도시된 HMD(100)의 프로세서(110)에 의해 제어될 수 있다.3 is a flowchart illustrating a content output method using an HMD according to an embodiment of the present invention. 3 described below can be controlled by the
먼저, 본 발명의 HMD는 디지털 디바이스와 통신 접속을 수행할 수 있다(S310). 상기 통신 접속은 HMD 또는 디지털 디바이스를 통한 유저 입력에 의해 수행될 수 있다. 예를 들어, HMD는 디지털 디바이스와의 통신 접속을 위한 별도의 버튼 또는 유저 인터페이스를 제공할 수 있으며, 유저는 상기 버튼 또는 유저 인터페이스를 이용한 유저 입력을 통해 HMD와 디지털 디바이스 간의 통신 접속을 수행할 수 있다. 상기 HMD와 디지털 디바이스 간의 통신 접속이 수행되기 전에, HMD는 디지털 디바이스와 페어링이 수행된 상태일 수 있다. 본 발명의 HMD가 디지털 디바이스와의 통신 접속이 수행되면, HMD는 세션이 오픈 된 상태로 디지털 디바이스와 데이터를 송/수신할 수 있다.First, the HMD of the present invention can perform a communication connection with a digital device (S310). The communication connection may be performed by user inputs via an HMD or a digital device. For example, the HMD may provide a separate button or user interface for communicating with a digital device, and a user may establish a communication connection between the HMD and the digital device through the user input using the button or the user interface have. Before the communication connection between the HMD and the digital device is performed, the HMD may be in a state in which the digital device is paired with the digital device. When the HMD of the present invention performs a communication connection with the digital device, the HMD can transmit / receive data to / from the digital device with the session opened.
다음으로, 본 발명의 HMD는 상기 접속된 디지털 디바이스의 위치 상태를 디텍트 할 수 있다(S320). 본 발명에서 상기 위치 상태는 디지털 디바이스의 디스플레이 유닛이 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태와, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치하지 않는 제 2 상태를 포함한다. 본 발명에서 상기 화각 영역은 HMD를 착용한 유저의 시야에 대응하는 기 설정된 영역으로서, HMD의 전방 방향으로 일정한 각도 범위의 구간을 포함할 수 있다.Next, the HMD of the present invention can detect the positional state of the connected digital device (S320). In the present invention, the positional state includes a first state in which the display unit of the digital device is located in a predetermined angle of view region of the HMD, and a second state in which the display unit of the digital device is not located in the field of view region. In the present invention, the field-of-view area is a predetermined area corresponding to the field of view of the wearer of the HMD, and may include a predetermined angular range in the forward direction of the HMD.
본 발명의 일 실시예에 따르면, HMD는 복수의 안테나를 이용하여 디지털 디바이스의 위치 상태를 디텍트 할 수 있다. 즉, HMD에 구비된 복수의 안테나를 통해 디지털 디바이스와 데이터 송/수신을 수행할 수 있으며, 이때 상기 복수의 안테나에 각각 송/수신되는 신호의 시간차, 위상차 등을 이용하여, 상기 HMD와 접속된 디지털 디바이스 및 상기 HMD 간의 상대적인 위치 및 방향을 디텍트 할 수 있다. 본 발명의 실시예에 따르면 HMD에 구비된 복수의 안테나를 이용함으로, 디지털 디바이스와 HMD 간의 거리가 일정하게 유지된 채 디지털 디바이스가 위치하는 방향(방위각)이 변하는 상황에서도 디지털 디바이스의 위치 상태를 정확하게 디텍트 할 수 있다.According to an embodiment of the present invention, the HMD can detect the positional state of the digital device using a plurality of antennas. That is, data can be transmitted / received to / from a digital device through a plurality of antennas provided in the HMD. At this time, by using time differences and phase differences of signals transmitted / received to / from the plurality of antennas, The relative position and direction between the digital device and the HMD can be detected. According to the embodiment of the present invention, since the plurality of antennas provided in the HMD are used, even when the distance between the digital device and the HMD is kept constant and the direction (azimuth angle) Can be detected.
본 발명의 또 다른 실시예에 따르면, HMD는 촬상 센서를 이용하여 상기 디지털 디바이스의 위치 상태를 디텍트 할 수 있다. 즉, HMD가 디지털 디바이스와 통신 접속된 상태에서, 촬상 센서는 HMD의 기 설정된 화각 영역 내의 이미지를 디텍트하여 HMD의 프로세서에 제공할 수 있다. 상기 프로세서는 촬상 센서를 통해 디텍트 된 이미지를 기초로 하여, HMD의 화각 영역 내에 HMD와 접속된 디지털 디바이스(또는, 해당 디지털 디바이스의 디스플레이 유닛)가 존재하는지 여부를 디텍트 할 수 있다. 예를 들어, HMD와 접속된 디지털 디바이스는 기 설정된 광 패턴을 출력할 수 있으며, HMD는 촬상 센서를 이용하여 디지털 디바이스가 출력하는 광 패턴을 디텍트할 수 있다. 여기서, 상기 광 패턴은 시간 적인 패턴 및 공간 적인 패턴 중 적어도 하나를 포함할 수 있다. 또한, 본 발명의 실시예에 따르면 상기 광 패턴은 디지털 디바이스의 디스플레이 유닛을 통해 출력될 수 있다.According to another embodiment of the present invention, the HMD can detect the positional state of the digital device using an image sensor. That is, in a state in which the HMD is communicatively connected to the digital device, the image sensor can detect and provide an image in a predefined field of view area of the HMD to the processor of the HMD. The processor can detect whether or not a digital device (or a display unit of the digital device) connected to the HMD is present in the view angle area of the HMD, based on the detected image through the image sensor. For example, the digital device connected to the HMD can output a predetermined light pattern, and the HMD can detect the light pattern output by the digital device using the image sensor. Here, the light pattern may include at least one of a temporal pattern and a spatial pattern. According to an embodiment of the present invention, the light pattern may be output through a display unit of the digital device.
만약, HMD의 화각 영역 내에 HMD와 접속된 디지털 디바이스가 존재한다면, HMD는 디지털 디바이스가 출력하는 광 패턴을 촬상 센서를 통해 디텍트 할 수 있다. 그러나, HMD의 화각 영역 내에 HMD와 접속된 디지털 디바이스가 존재하지 않는다면, 디지털 디바이스가 출력하는 광 패턴이 상기 촬상 센서를 통해 디텍트 되지 않을 것이다. 한편, 본 발명의 실시예에 따라 광 패턴이 디지털 디바이스의 디스플레이 유닛을 통해 출력 되고, 디지털 디바이스가 HMD의 화각 영역 내에 있지만 해당 디지털 디바이스의 디스플레이 유닛이 유저에게 향하지 않을 경우에도 상기 광 패턴이 디텍트 되지 않을 것이다. 즉, 유저가 디지털 디바이스의 디스플레이 유닛을 볼 수 없는 상황에 있을 때, HMD는 광 패턴을 디텍트 할 수 없게 된다. 따라서, 본 발명의 HMD는 화각 영역 내에 디지털 디바이스의 광 패턴이 디텍트 되는지 여부를 기초로 하여, 디지털 디바이스의 위치 상태를 디텍트 할 수 있다.If there is a digital device connected to the HMD in the view angle area of the HMD, the HMD can detect the light pattern output by the digital device through the image sensor. However, if there is no digital device connected to the HMD in the field of view area of the HMD, the light pattern output by the digital device will not be detected through the image sensor. On the other hand, according to the embodiment of the present invention, even when the light pattern is outputted through the display unit of the digital device and the digital device is in the field of view area of the HMD but the display unit of the digital device is not directed to the user, . That is, when the user can not see the display unit of the digital device, the HMD can not detect the light pattern. Therefore, the HMD of the present invention can detect the positional state of the digital device based on whether or not the optical pattern of the digital device is detected in the field-of-view area.
상기 광 패턴은 본 발명의 실시예에 따라 디지털 디바이스가 HMD와 통신 접속이 수행되었을 때, 디지털 디바이스의 디스플레이 유닛을 통해 출력될 수 있다. 다만, 본 발명은 이에 한정하지 않으며, 디지털 디바이스가 HMD와 통신 접속이 수행되었는지 여부와 무관하게 디지털 디바이스 자체적으로 광 패턴을 출력할 수 있다.The light pattern may be output via a display unit of the digital device when the digital device is in communication connection with the HMD according to an embodiment of the present invention. However, the present invention is not limited thereto, and the digital device itself can output a light pattern irrespective of whether or not a communication connection with the HMD is performed.
다음으로, 본 발명의 HMD는 디텍트 된 디지털 디바이스의 위치 상태에 기초하여 디지털 디바이스의 디스플레이 중인 컨텐츠를 HMD로 출력할 수 있다. 이를 위해, 우선 HMD는 디텍트 된 디지털 디바이스의 위치 상태에 기초하여, 해당 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하는지 여부를 판별한다(S330). 만약, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치한다면, 본 발명의 HMD는 디지털 디바이스의 디스플레이 중인 컨텐츠를 출력하지 않을 수 있다(S340). 반면에, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치하지 않는다면, HMD는 디지털 디바이스의 디스플레이 중인 컨텐츠를 출력할 수 있다(S342). 이를 위해, HMD는 접속된 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 디지털 디바이스로부터 수신하고, 수신된 컨텐츠를 HMD의 디스플레이 유닛으로 출력할 수 있다.Next, the HMD of the present invention can output the content being displayed on the digital device to the HMD based on the positional state of the detected digital device. To this end, the HMD first determines whether the display unit of the digital device is located in the field of view of the HMD, based on the detected position of the digital device (S330). If the display unit of the digital device is located in the field angle region, the HMD of the present invention may not output the contents being displayed in the digital device (S340). On the other hand, if the display unit of the digital device is not located in the field of view area, the HMD may output the content being displayed on the digital device (S342). To this end, the HMD may receive the displayed content of the connected digital device from the digital device and output the received content to the display unit of the HMD.
이와 같이, 본 발명의 실시예에 따르면, HMD는 디지털 디바이스와 통신 접속한 상태에서, 디지털 디바이스와의 상대적인 위치 상태에 따라 디지털 디바이스의 컨텐츠를 출력할지 여부를 트리거링 할 수 있다. 즉, 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하는 제 1 상태에서는 HMD가 디지털 디바이스의 디스플레이 중인 컨텐츠를 출력하지 않고, 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하지 않는 제 2 상태에서는 HMD가 디지털 디바이스의 디스플레이 중인 컨텐츠를 출력할 수 있다. 이에 따라, 디지털 디바이스의 위치가 HMD를 착용한 유저의 시야에서 벗어난 제 2 상태에서, 유저는 HMD를 통해 디지털 디바이스의 컨텐츠를 제공 받을 수 있게 된다. 또한, 디지털 디바이스의 위치가 HMD를 착용한 유저의 시야 내에 있는 제 1 상태에서, 유저가 HMD의 디스플레이를 통한 간섭 없이 디지털 디바이스를 통해 컨텐츠를 제공 받을 수 있다.As described above, according to the embodiment of the present invention, the HMD can trigger whether or not to output the content of the digital device in accordance with the positional state relative to the digital device, while communicating with the digital device. That is, in the first state in which the display unit of the digital device is located in the field of view of the HMD, the HMD does not output the content being displayed in the digital device, and in the second state in which the display unit of the digital device is not located in the field of view area of the HMD The HMD can output the content being displayed on the digital device. Thus, in the second state in which the position of the digital device deviates from the view of the user wearing the HMD, the user can receive the contents of the digital device through the HMD. Further, in a first state in which the position of the digital device is within the field of view of the user wearing the HMD, the user can receive the content through the digital device without interfering with display of the HMD.
한편, 본 발명의 다른 실시예에 따르면, 디텍트 된 디지털 디바이스의 위치 상태가 변환되고, 변환된 상기 위치 상태가 기 설정된 시간 이상 지속될 경우, HMD는 디지털 디바이스의 컨텐츠를 출력할지 여부를 트리거링 할 수 있다. 즉, 디지털 디바이스의 컨텐츠를 출력하지 않는 제 1 상태에서 디지털 디바이스의 위치 상태가 제 2 상태로 변환될 경우, HMD는 상기 디지털 디바이스의 위치 상태가 제 2 상태로 기 설정된 시간 이상 유지될 때 상기 디지털 디바이스의 컨텐츠를 출력할 수 있다. 또한, 디지털 디바이스의 컨텐츠를 출력하는 제 2 상태에서 디지털 디바이스의 위치 상태가 제 1 상태로 변환될 경우, HMD는 상기 디지털 디바이스의 위치 상태가 제 1 상태로 기 설정된 시간 이상 유지될 때 상기 디지털 디바이스의 컨텐츠 출력을 종료할 수 있다.Meanwhile, according to another embodiment of the present invention, when the position state of the detected digital device is converted and the converted position state is maintained for a predetermined time, the HMD can trigger whether to output the contents of the digital device have. That is, when the position state of the digital device is converted into the second state in the first state in which the contents of the digital device are not output, the HMD changes the state of the digital device to the second state, The content of the device can be output. When the position state of the digital device is converted into the first state in the second state in which the contents of the digital device are outputted, the HMD changes the state of the digital device to the first state, It is possible to terminate the content output of the content.
다음으로, 본 발명의 HMD는 디지털 디바이스와 통신 접속 중인지 여부를 판별 한다(S350). 만약, HMD가 디지털 디바이스와 통신 접속 중이면 S320 단계로 돌아가 페어링 된 디지털 디바이스의 위치 상태를 디텍트 한다. 만약, HMD와 디지털 디바이스 간의 통신 접속이 종료 되면, HMD는 디지털 디바이스의 컨텐츠 출력을 종료한다.Next, the HMD of the present invention determines whether or not a communication connection is established with the digital device (S350). If the HMD is in communication with the digital device, the process returns to step S320 to detect the position of the paired digital device. If the communication connection between the HMD and the digital device is terminated, the HMD terminates the content output of the digital device.
즉, 본 발명에 따른 HMD는 디지털 디바이스와 통신 접속된 상태에서 디지털 디바이스의 위치 상태를 실시간으로 디텍트 할 수 있다. 이때, 디텍트 된 상기 위치 상태에 기초하여, 디지털 디바이스에 의해 디스플레이 중인 컨텐츠가 HMD로 출력될 지 여부가 결정 된다. 만약, 디텍트 된 상기 위치 상태가 변경 되면, 변경된 위치 상태에 기초하여 상기 디지털 디바이스의 컨텐츠를 HMD로 출력할지 여부가 조정 된다. 상기 디지털 디바이스와의 통신 접속이 종료되면, HMD는 디지털 디바이스의 위치 상태 디텍트 작업 및 디지털 디바이스의 컨텐츠 출력 작업을 모두 종료할 수 있다.That is, the HMD according to the present invention can detect the positional state of the digital device in real time in a state of being connected to the digital device in communication. At this time, based on the detected position state, it is determined whether the content being displayed by the digital device is output to the HMD. If the detected position state is changed, whether or not to output the contents of the digital device to the HMD is adjusted based on the changed position state. When the communication connection with the digital device is ended, the HMD can terminate both the position state detection operation of the digital device and the content output operation of the digital device.
도 4는 본 발명에 따른 HMD를 이용한 컨텐츠 출력 방법의 세부 실시예를 나타내고 있다. 본 발명에서 도 2에 도시된 HMD(100)의 프로세서(110)는 이하 설명하는 도 4의 각 단계의 작동을 제어할 수 있다. 도 4의 실시예에서, 전술한 도 3의 실시예와 동일하거나 상응하는 부분은 자세한 설명을 생략하도록 한다.FIG. 4 shows a detailed example of a content output method using the HMD according to the present invention. In the present invention, the
먼저, 본 발명의 HMD는 디지털 디바이스와 페어링을 수행한다(S410). 다음으로, 상기 HMD는 페어링 된 디지털 디바이스의 위치 상태를 디텍트 할 수 있다(S420). 상기 S410 및 S420 단계의 구체적인 실시예는 각각 도 3의 S310 및 S320 단계의 실시예와 동일하다. 다만, S420의 실시예에서 HMD는 디지털 디바이스와 통신 접속을 수행하기 전이라도, 상기 페어링 된 디지털 디바이스의 위치 상태를 디텍트 할 수 있다. 이를 위해, 본 발명의 일 실시예에 따르면, HMD는 디지털 디바이스가 출력하는 광 패턴을 디텍트 하는지 여부에 기초하여 해당 디지털 디바이스의 위치 상태를 디텍트 할 수 있다.First, the HMD of the present invention performs pairing with a digital device (S410). Next, the HMD may detect the position of the paired digital device (S420). The specific embodiments of steps S410 and S420 are the same as those of steps S310 and S320 of FIG. 3, respectively. However, in the embodiment of S420, the HMD may detect the positional state of the paired digital device even before performing the communication connection with the digital device. To this end, according to one embodiment of the present invention, the HMD can detect the position state of the digital device based on whether or not it detects the optical pattern output by the digital device.
다음으로, 디텍트 된 디지털 디바이스의 위치 상태에 기초하여 HMD와 디지털 디바이스 간의 통신 접속 여부가 결정될 수 있다. 이를 위해, 우선 HMD는 디텍트 된 디지털 디바이스의 위치 상태에 기초하여, 해당 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하는지 여부를 판별한다(S430). 만약, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치한다면, 본 발명의 HMD는 디지털 디바이스와의 통신 접속을 수행하지 않는다(S440). 반면에, 디지털 디바이스의 디스플레이 유닛이 화각 영역에 위치하지 않는다면, HMD는 디지털 디바이스와의 통신 접속을 수행할 수 있다(S442). HMD가 디지털 디바이스와 통신 접속을 수행하게 되면, 디지털 디바이스의 디스플레이 중인 컨텐츠를 상기 디지털 디바이스로부터 수신할 수 있다(S444). 본 발명의 HMD는 상기 수신한 컨텐츠를 출력할 수 있다(S446).Next, it is possible to determine whether or not a communication connection is established between the HMD and the digital device based on the positional state of the detected digital device. To do this, the HMD first determines whether the display unit of the digital device is located in the field of view of the HMD, based on the detected state of the detected digital device (S430). If the display unit of the digital device is located in the field angle region, the HMD of the present invention does not perform a communication connection with the digital device (S440). On the other hand, if the display unit of the digital device is not located in the field of view area, the HMD can perform a communication connection with the digital device (S442). When the HMD performs a communication connection with the digital device, the content being displayed by the digital device may be received from the digital device (S444). The HMD of the present invention can output the received content (S446).
이와 같이, 본 발명의 실시예에 따르면, HMD는 디지털 디바이스와 페어링 된 상태에서, 상기 디지털 디바이스와의 상대적인 위치 상태에 따라 디지털 디바이스와의 통신 접속 여부를 트리거링 할 수 있다. 즉, 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하는 제 1 상태에서는 HMD와 디지털 디바이스간의 통신 접속이 수행되고, 디지털 디바이스의 디스플레이 유닛이 HMD의 화각 영역에 위치하지 않는 제 2 상태에서는 HMD와 디지털 디바이스간의 통신 접속이 수행되지 않는다. HMD와 디지털 디바이스간의 통신 접속이 수행되면, HMD는 실시간으로 디지털 디바이스의 실행중인 컨텐츠를 수신하고, 상기 수신된 컨텐츠를 출력할 수 있다.As described above, according to the embodiment of the present invention, the HMD, when paired with the digital device, can trigger whether to establish communication with the digital device according to the positional state relative to the digital device. That is, in the first state in which the display unit of the digital device is located in the field angle region of the HMD, a communication connection is established between the HMD and the digital device, and in the second state in which the display unit of the digital device is not located in the field angle region of the HMD, A communication connection between digital devices is not performed. When a communication connection between the HMD and the digital device is performed, the HMD can receive the running content of the digital device in real time and output the received content.
한편, 본 발명의 다른 실시예에 따르면, 디텍트 된 디지털 디바이스의 위치 상태가 변환되고, 변환된 상기 위치 상태가 기 설정된 시간 이상 지속될 경우, HMD와 디지털 디바이스 간의 통신 접속 여부가 트리거링 될 수 있다. 즉, 디지털 디바이스와 통신 접속되지 않은 제 1 상태에서 디지털 디바이스의 위치 상태가 제 2 상태로 변환될 경우, HMD는 상기 디지털 디바이스의 위치 상태가 제 2 상태로 기 설정된 시간 이상 유지될 때 상기 디지털 디바이스와 통신 접속을 수행할 수 있다. 또한, 디지털 디바이스와 통신 접속된 제 2 상태에서 디지털 디바이스의 위치 상태가 제 1 상태로 변환될 경우, HMD는 상기 디지털 디바이스의 위치 상태가 제 1 상태로 기 설정된 시간 이상 유지될 때 상기 디지털 디바이스와의 통신 접속을 종료할 수 있다.According to another embodiment of the present invention, when the positional state of the detected digital device is changed and the converted positional state is maintained for a predetermined time, whether or not communication between the HMD and the digital device is connected can be triggered. That is, when the position state of the digital device in the first state not communicated with the digital device is converted into the second state, when the position state of the digital device is maintained in the second state for a predetermined time or longer, Lt; / RTI > Further, when the positional state of the digital device in the second state communicatively connected with the digital device is converted to the first state, the HMD determines that the positional state of the digital device is in the first state, It is possible to terminate the communication connection.
다음으로, 본 발명의 HMD는 디지털 디바이스와 페어링 중인지 여부를 판별 한다(S450). 만약, HMD가 디지털 디바이스와 페어링 중이면 S420 단계로 돌아가 페어링 된 디지털 디바이스의 위치 상태를 디텍트 한다. 만약, HMD와 디지털 디바이스 간의 페어링이 종료 되면, HMD는 디지털 디바이스의 컨텐츠 출력을 종료한다.Next, the HMD of the present invention determines whether the digital still camera is being paired with the digital device (S450). If the HMD is being paired with the digital device, the process returns to step S420 to detect the position of the paired digital device. If the pairing between the HMD and the digital device is terminated, the HMD terminates the output of the content of the digital device.
즉, 본 발명에 따른 HMD는 디지털 디바이스와 페어링 된 상태에서 페어링 된 디지털 디바이스의 위치 상태를 실시간으로 디텍트 한다. 이때, 디텍트 된 상기 위치 상태에 기초하여, HMD와 디지털 디바이스 간의 통신 접속 여부가 결정 된다. 만약, 디텍트 된 위치 상태가 변경 되면, 변경된 위치 상태에 기초하여 HMD와 디지털 디바이스 간의 통신 접속 여부가 조정 된다. 디지털 디바이스와의 페어링이 종료되면, HMD는 상기 디지털 디바이스의 위치 상태 디텍트 작업 및 상기 디지털 디바이스와의 통신 접속 작업을 모두 종료한다.That is, the HMD according to the present invention detects the positional state of the paired digital device in a paired state with the digital device in real time. At this time, based on the detected position state, it is determined whether or not communication between the HMD and the digital device is established. If the detented position state is changed, whether or not the communication connection between the HMD and the digital device is adjusted based on the changed position state. When the pairing with the digital device is ended, the HMD terminates both the position state detection operation of the digital device and the communication connection operation with the digital device.
도 5 내지 도 7은 본 발명의 HMD(100)를 이용하여 컨텐츠(1)를 출력하는 구체적인 실시예를 나타내고 있다. 도 5 내지 도 7의 실시예에서 HMD(100)는 디지털 디바이스(200)와 페어링 된 상태에 있다. 도 5 내지 도 7을 참조로 하면, HMD(100)의 컨텐츠(1) 출력은 HMD(100)를 기준으로 한 디지털 디바이스(200)의 위치 상태 즉, HMD(100)와 디지털 디바이스(200)간의 상대적인 위치 및 방향에 기초하여 제어될 수 있다.5 to 7 show a concrete embodiment for outputting the
먼저, 도 5 및 도 6은 본 발명의 실시예에 따라 디지털 디바이스(200)의 위치 상태가 제 1 상태(도 5(a))에서 제 2 상태(도 5(b))로 전환되는 모습을 도시하고 있다. 이때, 디지털 디바이스(200)에서 디스플레이 중인 컨텐츠(1)는 HMD(100) 상으로 이동하여 디스플레이 될 수 있다.5 and 6 illustrate how the positional state of the
먼저, 도 5(a)에 도시된 바와 같이 유저(10)는 본 발명의 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)에서 디스플레이 되는 컨텐츠(1)를 볼 수 있다. 이때, 디지털 디바이스(200)의 디스플레이 유닛(220)은 HMD(100)의 화각 영역(102) 내에 위치할 수 있다. 본 발명의 실시예에서, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 내에 있으면, HMD(100)는 컨텐츠(1)를 출력하지 않는다. 본 발명의 일 실시예에 따라, 도 5(a)에서 HMD(100)는 디지털 디바이스(200)와의 통신 접속이 수행되지 않은 상태일 수 있다.First, as shown in FIG. 5 (a), the
한편, 본 발명의 실시예에 따르면 도 5(b)에 도시된 바와 같이 유저(10)가 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)이 아닌 다른 곳을 바라볼 수 있다. 이때, 디지털 디바이스(200)의 디스플레이 유닛(220)은 HMD(100)의 화각 영역(102) 밖에 위치할 수 있다. 이와 같이 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치하게 되면, HMD(100)는 컨텐츠(1)를 출력할 수 있다. 본 발명의 일 실시예에 따라, 도 5(b)에서 HMD(100)는 디지털 디바이스(200)와의 통신 접속이 수행된 상태일 수 있다. 이에 따라 HMD(100)는 네트워크(300)를 통해 실시간으로 디지털 디바이스(200)로부터 컨텐츠(1)를 수신하고, 수신된 상기 컨텐츠(1)를 출력할 수 있다. 한편, 본 발명의 실시예에 따르면, 디지털 디바이스(200)는 HMD(100)의 화각 영역(102) 밖에 위치한 제 2 상태에서 컨텐츠(1)의 디스플레이를 중단할 수 있다.5 (b), when the
본 발명의 실시예에 따르면, 디지털 디바이스(200)의 위치 상태가 HMD(100)의 화각 영역(102) 이내에 위치하는 제 1 상태에서 HMD(100)의 화각 영역 밖에 위치하는 제 2 상태로 변환 시, HMD(100) 상에서 적절한 피드백을 제공할 수 있다. 예를 들어, 디지털 디바이스(200)의 위치 상태가 제 1 상태에서 제 2 상태로 변환 시, HMD(100)는 진동 피드백을 제공할 수 있다. 또는, 디지털 디바이스(200)의 위치 상태가 제 1 상태에서 제 2 상태로 변환 시, HMD(100)는 상기 컨텐츠(1)를 페이드 인(fade-in) 하여 출력할 수 있다. 또는, HMD(100)는 기 설정된 시간 이후에 상기 컨텐츠(1)를 출력할 수 있다. 즉, HMD(100)는 디지털 디바이스(200)의 위치 상태가 변환된 시점으로부터 기 설정된 시간 이후에 컨텐츠(1)를 출력할 수 있다. 또한, 디지털 디바이스(200)는 상기 디지털 디바이스(200)의 위치 상태가 변환된 시점으로부터 상기 기 설정된 시간 동안 컨텐츠(1)의 출력을 정지할 수 있으며, 상기 기 설정된 시간 이후에 계속해서 컨텐츠(1)를 출력할 수 있다. 예를 들어, 상기 컨텐츠(1)가 동영상 컨텐츠이고, 디지털 디바이스(200)의 위치 상태가 제 1 상태에서 제 2 상태로 변환될 경우, 디지털 디바이스(200)는 상기 동영상 컨텐츠의 출력을 기 설정된 시간 동안 정지할 수 있다.According to the embodiment of the present invention, when the position state of the
한편 도 6에 도시된 본 발명의 다른 실시예에 따르면, 디지털 디바이스(200)의 위치 상태가 제 1 상태에서 제 2 상태로 변환될 때, HMD(100)는 상기 컨텐츠(1)를 슬라이딩 이동하여 출력할 수 있다. 이때, HMD(100)는 디지털 디바이스(200)의 디스플레이 유닛(220)이 화각 영역(102)을 벗어난 측에서 센터 영역으로 컨텐츠(1)가 슬라이딩 이동하도록 할 수 있다. 예를 들어, 도 6(a)에 도시된 바와 같이 제 1 상태에 있던 디지털 디바이스(200)가 HMD(100)의 화각 영역(102)을 좌측으로 벗어나 제 2 상태로 전환된 경우, HMD(100)는 도 6(b)에 도시된 바와 같이 디지털 디바이스(200)가 화각 영역(102)을 벗어난 좌측에서 센터 영역으로 상기 컨텐츠(1)를 슬라이딩 이동하여 디스플레이 할 수 있다. 여기서, 상기 센터 영역은 HMD(100)의 디스플레이 유닛이 디스플레이 하는 프레임의 중앙부에 위치하는 영역으로서, 상기 화각 영역(102)의 중앙부에 위치하는 기 설정된 영역이 될 수 있다.Meanwhile, according to another embodiment of the present invention shown in FIG. 6, when the positional state of the
다음으로, 도 7은 본 발명의 실시예에 따라 디지털 디바이스(200)의 위치 상태가 제 2 상태(도 7(a))에서 제 1 상태(도 7(b))로 전환되는 모습을 도시하고 있다. 이때, HMD(100)는 디스플레이 중인 컨텐츠(1)의 출력을 종료할 수 있다. 한편 본 발명의 다른 실시예에 따라 디지털 디바이스(200)가 제 2 상태에서 컨텐츠(1) 디스플레이를 중단한 경우, 상기 디지털 디바이스(200)는 중단된 상기 컨텐츠(1)의 디스플레이를 제 1 상태에서 재개할 수 있다. 이에 따라, HMD(100) 상에서 디스플레이 중인 컨텐츠(1)가 디지털 디바이스(200)로 이동하여 디스플레이 될 수 있다.Next, Fig. 7 shows a state in which the position state of the
더욱 구체적으로, 본 발명의 실시예에 따르면 도 7(a)에 도시된 바와 같이 유저(10)가 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)이 아닌 다른 곳을 바라볼 수 있다. 이때, 디지털 디바이스(200)의 디스플레이 유닛(220)은 HMD(100)의 화각 영역(102) 밖에 위치할 수 있다. 이와 같이 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치하게 되면, HMD(100)는 컨텐츠(1)를 출력할 수 있다. 본 발명의 일 실시예에 따라, 도 7(a)에서 HMD(100)는 디지털 디바이스(200)와의 통신 접속이 수행된 상태일 수 있다. 이에 따라 HMD(100)는 네트워크(300)를 통해 실시간으로 디지털 디바이스(200)로부터 컨텐츠(1)를 수신하고, 수신된 상기 컨텐츠(1)를 출력할 수 있다. 한편, 본 발명의 실시예에 따르면, 디지털 디바이스(200)는 HMD(100)의 화각 영역(102) 밖에 위치한 제 2 상태에서 컨텐츠(1)의 디스플레이를 중단할 수 있다.More specifically, according to the embodiment of the present invention, as shown in FIG. 7 (a), when the
다음으로, 도 7(b)에 도시된 바와 같이 유저(10)는 본 발명의 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)을 바라볼 수 있다. 이때, 디지털 디바이스(200)의 디스플레이 유닛(220)은 HMD(100)의 화각 영역(102) 내에 위치할 수 있다. 본 발명의 실시예에서, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 내에 있으면, HMD(100)는 컨텐츠(1)를 출력하지 않는다. 본 발명의 일 실시예에 따라, 도 7(b)에서 HMD(100)는 디지털 디바이스(200)와의 통신 접속이 수행되지 않은 상태일 수 있다. 한편, 본 발명의 실시예에 따라 도 7(a)의 디지털 디바이스(200)가 컨텐츠(1) 디스플레이를 중단한 경우, 상기 디지털 디바이스(200)는 중단된 상기 컨텐츠(1)의 디스플레이를 재개할 수 있다.Next, as shown in FIG. 7 (b), the
도 8은 본 발명의 다른 실시예에 따라 디지털 디바이스(200)의 위치 상태가 제 2 상태(도 8(a))에서 제 1 상태(도 8(b))로 전환되는 모습을 도시하고 있다. 도 8의 실시예에서 디지털 디바이스(200)는 제 1 상태 및 2 상태에서 모두 컨텐츠(1)의 디스플레이를 수행할 수 있다. 본 발명의 일 실시예에 따르면, HMD(100)는 상기 HMD(100)의 화각 영역(102) 내에 위치한 디지털 디바이스(200)가 HMD(100)와 동일한 컨텐츠(1)를 디스플레이 하는지 여부를 기초로 하여 상기 컨텐츠(1)의 출력 여부를 조정할 수 있다.8 shows a state in which the position state of the
먼저, 도 8(a)에 도시된 바와 같이 유저(10)는 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)이 아닌 다른 곳을 바라볼 수 있다. 이와 같이 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치하게 되면, HMD(100)는 컨텐츠(1)를 출력할 수 있다. 도 8의 실시예에 따르면, 디지털 디바이스(200)는 HMD(100)의 화각 영역(102) 밖에 위치한 제 2 상태에서 컨텐츠(1)를 디스플레이 하고 있다.First, as shown in FIG. 8 (a), the
이때, 도 8(b)에 도시된 바와 같이 유저(10)는 HMD(100)를 착용한 채로 디지털 디바이스(200)의 디스플레이 유닛(220)을 바라볼 수 있다. 이때, HMD(100)의 화각 영역(102) 내에 들어온 디지털 디바이스(200)는 컨텐츠(1)를 디스플레이 하고 있다. 상기 디지털 디바이스(200)가 디스플레이 중인 컨텐츠(1)는 현재 HMD(100)가 출력 중인 컨텐츠(1)와 동일할 수도 있고 상이할 수도 있다. 즉, 디지털 디바이스(200)와 HMD(100)간에 실시간으로 데이터 송/수신이 진행되었다면, 디지털 디바이스(200)가 디스플레이 중인 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일할 수 있다. 그러나 디지털 디바이스(200)와 HMD(100)간에 실시간으로 데이터 송/수신이 이루어지지 않았다면, 디지털 디바이스(200)가 디스플레이 중인 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일하지 않을 수 있다. 예를 들어, 상기 컨텐츠(1)가 웹 페이지일 경우, 디지털 디바이스(200)의 URL 접속 변경에 따른 웹 페이지 변화가 HMD(100)에 아직 전달되지 않을 수 있다.At this time, the
따라서, 본 발명의 실시예에 따른 HMD(100)는 화각 영역(102) 내에 들어온 상기 디지털 디바이스(200)가 디스플레이 하는 컨텐츠(1)가 현재 HMD(100)의 출력 중인 컨텐츠(1)와 동일한지 여부를 판별한다. 만약, 상기 디지털 디바이스(200)가 디스플레이 하는 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일한 경우, 도 8(b)에 도시된 바와 같이 HMD(100)는 컨텐츠(1) 출력을 종료함으로 컨텐츠(1) 디스플레이의 중첩을 피할 수 있다. 그러나, 상기 디지털 디바이스(200)가 디스플레이 하는 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일하지 않은 경우, HMD(100)는 컨텐츠(1) 출력을 종료하지 않을 수 있다.Accordingly, in the
한편, 본 발명의 실시예에 따르면, 디지털 디바이스(200)의 위치 상태가 HMD(100)의 화각 영역(102) 밖에 위치하는 제 2 상태에서 HMD(100)의 화각 영역 내에 위치하는 제 1 상태로 변환 시, HMD(100) 상에서 적절한 피드백을 제공할 수 있다. 예를 들어, 디지털 디바이스(200)의 위치 상태가 제 2 상태에서 제 1 상태로 변환 시, HMD(100)는 진동 피드백을 제공할 수 있다. 또는, 디지털 디바이스(200)의 위치 상태가 제 2 상태에서 제 1 상태로 변환 시, HMD(100)는 상기 컨텐츠(1)를 페이드 아웃(fade-out) 할 수 있다.According to the embodiment of the present invention, the digital state of the
도 9는 본 발명의 HMD(100)를 이용하여 컨텐츠(1)를 출력하는 다른 실시예를 나타내고 있다. 본 발명의 실시예에 따르면, 디지털 디바이스(200)의 위치 상태는 디지털 디바이스(200)의 위치 및 상기 디지털 디바이스(200)의 디스플레이 유닛(220)의 방향에 기초하여 결정된다. 즉, 상기 위치 상태는 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 내에서 디텍트 되는지 여부를 기초로 결정될 수 있다. 본 발명의 일 실시예에 따르면, 디지털 디바이스(200)가 출력하는 광 패턴(5)이 디텍트 되는지 여부를 기초로 상기 디지털 디바이스(200)의 위치 상태가 디텍트 될 수 있다.9 shows another embodiment for outputting the
먼저 도 9(a)를 참조로 하면, 디지털 디바이스(200)가 HMD(100)의 화각 영역(102) 내에 위치한 상태에서, 상기 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)를 향하게 될 수 있다. 이때, HMD(100)는 디지털 디바이스(200)의 디스플레이 유닛(220)이 출력하는 광 패턴(5)을 디텍트 할 수 있다. HMD(100)는 상기 광 패턴(5)이 디텍트 되면, 디지털 디바이스(200)의 위치 상태를 제 1 상태로 인식하고, 이에 따라 디지털 디바이스(200)의 컨텐츠(1)를 출력하지 않는다.9 (a), when the
한편, 도 9(b)에 도시된 바와 같이 도 9(a)의 디지털 디바이스(200)가 뒤집히게 될 수 있다. 즉, 디지털 디바이스(200)가 HMD(100)의 화각 영역(102) 내에 위치함에도 불구하고, 상기 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)를 향하지 않게 될 수 있다. 이때, HMD(100)는 디지털 디바이스(200)의 디스플레이 유닛(220)이 출력하는 광 패턴(5)을 디텍트 할 수 없게 된다. 본 발명의 실시예에 따르면, HMD(100)는 광 패턴(5)이 디텍트 되지 않는 도 9(b)의 디지털 디바이스의 위치 상태를 제 2 상태로 인식할 수 있다. 이에 따라 HMD(100)는 디지털 디바이스(200)의 컨텐츠(1)를 출력할 수 있다.On the other hand, as shown in Fig. 9 (b), the
도 10은 본 발명의 HMD(100)를 이용하여 컨텐츠(1)를 출력하는 또 다른 실시예를 나타내고 있다. 본 발명의 실시예에 따르면, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102)에 위치하지 않는 제 2 상태에서, 상기 화각 영역(102)에 적어도 하나의 외부 디바이스(202)의 디스플레이 유닛(222)이 존재하는지 여부를 디텍트 할 수 있다. 만약, 상기 화각 영역(102)에 적어도 하나의 외부 디바이스(202)의 디스플레이 유닛(222)이 디텍트 될 경우, 해당 외부 디바이스(202)의 디스플레이 유닛(222)은 디지털 디바이스(200)의 컨텐츠(1)를 출력할 수 있다.10 shows another embodiment of outputting the
예를 들어, 도 10(a)에 도시된 바와 같이 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치할 수 있다. 이때, HMD(100)는 디지털 디바이스(200)의 컨텐츠(1)를 출력할 수 있으며, 구체적인 실시예는 도 7(a)에서 상술한 바와 같다.For example, the
한편, 디지털 디바이스(200)의 디스플레이 유닛(220)이 HMD(100)의 화각 영역(102) 밖에 위치한 제 2 상태에서, 도 10(b)에 도시된 바와 같이 외부 디바이스(202)가 HMD(100)의 화각 영역(102)에 위치하게 될 수 있다. 즉, HMD(100)는 화각 영역(102) 내에 위치한 외부 디바이스(202)의 디스플레이 유닛(222)을 디텍트 할 수 있다. 이와 같이, 외부 디바이스(202)의 디스플레이 유닛(222)이 상기 화각 영역(102) 내에서 디텍트 되면, 해당 외부 디바이스(202)의 디스플레이 유닛(222)으로 컨텐츠(1)를 출력할 수 있다. 이를 위해, 상기 디텍트 된 외부 디바이스(202)는 디지털 디바이스(200)와 통신 접속을 수행할 수 있다. 외부 디바이스(202)와 디지털 디바이스(200)간의 통신 접속이 수행 되면, 외부 디바이스(202)는 네트워크(300)를 이용하여 디지털 디바이스(200)로부터 컨텐츠(1)를 수신할 수 있다. 수신된 상기 컨텐츠(1)는 외부 디바이스(202)의 디스플레이 유닛(222)으로 출력될 수 있다.On the other hand, in the second state where the
도 11 내지 도 13은 본 발명의 또 다른 실시예를 나타내고 있다.11 to 13 show another embodiment of the present invention.
먼저, 도 11은 본 발명의 또 다른 실시예에 따른 HMD를 이용한 컨텐츠 출력 방법을 나타내고 있다. 본 발명에서 도 2에 도시된 HMD(100)의 프로세서(110)는 이하 설명하는 도 11의 각 단계의 작동을 제어할 수 있다. 도 11의 실시예에서, 전술한 도 3의 실시예와 동일하거나 상응하는 부분은 자세한 설명을 생략하도록 한다.11 illustrates a content output method using an HMD according to another embodiment of the present invention. In the present invention, the
먼저, 본 발명의 HMD는 상기 HMD의 화각 영역에 위치하는 제 1 마커를 디텍트 한다(S1110). 본 발명의 마커는 컨텐츠 정보를 나타내는 식별자로서, 바코드, QR 코드, RFID, 컬러 코드, 이미지 코드 등을 포함할 수 있다.First, the HMD of the present invention detects a first marker positioned in the field angle region of the HMD (S1110). The marker of the present invention may include a barcode, a QR code, an RFID, a color code, an image code and the like as an identifier indicating content information.
다음으로, 상기 HMD는 제 1 마커의 위치 상태를 디텍트 할 수 있다(S1120). 본 발명의 상기 위치 상태는 제 1 마커가 HMD의 기 설정된 화각 영역에 위치하는 제 1 상태와, 제 1 마커가 화각 영역에 위치하지 않는 제 2 상태를 포함한다. 본 발명의 실시예에 따르면, HMD는 촬상 센서를 이용하여 제 1 마커의 위치 상태를 디텍트 할 수 있다. 즉, 촬상 센서는 HMD의 기 설정된 화각 영역 내의 이미지를 디텍트하여 HMD의 프로세서에 제공할 수 있다. 상기 프로세서는 촬상 센서를 통해 디텍트 된 이미지를 기초로 하여, HMD의 화각 영역 내에 제 1 마커가 존재하는지 여부를 디텍트 할 수 있다.Next, the HMD may detect the position of the first marker (S1120). The positional state of the present invention includes a first state in which the first marker is located in a predetermined angle of view region of the HMD and a second state in which the first marker is not in the field of view angle. According to the embodiment of the present invention, the HMD can detect the positional state of the first marker using the image sensor. That is, the image sensor can detect the image in the predetermined angle of view region of the HMD and provide it to the processor of the HMD. The processor can detect whether a first marker is present in the field of view area of the HMD based on the detected image through the image sensor.
다음으로, 디텍트 된 제 1 마커의 위치 상태에 기초하여, HMD는 제 1 마커에 대응하는 컨텐츠를 출력할지 여부를 결정할 수 있다. 이를 위해, 우선 HMD는 디텍트 된 제 1 마커의 위치 상태에 기초하여, 상기 제 1 마커가 HMD의 화각 영역에 위치하는지 여부를 판별한다(S1130). 만약, 제 1 마커가 HMD의 화각 영역에 위치한다면, HMD는 제 1 마커에 대응하는 컨텐츠를 출력하지 않는다(S1140). 반면에, 제 1 마커가 HMD의 화각 영역에 위치하지 않는다면, HMD는 제 1 마커에 대응하는 컨텐츠를 수신할 수 있다(S1142). 이때, HMD는 상기 네트워크를 통해 서버로부터 상기 컨텐츠를 수신할 수 있다. 서버로부터 상기 컨텐츠가 수신되면, HMD는 수신된 상기 컨텐츠를 출력한다(S1144).Next, based on the detected positional state of the first marker, the HMD can determine whether to output the content corresponding to the first marker. To this end, the HMD first determines whether the first marker is located in the field angle region of the HMD, based on the detected position of the first marker (S1130). If the first marker is located in the field of view of the HMD, the HMD does not output the content corresponding to the first marker (S1140). On the other hand, if the first marker is not located in the field of view area of the HMD, the HMD may receive the content corresponding to the first marker (S1142). At this time, the HMD can receive the contents from the server through the network. When the content is received from the server, the HMD outputs the received content (S1144).
다음으로, HMD는 화각 영역에 있는 마커의 디텍트 여부를 계속해서 판별한다. 이때, 본 발명의 HMD는 화각 영역 내에 상기 제 1 마커와 다른 제 2 마커가 디텍트 되는지 여부를 판별할 수 있다(S1150). 만약, 제 2 마커가 디텍트 되지 않는다면, HMD는 S1120 단계로 돌아가서 제 1 마커의 위치 상태에 따른 컨텐츠 출력 동작을 계속 한다. 즉, HMD는 제 1 마커의 위치 상태에 기초하여 제 1 마커에 대응하는 컨텐츠의 출력 여부를 트리거링 할 수 있다. 만약, 제 2 마커가 디텍트 되면, HMD는 제 1 마커의 위치 상태에 따른 컨텐츠 출력 동작을 종료한다. 이때, 상기 HMD는 새로 디텍트 된 제 2 마커의 위치 상태를 디텍트 할 수 있으며, 전술한 도 11의 실시예와 같은 방법으로 제 2 마커의 위치 상태에 따른 컨텐츠 출력을 수행할 수 있다.Next, the HMD continuously determines whether or not the marker in the field angle area is detected. At this time, the HMD of the present invention can determine whether or not the second marker other than the first marker is detected in the field angle area (S1150). If the second marker is not detected, the HMD returns to step S1120 and continues the content output operation according to the position of the first marker. That is, the HMD can trigger whether to output the content corresponding to the first marker based on the positional state of the first marker. If the second marker is detected, the HMD terminates the content output operation according to the positional state of the first marker. At this time, the HMD can detect the positional state of the newly detected second marker, and can perform content output according to the positional state of the second marker in the same manner as the embodiment of FIG.
도 12 및 도 13은 도 11의 실시예에 따라 HMD를 이용하여 컨텐츠 출력하는 구체적인 방법을 도시하고 있다.12 and 13 show a specific method of outputting contents using the HMD according to the embodiment of FIG.
먼저, 도 12에 도시된 바와 같이 유저(10)는 HMD(100)를 착용한 채로 마커(5)를 포함하는 컨텐츠(1)를 볼 수 있다. 상기 컨텐츠(1)는 디지털 컨텐츠가 아닌 아날로그 컨텐츠가 될 수 있으며, 예를 들어 책, 잡지, 신문, 사진 등의 일부 영역 또는 전체 영역이 될 수 있다. 상기 컨텐츠(1)는 해당 컨텐츠(1)의 정보를 나타내는 마커(5)를 포함할 수 있다. 본 발명의 실시예에서, 상기 마커(5)가 HMD(100)의 화각 영역(102) 내에 있으며, HMD(100)는 컨텐츠(1)를 출력하지 않는다.First, as shown in FIG. 12, the
다음으로, 본 발명의 실시예에 따르면 도 13(a)에 도시된 바와 같이 유저(10)가 HMD(100)를 착용한 채로 컨텐츠(1)가 아닌 다른 곳을 바라볼 수 있다. 이때, 상기 컨텐츠(1)에 포함된 마커(5)는 HMD(100)의 화각 영역(102) 밖에 위치할 수 있다. 즉, 상기 마커(5)의 위치 상태가 제 1 상태(도 12)에서 제 2 상태(도 13(a))로 전환될 수 있다. 이와 같이 마커(5)가 HMD(100)의 화각 영역(102) 밖에 위치하게 되면, HMD(100)는 마커(5)에 대응하는 컨텐츠(1)를 출력할 수 있다. 즉, HMD(100)는 네트워크(300)를 통해 서버(미도시)로부터 상기 마커(5)에 대응하는 컨텐츠(1)를 수신하고, 수신된 상기 컨텐츠를 출력할 수 있다.Next, according to the embodiment of the present invention, the
한편, 도 13(b)에 도시된 바와 같이 유저(10)가 HMD(100)를 착용한 채로 다시 컨텐츠(1)를 바라볼 수 있다. 이때, 상기 컨텐츠(1)에 포함된 마커(5)는 HMD(100)의 화각 영역(102) 내에 위치할 수 있다. 즉, 상기 마커(5)의 위치 상태가 제 2 상태(도 13(a))에서 제 1 상태(도 13(b))로 전환될 수 있다. 이와 같이 마커(5)가 HMD(100)의 화각 영역(102) 내로 다시 들어오게 되면, HMD(100)는 마커(5)에 대응하는 컨텐츠(1)의 출력을 종료할 수 있다.On the other hand, as shown in FIG. 13 (b), the
한편, 본 발명의 일 실시예에 따르면, HMD(100)는 상기 HMD(100)의 화각 영역(102) 내에 위치한 컨텐츠(1)가 HMD(100)에서 출력하는 컨텐츠(1)와 동일한지 여부를 기초로 상기 컨텐츠(1)의 출력 여부를 조정할 수 있다. 즉, HMD(100)는 화각 영역(102) 내에 들어온 컨텐츠(1)가 현재 HMD(100)의 출력 중인 컨텐츠(1)와 동일한지 여부를 판별한다. 만약, 화각 영역(102) 내에 들어온 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일한 경우, 도 13(b)에 도시된 바와 같이 HMD(100)는 컨텐츠(1) 출력을 종료함으로 컨텐츠(1) 디스플레이의 중첩을 피할 수 있다. 그러나, 상기 화각 영역(102) 내에 들어온 컨텐츠(1)가 HMD(100)의 출력 중인 컨텐츠(1)와 동일하지 않은 경우, HMD(100)는 컨텐츠(1) 출력을 종료하지 않을 수 있다.According to an embodiment of the present invention, the
본 발명에서 디지털 디바이스의 위치 상태는 HMD를 착용한 유저의 시선에 기초하여 결정될 수 있다. 본 발명의 HMD는 상기 HMD를 착용한 유저의 동공의 위치를 디텍트 하는 촬상 센서를 추가로 구비할 수 있으며, 상기 촬상 센서를 이용하여 해당 유저의 시선을 트래킹 할 수 있다. 이에 따라, 본 발명의 디지털 디바이스의 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 HMD를 착용한 유저의 시야 영역 내에 위치하는지 여부를 기초로 하여 결정될 수 있다. 여기서 상기 시야 영역은 HMD를 착용한 유저의 시선에 대응하는 일정 범위의 영역을 포함할 수 있다. 즉, 본 발명에서 디지털 디바이스의 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 HMD를 착용한 유저의 시야 영역에 위치하는 제 1 상태와, 상기 디지털 디바이스의 디스플레이 유닛이 HMD를 착용한 유저의 시야 영역에 위치하지 않는 제 2 상태를 포함할 수 있다. 한편 본 발명의 실시예에 따르면, 마커의 위치 상태 또한 전술한 바와 같은 방법으로 HMD를 착용한 유저의 시선에 기초하여 결정될 수 있다.The positional state of the digital device in the present invention can be determined based on the gaze of the user wearing the HMD. The HMD of the present invention may further include an image pickup sensor for detecting a position of a pupil of a user wearing the HMD, and the user can track the user's gaze using the image pickup sensor. Accordingly, the positional state of the digital device of the present invention can be determined based on whether or not the display unit of the digital device is located within the field of view of the wearer of the HMD. Here, the viewing area may include a range of areas corresponding to a line of sight of the user wearing the HMD. That is, in the present invention, the positional state of the digital device is determined based on a first state in which the display unit of the digital device is located in the field of view of the user wearing the HMD and a first state in which the display unit of the digital device is located in the field of view of the user wearing the HMD And a second state that is not located. Meanwhile, according to the embodiment of the present invention, the positional state of the marker can also be determined based on the gaze of the user wearing the HMD in the manner as described above.
본 발명에서 설명한 HMD는 본 발명의 목적에 따라 다양한 디바이스로 변경 및 대체 가능하다. 예를 들어, 본 발명의 HMD는 EMD(Eye Mounted Display), eyeglass, eyepiece, eye wear, HWD(Head Worn Display) 등 유저에게 착용되어 디스플레이를 제공할 수 있는 다양한 디바이스를 포함하며, 본 발명에서 사용된 용어에 한정되지 않는다.The HMD described in the present invention can be changed and replaced with various devices in accordance with the object of the present invention. For example, the HMD of the present invention includes various devices capable of providing a display by being worn by a user such as an EMD (Eye Mounted Display), eyeglass, eyepiece, eye wear, and HWD Lt; / RTI >
1 : 컨텐츠 10 : 유저
100 : HMD 102 : 화각 영역
200 : 디지털 디바이스 220 : 디스플레이 유닛
300 : 네트워크1: content 10: user
100: HMD 102: Angle of field
200: Digital device 220: Display unit
300: Network
Claims (30)
제 1 컨텐츠를 디스플레이하도록 구성된 적어도 하나의 디스플레이 유닛을 구비한 디지털 디바이스와의 페어링(pairing)을 수행하는 단계와,
페어링된 디지털 디바이스의 위치 상태를 디텍트하는 단계로서, 상기 위치 상태는 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 미리 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 상기 화각 영역에 위치하지 않는 제 2 상태를 포함하는 것인, 상기 디텍트하는 단계와,
상기 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 변경될 때에, 상기 디지털 디바이스에 의해 디스플레이되는 상기 제 1 컨텐츠를 수신하는 단계와, 상기 HMD 상에 상기 제 1 컨텐츠를 출력하는 단계와,
상기 위치 상태가 상기 제 2 상태에서 상기 제 1 상태로 변경될 때에, 상기 디지털 디바이스 상에 현재 디스플레이 중인 제 2 컨텐츠가 상기 HMD 상에 현재 출력 중인 제 1 컨텐츠와 동일한지 여부를 결정하고, 상기 제 2 컨텐츠가 상기 제 1 컨텐츠와 동일할 경우 상기 HMD 상으로의 상기 제 1 컨텐츠의 출력을 종료하거나, 상기 제 2 컨텐츠가 상기 제 1 컨텐츠와 동일하지 않을 경우에 상기 HMD 상으로의 상기 제 1 컨텐츠의 출력을 계속하는 단계
를 포함하고,
상기 HMD 상으로 출력되는 상기 제 1 컨텐츠는, 공간 치수(spatial dimension)의 변경 없이 그리고 상기 디지털 디바이스 상에 디스플레이되는 상기 제 1 컨텐츠의 현실 증강 없이, 상기 디지털 디바이스 상에 디스플레이되는 동일한 제 1 컨텐츠와 같은 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.A content output method using a head mounted display (HMD)
Performing a pairing with a digital device having at least one display unit configured to display a first content,
Detecting a positional state of the paired digital device, wherein the positional state is a first state in which a display unit of the digital device is located in a predetermined field of view area of the HMD, And a second state that is not located in the field angle region;
Receiving the first content displayed by the digital device when the location status changes from the first state to the second state; outputting the first content on the HMD;
Determines whether the second content currently being displayed on the digital device is the same as the first content currently being output on the HMD when the position state is changed from the second state to the first state, 2 outputting the first content on the HMD when the second content is the same as the first content, or when the second content is not the same as the first content, The step of continuing the output of
Lt; / RTI >
Wherein the first content output on the HMD is encoded with the same first content displayed on the digital device without changing the spatial dimension and without increasing the realism of the first content displayed on the digital device A content output method using a head-mounted display (HMD) which is the same.
상기 디지털 디바이스와 통신 접속을 확립하는 단계와,
상기 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 변경될 때에, 통신 접속된 디지털 디바이스 상에 현재 디스플레이 중인 상기 제 1 컨텐츠를 수신하는 단계를 더 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.2. The method of claim 1,
Establishing a communication connection with the digital device;
Further comprising receiving the first content currently being displayed on the communicating digital device when the location state is changed from the first state to the second state using a head-mounted display (HMD) A content output method.
상기 디텍트된 위치 상태가 전환되고, 전환된 위치 상태가 미리 설정된 시간 이상 계속되면, 상기 제 1 컨텐츠를 상기 HMD 상에 출력할지 여부를 결정하는 단계를 더 포함하는 것인 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.2. The method according to claim 1,
Further comprising the step of determining whether to output the first content on the HMD if the detected position state is switched and the switched position state continues for a predetermined time or longer, A method of outputting content using the method.
상기 디텍트된 위치 상태가 상기 제 1 상태와 상기 제 2 상태 사이에서 전환되면, 상기 HMD 상에 진동 피드백을 제공하는 단계를 더 포함하는 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.The method according to claim 1,
Further comprising providing vibration feedback on the HMD when the detected position state is switched between the first state and the second state. ≪ Desc / Clms Page number 19 >
상기 디텍트된 위치 상태가 상기 제 2 상태이면, 상기 화각 영역에 적어도 하나의 외부 디바이스의 디스플레이 유닛이 존재하는지 여부를 디텍트하는 단계와,
상기 화각 영역에서 상기 적어도 하나의 외부 디바이스의 디스플레이 유닛이 디텍트되면, 대응하는 외부 디바이스의 디스플레이 유닛에 상기 제 1 컨텐츠를 출력하는 단계
를 더 포함하는 헤드 마운트 디스플레이(HMD)를 이용한 컨텐츠 출력 방법.The method according to claim 1,
Detecting whether a display unit of at least one external device is present in the view angle area if the detected position state is the second state;
Outputting the first content to a display unit of a corresponding external device when the display unit of the at least one external device is detected in the field of view area
(HMD) that includes a head-mounted display (HMD).
상기 HMD의 동작을 제어하도록 구성된 프로세서와,
상기 프로세서에 의해 주어진 명령(command)에 기초하여 영상(image)을 출력하도록 구성된 디스플레이 유닛과,
상기 프로세서에 의해 주어진 명령에 기초하여 적어도 하나의 디지털 디바이스와 데이터를 송수신하도록 구성된 커뮤니케이션 유닛
을 포함하며,
상기 프로세서는 또한,
제 1 컨텐츠를 디스플레이하도록 구성된 적어도 하나의 디스플레이 유닛을 구비한 디지털 디바이스와의 페어링을 수행하고,
페어링된 디지털 디바이스의 위치 상태를 디텍트하며, 상기 위치 상태는, 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 미리 설정된 화각 영역에 위치하는 제 1 상태 및 상기 디지털 디바이스의 디스플레이 유닛이 상기 HMD의 상기 화각 영역에 위치하지 않는 제 2 상태를 포함하는 것이고,
상기 위치 상태가 상기 제 1 상태에서 상기 제 2 상태로 변경될 때에, 상기 디지털 디바이스에 의해 디스플레이되는 상기 제 1 컨텐츠를 수신하여 상기 HMD 상에 상기 제 1 컨텐츠를 출력하며,
상기 위치 상태가 상기 제 2 상태에서 상기 제 1 상태로 변경될 때에, 상기 디지털 디바이스 상에 현재 디스플레이 중인 제 2 컨텐츠가 상기 HMD 상에 현재 출력 중인 제 1 컨텐츠와 동일한지 여부를 결정하고, 상기 제 2 컨텐츠가 상기 제 1 컨텐츠와 동일하면 상기 HMD 상으로의 상기 제 1 컨텐츠의 출력을 종료하거나, 상기 제 2 컨텐츠가 상기 제 1 컨텐츠와 동일하지 않으면 상기 HMD 상으로의 상기 제 1 컨텐츠의 출력을 계속하도록 구성되고,
상기 HMD 상으로 출력되는 상기 제 1 컨텐츠는, 공간 치수의 변경 없이 그리고 상기 디지털 디바이스 상에 디스플레이되는 상기 제 1 컨텐츠의 현실 증강 없이, 상기 디지털 디바이스 상에 디스플레이되는 동일한 제 1 컨텐츠와 같은 것인 헤드 마운트 디스플레이(HMD).In a head-mounted display (HMD)
A processor configured to control operation of the HMD;
A display unit configured to output an image based on a command given by the processor;
A communication unit configured to transmit and receive data to and from at least one digital device based on an instruction given by the processor,
/ RTI >
The processor may further comprise:
Performing a pairing with a digital device having at least one display unit configured to display a first content,
Wherein the position state is a first state in which the display unit of the digital device is located in a predetermined field of view area of the HMD and a state in which the display unit of the digital device is in the view angle of the HMD And a second state that is not located in the region,
Receiving the first content displayed by the digital device and outputting the first content on the HMD when the location state is changed from the first state to the second state,
Determines whether the second content currently being displayed on the digital device is the same as the first content currently being output on the HMD when the position state is changed from the second state to the first state, 2 content is the same as the first content, the output of the first content on the HMD is terminated, or if the second content is not the same as the first content, the output of the first content on the HMD is Lt; / RTI >
Wherein the first content output on the HMD is the same first content displayed on the digital device without changing spatial dimensions and without increasing the realism of the first content displayed on the digital device, Mount display (HMD).
Priority Applications (7)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020120077352A KR101861380B1 (en) | 2012-07-16 | 2012-07-16 | A Method of Providing Contents Using Head Mounted Display and a Head Mounted Display Thereof |
| PCT/KR2012/006344 WO2014014155A1 (en) | 2012-07-16 | 2012-08-09 | A head mounted dipslay and method of outputting a content using the same |
| EP12881212.0A EP2872945B1 (en) | 2012-07-16 | 2012-08-09 | A head mounted dipslay and method of outputting a content using the same |
| EP17197917.2A EP3309601B1 (en) | 2012-07-16 | 2012-08-09 | A head mounted dipslay and method of outputting a content using the same |
| US13/587,527 US8427396B1 (en) | 2012-07-16 | 2012-08-16 | Head mounted display and method of outputting a content using the same in which the same identical content is displayed |
| US13/850,108 US8730131B2 (en) | 2012-07-16 | 2013-03-25 | Head mounted display and method of outputting a content using the same in which the same identical content is displayed |
| US14/203,315 US9423619B2 (en) | 2012-07-16 | 2014-03-10 | Head mounted display and method of outputting a content using the same in which the same identical content is displayed |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020120077352A KR101861380B1 (en) | 2012-07-16 | 2012-07-16 | A Method of Providing Contents Using Head Mounted Display and a Head Mounted Display Thereof |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20140010715A KR20140010715A (en) | 2014-01-27 |
| KR101861380B1 true KR101861380B1 (en) | 2018-05-28 |
Family
ID=48094858
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020120077352A Active KR101861380B1 (en) | 2012-07-16 | 2012-07-16 | A Method of Providing Contents Using Head Mounted Display and a Head Mounted Display Thereof |
Country Status (4)
| Country | Link |
|---|---|
| US (3) | US8427396B1 (en) |
| EP (2) | EP2872945B1 (en) |
| KR (1) | KR101861380B1 (en) |
| WO (1) | WO2014014155A1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US12299814B2 (en) | 2021-11-29 | 2025-05-13 | Samsung Electronics Co., Ltd. | Electronic device for providing contents in connection with external electronic device and method of the same |
Families Citing this family (151)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9158116B1 (en) | 2014-04-25 | 2015-10-13 | Osterhout Group, Inc. | Temple and ear horn assembly for headworn computer |
| US20150205111A1 (en) | 2014-01-21 | 2015-07-23 | Osterhout Group, Inc. | Optical configurations for head worn computing |
| US9715112B2 (en) | 2014-01-21 | 2017-07-25 | Osterhout Group, Inc. | Suppression of stray light in head worn computing |
| US9952664B2 (en) | 2014-01-21 | 2018-04-24 | Osterhout Group, Inc. | Eye imaging in head worn computing |
| US20150277120A1 (en) | 2014-01-21 | 2015-10-01 | Osterhout Group, Inc. | Optical configurations for head worn computing |
| US9229233B2 (en) | 2014-02-11 | 2016-01-05 | Osterhout Group, Inc. | Micro Doppler presentations in head worn computing |
| US9298007B2 (en) | 2014-01-21 | 2016-03-29 | Osterhout Group, Inc. | Eye imaging in head worn computing |
| US9400390B2 (en) | 2014-01-24 | 2016-07-26 | Osterhout Group, Inc. | Peripheral lighting for head worn computing |
| US9366867B2 (en) | 2014-07-08 | 2016-06-14 | Osterhout Group, Inc. | Optical systems for see-through displays |
| US9965681B2 (en) | 2008-12-16 | 2018-05-08 | Osterhout Group, Inc. | Eye imaging in head worn computing |
| US20180048750A1 (en) * | 2012-06-15 | 2018-02-15 | Muzik, Llc | Audio/video wearable computer system with integrated projector |
| KR101969351B1 (en) * | 2012-09-10 | 2019-04-16 | 엘지전자 주식회사 | Head mounted display and method for controlling output of the same |
| US9791921B2 (en) * | 2013-02-19 | 2017-10-17 | Microsoft Technology Licensing, Llc | Context-aware augmented reality object commands |
| KR102063076B1 (en) * | 2013-07-10 | 2020-01-07 | 엘지전자 주식회사 | The mobile device and controlling method thereof, the head mounted display and controlling method thereof |
| KR102081934B1 (en) * | 2013-08-28 | 2020-02-26 | 엘지전자 주식회사 | Head mounted display device and method for controlling the same |
| US9466266B2 (en) | 2013-08-28 | 2016-10-11 | Qualcomm Incorporated | Dynamic display markers |
| WO2015031168A1 (en) * | 2013-08-28 | 2015-03-05 | Qualcomm Incorporated | Dynamic display markers |
| KR102105520B1 (en) * | 2013-11-12 | 2020-04-28 | 삼성전자주식회사 | Apparatas and method for conducting a display link function in an electronic device |
| US9448621B2 (en) * | 2013-12-20 | 2016-09-20 | Nokia Technologies Oy | Causation of display of information on a see through display |
| EP2894508A1 (en) * | 2013-12-31 | 2015-07-15 | Thomson Licensing | Method for displaying a content through either a head mounted display device or a display device, corresponding head mounted display device and computer program product |
| US20150277118A1 (en) | 2014-03-28 | 2015-10-01 | Osterhout Group, Inc. | Sensor dependent content position in head worn computing |
| US10684687B2 (en) | 2014-12-03 | 2020-06-16 | Mentor Acquisition One, Llc | See-through computer display systems |
| US9810906B2 (en) | 2014-06-17 | 2017-11-07 | Osterhout Group, Inc. | External user interface for head worn computing |
| US9529195B2 (en) | 2014-01-21 | 2016-12-27 | Osterhout Group, Inc. | See-through computer display systems |
| US9594246B2 (en) | 2014-01-21 | 2017-03-14 | Osterhout Group, Inc. | See-through computer display systems |
| US20160019715A1 (en) | 2014-07-15 | 2016-01-21 | Osterhout Group, Inc. | Content presentation in head worn computing |
| US10254856B2 (en) | 2014-01-17 | 2019-04-09 | Osterhout Group, Inc. | External user interface for head worn computing |
| US9829707B2 (en) | 2014-08-12 | 2017-11-28 | Osterhout Group, Inc. | Measuring content brightness in head worn computing |
| US9299194B2 (en) | 2014-02-14 | 2016-03-29 | Osterhout Group, Inc. | Secure sharing in head worn computing |
| US10191279B2 (en) | 2014-03-17 | 2019-01-29 | Osterhout Group, Inc. | Eye imaging in head worn computing |
| US10001645B2 (en) * | 2014-01-17 | 2018-06-19 | Sony Interactive Entertainment America Llc | Using a second screen as a private tracking heads-up display |
| US9575321B2 (en) | 2014-06-09 | 2017-02-21 | Osterhout Group, Inc. | Content presentation in head worn computing |
| US9939934B2 (en) | 2014-01-17 | 2018-04-10 | Osterhout Group, Inc. | External user interface for head worn computing |
| US9746686B2 (en) | 2014-05-19 | 2017-08-29 | Osterhout Group, Inc. | Content position calibration in head worn computing |
| US9841599B2 (en) | 2014-06-05 | 2017-12-12 | Osterhout Group, Inc. | Optical configurations for head-worn see-through displays |
| US9448409B2 (en) | 2014-11-26 | 2016-09-20 | Osterhout Group, Inc. | See-through computer display systems |
| US10649220B2 (en) | 2014-06-09 | 2020-05-12 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
| US9366868B2 (en) | 2014-09-26 | 2016-06-14 | Osterhout Group, Inc. | See-through computer display systems |
| US9671613B2 (en) | 2014-09-26 | 2017-06-06 | Osterhout Group, Inc. | See-through computer display systems |
| US11103122B2 (en) | 2014-07-15 | 2021-08-31 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
| US20150228119A1 (en) | 2014-02-11 | 2015-08-13 | Osterhout Group, Inc. | Spatial location presentation in head worn computing |
| US11227294B2 (en) | 2014-04-03 | 2022-01-18 | Mentor Acquisition One, Llc | Sight information collection in head worn computing |
| US11669163B2 (en) | 2014-01-21 | 2023-06-06 | Mentor Acquisition One, Llc | Eye glint imaging in see-through computer display systems |
| US11737666B2 (en) | 2014-01-21 | 2023-08-29 | Mentor Acquisition One, Llc | Eye imaging in head worn computing |
| US9753288B2 (en) | 2014-01-21 | 2017-09-05 | Osterhout Group, Inc. | See-through computer display systems |
| US12105281B2 (en) | 2014-01-21 | 2024-10-01 | Mentor Acquisition One, Llc | See-through computer display systems |
| US9836122B2 (en) | 2014-01-21 | 2017-12-05 | Osterhout Group, Inc. | Eye glint imaging in see-through computer display systems |
| US11892644B2 (en) | 2014-01-21 | 2024-02-06 | Mentor Acquisition One, Llc | See-through computer display systems |
| US9310610B2 (en) | 2014-01-21 | 2016-04-12 | Osterhout Group, Inc. | See-through computer display systems |
| US9766463B2 (en) | 2014-01-21 | 2017-09-19 | Osterhout Group, Inc. | See-through computer display systems |
| US9529199B2 (en) | 2014-01-21 | 2016-12-27 | Osterhout Group, Inc. | See-through computer display systems |
| US9615742B2 (en) | 2014-01-21 | 2017-04-11 | Osterhout Group, Inc. | Eye imaging in head worn computing |
| US9811152B2 (en) | 2014-01-21 | 2017-11-07 | Osterhout Group, Inc. | Eye imaging in head worn computing |
| US20150205135A1 (en) | 2014-01-21 | 2015-07-23 | Osterhout Group, Inc. | See-through computer display systems |
| US9651784B2 (en) | 2014-01-21 | 2017-05-16 | Osterhout Group, Inc. | See-through computer display systems |
| US9494800B2 (en) | 2014-01-21 | 2016-11-15 | Osterhout Group, Inc. | See-through computer display systems |
| US11487110B2 (en) | 2014-01-21 | 2022-11-01 | Mentor Acquisition One, Llc | Eye imaging in head worn computing |
| US20150206173A1 (en) | 2014-01-21 | 2015-07-23 | Osterhout Group, Inc. | Eye imaging in head worn computing |
| US12093453B2 (en) | 2014-01-21 | 2024-09-17 | Mentor Acquisition One, Llc | Eye glint imaging in see-through computer display systems |
| US9846308B2 (en) | 2014-01-24 | 2017-12-19 | Osterhout Group, Inc. | Haptic systems for head-worn computers |
| US9401540B2 (en) | 2014-02-11 | 2016-07-26 | Osterhout Group, Inc. | Spatial location presentation in head worn computing |
| US12112089B2 (en) | 2014-02-11 | 2024-10-08 | Mentor Acquisition One, Llc | Spatial location presentation in head worn computing |
| US9852545B2 (en) | 2014-02-11 | 2017-12-26 | Osterhout Group, Inc. | Spatial location presentation in head worn computing |
| US9691181B2 (en) | 2014-02-24 | 2017-06-27 | Sony Interactive Entertainment Inc. | Methods and systems for social sharing head mounted display (HMD) content with a second screen |
| US20150245163A1 (en) * | 2014-02-25 | 2015-08-27 | Sony Corporation | Proximity detection of candidate companion display device in same room as primary display using wi-fi or bluetooth signal strength |
| US9483997B2 (en) * | 2014-03-10 | 2016-11-01 | Sony Corporation | Proximity detection of candidate companion display device in same room as primary display using infrared signaling |
| JP2015176186A (en) * | 2014-03-13 | 2015-10-05 | ソニー株式会社 | Information processing apparatus, information processing method and information processing system |
| KR102374584B1 (en) * | 2014-03-21 | 2022-03-16 | 삼성전자주식회사 | Method and device for displaying image |
| US20160187651A1 (en) | 2014-03-28 | 2016-06-30 | Osterhout Group, Inc. | Safety for a vehicle operator with an hmd |
| WO2015163529A1 (en) * | 2014-04-23 | 2015-10-29 | Lg Electronics Inc. | Head mounted display device displaying thumbnail image and method of controlling therefor |
| KR102246553B1 (en) * | 2014-04-24 | 2021-04-30 | 엘지전자 주식회사 | Hmd and method for controlling the same |
| WO2015163539A1 (en) * | 2014-04-24 | 2015-10-29 | Lg Electronics Inc. | Head mounted display and method for controlling the same |
| US20150309534A1 (en) | 2014-04-25 | 2015-10-29 | Osterhout Group, Inc. | Ear horn assembly for headworn computer |
| US10853589B2 (en) | 2014-04-25 | 2020-12-01 | Mentor Acquisition One, Llc | Language translation with head-worn computing |
| US9423842B2 (en) | 2014-09-18 | 2016-08-23 | Osterhout Group, Inc. | Thermal management for head-worn computer |
| US9672210B2 (en) | 2014-04-25 | 2017-06-06 | Osterhout Group, Inc. | Language translation with head-worn computing |
| US9651787B2 (en) | 2014-04-25 | 2017-05-16 | Osterhout Group, Inc. | Speaker assembly for headworn computer |
| US20160137312A1 (en) | 2014-05-06 | 2016-05-19 | Osterhout Group, Inc. | Unmanned aerial vehicle launch system |
| KR102257621B1 (en) * | 2014-05-19 | 2021-05-28 | 엘지전자 주식회사 | The Apparatus and Method for Head Mounted Display Device displaying Thumbnail image |
| KR102229890B1 (en) * | 2014-05-30 | 2021-03-19 | 삼성전자주식회사 | Method for processing data and an electronic device thereof |
| US10663740B2 (en) | 2014-06-09 | 2020-05-26 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
| US9092898B1 (en) | 2014-07-03 | 2015-07-28 | Federico Fraccaroli | Method, system and apparatus for the augmentation of radio emissions |
| KR102251710B1 (en) * | 2014-11-04 | 2021-05-14 | 넥시스 주식회사 | System, method and computer readable medium for managing content of external device using wearable glass device |
| US10719950B2 (en) * | 2014-08-05 | 2020-07-21 | Sony Corporation | Head mount display (HMD) operated with mobile device for transforming reference coordinate systems for providing screen information |
| HUE031114T2 (en) | 2014-08-11 | 2017-06-28 | Mack Rides Gmbh & Co Kg | Method for operating a device, in particular an amusement ride, transport means, a fitness device or similar |
| KR102232419B1 (en) * | 2014-08-26 | 2021-03-26 | 엘지전자 주식회사 | Wearable display device and controlling method thereof |
| KR102271833B1 (en) * | 2014-09-01 | 2021-07-01 | 삼성전자주식회사 | Electronic device, controlling method thereof and recording medium |
| KR102243656B1 (en) | 2014-09-26 | 2021-04-23 | 엘지전자 주식회사 | Mobile device, head mounted display and system |
| US20170242480A1 (en) * | 2014-10-06 | 2017-08-24 | Koninklijke Philips N.V. | Docking system |
| KR102265086B1 (en) | 2014-11-07 | 2021-06-15 | 삼성전자 주식회사 | Virtual Environment for sharing of Information |
| US9684172B2 (en) | 2014-12-03 | 2017-06-20 | Osterhout Group, Inc. | Head worn computer display systems |
| GB2533098B (en) * | 2014-12-09 | 2016-12-14 | Ibm | Automated management of confidential data in cloud environments |
| USD743963S1 (en) | 2014-12-22 | 2015-11-24 | Osterhout Group, Inc. | Air mouse |
| USD751552S1 (en) | 2014-12-31 | 2016-03-15 | Osterhout Group, Inc. | Computer glasses |
| USD753114S1 (en) | 2015-01-05 | 2016-04-05 | Osterhout Group, Inc. | Air mouse |
| US9933985B2 (en) * | 2015-01-20 | 2018-04-03 | Qualcomm Incorporated | Systems and methods for managing content presentation involving a head mounted display and a presentation device |
| KR102274743B1 (en) * | 2015-01-30 | 2021-07-08 | 삼성전자주식회사 | Electronic device and method for processing a display area in electronic device |
| KR101564964B1 (en) * | 2015-02-05 | 2015-11-02 | 계명대학교 산학협력단 | Electrical stimulating head mounted display device reducing motion sickness in virtual reality |
| US10878775B2 (en) | 2015-02-17 | 2020-12-29 | Mentor Acquisition One, Llc | See-through computer display systems |
| US20160239985A1 (en) | 2015-02-17 | 2016-08-18 | Osterhout Group, Inc. | See-through computer display systems |
| WO2016141263A1 (en) * | 2015-03-04 | 2016-09-09 | Oculus Vr, Llc | Sparse projection for a virtual reality system |
| US10591729B2 (en) * | 2015-05-29 | 2020-03-17 | Kyocera Corporation | Wearable device |
| US10139966B2 (en) | 2015-07-22 | 2018-11-27 | Osterhout Group, Inc. | External user interface for head worn computing |
| JP6686319B2 (en) * | 2015-08-04 | 2020-04-22 | 富士通株式会社 | Image projection device and image display system |
| JP6529383B2 (en) * | 2015-08-11 | 2019-06-12 | 京セラ株式会社 | Wearable device and output system |
| WO2017034886A1 (en) | 2015-08-24 | 2017-03-02 | Pcms Holdings, Inc. | Systems and methods for enhancing augmented reality experience with dynamic output mapping |
| US9865091B2 (en) * | 2015-09-02 | 2018-01-09 | Microsoft Technology Licensing, Llc | Localizing devices in augmented reality environment |
| GB2542434A (en) | 2015-09-21 | 2017-03-22 | Figment Productions Ltd | A System for Providing a Virtual Reality Experience |
| EP4380150A3 (en) | 2015-10-08 | 2024-07-24 | InterDigital VC Holdings, Inc. | Methods and systems of automatic calibration for dynamic display configurations |
| CN105657438A (en) * | 2015-11-09 | 2016-06-08 | 乐视致新电子科技（天津）有限公司 | Method and apparatus for processing panoramic live video resource |
| US10850116B2 (en) | 2016-12-30 | 2020-12-01 | Mentor Acquisition One, Llc | Head-worn therapy device |
| US10591728B2 (en) | 2016-03-02 | 2020-03-17 | Mentor Acquisition One, Llc | Optical systems for head-worn computers |
| US10667981B2 (en) | 2016-02-29 | 2020-06-02 | Mentor Acquisition One, Llc | Reading assistance system for visually impaired |
| US9826299B1 (en) | 2016-08-22 | 2017-11-21 | Osterhout Group, Inc. | Speaker systems for head-worn computer systems |
| US9880441B1 (en) | 2016-09-08 | 2018-01-30 | Osterhout Group, Inc. | Electrochromic systems for head-worn computer systems |
| CN105847627B (en) * | 2016-03-30 | 2018-11-23 | 北京小米移动软件有限公司 | A kind of method and apparatus of display image data |
| US10824253B2 (en) | 2016-05-09 | 2020-11-03 | Mentor Acquisition One, Llc | User interface systems for head-worn computers |
| US9910284B1 (en) | 2016-09-08 | 2018-03-06 | Osterhout Group, Inc. | Optical systems for head-worn computers |
| US10466491B2 (en) | 2016-06-01 | 2019-11-05 | Mentor Acquisition One, Llc | Modular systems for head-worn computers |
| US10684478B2 (en) | 2016-05-09 | 2020-06-16 | Mentor Acquisition One, Llc | User interface systems for head-worn computers |
| US10210661B2 (en) | 2016-04-25 | 2019-02-19 | Microsoft Technology Licensing, Llc | Location-based holographic experience |
| US10748339B2 (en) | 2016-06-03 | 2020-08-18 | A Big Chunk Of Mud Llc | System and method for implementing computer-simulated reality interactions between users and publications |
| KR20180002255A (en) * | 2016-06-29 | 2018-01-08 | 엘지전자 주식회사 | Glass type mobile terminal |
| US10690936B2 (en) | 2016-08-29 | 2020-06-23 | Mentor Acquisition One, Llc | Adjustable nose bridge assembly for headworn computer |
| JP2018036993A (en) * | 2016-09-02 | 2018-03-08 | オリンパス株式会社 | Display system, portable information device, wearable terminal, information display method, and program |
| USD840395S1 (en) | 2016-10-17 | 2019-02-12 | Osterhout Group, Inc. | Head-worn computer |
| JP2018078475A (en) * | 2016-11-10 | 2018-05-17 | 富士通株式会社 | Control program, control method, and control device |
| KR102739220B1 (en) * | 2016-12-23 | 2024-12-05 | 삼성전자주식회사 | Method and Apparatus for Managing Thumbnail of 3-dimensional Contents |
| USD864959S1 (en) | 2017-01-04 | 2019-10-29 | Mentor Acquisition One, Llc | Computer glasses |
| US11614641B2 (en) * | 2017-03-13 | 2023-03-28 | Mitsui Chemicals, Inc. | Eyewear |
| WO2018175620A1 (en) | 2017-03-22 | 2018-09-27 | A Big Chunk Of Mud Llc | Convertible satchel with integrated head-mounted display |
| US11409105B2 (en) | 2017-07-24 | 2022-08-09 | Mentor Acquisition One, Llc | See-through computer display systems |
| US10422995B2 (en) | 2017-07-24 | 2019-09-24 | Mentor Acquisition One, Llc | See-through computer display systems with stray light management |
| US10578869B2 (en) | 2017-07-24 | 2020-03-03 | Mentor Acquisition One, Llc | See-through computer display systems with adjustable zoom cameras |
| US10969584B2 (en) | 2017-08-04 | 2021-04-06 | Mentor Acquisition One, Llc | Image expansion optic for head-worn computer |
| US20190129607A1 (en) * | 2017-11-02 | 2019-05-02 | Samsung Electronics Co., Ltd. | Method and device for performing remote control |
| JP7035510B2 (en) * | 2017-12-22 | 2022-03-15 | セイコーエプソン株式会社 | Display system and control method of display system |
| KR102013154B1 (en) * | 2018-02-02 | 2019-08-22 | 강근원 | A content service method using head-mounted display for long distance movement and a program thereof |
| US10748021B2 (en) | 2018-05-11 | 2020-08-18 | Samsung Electronics Co., Ltd. | Method of analyzing objects in images recorded by a camera of a head mounted device |
| JP6940702B2 (en) | 2018-06-25 | 2021-09-29 | マクセル株式会社 | Head-mounted display, head-mounted display cooperation system and its method |
| US11741673B2 (en) | 2018-11-30 | 2023-08-29 | Interdigital Madison Patent Holdings, Sas | Method for mirroring 3D objects to light field displays |
| US10852819B2 (en) * | 2019-01-11 | 2020-12-01 | Dell Products, L.P. | Systems and methods for eye-gaze tracking (EGT) handoff |
| JP6997129B2 (en) * | 2019-03-28 | 2022-01-17 | ファナック株式会社 | Control system |
| US11960091B2 (en) | 2020-05-27 | 2024-04-16 | Telefonaktiebolaget Lm Ericsson (Publ) | Method and device for controlling display of content |
| KR102290328B1 (en) * | 2020-11-16 | 2021-08-18 | 코리아에프티 주식회사 | Video output device |
| JP7140890B1 (en) * | 2021-06-18 | 2022-09-21 | 株式会社ドワンゴ | Viewer terminal, viewer terminal control method, viewer terminal control program, and recording medium |
| DE102021206568A1 (en) | 2021-06-24 | 2022-12-29 | Siemens Healthcare Gmbh | Display device for displaying a graphical representation of an augmented reality |
| US11935201B2 (en) * | 2022-04-28 | 2024-03-19 | Dell Products Lp | Method and apparatus for using physical devices in extended reality environments |
| JP2024052410A (en) * | 2022-09-30 | 2024-04-11 | 富士フイルム株式会社 | Processor, information processing method, and information processing program |
| CN115633244B (en) * | 2022-10-17 | 2023-06-30 | 元化智能科技(深圳)有限公司 | Image data transmission method and image data transmission apparatus |
| CN115942322B (en) * | 2023-02-15 | 2023-06-06 | 北京秒信科技有限公司 | Harassment short message interception method and system |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110285704A1 (en) | 2010-02-03 | 2011-11-24 | Genyo Takeda | Spatially-correlated multi-display human-machine interface |
| US20120127284A1 (en) | 2010-11-18 | 2012-05-24 | Avi Bar-Zeev | Head-mounted display device which provides surround video |
Family Cites Families (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3407383B2 (en) * | 1993-06-15 | 2003-05-19 | オリンパス光学工業株式会社 | Head-mounted display system |
| EP1326120B1 (en) * | 1993-08-12 | 2010-02-24 | Seiko Epson Corporation | Head-mounted image display device and data processing apparatus including the same |
| US6061064A (en) * | 1993-08-31 | 2000-05-09 | Sun Microsystems, Inc. | System and method for providing and using a computer user interface with a view space having discrete portions |
| JP2000347596A (en) * | 1998-08-31 | 2000-12-15 | Semiconductor Energy Lab Co Ltd | Portable information processing system |
| JP2000194726A (en) * | 1998-10-19 | 2000-07-14 | Sony Corp | Device, method and system for processing information and providing medium |
| JP4178697B2 (en) | 1999-11-18 | 2008-11-12 | ソニー株式会社 | Portable information processing terminal, information input / output system, and information input / output method |
| US7215322B2 (en) * | 2001-05-31 | 2007-05-08 | Siemens Corporate Research, Inc. | Input devices for augmented reality applications |
| US7190331B2 (en) * | 2002-06-06 | 2007-03-13 | Siemens Corporate Research, Inc. | System and method for measuring the registration accuracy of an augmented reality system |
| JP2004127024A (en) * | 2002-10-03 | 2004-04-22 | Canon Inc | Device and method for protecting content for compound reality feeling system |
| US7331929B2 (en) * | 2004-10-01 | 2008-02-19 | General Electric Company | Method and apparatus for surgical operating room information display gaze detection and user prioritization for control |
| JP2006267604A (en) * | 2005-03-24 | 2006-10-05 | Canon Inc | Composite information display device |
| US8179423B2 (en) * | 2005-08-22 | 2012-05-15 | Ricoh Company, Ltd. | Image display system, an image display method, a coding method, and a printed matter for stereoscopic viewing |
| US20070233759A1 (en) | 2006-03-28 | 2007-10-04 | The Regents Of The University Of California | Platform for seamless multi-device interactive digital content |
| JP2009245390A (en) * | 2008-03-31 | 2009-10-22 | Brother Ind Ltd | Display processor and display processing system |
| JP5156571B2 (en) * | 2008-10-10 | 2013-03-06 | キヤノン株式会社 | Image processing apparatus and image processing method |
| WO2010066481A2 (en) * | 2008-12-10 | 2010-06-17 | Siemens Aktiengesellschaft | Method for transmitting an image from a first control unit to a second control unit and output unit |
| JP5310591B2 (en) * | 2010-02-14 | 2013-10-09 | ブラザー工業株式会社 | Communication system and head mounted display |
| US20120075167A1 (en) * | 2010-09-29 | 2012-03-29 | Eastman Kodak Company | Head-mounted display with wireless controller |
| JP5622510B2 (en) * | 2010-10-01 | 2014-11-12 | オリンパス株式会社 | Image generation system, program, and information storage medium |
| WO2012049795A1 (en) * | 2010-10-12 | 2012-04-19 | パナソニック株式会社 | Display processing device, display method and program |
| KR20120064557A (en) * | 2010-12-09 | 2012-06-19 | 한국전자통신연구원 | Mixed reality display platform for presenting augmented 3d stereo image and operation method thereof |
| US9217867B2 (en) * | 2011-03-24 | 2015-12-22 | Seiko Epson Corporation | Head-mounted display device and control method for the head-mounted display device |
| US9583032B2 (en) * | 2012-06-05 | 2017-02-28 | Microsoft Technology Licensing, Llc | Navigating content using a physical object |
-
2012
- 2012-07-16 KR KR1020120077352A patent/KR101861380B1/en active Active
- 2012-08-09 EP EP12881212.0A patent/EP2872945B1/en active Active
- 2012-08-09 WO PCT/KR2012/006344 patent/WO2014014155A1/en active Application Filing
- 2012-08-09 EP EP17197917.2A patent/EP3309601B1/en active Active
- 2012-08-16 US US13/587,527 patent/US8427396B1/en active Active
-
2013
- 2013-03-25 US US13/850,108 patent/US8730131B2/en active Active
-
2014
- 2014-03-10 US US14/203,315 patent/US9423619B2/en active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110285704A1 (en) | 2010-02-03 | 2011-11-24 | Genyo Takeda | Spatially-correlated multi-display human-machine interface |
| US20120127284A1 (en) | 2010-11-18 | 2012-05-24 | Avi Bar-Zeev | Head-mounted display device which provides surround video |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US12299814B2 (en) | 2021-11-29 | 2025-05-13 | Samsung Electronics Co., Ltd. | Electronic device for providing contents in connection with external electronic device and method of the same |
Also Published As
| Publication number | Publication date |
|---|---|
| EP2872945B1 (en) | 2017-12-13 |
| EP2872945A1 (en) | 2015-05-20 |
| WO2014014155A1 (en) | 2014-01-23 |
| US20140015736A1 (en) | 2014-01-16 |
| EP3309601A1 (en) | 2018-04-18 |
| US8427396B1 (en) | 2013-04-23 |
| US9423619B2 (en) | 2016-08-23 |
| EP3309601B1 (en) | 2019-03-20 |
| US20140191929A1 (en) | 2014-07-10 |
| US8730131B2 (en) | 2014-05-20 |
| KR20140010715A (en) | 2014-01-27 |
| EP2872945A4 (en) | 2016-02-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101861380B1 (en) | A Method of Providing Contents Using Head Mounted Display and a Head Mounted Display Thereof | |
| CN108205197B (en) | Display device and control method of display device | |
| KR101989893B1 (en) | A Head Mounted Display and A Method of Outputting Audio Signal Using the Same | |
| KR101958778B1 (en) | A Head Mounted Display and a Method for Controlling a Digital Device Using the Same | |
| KR102088020B1 (en) | A head mounted display ant the method of controlling thereof | |
| US9304320B2 (en) | Head-mounted display and method of controlling the same | |
| US11226689B2 (en) | Display system that selects a character string according to movement detected | |
| US20120068914A1 (en) | Miniature communications gateway for head mounted display | |
| US20170289533A1 (en) | Head mounted display, control method thereof, and computer program | |
| US10718948B2 (en) | Head-mounted display apparatus, display control method, and computer program | |
| KR20150031614A (en) | Portable device and method for controlling the same | |
| KR20160125674A (en) | Mobile terminal and method for controlling the same | |
| US10122448B2 (en) | Mobile terminal and control method therefor | |
| US20160182860A1 (en) | Methods for performing image capture and real-time image display on physically separated or separable devices and apparatus therefor | |
| US9319980B1 (en) | Efficient digital image distribution | |
| US9495125B2 (en) | Electronic device and display method | |
| US9898037B2 (en) | Electronic device and display method | |
| JP2017183854A (en) | Display system, display device, head mounted display device, display control method, control method for display device, and program | |
| JP6932917B2 (en) | Head-mounted display, program, and head-mounted display control method | |
| KR102420166B1 (en) | Method and system for customzing network transmssion prameter | |
| KR102262019B1 (en) | Method and system for extended reality communication soliciting network speed | |
| KR20160009213A (en) | A Head Mounted Display and A Method for Providing Contents Using the Same | |
| KR20170139227A (en) | Head mount display gear | |
| JP6631299B2 (en) | DISPLAY DEVICE, DISPLAY DEVICE CONTROL METHOD, AND PROGRAM | |
| KR20160009214A (en) | A Head Mounted Display and A Method for Providing Contents Using the Same |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20120716 |
|
| PG1501 | Laying open of application | ||
| N231 | Notification of change of applicant | ||
| PN2301 | Change of applicant |
Patent event date: 20150807 Comment text: Notification of Change of Applicant Patent event code: PN23011R01D |
|
| A201 | Request for examination | ||
| PA0201 | Request for examination |
Patent event code: PA02012R01D Patent event date: 20170609 Comment text: Request for Examination of Application Patent event code: PA02011R01I Patent event date: 20120716 Comment text: Patent Application |
|
| E701 | Decision to grant or registration of patent right | ||
| PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20180220 |
|
| GRNT | Written decision to grant | ||
| PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20180518 Patent event code: PR07011E01D |
|
| PR1002 | Payment of registration fee |
Payment date: 20180518 End annual number: 3 Start annual number: 1 |
|
| PG1601 | Publication of registration | ||
| PR1001 | Payment of annual fee |
Payment date: 20210415 Start annual number: 4 End annual number: 4 |
|
| PR1001 | Payment of annual fee |
Payment date: 20240424 Start annual number: 7 End annual number: 7 |