WO1997031477A1 - Dispositif portable affichant des informations et procede d'affichage d'informations utilisant ledit dispositif - Google Patents

Dispositif portable affichant des informations et procede d'affichage d'informations utilisant ledit dispositif Download PDF

Info

Publication number
WO1997031477A1
WO1997031477A1 PCT/JP1997/000576 JP9700576W WO9731477A1 WO 1997031477 A1 WO1997031477 A1 WO 1997031477A1 JP 9700576 W JP9700576 W JP 9700576W WO 9731477 A1 WO9731477 A1 WO 9731477A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
display device
unit
information display
user
Prior art date
Application number
PCT/JP1997/000576
Other languages
English (en)
French (fr)
Inventor
Hiroshi Kamakura
Hiroshi Ono
Original Assignee
Seiko Epson Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corporation filed Critical Seiko Epson Corporation
Priority to US08/945,272 priority Critical patent/US6172657B1/en
Priority to EP97903618A priority patent/EP0827337B1/en
Priority to DE69736039T priority patent/DE69736039T2/de
Publication of WO1997031477A1 publication Critical patent/WO1997031477A1/ja

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/64Constructional details of receivers, e.g. cabinets or dust covers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10821Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
    • G06K7/10881Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices constructional details of hand-held scanners
    • G06K7/10891Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices constructional details of hand-held scanners the scanner to be worn on a finger or on a wrist
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0149Head-up displays characterised by mechanical features
    • G02B2027/0154Head-up displays characterised by mechanical features with movable elements
    • G02B2027/0156Head-up displays characterised by mechanical features with movable elements with optionally usable elements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B2027/0192Supplementary details
    • G02B2027/0198System for aligning or maintaining alignment of an image in a predetermined direction

Definitions

  • the present invention relates to a body-mounted information display device and a display method using the same.
  • the present invention relates to a body-mounted information display device worn on a user's body and a display method using the same.
  • Portable information processing devices are used for various purposes by workers (users) who perform industrial or commercial work. For example, in an example applied to a logistics management system, when collecting necessary items from a warehouse, a portable type is used to display the items to be collected in the warehouse and to register the items that have been collected. Information processing devices are used.
  • the worker looks at the electronic information displayed on the portable information processing device alternately with the work object existing on the site, so that the worker's gaze is considerably large. Had to be moved. For this reason, there is a problem that the work of visually confirming the relationship between the child information and the work target is complicated.
  • the portable information processing device is operated by hand, there is a problem that workability is poor because the work target cannot be picked up by hand.
  • the present invention has been made to solve the above-described problems, and has as its object to provide a technique that allows an operator to efficiently perform other operations while observing the display of electronic information. Disclosure of the invention
  • a body-worn information display device S includes a computer unit that generates an image including information to be displayed.
  • First mounting means for mounting the computer unit on a part of the body of the user; and the user observes an image generated by the computer unit while the computer unit is mounted on the head of the user.
  • a second mounting means for mounting the display unit on the head of the user.
  • the display unit includes an image display element for displaying an image generated by the computer unit, and the image displayed on the image display element such that an enlarged virtual image of the image displayed on the image display element is observed by the user.
  • the optical system includes: an enlargement optical system that refracts first light representing the image such that an enlarged virtual image of the image displayed on the image display element is observed by the user; and And a see-through optical system that allows light to pass through and enters the user's eye together with the first light.
  • the magnifying optical system is a monocular optical system for supplying the first light to one eye
  • the see-through optical system is a transflective optical system arranged in front of both eyes of the user.
  • the display unit may be a plane mirror, and the display unit may further include switching means capable of moving and enlarging the magnifying optical system to any of the left and right eyes of the user in front of the user.
  • the user can select the eye that is easier to observe the electronic information and the outside world at the same time, so that the body-mounted information display device becomes easier to use.
  • the incident type plane ⁇ exists in front of the eye on which the magnifying optical system is not arranged, so that the light incident on both eyes is balanced. As a result, it is easy to simultaneously observe the image and the outside world.
  • the magnifying optical system and the see-through optical system are monocular optical systems for supplying the first and second lights to one eye, and the display unit further includes the magnifying optical system and the magnifying optical system.
  • Switching means capable of moving and disposing the see-through optical system in front of both the left and right eyes of the user may be provided. Even with this configuration, the user can select an eye that is easier to observe the electronic information and the outside world. it can.
  • the optical system can be realized by a semi-transmissive concave mirror arranged in front of the user's eye.
  • the computer unit includes: a power supply; power management means for controlling the power of the power supply; and power management means for determining whether the computer unit is mounted on the first mounting means.
  • Power management switching means for switching the operation state of the means. In this way, the power consumption can be reduced by switching the operation state of the power management means so that the power consumption is low when the computer unit is not worn on the body.
  • the computer unit may also be connected to a peripheral device including at least a part of a keyboard, a pointing device, a display device, and a printer when the computer unit is not worn on a user's body. May be provided.
  • the computer unit may include at least a second pointing device that can be used when the computer unit is not worn on the body of the user.
  • the computer unit wirelessly communicates with an external host computer In this case, information communication means for receiving desired information from the host computer may be provided. In this way, various information can be received from the host computer and displayed on the display unit.
  • the information received from the host computer is, for example, image information representing an image displayed on the display unit.
  • the information communication means is configured to instruct the host computer with position information including at least a part of the azimuth, the viewing angle, and the distance of an object in the outside world viewed from the user, and the information communication unit is processed according to the position information.
  • position information including at least a part of the azimuth, the viewing angle, and the distance of an object in the outside world viewed from the user
  • the position information may be supplied from a global positioning system. With this configuration, the positional relationship between the user and the target can be easily obtained.
  • the information communication unit instructs the host computer to change the size of the image displayed on the display unit.
  • an image matching the size of the object in the outside world may be displayed on the display unit by receiving the image information indicating the image whose size has been changed from the host computer.
  • the user can observe an image in which the size of the target and the foot are in harmony together with the target.
  • the computer unit includes modulation means for modulating a video signal representing an image displayed on the display unit and transmitting the video signal to the display unit wirelessly, and the display unit accepts the video signal.
  • a demodulation means for demodulating the data may be provided. In this case, since the computer unit and the display unit do not need to be connected by wiring, the operation of the user is facilitated.
  • the body-mounted information display device may further include a device for indicating a position in an image displayed on the display unit according to a magnetic field strength at a position of the magnetic device mounted on a part of the user's hand.
  • a magnetic pointing device may be provided.
  • an optical pointing device for indicating a position in an image displayed on the display unit by reading light from a light emitting device mounted on a part of the user's hand may be provided. Good. By using these pointing devices, the user can easily indicate a desired position in the displayed image simply by moving the position of the hand.
  • the body-mounted information display device further includes a sensor for detecting an object that cannot be directly observed with the naked eye, and the computer unit displays the image of the object detected by the sensor. It may be displayed on the display unit. This allows the user to observe the image of the detected object while performing the operation of detecting the object with the sensor.
  • the body-mounted information display device further includes a bar code reading unit provided around the display unit and configured to capture a bar code posted outside.
  • the computer unit may display an image corresponding to the read barcode on the display unit. In this way, the user can easily observe the information corresponding to the barcode posted on the work site at the work site.
  • the display unit may include a display switching unit for switching whether or not to display an image on the display unit according to a line of sight of the user. In this way, the display can be switched without using a hand so that the image is displayed only when necessary for the work, thereby further improving work efficiency.
  • the present invention is further directed to an information display method for displaying an image including information in harmony with a target in the outside world on a display screen of the display unit by using the body-mounted information display device.
  • FIG. 1 is a conceptual diagram showing a body-mounted information display device according to a first embodiment of the present invention.
  • FIG. 2 is a diagram showing a configuration of three types of optical systems that can be used for a display unit of the body-mounted information display device of the first embodiment.
  • FIG. 3 is an explanatory diagram showing a state in which the control circuit unit 105 is connected to the mounting tool 300.
  • FIG. 4 is a conceptual diagram showing a configuration when the body-worn information display device of the first embodiment is used as a desktop computer.
  • FIG. 5 is a block diagram of a control circuit unit of the body-mounted information display device according to the first embodiment.
  • FIG. 6 is a conceptual diagram of a wireless interface: an E-ice when the body-mounted information display device of the present invention is connected to a network.
  • FIG. 7 is an explanatory diagram showing an example of a display screen of the body-mounted information display device of the present invention.
  • FIG. 8 is an explanatory diagram showing the application of the body-mounted information display device of the present invention to construction work.
  • FIG. 9 is an explanatory diagram showing an example in which the body-mounted information display device of the present invention is applied to a plant monitoring operation.
  • FIG. 1 o is an explanatory diagram showing application of the body-mounted information display device of the present invention to industrial measurement.
  • FIG. 11 is an explanatory diagram showing application of a body-mounted information display device of the present invention to security work.
  • 2 is a conceptual diagram showing a body-mounted information display device according to a second embodiment of the present invention.
  • FIG. 13 is a conceptual diagram showing a body-mounted information display device according to a third embodiment of the present invention.
  • FIG. 14 is a block diagram showing a configuration of an interface circuit applied to the body-worn information display crab of the third embodiment.
  • FIG. 15 is a block diagram showing another configuration of the interface circuit applied to the body-mounted information display device of the third embodiment.
  • FIG. 16 is an explanatory diagram showing input means using a magnetic field.
  • FIG. 17 is an explanatory diagram showing input means using infrared rays.
  • FIG. 18 is an explanatory diagram showing input means using a CCD camera.
  • FIG. 19 is an explanatory diagram showing an example of an operation using a CCD camera.
  • FIG. 20 is an explanatory diagram showing on-Z off control of display by gaze input.
  • FIG. 1 is a conceptual diagram showing a body-mounted information display device according to a first embodiment of the present invention.
  • the body-mounted information display device includes a display unit 103 mounted on the worker's head and a control circuit unit 103 mounted on a part of the worker's body. 5 and have.
  • the display unit 103 is fixed in front of the helmet 101 (that is, in front of the operator's eyes) by an elastic mounting device 102 such as a rubber band. Behind the helmet 101, an interface unit 110 electrically connected to the display unit 103 is fixed by a fitting 102. That is, the attachment 102 is provided with wiring for connecting the interface unit 110 and the display unit 103. Note that the display unit 103 can be directly worn on the head of the worker by the wearing tool 102 without using the helmet 101.
  • the control circuit unit 105 is fixed to the worker's back by a waste string-like mounting tool 300. The control circuit unit 105 and the interface unit 110 are connected by an interface cable 1 • 4.
  • the control circuit unit 105 is electrically connected to the display unit 103 via the cable 104, the interface unit 110, and the wiring of the mounting tool 102.
  • the control circuit unit 105 only needs to be attached to a part of the body, and may be attached to, for example, the chest or the head.
  • the control circuit unit 105 is a computer unit in which a microprocessor (not shown), a memory, a communication interface, a rechargeable battery, and the like are housed in one case.
  • a microprocessor not shown
  • a memory not shown
  • a communication interface not shown
  • a rechargeable battery and the like are housed in one case.
  • the internal configuration of the control circuit unit 105 will be described later.
  • FIG. 1B is an explanatory diagram showing the internal configuration of the display unit 103.
  • the display unit 103 has a magnifying optical system 106, a switching mechanism 107, a microphone 108, and a half mirror 201.
  • the magnifying optical system 106 and the half mirror 201 have a function of displaying an image including the electronic information generated by the control circuit unit 105 and enlarging the image by an operator. .
  • the magnifying optical system 106 is for a single eye.
  • the half mirror 201 is for both eyes, and is a semi-transmissive plane mirror provided at an angle of about 45 degrees just in front of both eyes.
  • the switching mechanism 107 is a screw mechanism having a function of moving the magnifying optical system 106 left and right.
  • the switching mechanism 107 has an operation knob 130 for the operator to manually operate, and a male thread portion 131 connected to the operation knob 130.
  • the magnifying optical system 106 is provided with a female screw (not shown) that fits with the male screw 13 1.
  • the male screw part 131 rotates, and as a result, the magnifying optical system 106 moves to the left or right together with the ⁇ screw part. That is, the operator can position the magnifying optical system 106 in front of either the left or right eye by turning the operation knob 130 of the switching mechanism 107 by hand.
  • the left and right switching mechanism 107 can be used not only in the case of switching to simply select one of the eyes from the viewpoint of the operator, but also in various other cases. For example, when the work area is on the left side of the worker, the work area on the left side can be easily seen by disposing the magnifying optical system 106 on the right eye side. The reverse is also true.
  • the microphone 108 is rotatably fixed to a mounting device 102 for fixing the display unit 103 to the head by a fixing device 140.
  • the microphone 108 is used as a voice input means for giving an instruction to the control circuit unit 105 by voice.
  • FIG. 2 is a diagram illustrating the configuration of three types of optical systems that can be used in the body-mounted information display device of the first embodiment.
  • the first magnifying optical system 106a shown in FIG. 2A includes a magnifying lens 202 provided above a half mirror 201, a transmissive liquid crystal panel 203, and a backlight 204.
  • the liquid crystal panel 203 displays an image including electronic information generated by the control circuit unit 105 in accordance with the image signal (information display signal) given from the control circuit unit 105 (FIG. 1).
  • the image displayed on the liquid crystal panel 203 is illuminated by light from the backlight 204, and light L 1 representing this image enters the magnifying lens 202.
  • the magnifying lens 202 has a function of shining and refracting light 1 so that an operator can observe a magnified virtual image of the image on the liquid crystal panel 203.
  • the half mirror 201 has a function as a light combining means (or a see-through optical system) for combining the light L1 representing an image and the light L2 from an external field of view. That is, since the half mirror 2Q1 is semi-transmissive, it reflects light L1 representing an image and transmits light 2 from an external field of view. Therefore, these two types of light L 1 and L 2 enter the worker's eyes simultaneously. That is, the worker can simultaneously see the outside world (eg, the work object) and the electronic information.
  • the half mirror 201 is formed of a plate-like member that covers both eyes as shown in FIG. 1 (b). Therefore, with the eye that does not observe the image generated by the control circuit unit 105 (the right eye in the example of FIG. 1B), only the outside world is observed through the half mirror 201. Thus, since the light from the outside enters the eyes in a well-balanced manner, there is an advantage that the worker can easily observe the state of the outside.
  • a reflection mirror 205 is inserted between the magnifying lens 202 and the liquid crystal panel 203, and the positions of the liquid crystal panel 203 and the back light 204 are worked. It is rotated 90 degrees toward the person's head.
  • the magnifying optical system 106 b can be enlarged without increasing the vertical dimension. It is easy to adjust the distance from the lens 202 to the image display surface of the liquid crystal panel 203. Therefore, there is an advantage that the degree of freedom in designing the magnifying optical system is large.
  • the third magnifying optical system 106 c shown in 121 2 (c) has a configuration using a semi-transmissive concave mirror 206 instead of the magnifying lens 202 and the half mirror 201. ing. That is, the semi-transmissive concave mirror 206 has a function as a magnifying optical system and a function as a see-through optical system.
  • This concave mirror 106 is semi-transparent and uniform with a reflectivity of several tens of percent)! It is composed of only members.
  • the light L1 of the image displayed on the liquid crystal panel 203 is guided to the concave mirror 206 through the reflecting mirror 205, reflected again by the concave mirror 206, and enters the eye.
  • the third magnifying optical system 106c is a so-called off-axis optical system. If the magnifying optical system is configured as an off-axis optical system, there is an advantage that the degree of freedom in arranging optical elements is increased.
  • the display unit 103 of the first embodiment includes a see-through optical system realized by a half mirror 201 (semi-transmissive plane mirror), a semi-transmissive concave mirror 206, or the like.
  • An operator can simultaneously observe an image containing electronic information and the outside world without moving his / her gaze.
  • the body-mounted information display device is worn on the body of the worker, the worker can access the yang information with both hands open. Therefore, the worker can perform other work while viewing the child information, which has the effect of improving workability.
  • FIG. 3 is an explanatory diagram showing a state in which the control circuit unit 105 is connected to the mounting tool 300.
  • the control circuit unit 105 can be attached to and detached from a shoulder strap-shaped attachment device 300.
  • the belt of the mounting tool 300 is provided with an engaging portion 320 that engages with the control circuit unit 105.
  • FIG. 3B shows a state in which the control circuit unit 105 is fixed to the belt of the mounting tool 300.
  • the engaging portion 320 is provided with a pin-shaped support member 360 for fixing the control circuit unit 105 and controlling that the control circuit unit 105 is engaged with the mounting tool 300.
  • a pin-shaped projection 307 for instructing the circuit unit 105 is provided.
  • the case 3 08 of the control circuit unit 105 has a support member 106 and a projection 30 07 Are respectively formed.
  • the support member 360 engages with the case 308 of the control circuit unit 105, and the control circuit unit 105 force ⁇ Equipment is fixed at 300.
  • a power management switch 310 is provided on the circuit board 309 inside the case 308 at a position S corresponding to the protruding portion 307.
  • the protrusion 307 switches the power management switch 310 to the ON state.
  • the circuit board 309 is provided with a power management circuit (not shown).
  • control circuit unit 105 When the control circuit unit 105 is attached to the mounting device 300, the power management circuit is switched to the operating state, and the power consumption is controlled so that the power consumption of the control circuit unit 105 is kept relatively low. Control. Specifically, control is performed to reduce the speed of the processor and not supply power to unnecessary interfaces, thereby improving the life of the internal power supply battery. On the other hand, when the control circuit unit 105 is not attached to the mounting device 300, the power management circuit is switched to the non-operating state, and the power consumption of the control circuit unit 105 becomes relatively large. The processing speed is faster. That is, the protrusion 307 and the power management switch 310 realize a function as power management switching means.
  • FIG. 4 is a diagram showing a configuration of an embodiment in which the control circuit unit 105 of the first embodiment is used as a desktop computer.
  • the control circuit unit 105 is connected to a keyboard 301, a mouse 302, a CRT display 303, and a printer 304. That is, the control circuit unit 105 is provided in advance with a connector and an interface circuit (both are collectively called an interface) for connecting to these peripheral devices.
  • the display unit 103 mounted on the head is separated from the control circuit unit 105. Therefore, the system shown in Fig. 4 can be used as a normal desktop computer.
  • the control circuit unit 105 when the control circuit unit 105 is used as a part of a desktop computer without being worn on a worker's body, an S source can be supplied from a commercial power supply. At this time, the power management circuit is turned off, and the mode is set to the mode that allows the fastest arithmetic processing. As described above, when the control circuit unit 105 is attached to the mounting tool 300, the power management circuit is turned on, so that the battery life is improved. On the other hand, when the control circuit unit 105 is removed from the mounting device 300, the power management circuit is turned off, and as shown in Fig. 4, it is used as a desktop computer that performs high-speed arithmetic processing. be able to. That is, the body-mounted information display device of the first embodiment can easily construct a computer system having a configuration suitable for the usage form.
  • the control circuit unit 105 is provided with a pointing tool 305.
  • the mouse 302 when using the control circuit unit 105 without wearing it on the body, the mouse 302 has priority, and when using the control circuit unit 105 while wearing it on the body, the pointing tool 3005 Works.
  • the control circuit unit 105 having the pointing tool 105 it is preferable to mount the control circuit unit 105 in front of the operator's chest.
  • the handle which is the pointing tool 305, is tilted to the left, right, back and forth to change the selected position on the screen according to the tilt angle.
  • a pointing object such as an arrow can be guided to an appropriate position on a display screen which is a two-dimensional display space.
  • a method to determine after selection it is possible to determine by pressing the center of the handle, for example.
  • FIG. 5 is a block diagram showing a circuit configuration of the control circuit unit 105.
  • CPU 401 is the 16 bits used in ordinary personal computers or
  • BIOS basic IZO system
  • BIOS basic IZO system
  • the RAM 403 has a memory capacity sufficient to operate the Windows operating system (trademark of Microsoft Corporation), for example, a memory capacity of 8 Mbytes or more.
  • VGA 640 x 480 video graphics adapter for display pixels of the general display standard
  • a VGA controller 404 according to the standard is provided.
  • a video memory (V-RAM) 405 for storing image data of the display area of the liquid crystal panel 203 (FIG. 2) is provided.
  • a video signal representing an image stored in the video memory 405 is output from the VGA controller 404. This video signal is output to the CRT display 303 (FIG. 4) and the display unit drive circuit 407.
  • the display unit driving circuit 407 is a circuit for driving the liquid crystal panel 203 of the display unit 103.
  • the IO controller 408 is a circuit for controlling various I interfaces including the hard disk drive 409 and the floppy disk drive 410.
  • a card controller 411 is built in according to the standard of PCMCIA (Personal Computer Memory Card International Association). It also has an RS-232C serial interface 412. Note that it is also possible to omit at least part of these circuits 409, 410, 411, and 412.
  • the control circuit unit 105 further includes a power management circuit 420 for controlling the power consumption of each circuit, and a power supply circuit 421 including a rechargeable battery.
  • the power supply circuit 421 operates when the power management switch 310 is turned on by the projection 307 as shown in FIG. 3B described above, so that the power consumption of the control circuit unit 105 is reduced. Control the operation of each circuit. Braking in a state where the control circuit Yunitto 1 05 is mounted on the body, it is possible to prolong the power supply that is available time from the power supply circuit 4 2 1.
  • FIG. 6 is a conceptual diagram when the body-mounted information display device of the first embodiment is used as a network terminal.
  • a body-worn information display device is wirelessly connected to a host computer 804 of a local area network (LAN).
  • LAN local area network
  • a communication modem 430 is inserted into the PCMCIA card slot of the body-mounted information display device, and the modem 430 is wirelessly connected to the host computer 804.
  • FIG. 7 is an explanatory diagram showing a display screen when the body-mounted information display device of the first embodiment is used for work of a plant facility.
  • a display screen is shown when a technician of a brand involving a plurality of technologies such as machinery, electricity, and communication accesses drawings and data from a host computer.
  • the main screen displays the mechanical information, electrical information, communication information, piping information, and other equipment information for this plant.
  • Menu 7 0 1 is prepared. For example, when an electrician confirms a circuit or the like at the present time, the engineer first selects an electric line from a menu 701 with a pointing device.
  • various selection keys 704 for selecting information on electrical relations are displayed on the display screen. At the stage when this display content is displayed, enter the character selected by the pointing tool from the lower part of the character sequence accumulation 703 in the model name field 702, and press the selection key 704. Select the required information (for example, circuit diagram) from the list.
  • FIG. 7 (b) a drawing as shown in FIG. 7 (b) is displayed on the display unit 103. If you know the number of the specific drawing, enter the number using the pointing sequence tool using the character sequence 703, and immediately select and display the circuit diagram as shown in Fig. 7 (b). It is also possible.
  • Information such as a circuit diagram may be stored in the hard disk 409 (FIG. 5) in the control circuit unit 105, or may be registered in the host computer 804. When information such as a circuit diagram is registered in the host computer 804, as shown in FIG. 6, the information is transferred from the host computer 804 to the body via the wireless interface:!: Chair. It is transferred to the type information display device.
  • FIGS. 7 (a) and 7 (b) are displayed on the display unit 103 shown in FIGS. 1 and 2. Therefore, the technician can check the circuit while simultaneously observing the displayed drawing and the circuit existing at the work site.
  • the actual circuit can be Even when viewing the drawings while checking them, the required drawings can be easily obtained on site.
  • FIG. 8 is a diagram showing a concept when the body-mounted information display device of the first embodiment is used at a construction site.
  • FIG. 8 (a) is a conceptual diagram showing the configuration of the entire system.
  • a portable GPS (Global Positioning System) 802 which is a means for detecting the position using a satellite, is connected to the body-mounted information display device in order to detect the position of the worker. Through this portable GPS 802, the location of the worker can be detected from the satellite 801.
  • the signal indicating the detected position and direction is transmitted to the host computer 804 (or a body-worn information display device) using a wireless communication means.
  • the position of the building 805 is registered in the host computer 804 in advance.
  • FIG. 8B is an explanatory diagram showing a positional relationship between the worker and the building 805.
  • the host computer 804 uses positional information indicating the positional relationship between the worker and the building 805 based on the symbol transmitted from the portable GPS 802 (or a body-mounted information display device). Is calculated. This positional information includes the direction from the worker to the building 805, the distance between the worker monitoring the building, the tilt angle ⁇ , and the like.
  • the host computer 804 transmits image information representing a perspective view (perspective) of the building 805 viewed from the position of the worker to the body-mounted information display device according to the position information.
  • a completed view of the building 805 is displayed in three dimensions.
  • the cooperation between the portable GPS 802 and the host computer 804 enables the construction of the building 805 to be completed according to the viewpoint of the workers at the site. Can be observed. At this time, the worker can observe the outside world at the same time, so it is easy to compare the displayed completed drawing with the outside wind flea. can do. For example, if such an observation is performed before the construction of the building 805 starts, it is possible to judge whether or not the harmony between the building 805 and its surrounding environment is good. Further, if such observation is performed after the completion of the building 805, it can be determined whether or not the building 805 is constructed as designed.
  • the control circuit unit 05 enlarges and reduces the image of the target object (building 805) without displaying it on the display unit 103 without communicating with the host computer 804. ⁇ It is also possible to display objects in a size that is in harmony with the outside world. This makes it possible to display an image that is in harmony with the outside world more quickly. In this way, the system shown in Fig. 8 allows the image of the building to be displayed on-site and superimposed and observed with the outside world, so that the building can be planned in consideration of harmony with the site environment when planning the building. Can be easily determined. In addition, it is easy to confirm whether the plan matches the plan during construction.
  • FIG. 9 is a diagram showing an example in which the body-mounted information display device of the first embodiment is applied to operations such as maintenance of a plant piping.
  • Fig. 9 (a) shows the actual layout of a complicated piping system
  • Fig. 9 (b) shows a display screen in which the layout of the actual piping system is overlaid with electronic information related to this piping system.
  • Fig. 9 (b) if the electronic information on the piping system is displayed in a harmonious state that is superimposed on the external piping system, various information on the piping system can be immediately known. it can.
  • the operator first moves his / her gaze to the position of a large target such as the tank 901. Then, an image (indicated by a broken line in FIG. 9B) showing the outer shape of the target object is displayed on the display unit 103.
  • the outline image is aligned with the actual tank 901 and the host computer 804 (or the control circuit unit 105) executes processing for enlarging or reducing the outline image as necessary.
  • the enlargement / reduction of the image is realized by enlarging / reducing the image data displayed in the display unit 103.
  • an enlarged image is formed by interpolating between the original pixels.
  • a reduced image is formed by thinning out pixels.
  • the image size can be freely selected. Therefore, the user can easily match the size of the display image with the size of the external object.
  • FIG. 10 is a diagram illustrating an example in which the body-mounted information display device of the first embodiment is applied to industrial measurement.
  • a body-worn information display device is connected to a sensor unit 910 such as an ultrasonic sensor, and is used as a measurement system for inspecting the position of a water pipe buried underground. .
  • the operator presses the sensor section 910 to scan the ground. Since the image of the scanned result is displayed on the display unit 103, the operator can observe the result while scanning the sensor unit 9110. Conventionally, in such a case, an image obtained by scanning is displayed on a monitor installed in another place, so that the monitor is observed separately from an operator who scans the sensor unit 910. Workers were needed.
  • the operator observing the monitor the operator who scans the sensor section 910, needs to signal verbally whether or not a water pipe has been detected and tell the location of the water pipe.
  • the water pipe inspection method shown in Fig. 10 one worker can simultaneously scan the sensor section 9 10 and observe the resulting image, which is easier and , More surely water The position of the vessel can be confirmed. Another advantage is that the working time can be reduced.
  • FIG. 11 is a diagram showing a display screen when the body-mounted information display device of the first embodiment is used for security of a facility.
  • security guards guard inside and outside the facility, security cameras are often installed at multiple locations. There are multiple monitors installed at the security posts, and images are displayed on each monitor as shown in Fig. 11, and security guards constantly monitor them. Security shellfish patrol inside and outside the building at regular intervals. In the past, if it was desired to continue monitoring with a monitor during patrols, other security guards would monitor with a monitor at a security station.
  • the patrol guard can display images of each point as shown in Fig. 11 on the body-worn information display device. You can go around the facility while displaying and observing the information. Therefore, even during the patrol, it is possible to immediately recognize and deal with an abnormal situation that occurred in a place different from the place where the guards are.
  • FIG. 12 is a conceptual diagram showing a body-mounted information display device as a second embodiment of the present invention.
  • This body-worn saddle display device has a monocular display unit 103 a in front of the helmet 101 and a control circuit unit 105 a in the back of the helmet 101. Has been fixed.
  • the display unit 103 a is provided so as to be movable along the groove 152 of the support 150 provided in front of the helmet 101.
  • the eye on which the display unit 103a is not arranged sees the outside without passing through the half mirror, so that the outside can be observed more clearly than in the first embodiment.
  • the first embodiment has an advantage that the electronic information displayed on the display unit 103 and the outside world can be observed in a more rebalanced state.
  • FIG. 13 is a conceptual diagram showing a body-mounted information display device as a third embodiment of the present invention.
  • This body-worn information display device S is a modification of the first embodiment shown in FIG. 1, in which the control circuit unit 105 b and the interface unit 11 Ob are connected to each other by infrared rays without being connected by wiring.
  • Various signals are transmitted from the control circuit unit 105b to the interface unit 110b by an infrared LED 501 that emits light. It is also possible to transmit signals between the interface unit 110b (or the display unit 103) and the control circuit unit 105b using electromagnetic waves other than infrared rays.
  • the operator since the wiring between the display unit "I03" and the control circuit unit 105b does not need to hang down from the head (the helmet 101), the operator performs manual work. There is an advantage that it is easy.
  • FIG. 14 is a block diagram showing a circuit configuration of a modulation unit in the control circuit unit 105b for performing signal transmission using infrared rays and a demodulation unit in the interface unit 110b.
  • the composite video signal for displaying an image on the CRT 406 includes a component video signal RG, a horizontal synchronization signal, and a vertical synchronization signal.
  • the frequency of a VGA composite video signal is in the range of 25 MHz to 3 QMHz.
  • a bandwidth of about 30 MHz is required, and a signal of this bandwidth is transmitted by a power-small, body-worn information display device. It will often be difficult.
  • the video signal is transmitted in a multi-phase time axis (that is, the video signal is sequentially developed into a plurality of parallel signals).
  • a plurality of infrared LEDs 501 for transmitting the video signal RGB as parallel multi-phase signals are connected to the display unit drive circuit 407 of the control circuit unit 105b.
  • the control circuit unit 105b further includes a data controller 413 for transmitting a synchronization signal and a module 521.
  • the interface unit 110b has an infrared sensor 502 (light receiving element), a selector 503, a frame memory 504, a latch 506, and a D-A converter 507 corresponding to each infrared LED 501.
  • the selector 503 selectively outputs one of an input signal from the infrared sensor 502 and an input signal from the display controller 505.
  • the interface unit 11 Ob is further provided with a command register 511 connected to the display controller 505.
  • the display controller 505 is connected to the backlight circuit 509 and the power management circuit 510 in the display unit 103.
  • Control circuit Yuni' Bok 1 05 b in the VGA controller 404 connected to the bus outputs a video signal of a frequency of about 3 OMH Z to display Yunitto driving circuit 407.
  • the video signal input to the display unit drive circuit 407 is separated into RGB three-color video signals by an internal phase expansion circuit (not shown), and each color video signal is divided into a plurality of signals (hereinafter, referred to as parallel video signals). ) Are sequentially expanded into multiple phases.
  • the plurality of parallel video signals are serially transferred to the plurality of infrared LEDs 501, respectively.
  • the number of infrared LEDs 501 (that is, the number of polyphase deployments) is determined by the number of video signal inputs to the liquid crystal panel used for the display unit 103 and the range of frequencies over which the infrared ED501 can modulate. .
  • a polysilicon TFT liquid crystal panel with a built-in peripheral circuit is used as the liquid crystal panel 203 of the display unit 1.3
  • an image can be displayed on the liquid crystal panel in accordance with a plurality of developed parallel video signals.
  • a synchronizing signal for synchronizing these multi-phase parallel video signals is transmitted to the timing demodulator 508 via the module 521.
  • the timing demodulator 508 transmits a vertical synchronizing signal and a horizontal synchronizing signal, as well as a command signal superimposed on the time of vertical bright line elimination (vertical blanking).
  • This command signal is temporarily stored in the command register 511.
  • the display controller 505 controls a brightness of the backlight circuit 509 and a signal for controlling the power management circuit 510 in the display unit 103. Output a signal.
  • Each infrared sensor 502 of the connector unit 110b receives infrared rays from the corresponding infrared LED 501 and reproduces a parallel video signal.
  • the received parallel video signal is harmed to the frame memory 504 via the selector 503.
  • This frame memory 504 stores image data representing an image of 256 gradations with 8 bits per pixel / color.
  • the frame memory 504 has a capacity to store an image portion corresponding to each column line (also referred to as a bit line) of the liquid crystal panel.
  • the address of the frame memory 504 is controlled by the display controller 505.
  • the digital output from the frame memory 504 is converted to an analog signal by a D / A converter 507 via a latch 506.
  • a plurality of parallel video signals are output from a plurality of DA converters 507.
  • the plurality of parallel video signals are input to the video signal input terminals of the divided liquid crystal panel.
  • an image is displayed on the liquid crystal panel of the display unit 103.
  • FIG. 15 is a block diagram showing another configuration of the interface circuit applied to the body-mounted information display device of the third embodiment.
  • the video signal is Transmit by multiplex transmission method.
  • FIG. 15A shows the configuration of the modulation section of the control circuit unit 105b.
  • the modulation section of the control circuit unit 105b consists of the NTSC encoder 530 and the synchronization signal generator 5
  • burst gate 534 three voltage controlled oscillators (VCO) 536, mixing circuit 542, three driver circuits 538, and three infrared LEDs5
  • the NTSC encoder 530 generates one luminance signal Y and two color difference signals (B-Y) and (R-Y) from the three video signals of R, G, and B.
  • the three color difference signals are input to each VCO 536 and are FM-modulated.
  • the second color difference signal (R ⁇ Y) is mixed by the mixing circuit 542 together with the vertical synchronization signal V SYNC output from the burst gate 534.
  • the mixed FM signal is input to the driver circuit 538, and the driver circuit 538 drives the infrared LED 540 accordingly to emit infrared light.
  • the second color difference (R ⁇ Y) is transmitted to the demodulation unit of the interface unit 110 as a vertical synchronization signal V SYNC and a weighted FM modulation signal.
  • the luminance signal Y is transmitted to the demodulation unit of the interface unit 110b as an FM conversion signal superimposed on the horizontal synchronizing signal HSYNC.
  • the first color difference signal (B ⁇ Y) is transmitted to the demodulation unit of the interface unit 110 b as its own FM change signal.
  • FIG. 15 (b) shows the configuration of the demodulation unit of the interface unit 110b.
  • the demodulation section of the interface unit 110b consists of three infrared sensors 550 (phototransistors) as light receiving elements, three amplifiers 552, three waveform shaping circuits 554, and three FM demodulation circuits 556. , A horizontal sync separation circuit 558, a matrix conversion circuit 560, and a vertical sync separation circuit 562.
  • the FM modulated signals received by the three infrared sensors 550 are amplified by the respective amplifiers 552, shaped by the waveform shaping circuit 554, and then demodulated by the FM demodulating circuit 556.
  • the horizontal sync separation circuit 558 separates the horizontal sync signal HSYNC from the demodulated first signal.
  • the vertical sync separation circuit 562 separates the vertical sync signal V SYNC from the third signal amplified by the amplifier 552.
  • the matrix conversion circuit 560 converts the luminance signal Y and the two color difference signals (B-Y) and (RY) into three color RGB images. Reproduce the image signal.
  • the circuit using the FM modulation and demodulation method does not require the frame memory 504 as shown in FIG. 14, and the entire circuit configuration is simpler than the circuit of FIG. 14. Also, the circuit of FIG. 15 has an advantage that the number of generators (infrared LED 540 in the example of FIG. 15) and the number of receivers (infrared sensor 550) can be reduced compared to the circuit of FIG. .
  • the luminance signal Y and the two chrominance signals the luminance signal has the largest change, and the second chrominance signal (R ⁇ Y) has the slowest change,
  • the change of the color difference signal (BY) of 1 is in the middle. Therefore, in the above-described FM modulation method, the frequency of the carrier of the luminance signal Y is set to be the highest, the frequency of the carrier of the first chrominance signal (BY) is set to the middle, and the second chrominance signal (R-Y ) Can be the lowest.
  • set the carrier frequency of the luminance signal Y to 38 MHz, the carrier frequency of the first chrominance signal (B-Y) to 18 MHz, and the carrier frequency of the second chrominance signal (R-Y) to 8 MHz. can do. Further, if each dynasty is set to about 4 MHz on both sides, the areas of the three signals do not overlap. In this way, three signals can be transmitted by frequency division multiplexing. When transmitting by frequency division multiplexing in this way, it is possible to use one transmitter (infrared LED 540 in the example of FIG. 15) and one receiver (infrared sensor 550).
  • wiring is omitted by using electromagnetic waves for signal transmission between the control circuit unit and the display unit.
  • the workability of manual work can be improved.
  • FIG. 16 is an explanatory diagram showing input means (magnetic pointing device) using a magnetic field.
  • input means magnetagnetic pointing device
  • FIG. 16A two exciting coils 602 and 604 are provided on the mounting device 102 at positions on both sides of the display unit 103.
  • a finger-like pointing device 606 using magnetism is attached to the operator's finger.
  • the two excitation coils 602 and 604 generate magnetic fields for position detection in the X and Y directions, respectively. These two exciting coils 602, 604 are energized alternately and periodically to generate respective magnetic fields.
  • the X and Y directions correspond to the horizontal and vertical directions of the field of view in front of the worker. That is, the X direction and the Y direction correspond to the horizontal direction and the vertical direction of the image displayed on the display unit 103, respectively.
  • FIG. 16 (b) is a conceptual diagram showing a part of the configuration of the pointing device 606 worn on the operator's finger.
  • the indicating device 606 includes a power source 610 (typically a battery), a resistor 611, a magnetoresistive element 612, an amplifier 614, an A-D converter 616, and a push switch 618 (mechanical). Switch), a modulation circuit 620, and an infrared LED 622.
  • the magnetic field generated by the exciting coil 604 is indicated by a broken line.
  • the resistance of the magnetoresistive element 612 changes according to the strength of the magnetic field passing through the element 612. Therefore, the voltage across the magnetoresistive element 612 also changes according to the magnetic field strength.
  • This voltage is amplified by an amplifier 614 and converted into digital data by an A-D converter 616.
  • the modulation circuit 620 generates a modulated infrared ray from the infrared LED 622 by controlling the blinking of the infrared LED 622 according to the digital data.
  • the display unit 103 is provided with an infrared sensor (light receiving element) (not shown).
  • the demodulation circuit 5 (not shown in FIG. 16) is provided with a demodulation circuit.
  • the demodulation circuit demodulates the signal transmitted from the infrared LED 622 to provide a pointing device.
  • the circuit for detecting the position in the Y direction has the same configuration as that shown in Fig. 16 (b). However, the direction of the magnetoresistive element is set so as to be orthogonal to the circuit for the X direction. Further, only one push switch 618 is provided on the pointing device 606.
  • the influence of the inclination can be removed by correcting the resistance change of each of the magnetoresistive elements 6 12 in the X direction and the Y direction by the amount corresponding to the inclination angle.
  • the positions of the instruction return 606 in the X direction and the Y direction are determined, and the pointer is displayed on the screen accordingly.
  • the operator can move the position of the pointer displayed on the screen by moving the hand on which the pointing device 606 is mounted.
  • the push switch 618 like a mouse button, is used by an operator to give instructions to the computer. That is, if the pointer of the pointing device 606 is moved to the menu and the push switch 618 is pressed while the menu is displayed on the screen of the display unit 103, the processing indicated by the menu is performed. Be executed.
  • a two-dimensional pointing device can be relatively easily realized in the body-mounted information display device. Furthermore, a three-dimensional pointing device can be realized by using three pairs of excitation coil and magnetoresistive element.
  • FIG. 17 is an explanatory diagram showing input means (optical pointing device) using infrared rays.
  • the display unit 103 has a CCD camera 63 0
  • the pointing device 632 is attached to the operator's finger.
  • the indicating device 632 has an infrared ray ED, a push switch, and a battery.
  • the CCD camera 630 has an imaging lens having an angle of view that includes the angle of view of the virtual image of the image displayed on the display unit 103.
  • the CCD camera 630 is arranged substantially at the upper center of the display unit 103 so as to capture an image in conjunction with the operator's eyes.
  • the infrared light emitted from the pointing device 632 is picked up by the CCD camera 630 as a spot image. Then, the position of this spot is displayed on the screen of the display unit 103. Therefore, the worker can observe the outside world and the electronic information with the spot indicating the position of the pointing device 630 displayed on the electronic information displayed on the display unit 103.
  • an object designated at a spot position of the indicating device S630 is selected, and a predetermined process (for example, details of the object) is performed. Can be automatically executed.
  • a predetermined process for example, details of the object
  • FIG. 17 (b) is displayed as electronic information
  • the user can select a menu by moving the spot of the pointing device 606 on the menu and pressing the push switch to select the menu.
  • Processing can be executed.
  • the remote control pointing device shown in Fig. 16 and Fig. 17 the operator can easily see the two-dimensional position in the image while observing the electronic information superimposed on the outside world.
  • the desired processing can be executed by designating.
  • the input means shown in FIGS. 16 and 17 has the advantage that the position on the screen can be indicated even during other work because the hands of the worker can be left open.
  • the input method shown in FIG. 17 can input a more accurate two-dimensional position with a simpler configuration than the input method shown in FIG.
  • FIG. 18 is an explanatory diagram showing input means using a CCD camera. As shown in FIG. 18 (a), this CCD camera 640 is used as a bar code reading means for reading a bar code 650.
  • FIG. 18 (b) is a conceptual diagram showing the internal configuration of the CCD camera 640.
  • the CCD camera 640 includes a CCD array 642, a half mirror 644, an imaging lens system 646, and a laser diode 648.
  • the light generated by the laser diode 648 is reflected by the half mirror 644 and
  • the bar code 650 is radiated through the image lens 646.
  • the laser diode 648 also has a function as a laser pointer, and the operator can visually recognize the position of the light spot.
  • the operator confirms that the light spot of the laser is on the bar code 650, and then instructs the start of bar code removal.
  • the light reflected by the bar code 650 is condensed by the imaging lens 646, passes through the half mirror 644, and is received by the CCD array 644. That is, the laser diode 648 as the light emitting unit and the CCD array 642 as the imaging unit are arranged on optically equivalent optical axes.
  • the CCD camera 640 is set so as to capture the image of the barcode 650 in synchronization with the operator's eyes. That is, when the worker visually checks the bar code 65 0 attached to the article and instructs the start of reading, the bar code 65 0 is read by the CCD camera 65 0. As described above, in the embodiment shown in FIG. 18, since the bar code to be picked up is recognized by the CCD camera 640 while the operator observes the bar code, the bar code at an arbitrary position can be recognized. Can be selectively and easily recognized.
  • the read bar code 650 is decoded by the control circuit unit 105 (not shown in FIG. 18) to generate a coded signal.
  • the correspondence between the coded signal of the bar code 650 and the product to which the bar code 650 is attached is determined by the storage device in the control circuit unit 105 (or the storage device of the host computer 804). ).
  • the control circuit unit 105 reads out the information of the article indicated by the bar code 650 and displays it on the display unit 103. Therefore, the operator can display and observe various kinds of information on the article to which the barcode 65 is attached simply by looking at the barcode 65 at the work site.
  • the date of manufacture, lot number, etc. can be considered as information on the goods. If the item is packaged, a color image of the item may be displayed. In this way, in the field of distribution, it is possible to select goods without fail when collecting required goods. Conversely, when storing goods in a warehouse, they can be easily stored at the specified correct position.
  • FIG. 19 shows the operation using input means using the CCD camera 640 shown in Fig. 18. It is explanatory drawing which shows an example of.
  • FIG. 19 (a) shows a production line in an engine manufacturing plant
  • FIG. 19 (b) shows an example of a two-dimensional bar code posted in front of the engine.
  • a two-dimensional barcode As in this example, it is also possible to use a two-dimensional barcode as the barcode, and the barcode does not need to be attached to the item. It only needs to be attached.
  • the worker visually observes the two-dimensional barcode and captures it with the CCD camera 640, thereby displaying and observing information about the engine associated with the barcode. be able to.
  • the bar-code reading means is provided in the body-mounted information display device, the operator picks up the bar code with the body-mounted information display device at the site, and the bar code is read. Related information and goods can be observed at the same time. Therefore, there is an advantage that the article can be surely handled.
  • FIG. 20 is an explanatory diagram showing on / off control of display by gaze input.
  • FIG. 20 (a) shows a configuration of a display unit 103c for realizing control by a gaze input.
  • the display unit 103c has a configuration in which an infrared LED650 and an infrared sensor 652 are provided in the optical system shown in FIG.
  • the infrared light emitted from the infrared LED 650 is reflected by the reflection mirror 205, passes through the magnifying lens 202, is reflected again by the half mirror 201, and then enters the user's eye.
  • the infrared sensor 652 detects infrared light reflected from the user's cornea.
  • FIG. 20 (b) shows a screen displayed on the display unit 103.
  • a position 654 for on / off control of display by gaze input is marked in advance.
  • the infrared sensor 652 detects that fact and the display on the liquid crystal panel 203 is turned on / off.
  • the position of the line of sight at which the on / off control is performed is set outside the display area and in a direction that is normally not seen by the operator. This can prevent the operator from accidentally switching the display state.
  • a mark such as “switch” may be displayed, and the display state may be switched on / off when an operator sees the mark.
  • the body-mounted information display device can be applied to various cases of simultaneously observing electronic information generated by a computer and the outside world, for example, planning and inspection of plants and buildings, and industrial use. It can be applied to various measurement / inspection, security, and industrial-commercial collection and delivery of goods.

Description

明細書 身体装着型情報表示装置およびそれを用いた表示方法 技術分野
本発明は、 ユーザの身体に装着される身体装着型情報表示装置およびそれを用 いた表示方法に関する。 背景技術
今日のコンピュータ技術の進展により、 電子化された情報をモービルコンビュ ータ等のいわゆる携带型情報処理装置によつて容易に処理できるようになつてき た。 携带型情報処理装置は、 工業的又は商業的な作業を行う作業者 (ユーザ) に よって種々の目的で使用されている。 例えば、 物流管理シス亍ムに適用される例 では、 倉庫から必要な品物を集める作業において、 倉庫内において集荷すべき品 物を表示したリ、 集荷済みの品物を登録したりするために携帯型情報処理装置が 用いられている。
しかし、 従来の携带型情報処理装置では、 作業者が携帯型情報処理装置に表示 された電子情報と、 現場に存在する作業対象物とを交互に見るためには、 作業者 が視線をかなり大幅に移動させなければならなかった。 このため、 ®子情報と作 業対象物との関係を眼で確認する作業が煩雑であるという問題があった。 また、 携带型情報処理装置を手で操作する際には、 作業対象物を手で取リ极うことがで きないので、 作業性が悪いという問題があった。
本発明は上記課題を解決するためになされたものであり、 電子情報の表示を作 業者が観察しつつ他の作業を効率良く行うことのできる技術を提供することを目 的とする。 発明の開示
上述の課題の少なくとも一部を解決するため、 この発明による身体装着型情報 表示装 Sは、 表示されるべき情報を含む画像を生成するコンピュータュニッ卜と 、 前記コンピュータユニットをユーザの身体の一部に装着するための第 1の装着 手段と、 前記ユーザの頭部に装着された状態において、 前記コンピュータュニッ 卜で生成された画像を前記ユーザが観察し得るように表示するための表示ュニッ 卜と、 前記表示ュニットを前記ユーザの頭部に装 Sするための第 2の装着手段と 、 を備える。 前記表示ユニットは、 前記コンピュータユニットで生成された画像 を表示するための画像表示素子と、 前記画像表示素子に表示された画像の拡大さ れた虚像が前記ユーザによって観察されるように前記画像を表す第 1の光を屈折 させ、 前記第 1の光を外界の視野から入射する第 2の光と共に前記ユーザの眼に 入射させる光学系と、 を備える。 電子情報を含む画像を表す第 1の光が、 外界か らの第 2の光と共にユーザの眼に入射するので、 ユーザは電子情報の表示と外界 とを同時に観察することができ、 ユーザが作業を効率良く行うことができる。 前記光学系は、 前記画像表示素子に表示された画像の拡大された虚像が前記ュ 一ザによって観察されるように前記画像を表す第 1の光を屈折させる拡大光学系 と、 前記第 2の光を通過させて、 前記第 1の光と共に前記ユーザの眼に入射させ るシースルー光学系と、 を備えるようにしてもよい。
また、 前記拡大光学系は、 1つの眼に前記第 1の光を供給するための単眼用光 学系であり、 前記シースルー光学系は、 前記ユーザの両眼の前方に配置された半 透過型平面鏡であり、 前記表示ユニットは、 さらに、 前記拡大光学系を前記ユー ザの左右の眼の前方のいずれにも移動させて配置することが可能な切換手段を備 えるようにしてもよい。 この構成によれば、 ユーザが電子情報と外界とを同時に 観察し易い方の眼を選択することができるので、 身体装着型情報表示装置がより 使い易いものとなる。 また、 拡大光学系が配置されていない方の眼の前方にも透 遇型平面鐮が存在するので、 両眼に入射する光がバランスしている。 この結果、 画像と外界との観察を同時に行い易い。
また、 前記拡大光学系と前記シースルー光学系は、 1つの眼に前記第 1と第 2 の光を供給するための単眼用光学系であり、 前記表示ユニットは、 さらに、 前記 拡大光学系と前記シースルー光学系とを前記ユーザの左右の眼の前方のいずれに も移動させて配置すること力《可能な切換手段を備えるようにしてもよい。 この構 成によっても、 ユーザが電子情報と外界とを観察し易い方の眼を選択することが できる。
前記光学系は、 前記ユーザの眼の前方に配置された半透過型凹面鏡で実現する ことも可能である。
前記コンピュータユニットは、 電源と、 前記電源の消费楚カを制御するための パワーマネジメント手段と、 前記コンピュータュニッ卜が前記第 1の装着手段に 装着されているか否かに応じて、 前記パワーマネジメント手段の動作状態を切り 換えるためのパワーマネジメント切換手段と、 を備えることが好ましい。 こうす れば、 コンピュータュニッ卜が身体に装着されていない時には低消费電力になる ようにパワーマネジメント手段の動作状態を切り換えることによって、 消費電力 を低滅することが可能である。
前記コンピュータユニットは、 また、 ユーザの身体に装着されていないときに 、 キーボードと、 ポインティングデバイスと、 表示デバイスと、 プリンタとのう ちの少なくとも一部を含む周辺装置に接続することによってデスクトップコンビ ユータシステムを構成するためのインタフェイスを備えるようにしてもよい。 また、 前記コンピュータユニットは、 少なくともユーザの身体に装着されてい ないときに利用し得る第 2のポインティングデバイスを備えるようにしてもよい また、 前記コンピュータユニットは、 外部のホス卜コンピュータと無線で通信 することによって、 前記ホス卜コンピュータから所望の情報を受け取る情報通信 手段を備えるようにしてもよい。 こうすれば、 種々の情報をホストコンピュータ から受け取って表示ュニッ卜に表示することができる。
前記ホストコンピュータから受け取る情報は、 例えば、 前記表示ユニットに表 示される画像を表す画像情報である。
前記情報通信手段は、 前記ユーザから見た外界の目棵物の方位と視角と距離と のうちの少なくとも一部を含む位置情報を前記ホストコンピュータに指示すると ともに、 前記位置情報に応じて処理された画像を表す前記画像情報をホス卜コン ピュータから受け取ることによって、 前記目標物と調和する画像を前記表示ュニ ットに表示させるようにしてもよい。 こうすれば、 目標物と調和するような大き さと位置で画像を表示してユーザに観察させることができる。 前記位 情報は、 グロ一/ ルポジショニングシステムから供給されるようにし てもよい。 こうすれば、 ユーザと目檷物との位置関係を容易に得ることができる また、 前記情報通信手段は、 前記表示ユニットに表示される画像のサイズを変 更するように前記ホストコンピュータに指示するとともに、 サイズが変更された 画像を表す前記画像悄報をホス卜コンピュータから受け取ることによって、 外界 の目棵物のサイズと調和する画像を前記表示ュニッ卜に表示させるようにしても よい。 こうすれば、 ユーザが、 目檷物のサイズと脚和した画像を、 目檷物ととも に観察することができる。
前記コンピュータュニットは、 前記表示ュニッ卜に表示される画像を表す映像 信号を変調して前記表示ュニッ卜に無線で発信するための変調手段を備え、 前記 表示ュニットは、 前記映像信号を受僂して復調するための復調手段を備えるよう にしてもよい。 こうすれば、 コンピュータユニットと表示ユニットとの間を配線 で接続しなくてもよいので、 ユーザの動作が容易になる。
上記身体装着型情報表示装置は、 さらに、 前記ユーザの手の一部に装着された 磁気デバイスの位置における磁界強度に応じて、 前記表示ュニッ卜に表示される 画像内の位置を指示するための磁気式ポインティングデバイスを備えるようにし てもよい。 あるいは、 前記ユーザの手の一部に装着された発光デバイスの光を読 取ることによって、 前記表示ュニッ卜に表示される画像内の位置を指示するため の光学式ポインティングデバイスを備えるようにしてもよい。 これらのポイン亍 イングデバイスを用いれば、 ユーザが手の位置を移動させるだけで、 表示された 画像内の所望の位置を容易に指示することができる。
また、 上記身体装着型情報表示装置は、 さらに、 肉眼で直接には観察できない 対象物を検出するためのセンサを備え、 前記コンピュータユニットは、 前記セン サで検出された前記対象物の画像を前記表示ュニットに表示するようにしてもよ い。 こうすれば、 ユーザがセンサで対象物の検出動作を行いながら、 検出された 対象物の画像を観察することができる。
また、 上記身体装着型情報表示装置は、 さらに、 前記表示ユニットの周囲に設 けられて、 外界に掲示されているバーコ一ドを铳取るバーコ一ド読取り手段を備 え、 前記コンピュータユニットは、 読取られたバーコードに応じた画像を前記表 示ユニットに表示するようにしてもよい。 こうすれば、 作業現場に掲示されてい るバーコードに応じた情報を、 ユーザが作業現場において容易に観察することが できる。
上記身体装着型情報表示装置において、 前記表示ユニットは、 前記ユーザの視 線に応じて前記表示ュニッ卜における画像表示の有無を切り換えるための表示切 換手段を備えるようにしてもよい。 こうすれば、 作業に必要な場合にだけ画像表 示を行うように、 手を用いずに表示の有無を切り換えられるので、 作業効率がさ らに向上する。
この発明は、 さらに、 上記身体装着型情報表示装置を用いて、 前記表示ュニッ 卜の表示画面に外界の目標物に調和した情報を含む画像を表示する情報表示方法 にも向けられている。 図面の簡単な説明
図 1は、 本発明の第 1実施例による身体装着型情報表示装置を示す概念図。 図 2は、 第 1実施例の身体装着型情報表示装置の表示ュニッ卜に使用可能な 3 種類の光学系の構成を示す図。
図 3は、 制御回路ユニット 1 0 5を装着具 3 0 0に接続する様子を示す説明図 である。
図 4は、 第 1実施例の身体装着型情報表示装置をデスク トップコンピュータと して使用する場合の構成を示す概念図。
図 5は、 第 1実施例の身体装着型情報表示装置の制御回路ュニッ卜のブロック 図。
図 6は、 本発明の身体装着型情報表示装置をネッ卜ワークに接続する場合の無 線インターフ: Eイスの概念図。
図 7は、 本発明の身体装着型情報表示装置の表示画面の一例を示す説明図。 図 8は、 本発明の身体装着型情報表示装置の建設作業への適用を示す説明図。 図 9は、 本発明の身体装着型情報表示装置をプラント監視作業に適用する例を 示す説明図。 図 1 oは、 本発明の身体装着型情報表示装置の工業計測への適用を示す説明図 図 1 1は、 本発明の身体装着型情報表示装置の警備作業への適用を示す説明図 図 1 2は、 本発明の第 2実施例による身体装着型情報表示装置を示す概念図。 図 1 3は、 本発明の第 3実施例による身体装着型情報表示装置を示す概念図。 図 1 4は、 第 3実施例の身体装着型情報表示装蟹に適用されるインターフェイ ス回路の構成を示すブロック図。
図 1 5は、 第 3実施例の身体装着型情報表示装置に適用されるインターフェイ ス回路の他の構成を示すブロック図。
図 1 6は、 磁界を利用した入力手段を示す説明図。
図 1 7は、 赤外線を利用した入力手段を示す説明図。
図 1 8は、 C C Dカメラを利用した入力手段を示す説明図。
図 1 9は、 C C Dカメラを利用した作業の一例を示す説明図。
図 2 0は、 視線入力による表示のオン Zオフ制御を示す説明図。 発明を実施するための最良の形態
A . 第 1実施例
図 1は、 本発明の第 1実施例による身体装着型情報表示装置を示す概念図であ る。 この身体装着型情報表示装奩 (携帯型データ表示装置) は、 作業者の頭部に 装着される表示ユニット 1 0 3と、 作業者の身体の一部に装着される制御回路ュ ニット 1 0 5とを備えている。
表示ュニッ卜 1 0 3は、 ゴムバンド等の伸縮自在な装着具 1 0 2によってヘル メット 1 0 1の前方 (すなわち作業者の眼前) に固定されている。 ヘルメッ卜 1 0 1の後方には、 表示ュニッ卜 1 0 3と電気的に接続されたインタフェイスュニ ット 1 1 0が装着具 1 0 2によって固定されている。 すなわち、 装着具 1 0 2に は、 インタフェイスュニット 1 1 0と表示ュニッ卜 1 0 3とを接続する配線が備 えられている。 なお、 ヘルメット 1 0 1を用いずに、 表示ユニット 1 0 3を装着 具 1 0 2によって作業者の頭部に直接装着するようにすることも可能である。 制御回路ユニット 1 0 5は、 屑ひも状の装着具 3 0 0によって作業者の背中に 固定される。 制御回路ュニッ卜 1 0 5とインタフェイスュニッ卜 1 1 0とは、 ィ ンターフェイス用のケーブル 1 ◦ 4によって接続されている。 制御回路ユニット 1 0 5は、 ケーブル 1 0 4とインタフェイスュニット 1 1 0と装着具 1 0 2の配 線とを介して表示ユニット 1 0 3と電気的に接続されている。 なお、 制御回路ュ ニット 1 0 5は、 身体の一部に装着されるものであればよく、 例えば胸や頭部に 装着されるようにしてもよい。
制御回路ユニット 1 0 5は、 図示しないマイクロプロセッサや、 メモリ、 通信 インタフェイス、 再充電可能な電池等を 1つのケースに収納したコンピュータュ ニッ卜である。 制御回路ュニット 1 0 5の内部構成については後述する。
図 1 ( b ) は、 表示ユニット 1 0 3の内部構成を示す説明図である。 表示ュニ ット 1 0 3は、 拡大光学系 1 0 6と、 切換機構 1 0 7と、 マイクロフォン 1 0 8 と、 ハーフミラー 2 0 1 とを有している。 拡大光学系 1 0 6とハーフミラー 2 0 1は、 制御回路ユニット 1 0 5で生成された電子情報を含む画像を表示するとと もに、 この画像を作業者に拡大して視認させる機能を有する。 なお、 拡大光学系 1 0 6は単眼用である。 一方、 ハーフミラー 2 0 1は両眼用であり、 両眼の直前 に約 4 5度の角度で傾いて設けられた半透過性の平面鏡である。
切換機構 1 0 7は、 拡大光学系 1 0 6を左右に移動させる機能を有するねじ機 構である。 切換機構 1 0 7は、 作業者が手で操作するための操作ノブ 1 3 0と、 操作ノブ 1 3 0に接続された雄ねじ部 1 3 1 とを有している。 拡大光学系 1 0 6 には、 この雄ねじ部 1 3 1 と嵌合する雌ねじ部 (図示せず) が設けられている。 作業者が操作ノブ 1 3 0を回耘させると雄ねじ部 1 3 1が回転し、 この結果、 雠 ねじ部とともに拡大光学系 1 0 6が左または右に移動する。 すなわち、 作業者は 、 切換機構 1 0 7の操作ノブ 1 3 0を手で回耘させることによって、 拡大光学系 1 0 6を左右のいずれの眼の前にも位置決めすることができる。 この左右の切換 機構 1 0 7は、 単に作業者の見やすさからどちらの眼を選択するために切り換え る場合に限らず、 他の種々の場合にも利用することができる。 例えば、 作業エリ ァが作業者の左側にあるときには、 拡大光学系 1 0 6を右眼側に配置することに よって、 左側の作業エリアを見易くすることができる。 この逆も同様である。 マイクロフォン 1 08は、 固定具 1 40によって、 表示ュニッ卜 1 03を頭部 に固定するための装着具 1 02に回転可能に固定されている。 このマイクロフォ ン 1 08は、 音声によって制御回路ユニット 1 05に指示を与えるための音声入 力手段として用いられる。
図 2は、 第 1実施例の身体装着型情報表示装置に使用可能な 3種類の光学系の 構成を示す図である。 図 2 (a) に示す第 1の拡大光学系 1 06 aは、 ハーフミ ラー 201の上方に設けられた拡大レンズ 202と、 透過型液晶パネル 203と 、 バックライト 204とを備えている。 液晶パネル 203は、 制御回路ユニット 1 05 (図 1 ) から与えられた画像僂号 (情報表示信号) に従って、 制御回路ュ ニット 1 05で生成された電子情報を含む画像を表示する。 液晶パネル 203に 表示された画像はバックライト 204からの光によって照明され、 この画像を表 す光 L 1が拡大レンズ 202に入射する。 拡大レンズ 202は、 液晶パネル 20 3の画像の拡大された虚像を作業者が観察し得るように、 光し 1を屈折する機能 を有する。
ハーフミラー 201は、 画像を表す光 L 1と、 外部の視野からの光 L 2とを合 成する光合成手段 (あるいはシースルー光学系) としての機能を有する。 すなわ ち、 ハーフミラー 2 Q 1は半透過性なので、 画像を表す光 L 1を反射するととも に、 外部の視野からの光し 2を透過させる。 従って、 作業者の眼には、 これらの 2種類の光 L 1, L 2が同時に入射する。 すなわち、 作業者は、 外界の様子 (例 えば作業対象物) と、 電子情報とを同時に見ることができる。 なお、 ハーフミラ 一 201は、 図 1 (b) に示すように両眼を覆う板状の部材で形成されている。 従って、 制御回路ュニッ卜 1 05で生成された画像を観察しない方の眼 (図 1 ( b) の例では右眼) では、 ハーフミラ一 201を通して外界のみが観察される。 このように、 外界からの光は両眼にバランスよく入射するので、 作業者が外界の 様子を認維しやすいという利点がある。
図 2 (b) に示す第 2の拡大光学系 1 06 bは、 拡大レンズ 202と液晶パネ ル 203との間に反射ミラー 205を挿入するとともに、 液晶パネル 203とバ ックライ卜 204の位置を作業者の頭部側に 90度回転させたものである。 この 構成により、 拡大光学系 1 06 bの垂直方向の寸法を大きくすることなく、 拡大 レンズ 2 0 2から液晶パネル 2 0 3の画像表示面までの距離を調整することが容 易である。 従って、 拡大光学系の設計自由度が大きいという利点がある。
121 2 ( c ) に示す第 3の拡大光学系 1 0 6 cは、 拡大レンズ 2 0 2とハ一フミ ラー 2 0 1の代わりに半透過性の凹面鏡 2 0 6を用いた構成を有している。 すな わち、 この半透過型凹面鏡 2 0 6は、 拡大光学系としての機能と、 シースルー光 学系としての機能を有している。 この凹面鏡 1 0 6は反射率が数十%程度の半透 過性の一様な)!みの部材で構成されている。 液晶パネル 2 0 3に表示された画像 の光 L 1は、 反射ミラー 2 0 5を介して凹面鏡 2 0 6に導かれ、 凹面鏡 2 0 6で 再度反射されて眼に入射する。 外界からの光し 2は、 凹面鏡 2 0 6をそのまま通 過して眼に入射する。 凹面鏡 2 0 6の曲面の半径方向は、 作業者の眼を通らない 方向に設定されている。 すなわち、 この第 3の拡大光学系 1 0 6 cは、 いわゆる オフ 'ァクシス (off-ax i s ) 光学系である。 拡大光学系をオフ■ァクシス光学系 として構成すれば、 光学要素の配置の自由度が大きくなるという利点がある。 以上のように、 第 1実施例の表示ユニット 1 0 3は、 ハーフミラ一 2 0 1 (半 透過型平面鏡) や半透過型凹面鏡 2 0 6などで実現されるシースルー光学系を備 えているので、 作業者が視線を移動せずに、 電子情報を含む画像と外界とを同時 に観察することができる。 また、 身体装着型情報表示装置が作業者の身体に装着 されるので、 作業者は両手を開放した状態で鴦子情報にアクセスすることができ る。 従って、 作業者は、 ®子情報を見ながら他の作業を行うことができ、 作業性 が向上するという効果がある。
図 3は、 制御回路ユニット 1 0 5を装着具 3 0 0に接続する様子を示す説明図 である。 制御回路ユニット 1 0 5は、 肩ひも状の装着具 3 0 0に着脱可能である 。 装着具 3 0 0のベルトには、 制御回路ユニット 1 0 5と係合する係合部 3 2 0 が設けられている。 図 3 ( b ) は、 装着具 3 0 0のベルトに制御回路ユニット 1 0 5が固定された様子を示している。 係合部 3 2 0には、 制御回路ユニット 1 0 5を固定するためのピン状の支持部材 3 0 6と、 制御回路ユニット 1 0 5が装着 具 3 0 0に係合されたことを制御回路ュニット 1 0 5に指示するためのピン状の 突起部 3 0 7とが設けられている。
制御回路ュニッ卜 1 0 5のケース 3 0 8には、 支持部材 3 0 6と突起部 3 0 7 にそれぞれ対応した開口部が形成されている。 制御回路ユニット 1 0 5を図 3 ( a ) の矢印の方向に差し込むと、 制御回路ユニット 1 0 5のケース 3 0 8に支持 部材 3 0 6が係合し、 制御回路ユニット 1 0 5力 ί装漦具 3 0 0に固定される。 ケ ース 3 0 8の内部の回路基板 3 0 9の上には、 突起部 3 0 7に対応する位 Sにパ ヮーマネジメントスィッチ 3 1 0が設けられている。 制御回路ユニット 1 0 5が 装着具 3 0 0に取り付けられると、 突起部 3 0 7がパワーマネジメントスィツチ 3 1 0をオン状態に切換える。 回路基板 3 0 9には、 図示しないパワーマネジメ ン卜回路が設けられている。 制御回路ユニット 1 0 5が装着具 3 0 0に取り付け られた状態では、 このパワーマネジメント回路が動作状態に切り換えられ、 制御 回路ュニッ卜 1 0 5の消费電力を比較的低く抑えるように電力消費量を制御する 。 具体的には、 プロセッサのスピードを遅くさせ、 不必要なインターフェイスに は電源を供給しないような制御が行なわれて、 内部の電源電池の寿命を向上させ ることができる。 一方、 制御回路ユニット 1 0 5力《装着具 3 0 0に取り付けられ ていない状態では、 パワーマネジメント回路が非動作状態に切り換えられ、 制御 回路ユニット 1 0 5の消费電力は比較的大きくなるが、 その処理速度はより早く なる。 すなわち、 突起部 3 0 7とパワーマネジメントスィッチ 3 1 0は、 パワー マネジメン卜切換手段としての機能を実現している。
図 4は、 第 1実施例の制御回路ュニッ卜 1 0 5をデスクトップコンピュータと して使用する塌合の実施形態の構成を示す図である。 図 4において、 制御回路ュ ニット 1 0 5は、 キーボード 3 0 1 と、 マウス 3 0 2と、 C R Tディスプレイ 3 0 3と、 プリンタ 3 0 4とに接続されている。 すなわち、 制御回路ユニット 1 0 5には、 これらの周辺装置と接続するためのコネクタやインタフェイス回路 (両 者をまとめて広義のインタフェイスと呼ぶ) が予め設けられている。 図 4の状態 では、 頭部に装着される表示ユニット 1 0 3 (図 1参照) は制御回路ユニット 1 0 5とは切り離されている。 従って、 図 4に示すシステムは、 通常のデスクトツ プコンピュータとして使用できる。 このように、 制御回路ユニット 1 0 5を作業 者の身体に装着しない状態でデスクトップコンピュータの一部として使用すると きは、 商用電源からの S源供給が可能である。 この際には、 パワーマネジメント 回路がオフ状態となり、 最も高速に演算処理のできるモードに設定される。 以上のように、 制御回路ユニット 1 0 5が装着具 3 0 0に取り付けられたとき には、 パワーマネジメント回路がオンするので、 電池寿命が向上する。 一方、 制 御回路ユニット 1 0 5が装着具 3 0 0から取り外されたときには、 パワーマネジ メント回路がオフされるので、 図 4に示すように、 高速な演算処理を行うデスク トップコンピュータとして使用することができる。 すなわち、 第 1実施例の身体 装着型情報表示装 は、 その使用形態に適した構成を有するコンピュータシス亍 ムを容易に構築することができる。
なお、 図 3および図 4の例では、 制御回路ユニット 1 0 5にポインティングッ ール 3 0 5が設けられている。 図 4に示すように身体に装着しない状態で制御回 路ユニット 1 0 5を使用する場合はマウス 3 0 2が優先され、 身体に装着した状 態で使用する塌合にはポインティングツール 3 0 5が動作する。 ポインティング ツール 3 0 5を有する制御回路ユニット 1 0 5を用いる場合には、 制御回路ュニ ット 1 0 5を作業者の胸の前に装着することが好ましい。 作業者が片手でポイン ティングツール 3 0 5のハンドルを回転すると、 ポインティングツール 3 0 5で あるハンドルは、 左右、 前後に傾けることにより、 その傾斜角度に応じた方向に 画面の選択位置を変えることが可能である。 例えば、 矢印などのポインティング 用のオブジェク卜を、 2次元の表示空間である表示画面の適当な位置に導くこと ができる。 選択後に確定する方法としては、 例えばハンドルの中心を押すことで 確定が可能である。
図 5は、 制御回路ユニット 1 0 5の回路構成を示すブロック図である。 C P U 4 0 1は、 通常のパーソナルコンピュータに使用されている 1 6ビットもしくは
3 2ビットのァドレス空間を有するマイクロプロセッサである。 C P U 4 0 "I を 動作させるための B I O S (ベーシック I ZOシステム) は、 フラッシュ R O M
4 0 2に予め格納されている。 この R O M 4 0 2の内容は、 R A M 4 0 3にコピ 一して記憶することができる。 R A M 4 0 3は、 Wi ndows オペレーティングシス 亍ム (マイクロソフ卜社の商標) を動作させるために十分なメモリ容量、 例えば 、 8 Mバイト以上のメモリ容量を有している。
表示デバイスをコントロールするためのコントローラとしては、 一般的な表示 規格である V G A ( 6 4 0 X 4 8 0の表示画素用のビデオグラフィックアダプタ ) 規格に従った VGAコントローラ 404が設けられている。 また、 液晶パネル 203 (図 2) の表示エリアの画像データを記憶するためのビデオメモリ (V— RAM) 405が設けられている。 VGAコントローラ 404からは、 ビデオメ モリ 405に記憶された画像を表す映像信号が出力される。 この映像信号は、 C RTディスプレイ 303 (図 4) と、 表示ユニット駆動回路 407とに出力され る。 表示ユニット駆動回路 407は、 表示ユニット 1 03の液晶パネル 203を 駆動するための回路である。
I Oコントローラ 408は、 ハ一ドディスクドライブ 409とフロッピーデ イスクドライブ 41 0とを含む各種の I インタフェイスを制御するための回 路である。 カード型のインタ一フェイスとしては、 PCMC I A (Personal Com puter Memory Card International Association) の規格に 拠し カー卜コン卜 ローラ 41 1が内蔵されている。 また RS— 232Cのシリアルインターフェイ ス 41 2も備えられている。 なお、 これらの回路 409, 41 0, 41 1, 41 2の少なくとも一部を省略することも可能である。
制御回路ユニット 1 05は、 さらに、 各回路の電力消费量を制御するためのパ ヮーマネジメント回路 420と、 再充電可能な電池を含む電源回路 421 とを備 えている。 電源回路 421は、 前述した図 3 (b) に示すように、 突起部 307 によってパワーマネジメントスィッチ 31 0がオン状態にされると動作し、 制御 回路ュニット 1 05の鴛カ消費量を低減するように各回路の動作を制御する。 制 御回路ュニット 1 05が身体に装着された状態においては、 電源回路4 2 1から の電源供給が可能な時間を長期化することができる。
図 6は、 第 1実施例の身体装着型情報表示装置をネットワーク端末として使用 する場合の概念図である。 図 6においては、 身体装着型情報表示装置がローカル エリアネットワーク (LAN) のホストコンピュータ 804に無線で接続されて いる。 身体装着型情報表示装置の P CMC I Aのカードスロッ卜には通信用のモ デム 430が挿入されており、 このモデム 430に つてホス卜コンピュータ 8 04と無線で接続されている。
このように、 身体装着型情報表示装置をホス卜コンピュータ 804と無線で接 続することによって、 処理時間の長い処理や、 大量のデータを取り扱う処理など をホストコンピュータ 8 0 4に依頼し、 比較的簡単な処理のみを身体装着型情報 表示装置で行うことができる。 従って、 シス亍ム全体としては、 身体装着型情報 表示装置に必要な電子情報を素早く表示することができるという利点がある。 図 7は、 第 1実施例の身体装着型情報表示装置をプラン卜設備の作業に用いた 場合の表示画面を示す説明図である。 この例では、 機械、 電気、 通信などの複数 の技術が関係するブラン卜の技術者が、 図面やデータをホストコンピュータから アクセスする場合の表示画面を示している。
図 7 ( a ) に示すように、 メイン画面には、 このプラン卜の機械関係情報と、 電気関係情報と、 通信関係情報と、 配管関係情報と、 その他の設備関係情報とを 選択するためのメニュー 7 0 1が用意されている。 たとえば、 電気技術者が現埸 で回路の確認等を行なう場合には、 技術者はまずメニュー 7 0 1から電気の櫊を ポインティングデバイスで選択する。 表示画面には図 7 ( a ) のように、 電気関 係の情報 (回路図、 部品図、 組立図等) を選択するための各種の選択キー 7 0 4 が表示される。 この表示内容が出された段階で、 機種名フィールド 7 0 2に、 下 部の文字配列累 7 0 3からポイン亍ィングツールによリ選択した文字を入力し、 また、 選択キー 7 0 4の中から必要な情報 (例えば回路図) を選択する。 この結 果、 図 7 ( b ) に示すような図面が表示ユニット 1 0 3に表示される。 なお、 具 体的な図面の番号などが判っている時には、 その番号を文字配列累 7 0 3を使い ポインティングツールで入力すると、 図 7 ( b ) のような回路図をすぐに選択し て表示することも可能である。 回路図などの情報は、 制御回路ユニット 1 0 5内 のハードディスク 4 0 9 (図 5 ) に格納されていても良く、 あるいは、 ホストコ ンピュータ 8 0 4に登録されていてもよい。 回路図などの情報がホストコンピュ ータ 8 0 4に登録されている埸合には、 図 6に示すように、 無線インタフ:!:イス を介してその情報がホストコンピュータ 8 0 4から身体装着型情報表示装置に転 送される。
図 7 ( a ) , ( b ) に示す画像は、 図 1および図 2に示す表示ユニット 1 0 3 に表示される。 従って、 技術者は、 表示された図面と、 作業現場に存在する回路 とを同時に観察しながら、 回路の確認作業等を行うことができる。
第 1実施例の身体装着型情報表示装置を使用すれば、 このように実際の回路を 確認しながら図面を見る場合にも、 必要とする図面を現場で容易に得ることがで きる。 また、 電子部品表などは非常に種類が多い力《、 それらの情報を電子化して 予めホストコンピュータ 8 0 4に登録しておけば、 電子回路の部品に関する情報 (たとえば L S Iのピン番号) などを、 作業現場において即座に知ることができ る。 この結果、 作業現場における作業性が大幅に向上する。 また、 作業対象物と 画像表示とを見るために視線を大きく変える必要がないので、 作業性がさらに向 上している。
図 8は、 第 1実施例の身体装着型情報表示装置を建設現場で用いる場合の概念 を示す図である。 図 8 ( a ) は、 システム全体の構成を示す概念図である。 身体 装着型情報表示装置には、 作業者の位置を検出するために、 衛星を使った位置検 出手段である携带型 G P S (グローバルポジショニングシステム) 8 0 2が接続 されている。 この携带型 G P S 8 0 2を通じて、 作業者が居る場所を衛星 8 0 1 から検出することができる。 検出された位置と方位とを示す信号は、 無線通信手 段を用いてホス卜コンピュータ 8 0 4 (または身体装着型情報表示装置) に伝送 される。 また、 建物 8 0 5の位置は、 ホストコンピュータ 8 0 4に予め登録され ている。
図 8 ( b ) は、 作業者と建物 8 0 5との位置関係を示す説明図である。 ホス卜 コンピュータ 8 0 4は、 携帯型 G P S 8 0 2 (または身体装着型锖報表示装置) から伝送された侰号に基づいて、 作業者と建物 8 0 5との位置関係を示す位置情 報を計算する。 この位置情報は、 作業者から建物 8 0 5に向かう方向と、 その建 物を監視している作業者との距離し、 と、 あおり角度 ω等を含んでいる。 ホスト コンピュータ 8 0 4は、 この位置情報に従って、 作業者の位置から見た状態にお ける建物 8 0 5の完成予想図 (パース) を表す画像情報を身体装着型情報表示装 置に伝送する。 この結果、 現場にいる作業者に装着されている表示ユニット 1 0 3の液晶パネル 2 0 3に、 建物 8 0 5の完成予想図が立体的に表示される。
このように、 図 8に示すシステムでは、 携带型 G P S 8 0 2とホストコンビュ ータ 8 0 4との協力によって、 現場にいる作業者の視点にあわせた建物 8 0 5の 完成予想図を作業者に観察させることができる。 この際、 作業者は外界を同時に 観察することができるので、 表示された完成予想図と外界の風蚤とを容易に比較 することができる。 例えば、 建物 8 0 5の着工前にこのような観察を実行すれば 、 建物 8 0 5とその周囲環境との調和の良否を判断することができる。 また、 建 物 8 0 5の完成後にこのような観察を実行すれば、 建物 8 0 5が設計通りに施工 されているか否かを判断することができる。
なお、 完成予想図の他に、 各工程ごとの図面や色情報などの種々の電子情報の も建築現場において外界と重ね合わせて観察することが可能である。
なお、 ホストコンピュータ 8 0 4との通信を行うこと無く、 制御回路ユニット 0 5が目標物 (建物 8 0 5 ) の画像を拡大 .縮小して表示ュニット 1 0 3に表 示することによって、 目欏物を外界と翻和したサイズで表示することも可能であ る。 こうすれば、 外界と調和した画像をより早く表示することが可能である。 このように、 図 8に示すシステムでは、 建築物の画像を現場で表示し、 外界と 重ね合わせて観察することができるので、 建築物の計画時に現場の環境との調和 を考慮して、 計画の良否を容易に判断することができる。 また、 建築中に計画と の一致の有無を容易に確認することができる。
図 9は、 第 1実施例の身体装着型情報表示装置をプラント配管の保守等の作業 に適用した例を示す図である。 図 9 ( a ) は、 複雑な配管系の実際のレイアウト であり、 図 9 ( b ) は実際の配管系のレイアウトと、 この配管系に関する電子情 報とを重ねあわせた表示画面である。
作業者は、 複雑な配管系の現場において、 各配管内の流体の種類や、 各配管の 流れ方向、 各配管が現在使用中であるか否か、 等の種々の事項を即座に判断する ことは難しい。 このとき、 図 9 ( b ) に示すように、 配管系に関する電子情報を 、 外界の配管系と重ねあわせるような調和した状態で表示すれば、 配管系に関す る各種の情報を直ちに知ることができる。 この際、 例えば、 作業者が、 まずタン ク 9 0 1などの大きな目摞物の位置に視線を移動させる。 そして、 この目棵物の 外形を示す画像 (図 9 ( b ) では破線で示す) を表示ユニット 1 0 3に表示させ る。 この外形画像と実物のタンク 9 0 1 との位置合せを行い、 必要に応じて外形 画像を拡大■縮小する処理をホス卜コンピュータ 8 0 4 (または制御回路ュニッ ト 1 0 5 ) に実行させる。 この画像の拡大 ·縮小は、 表示ユニット 1 0 3内に表 示した画像データを拡大 ·縮小することによって実現される。 画像を拡大すると きには、 元の画素の間をそれぞれ補間することによって拡大画像を形成する。 ま た、 画像を縮小するときには、 画素を間引きすることによって縮小画像を形成す る。 このように、 第 1実施例では、 画像サイズを自由に選択することが可能であ る。 従って、 ユーザは、 表示画像のサイズを外界の対象物のサイズと容易に合致 させることができる。
この位置合せ終了後に、 この配管系に関する電子情報を表示ユニット 1 0 3に 表示する。 この電子情報は、 必要に応じてホストコンピュータ 8 0 4から身体装 着型情報表示装置に伝送される。 図 9 ( b ) の例では、 配管内の流体の種類 (窒 素、 酸素、 Aガス) と、 配管の流れの方向と、 配管内のガスの種類および内圧が 、 配管の位置に合わせて表示される。
このように、 配管系の現場において、 実際の配管部分と電子化された情報を重 ねて観察することにより、 配管の流れの方向と使われている配管かどうか、 また 各配管に流れているガスの種類は何か等の情報を容易に可視化することが可能で ある。 また、 修理すべき配管の位置などを適確に知ることができ、 それにより、 作業者が間違えて作業することを防止できるので、 より確実に安全に作業をする ことができる。
図 1 0は、 第 1実施例の身体装着型情報表示装置を工業計測に適用した例を示 す図である。 この例では、 身体装着型情報表示装置を超音波センサなどのセンサ 部 9 1 0に接続して、 地中に埋設された水道管の位置を検査するための計測シス 亍厶として使用している。 作業者は、 センサ部 9 1 0を押して地上をスキャンさ せる。 スキャンした結果の映像は、 表示ユニット 1 0 3に表示されるので、 作業 者はセンサ部 9 1 0をスキャンさせながらその結果を観察することができる。 従来は、 このような場合に、 スキャンによって得られた映像を、 他の場所に設 置したモニタに表示していたので、 センサ部 9 1 0をスキャンさせる作業者とは 別に、 モニタを観察する作業者が必要であった。 また、 モニタを観察する作業者 から、 センサ部 9 1 0をスキャンさせる作業者 —水道管の検出の有無を口頭で合 図して、 水道管の埋設位置を教える必要があつ ■:。 これ 对して、 図 1 0に示す 水道管の検査方法では、 一人の作業者がセンサ部 9 1 0のスキャンとその結果の 画像の観察とを同時に行うことができるので、 より容易に、 かつ、 より確実に水 道管の位置を確認することができる。 また、 作業時間を短縮することもできると いう利点もある。
センサとしては、 肉眼では直接に観察できない対象物を検出するための各種の センサを利用可能である。 このようなセンサを用いた工業計測の他の例としては 、 溶接部の探傷検査などがある。 第 1実施例の身体装着型情報表示装置を工業的 な計測や検査に利用すれば、 作業者は、 検出された目標物の画像を直ちに観察す ることができるので、 効率良く、 かつ確実に計測や検査を行うことができる。 図 1 1は、 第 1実施例の身体装着型情報表示装置を施設の警備に用いる際の表 示画面を示す図である。 警備員が施設の内外を警備する場合には、 複数の地点に 警備用の監視カメラが設置されていることが多い。 警備所には複数台のモニタが 設置されており、 図 1 1に示すように各モニタに映像が表示され、 警備員がこれ を常時監視している。 警備貝は、 一定時間毎にビルの内外を巡回する。 従来は、 巡回中にモニタによる監視を継続したい場合には、 他の警備員が警備所のモニタ で監視していた。
これに対して、 第 1実施例の身体装着型情報表示装置を用いて巡回警備を行え ば、 巡回中の警備員が図 1 1に示すような各地点の映像を身体装着型情報表示装 置に表示して観察しながら、 施設を巡回することができる。 従って、 巡回中にお いても、 警備員がいる場所とは異なる場所で発生した異常事態を直ちに認識して 対処することが可能である。
B . 第 2実施例
図 1 2は、 本発明の第 2実施例としての身体装着型情報表示装置を示す概念図 である。 この身体装着型悄報表示装置は、 ヘルメット 1 0 1の前方に単眼用の表 示ュニッ卜 1 0 3 aを有しており、 ヘルメット 1 0 1の後方には制御回路ュニッ 卜 1 0 5 aが固定されている。 表示ュニッ卜 1 0 3 aは、 ヘルメット 1 0 1の前 方に設けられている支持部 1 5 0の溝1 5 2に沿って移動可能な状態で支持部 1
5 0に係合されている。 すなわち、 作業者は、 表示ユニット 1 0 3 aを手で押し て移動させて、 左右の眼のいずれか一方の前に位置決めすることができる。 作業 者の腰部には、 電池 4 3 0力《装着されている。 こうすることにより、 制御回路ュ ニット 1 05 aの重量を軽減して表示ュニット 1 03 aとの重量的なバランスを 取り、 頭部に装着しやすいように工夫されている。
この第 2実施例の構成によれば、 表示ュニット 1 03 aが配置されない方の眼 は、 ハーフミラーを介さずに外界を見るので、 第 1実施例に比べて外界をより明 瞭に観察することができるという利点がある。 一方、 第 1実施例では、 表示ュニ ット 1 03に表示された電子情報と外界とを、 よリバランスした状態で観察でき るという利点がある。
C. 第 3実施例
図 1 3は、 本発明の第 3実施例としての身体装着型情報表示装置を示す概念図 である。 この身体装着型情報表示装 Sは、 図 1に示す第 1実施例を変形して、 制 御回路ュニット 1 05 bとインタフェイスュニッ卜 1 1 O bとを配線で接続せず に、 赤外線を発光する赤外線 L ED 501によって制御回路ュニッ卜 1 05 bか らインタフェイスユニット 1 1 0 bに各種の信号を伝送するようにしたものであ る。 なお、 赤外線以外の電磁波でインタフェイスユニット 1 1 O b (または表示 ユニット 1 03) と制御回路ユニット 1 05 bとの間の信号の伝送を行うように することも可能である。
この第 3実施例では、 表示ュニッ卜" I 03と制御回路ュニット 1 05 bとの間 の配線を頭部 (ヘルメッ卜 1 01 ) から下方に垂らす必要がないので、 作業者が 手作業を行い易いという利点がある。
図 1 4は、 赤外線を用いた信号伝送を行うための制御回路ユニット 1 05 b内 の変調部と、 インタフヱイスユニット 1 1 O b内の復調部の回路構成を示すプロ ック図である。 CRT 406に画像を表示するためのコンポジッ卜映像信号は、 コンポーネント映像信号 R G日と、 水平同期信号と垂直同期信号とを含んでいる 。 例えば VGAのコンポジット映像信号の周波数は 25 MH z~3 QMH zの範 囲である。 このような映像信号を直列 (ベースバンド伝送) で伝送する場合には 、 約 30MH zのバンド幅が必要になるが、 このバンド幅の信号を電力的に小型 な身体装着型情報表示装置伝送することは困難な場合が多いであろう。 また、 約 3 OMH Zのクロックをケーブルで伝送すると、 外部に放射するノイズも大きい 。 そこで、 第 3実施例においては、 映像信号を多相に時間軸伸長して (すなわち 、 映像信号をパラレルな複数の信号に順次展開して) 伝送する。
図 1 4の回路において、 制御回路ュニット 1 05 bの表示ュニッ卜駆動回路 4 07には、 映像信号 RGBを並列な多相信号として伝送するための複数の赤外線 LED501が接続されている。 制御回路ユニット 1 05 bには、 さらに、 同期 信号を伝送するためのデータコントローラ 41 3とモジユレ一タ 521 とが設け られている。
インタフェイスュニッ卜 1 1 0 bには、 各赤外線 L ED 501に対応して、 赤 外線センサ 502 (受光素子) と、 セレクタ 503と、 フレームメモリ 504と 、 ラッチ 506と、 D— Aコンバータ 507とが設けられている。 セレクタ 50 3は、 赤外線センサ 502からの入力信号と、 ディスプレイコントローラ 505 からの入力信号との一方を選択的に出力する。 インタフェイスユニット 1 1 O b には、 さらに、 ディスプレイコントローラ 505に接続されたコマンドレジスタ 51 1が設けられている。 ディスプレイコントローラ 505は、 表示ユニット 1 03内のバックライト回路 509とパワーマネージメント回路 51 0に接続され ている。
制御回路ュニッ卜 1 05 b内のバスに接続された VGAコントローラ 404は 、 表示ュニット駆動回路 407に約 3 OMH Zの周波数の映像信号を出力する。 表示ュニット駆動回路 407に入力された映像信号は、 内部の図示しない相展開 回路において R G Bの 3色の映像信号に分離されるとともに、 各色の映像信号が 複数の信号 (以下、 並列映像信号と呼ぶ) に順次多相展開される。 これら複数の 並列映像信号は、 複数の赤外線 L ED 501にそれぞれシリアルに転送される。 赤外線 LED 501の数 (すなわち多相展開の数) は、 表示ュニッ卜 1 03に 使用されている液晶パネルの映像信号入力の数と、 赤外線し ED501が変調可 能な周波数の範囲から決定される。 表示ュニット 1 ◦ 3の液晶パネル 203とし て周辺回路内蔵型のポリシリコン T F T液晶パネルを用いる場合には、 展開され た複数の並列映像信号に従って液晶パネルに画像を表示できる。 また、 例えば赤 外線 LEDは、 約 1 ~4MH zの範囲の周波数において変調が可能である。 この 周波数の範囲の制限内において、 元の映像信号が液晶パネルの入力数と一致した 数の並列映像信号に展開されて伝送される。 たとえば、 液晶パネルを駆動する映 像信号の相数が 1 2相であれば、 1相あたりの周波数は約 2 . 5 M H z (= 3 0 Z 1 2 ) の倌号带域となる。 従って、 1 2個の赤外線 L E Dを用いて多相の並列 映像信号を並列に伝送することができる。
これらの多相の並列映像信号を同期させるための同期信号は、 モジユレ一タ 5 2 1を介してタイミングデモジュレータ 5 0 8に伝送される。 タイミングデモジ ユレータ 5 0 8には、 垂直同期信号と水平同期信号とともに、 垂直の輝線消去 ( 垂直ブランキング) の時間に重畳されたコマンド信号も伝送される。 このコマン ド信号は、 一旦コマンドレジスタ 5 1 1に記憶される。 ディスプレイコントロー ラ 5 0 5は、 このコマンド信号に従って、 バックライト回路 5 0 9の明るさをコ ントロールするための信号や、 表示ユニット 1 0 3内のパワーマネージメント回 路 5 1 0をコントロールするための信号を出力する。
コネクタユニット 1 1 0 bの各赤外線センサ 5 0 2は、 対応する赤外線 L E D 5 0 1からの赤外線を受光して並列映像信号を再現する。 こうして受信された並 列映像信号は、 セレクタ 5 0 3を介してフレームメモリ 5 0 4に害き込まれる。 このフレームメモリ 5 0 4は、 1画素 · 1色当たり 8ビッ卜で 2 5 6階調の画像 を表す画像データを記憶する。 このフレームメモリ 5 0 4は、 液晶パネルの各コ ラム線 (ビット線とも呼ぶ) に対応する画像部分をそれぞれ記憶する容量を有し ている。 フレームメモリ 5 0 4のアドレスは、 ディスプレイコントローラ 5 0 5 によって制御される。 フレームメモリ 5 0 4からのデジタル出力は、 ラッチ 5 0 6を介して D— Aコンバータ 5 0 7でアナログ信号に変換される。 すなわち、 複 数の並列映像信号が複数の D— Aコンバータ 5 0 7から出力される。 複数の並列 映像信号は、 複数に分割された液晶パネルの映像信号入力端子に入力される。 こ の結果、 表示ユニット 1 0 3の液晶パネルに映像が表示される。
なお、 赤外線によるデジタル伝送技術としては、 米国のヒューレットパッカー ド社が提唱している I r D A ( I nfrared Data Assos iat i on ) の規格に準じた方 式の伝送を利用することができる。
図 1 5は、 第 3実施例の身体装着型情報表示装置に適用されるインターフェイ ス回路の他の構成を示すブロック図である。 図 1 5の回路では、 映像信号を F M 多重伝送方式で伝送する。
図 1 5 (a) は、 制御回路ユニット 1 05 bの変調部の構成を示す。 制御回路 ユニット 1 05 bの変調部は、 NTSCエンコーダ 530と、 同期信号発生部 5
32と、 バーストゲート 534と、 3つの電圧制御発振器 (VCO) 536と、 ミキシング回路 542と、 3つのドライバ回路 538と、 3つの赤外線 LED5
40 (フォトダイオード) とを有している。 NTSCエンコーダ 530は、 RG Bの 3つの映像信号から、 1つの輝度信号 Yと、 2つの色差信号 (B— Y) , ( R-Y) を生成する。 3つの色差信号は、 それぞれの VCO 536に入力されて FM変調される。 第 2の色差信号 (R— Y) は、 バーストゲート 534から出力 された垂直同期信号 V SYNCとともにミキシング回路 542でミキシングされ る。 ミキシングされた FM変脚信号はドライバ回路 538に入力され、 ドライバ 回路 538はこれに応じて赤外線 L ED 540を駆動して赤外線を出射する。 こ の結果、 第 2の色差僂号 (R— Y) は、 垂直同期信号 V SYNCと重量された F M変賙信号としてインタフェイスユニット 1 1 0の復調部に伝送される。 同様に 、 輝度信号 Yは水平同期信号 H S YN Cと重鱟された FM変翻信号としてインタ フェイスユニット 1 1 0 bの復調部に伝送される。 また、 第 1の色差信号 (B— Y) は、 それ自身の FM変腴信号としてインタフェイスュニッ卜 1 1 0 bの復調 部に伝送される。
図 1 5 (b) は、 インタフェイスュニッ卜 1 1 0 bの復調部の構成を示してい る。 インタフェイスュニット 1 1 0 bの復調部は、 受光素子としての 3つの赤外 線センサ 550 (フォトトランジスタ) と、 3つの増幅器 552と、 3つの波形 整形回路 554と、 3つの FM復調回路 556と、 水平同期分離回路 558と、 マトリクス変換回路 560と、 垂直同期分離回路 562とを備えている。 3つの 赤外線センサ 550で受光された FM変調信号は、 それぞれの増幅器 552で増 幅され、 波形整形回路 554で整形された後に FM復調回路 556で復調される 。 水平同期分離回路 558は、 復調された第 1の信号から水平同期信号 HSYN Cを分離する。 また、 垂直同期分離回路 562は、 増幅器 552で増幅された第 3の信号から垂直同期信号 V SYNCを分離する。 マトリクス変換回路 560は 、 輝度信号 Yと 2つの色差懦号 (B— Y) , (R-Y) から、 RGBの 3色の映 像信号を再現する。
図 1 5に示すように、 FM変復調方式を用いた回路では、 図 1 4に示すような フレームメモリ 504が不要であり、 全体の回路構成が図 1 4の回路に比べて簡 単になる。 また、 図 1 5の回路では、 図 1 4の回路に比べて発侰器 (図 1 5の例 では赤外線 LED 540) と受儅器 (赤外線センサ 550) の数を低減できると いう利点がある。
ところで、 典型的な場合には、 輝度信号 Yと 2つの色差信号のうちで、 輝度信 号の変化が最も激しく、 第 2の色差信号 (R— Y) の変化は最も緩やかでぁリ、 第 1の色差信号 (B— Y) の変化はその中間である。 従って、 上述の FM変調方 式において、 輝度信号 Yの搬送波の周波数を最も高く設定し、 第 1の色差信号 ( B-Y) の搬送波の周波数を中間に設定し、 第 2の色差信号 (R— Y) の搬送波 の周波数を最も低くすることができる。 例えば、 輝度信号 Yの搬送波の周波数を 38MH z 第 1の色差信号 (B— Y) の搬送波の周波数を 1 8MH z、 第 2の 色差信号 (R— Y) の搬送波の周波数を 8MH zに設定することができる。 また 、 それぞれの蒂域を、 両側にそれぞれ約 4 MH z程度にすれば、 3つの信号の带 域が重なることがない。 こうすれば、 3つの信号を周波数多重分割して伝送する ことができる。 このように周波数多重分割して伝送する墦合には、 発信器 (図 1 5の例では赤外線 LED 540) と受信器 (赤外線センサ 550) とをそれぞれ 1つずつにすることも可能である。
このように、 図 1 3ないし図 1 5に示す第 3実施例では、 制御回路ユニットと 表示ュニッ卜との間の信号の伝送に電磁波を用いることによって配線を省略して いるので、 作業者の手作業の作業性を向上させることができる。
D. 各種の入力手段
上述した第 1ないし第 3実施例の身体装着型情報表示装置に対しては、 以下の ような種々の入力手段を用いた入力を行うことが可能である。
図 1 6は、 磁界を利用した入力手段 (磁気式ポインティングデバイス) を示す 説明図である。 図 1 6 (a) において、 表示ユニット 1 03の両側の位置におい て、 装着具 1 02に 2つの励磁コイル 602, 604が設けられている。 また、 作業者の指には磁気を利用した指輪状の指示装置 606が装着されている。
2つの励磁コイル 602, 604は、 それぞれ X方向と Y方向の位置検出のた めの磁界をそれぞれ発生する。 これらの 2つの励磁コイル 602, 604は、 交 互に周期的に通電されてそれぞれの磁界を発生する。 X方向と Y方向は、 作業者 の正面の視界の水平方向と垂直方向に相当する。 すなわち、 X方向と Y方向は、 表示ュニッ卜 1 03に表示される画像の水平方向と垂直方向にそれぞれ対応して いる。
図 1 6 (b) は、 作業者の指に装着されている指示装置 606の構成の一部を 示す概念図である。 指示装置 606は、 電源 61 0 (典型的には電池) と、 抵抗 61 1と、 磁気抵抗素子 61 2と、 増幅器 61 4と、 A— D変換器 61 6と、 プ ッシュスィッチ 61 8 (機械的スィッチ) と、 変調回路 620と、 赤外線 LED 622とを備えている。 図 1 6 (b) には、 励磁コイル 604によって生成され た磁界が破線で示されている。 磁気抵抗素子 61 2の抵抗は、 素子 61 2を貫通 する磁界の強度に応じて変化する。 従って、 磁気抵抗素子 61 2の両端の電圧も 磁界強度に応じて変化する。 この電圧は増幅器 61 4によって増幅され、 A— D 変換器 61 6でデジタルデータに変換される。 変調回路 620は、 このデジタル データに応じて赤外線 LED622の点滅を制御することによって、 赤外線 L E D622から変調された赤外線を発生させる。 表示ユニット 1 03には、 図示し ない赤外線センサ (受光素子) が設けられており、 また、 制御回路ユニット 1 0
5 (図 1 6では図示を省略している) には復調回路が設けられている。 復調回路 は、 赤外線 LED622から伝送された信号を復調することによって、 指示装置
606の X方向の位置を決定する。 なお、 指示装置 606が発生する変調信号と 、 指示装置 606の X方向位置との関係は、 予め制御回路ユニット 1 05内に登 録されている。
Y方向の位置の検出のための回路も図 1 6 (b) に示すものと同様に構成され ている。 但し、 磁気抵抗素子の向きは、 X方向用の回路と直交するように設定さ れている。 また、 プッシュスィッチ 61 8は、 指示装置 606に 1つだけ設けら れている。
作業者の指が傾いており、 従って、 指示装置 606が傾斜している場合には、 それぞれの磁気抵抗素子 6 1 2を莨通する磁界の強度も変化するので、 位置の決 定に誤差を生じる原因となる。 この場合には、 X方向と Y方向のそれぞれの磁気 抵抗素子 6 1 2の抵抗変化に傾斜角分の補正を加えることによって、 傾斜による 影響を除去することも可能である。
こうして、 指示装還 6 0 6の X方向と Y方向の位置がそれぞれ決定され、 これ に応じて画面上にポインタが表示される。 作業者は、 指示装置 6 0 6が装着され た手を移動させることによって、 画面上に表示されたポインタの位置を移動させ ることができる。
プッシュスィッチ 6 1 8は、 マウスボタンと同様に、 作業者がコンピュータに 指示を与えるために使用される。 すなわち、 表示ユニット 1 0 3の画面上におい てメニューが表示されている状態において指示装置 6 0 6のポインタをメニュー 上に移動してプッシュスィッチ 6 1 8を押すと、 そのメニューで示される処理が 実行される。
このように、 2次元的な磁界を用いた入力手段を利用すれば、 身体装着型情報 表示装置において 2次元的なポインティングデバイスを比較的容易に実現するこ とができる。 さらに、 励磁コイルと磁気抵抗素子を 3組使用すれば、 3次元的な ポインティングデバイスを実現することも可能である。
このような、 2次元的あるいは 3次元的なポインティングデバイスを有する身 体装着型情報表示装置を用いれば、 外界と重ねられた電子情報の中から作業者が 所望の情報を選択して、 選択された情報に関する追加の情報を表示させたり、 所 定の処理を実行させたりするための処理を容易に行うことができる。 特に図 1 6 に示す入力方式では、 入力手段を手で保持している必要がないので、 作業者が両 手を他の作業に使用している状態 (例えば物を保持している状態) でコンビユー タへの指示を行うことができる。 手を用いないで入力する方式としては、 音声に よる入力も考えられる。 しかし、 図 1 6に示す入力方式によれば、 音声による入 力に比べて正確な指示を行うことができるという利点がある。 図 1 7は、 赤外線を利用した入力手段 (光学式ポインティングデバイス) を示 す説明図である。 図 1 7 ( a ) では、 表示ュニット 1 0 3に C C Dカメラ 6 3 0 が設けられており、 また、 作業者の指には指示装置 632が装着されている。 指 示装置 632は、 赤外線し EDと、 プッシュスィッチと、 電池とを有している。
CCDカメラ 630は、 表示ュニッ卜 1 03に表示された画像の虚像の画角を 包含する画角を有する撮像レンズを有している。 CCDカメラ 630は、 作業者 の目線に連動して画像を取り込むように、 表示ユニット 1 03のほぼ中央上部に 配置されている。 指示装置 632から出射された赤外線は、 CCDカメラ 630 でスポット状の画像として撮像される。 そして、 このスポットの位置が、 表示ュ ニット 1 03の画面上に表示される。 従って、 作業者は、 表示ユニット 1 03に 表示された電子情報の上に、 指示装置 630の位置を示すスポッ卜が表示された 状態で、 外界と電子情報とを観察することができる。 例えば、 電子情報として複 数のオブジェク トを有する画像を表示した状態において、 指示装 S630のスポ ッ卜位置で指示されたォブジェク 卜を選択して、 所定の処理 (例えばそのォブジ ェク 卜の詳細な仕様の表示) を自動的に実行するようにすることも可能である。 また、 電子情報として図 1 7 (b) に示すような入力メニューを表示すれば、 このメニューの上に指示装置 606のスポットを移動させてプッシュスィッチを 押すことによって、 メニューを選択して所定の処理を実行させることができる。 図 1 6や図 1 7に示す遠隔操作方式のポインティングデバイスを用いることに よって、 外界と重ねて表示された電子情報を観察しながら、 作業者がその画像内 の 2次元的な位置を容易に指定して、 所望の処理を実行することができる。 図 1 6, 図 1 7に示す入力手段では、 特に、 作業者の両手を開放状態にしておけるの で、 他の作業中にも画面内の位置を指示できるという利点がある。 なお、 図 1 7 に示す入力方式では、 図 1 6に示す入力方式に比べて簡単な構成でより正確な 2 次元位置の入力を行うことができる。
図 1 8は、 CCDカメラを利用した入力手段を示す説明図である。 図 1 8 (a ) に示すように、 この CCDカメラ 640はバーコード 650を読取るバーコ一 ド読取り手段として使用される。 図 1 8 (b) は、 CCDカメラ 640の内部構 成を示す概念図である。 CCDカメラ 640は、 CCDアレイ 642と、 ハーフ ミラ一 644と、 撮像レンズ系 646と、 レーザダイオード 648とを備えてい る。 レーザダイオード 648が発生した光はハーフミラー 644で反射され、 撮 像レンズ 6 4 6を介してバーコ一ド 6 5 0を照射する。 レーザーダイオード 6 4 8は、 レーザーポインタとしての機能も有しており、 作業者は、 その光点の位置 を視認することができる。 作業者は、 レーザーの光点がバーコード 6 5 0上にあ ることを確認してからバーコ一ドの铣取り開始を指示する。 バーコ一ド 6 5 0で 反射された光は、 撮像レンズ 6 4 6で集光され、 ハーフミラー 6 4 4を通過して C C Dアレイ 6 4 2で受光される。 すなわち、 発光部であるレーザダイオード 6 4 8と、 撮像部である C C Dアレイ 6 4 2とは、 光学的に等価な光軸上に配置さ れている。
図 1 8 ( a ) にも示されているように、 C C Dカメラ 6 4 0は、 作業者の目線 に連動してバーコード 6 5 0の画像を取り込むように設定されている。 すなわち 、 作業者が、 品物に添付されているバーコード 6 5 0を目視して読取り開始を指 示すると、 そのバーコード 6 5 0が C C Dカメラ 6 5 0で読取られる。 このよう に、 図 1 8に示す実施例では、 铳取リ対象とするバーコードを作業者が観察した 状態において C C Dカメラ 6 4 0で認識するようにしたので、 任意の場所にある バーコ一ドを選択的に容易に認識することができる。
読取られたバーコード 6 5 0は、 制御回路ユニット 1 0 5 (図 1 8では図示を 省略) によって解铳されてコード化信号が生成される。 バーコード 6 5 0のコー ド化信号と、 バーコード 6 5 0が添付されている品物との対応関係は、 制御回路 ユニット 1 0 5内の記憶装置 (またはホス卜コンピュータ 8 0 4の記憶装置) に 記憶されている。 制御回路ユニット 1 0 5は、 バーコード 6 5 0で示される品物 の情報を読み出して、 表示ユニット 1 0 3に表示する。 従って、 作業者は、 作業 現場においてバーコ一ド 6 5 0を目視するだけで、 そのバーコ一ド 6 5 0が付さ れた品物に関する各種の情報を表示させて観察することができる。 品物の情報と しては、 製造日、 ロット番号等が考えられる。 その品物が包装されている場合に は、 その品物のカラーイメージを表示するようにしてもよい。 こうすれば、 流通 の分野において、 必要な品物を集荷する際に間違いなく品物を選択することがで きる。 また、 逆に品物を倉庫に収納する場合にも、 指定された正しい位置に容易 に収納することができる。
図 1 9は、 図 1 8に示す C C Dカメラ 6 4 0を用いた入力手段を利用した作業 の一例を示す説明図である。 図 1 9 ( a ) は、 エンジンの製造工場における製造 ラインを示しており、 図 1 9 ( b ) はエンジンの前に掲示されている 2次元バー コードの一例を示している。 この例のように、 バーコードとしては 2次元バーコ ードを用いることも可能であ y、 また、 バーコードが品物に付着している必要は なく、 何らかの方法でバーコ一ドが品物に関速付けられていればよい。
図 1 9のような例においても、 作業者は 2次元バーコードを目視して C C D力 メラ 6 4 0で统取ることによって、 そのバーコードに関連付けられたエンジンに 関する情報を表示させて観察することができる。
このように、 身体装着型情報表示装置にバーコ一ド読取リ手段を設けるように すれば、 作業者が現場において身体装着型情報表示装置でバーコ一ドを铳取るこ とによって、 そのバーコードに関連付けられた情報と品物とを同時に観察するこ とができる。 従って、 その品物の取り扱いを間違いなく行うことができるという 利点がある。
図 2 0は、 視線入力による表示のオン オフ制御を示す説明図である。 図 2 0 ( a ) は、 視線入力による制御を実現するための表示ユニット 1 0 3 cの構成を 示している。 この表示ユニット 1 0 3 cは、 図 2 ( b ) に示す光学系に、 赤外線 L E D 6 5 0と赤外線センサ 6 5 2とを設けた構成を有している。 赤外線 L E D 6 5 0から出射した赤外線は、 反射ミラー 2 0 5で反射され、 拡大レンズ 2 0 2 を通過してハーフミラー 2 0 1で再び反射された後、 ユーザの眼に入射する。 赤 外線センサ 6 5 2は、 ユーザの角膜で反射された赤外線を検出する。
図 2 0 ( b ) は、 表示ユニット 1 0 3に表示される画面を示している。 液晶パ ネル 2 0 3の表示エリアの上方には、 視線入力による表示のオンノオフ制御のた めの位置 6 5 4が予めマークされている。 ユーザがこの位置 6 5 4に視線を移動 させると、 赤外線センサ 6 5 2によってその旨が検出され、 液晶パネル 2 0 3に おける表示のオン Zオフが切り換えられる。
なお、 オン オフ制御を実行させる視線の位置 6 5 4は、 表示エリアの外側で あって、 かつ、 通常は作業者が見ない方向に設定しておくことが好ましい。 こう すれば、 作業者が誤って表示状態を切リ換えてしまうことを防止することができ る。 なお、 オン 才フ制御のための視線位置 6 5 4の代わりに、 「ディスプレイ 切換」 等のマークを表示しておき、 作業者がそのマークを見た時に表示状態のォ ン オフを切り換えるようにしてもよい。
このように、 視線入力によって液晶パネル 2 0 3の表示のオン Zオフを切換え る表示切換手段を備えるようにすれば、 視線の移動だけで外界のみを観察するよ うにしたリ、 外界と電子情報を重ねて観察するようにしたりする制御を容易に実 現することができる。 また、 特に、 表示状態の切換えのために、 手による操作を 必要としないので、 作業者が手を用いる作業を行っている最中にも、 必要に応じ て表示状態を容易に切り換えることができるという利点がある。 産業上の利用可能性
この発明にかかる身体装着型情報表示装置は、 コンピュータで生成された電子 情報と外界とを同時に観察する種々の場合に適用することが可能であり、 例えば プラントや建築物の計画 ·検査、 工業的な計測■検査、 警備、 および、 工業的 - 商業的な品物の集配管理等に適用可能である。

Claims

請求の範囲 請求項 1 . ユーザの身体に装着される身体装着型情報表示装置であって、 表示されるべき情報を生成するコンピュータュニッ卜と、
前記コンピュータュニッ卜をユーザの身体の一部に装着するための第 1の装着 手段と、
前記ユーザの頭部に装着された状態において、 前記コンピュータュニッ卜で生 成された情報を前記ユーザが観察し得るように表示するための表示ュニッ卜と、 前記表示ュニットを前記ユーザの頭部に装着するための第 2の装着手段と、 を 備え、
前記表示ュニットは、
前記コンピュータユニットで生成された情報を表示するための画像表示素子 と、
前記画像表示素子に表示された画像の拡大された虚像が前記ユーザによって 観察されるように前記画像を表す第 1の光を屈折させ、 前記第 1の光を外界の視 野から入射する第 2の光と共に前記ユーザの眼に入射させる光学系と、 を備える 身体装着型情報表示装置。 請求項 2 . 請求項 1記載の身体装着型情報表示装置であって、
前記光学系は、
前記画像表示素子に表示された画像の拡大された虚像が前記ユーザによって観 察されるように前記画像を表す第 1の光を屈折させる拡大光学系と、
前記第 2の光を通過させて、 前記第 1の光と共に前記ユーザの眼に入射させる シースルー光学系と、 を備える身体装着型情報表示装置。 請求項 3 . 請求項 2記載の身体装着型情報表示装置であって、
前記拡大光学系は、 1つの眼に前記第 1の光を供給するための単眼用光学系で あり、 前記シースルー光学系は、 前記ユーザの両眼の前方に配置された半透過型平面 鏡であり、
前記表示ュニッ卜は、 さらに、
前記拡大光学系を前記ユーザの左右の眼の前方のいずれにも移動させて配置す ることが可能な切換手段を備える、 身体装着型情報表示装置。 請求項 4 . 销求項 2記載の身体装着型情報表示装置であって、
前記拡大光学系と前記シースルー光学系は、 1つの眼に前記第 1 と第 2の光を 供給するための単眼用光学系であり、
前記表示ュニッ卜は、 さらに、
前記拡大光学系と前記シースルー光学系とを前記ユーザの左右の眼の前方のい ずれにも移動させて配置することが可能な切換手段を備える、 身体装着型情報表 示装置。 請求項 5 . 請求項 1記載の身体装着型情報表示装置であって、
前記光学系は、 前記ユーザの眼の前方に配置された半透過型凹面銃である、 身 体装着型情報表示装置。 請求項 6 . 請求項 1ないし請求項 5のいずれかに記載の身体装着型情報表示装 置であって、
前記コンピュータュニッ卜は、
¾源と、
前記電源の消 »®力を制御するためのパワーマネジメン卜手段と、
前記コンピュータュニッ卜が前記第 1の装着手段に装着されているか否かに応 じて、 前記パワーマネジメント手段の動作状態を切り換えるためのパワーマネジ メント切換手段と、 を備える身体装着型情報表示装置。 請求項 7 . 請求項 1ないし請求項 6のいずれかに記載の身体装着型情報表示装 置であって、 前記コンピュータュニットは、
ユーザの身体に装着されていないときに、 キーボードと、 第 1のポイン亍イン グデバイスと、 表示デバイスと、 プリンタとのうちの少なくとも一部を含む周辺 装置に接続することによってデスク トップコンピュータシステムを構成するため のインタフ: Lイスを懂える、 身体装着型情報表示装置。 請求項 8 . 請求項 7の記載の身体装着型情報表示装置であつて、
前記コンピュータュニットは、
少なくともユーザの身体に装着されていないときに利用し得る第 2のポイン亍 イングデバイスを備える、 身体装着型情報表示装置。 請求項 9 . 請求項 1ないし請求項 8のいずれかに記載の身体装着型情報表示装 置であって、
前記コンピュータュニッ卜は、 外部のホストコンピュータと通信することによ つて、 前記ホス卜コンピュータから所望の情報を受け取る情報通信手段を備える 、 身体装着型情報表示装置。 請求項 1 0 . 請求項 9記載の身体装着型情報表示装置であって、
前記ホス卜コンピュータから受け取る情報は、 前記表示ュニッ卜に表示される 画像を表す画像情報である、 身体装着型情報表示装置。 請求項 1 1 . 請求項 1 0記載の身体装着型情報表示装置であって、
前記情報通信手段は、 前記ユーザから見た外界の目標物の方位と視角と距離と のうちの少なくとも一部を含む位置情報を前記ホス卜コンピュータに指示すると ともに、 前記位置情報に応じて処理された画像を表す前記画像情報をホストコン ピュータから受け取ることによって、 前記目檷物と調和する画像を前記表示ュニ ッ卜に表示させる、 身体装着型情報表示装置。 請求項 1 2 . 請求項 1 1記載の身体装着型情報表示装置であって、 前記位置悄報は、 グローバルポジショニングシステムから供給される、 身体装 着型情報表示装置。 請求項 1 3 . 請求項 1 0記載の身体装着型情報表示装置であって、
前記情報通信手段は、 前記表示ュニッ卜に表示される画像のサイズを変更する ように前記ホストコンピュータに指示するとともに、 サイズが変更された画像を 表す前記画像情報をホストコンピュータから受け取ることによって、 外界の目標 物のサイズと調和する画像を前記表示ュニッ卜に表示させる、 身体装着型情報表 示装置。 請求項 1 4 . 請求項 1ないし請求項 1 3のいずれかに記載の身体装着型情報表 示装置であって、
前記コンピュータュニッ卜は、 前記表示ュニッ卜に表示される画像を表す映像 信号を変調して前記表示ュニッ卜に発信するための変調手段を備え、
前記表示ュニットは、 前記映像信号を受信して復調するための復調手段を備え る、 身体装着型情報表示装置。 請求項 1 5 . 請求項 1ないし請求項 1 4のいずれかに記載の身体装着型情報表 示装置であって、 さらに、
前記ユーザの手の一部に装着された磁気デバィスの位置における磁界強度に応 じて、 前記表示ュニッ卜に表示される画像内の位置を指示するための磁気式ポィ ンティングデバイスを備える、 身体装着型情報表示装置。 請求項 1 6 . 請求項 1ないし請求項 1 4のいずれかに記載の身体装着型情報表 示装置であって、 さらに、
前記ユーザの手の一部に装着された発光デバイスの光を読取ることによって、 前記表示ュニッ卜に表示される画像内の位置を指示するための光学式ポイン亍ィ ングデバイスを備える、 身体装着型情報表示装置。 請求項 1 7 . 請求項 1ないし請求項 1 6のいずれかに記載の身体装着型情報表 示装置であって、 さらに、
肉眼で直接には観察できない対象物を検出するためのセンサを備え、 前記コンピュータュニットは、 前記センサで検出された前記対象物の画像を前 記表示ユニットに表示する、 身体装着型情報表示装置。 請求項 1 8 . 請求項 1ないし請求項 1 6のいずれかに記載の身体装着型情報表 示装置であって、 さらに、
前記表示ュニッ卜の周囲に設けられて、 外界に掲示されているバーコードを読 取るバーコ一ド読み取り手段を備え、
前記コンピュータュニットは、 読取られたバーコードに応じた画像を前記表示 ユニットに表示する、 身体装着型情報表示装置。 請求項 1 9 . 請求項 1ないし請求項 1 6のいずれかに記載の身体装着型情報表 示装置であって、 さらに、
前記表示ュニッ卜の周囲に設けられて、 外界の情報を光学的に読み取る情報読 み取り手段を備え、
前記コンピュータュニッ卜は、 銃み取られた光学的情報に応じた画像を前記表 示ユニットに表示する、 身体装着型情報表示装置。 請求項 2 0. 請求項 1 9記載の身体装着型情報表示装置であって、
前記外界の情報は、 読み取るユーザには、 そのままでは理解できない情報であ り、
前記コンピュータュニッ卜は、 該理解できない情報を前記表示ュニッ卜にその ユーザが理解できる情報として表示することを特徴とする身体装着型情報表示装 置。 請求項 2 1 . 請求項 1 8ないし請求項 2 0のいずれかに記載の身体装着型情報 表示装置であって、 さらに、 前記外界の情報が複数存在し、 前記複数の情報のうちから読み取るべき一つが 選択されるときに 、 選択されている情報を確認する確認手段を備える、 身体装着 型情報表示装置。 請求項 2 2 . 請求項 2 1記載の身体装着型情報表示装置であって、
前記確認手段は、 前記読み取るべき情報に光点を照射する照射手段であり、 前記情報読み取り手段は、 前記光点が前記読み取るべき情報に照射されている か否かを確認してから当該情報を统み取ることを特徴とする、 身体装着型情報表 示装置。 請求項 2 3 . 請求項 1ないし請求項 2 2のいずれかに記載の身体装着型情報表 示装置であって、
前記表示ュニッ卜は、 前記ユーザの視線に応じて前記表示ュニッ卜における画 像表示の有無を切り換えるための表示切換手段を備える、 身体装着型情報表示装 置。 請求項 2 4 . 表示されるべき情報を生成するコンピュータユニットと、 前記コ ンピュータュニッ卜をユーザの身体の一部に装着するための第 1の装着手段と、 前記ユーザの頭部に装着された状態において、 前記コンピュータュニッ卜で生成 された情報を前記ユーザが観察し得るように表示するための表示ュニッ卜と、 前 記表示ュニットを前記ユーザの頭部に装漦するための第 2の装着手段と、 を備え 、 前記表示ユニットが、 前記コンピュータユニットで生成された情報を表示する ための画像表示素子と、 前記画像表示素子に表示された画像の拡大された虚像が 前記ユーザによって観察されるように前記画像を表す第 1の光を屈折させ、 前記 第 1の光を外界の視野から入射する第 2の光と共に前記ユーザの眼に入射させる 光学系と、 を備える身体装着型情報表示装置を用いた情報表示方法であって、 前記表示ュニッ卜の表示画面に外界の目檷物に調和した情報を含む画像を表示 することを特徴とする情報表示方法。 請求項 2 5 . 請求項 2 4記載の情報表示方法であって、
前記表示ュニッ卜に表示される画像は、 作業分野を選択するためのメニューと 前記メニューの中から項目を選択するための選択キーとを含む、
情報表示方法。 請求項 2 6 . 請求項 2 4記載の情報表示方法であって、
前記表示ユニットに表示される画像は、 外界の目標物と調和するように、 前記 ユーザから見た前記目棵物の方位と視角と距離とのうちの少なくとも一部を含む 位置情報に応じて処理される、 情報表示方法。 請求項 2 7 . 請求項 2 4記載の情報表示方法であって、
前記表示ュニッ卜に表示される画像は、 外界の目標物のサイズと調和するよう にサイズが変更される、 情報表示方法。 請求項 2 8 · 請求項 2 4ないし請求項 2 7のいずれかに記載の情報表示方法で あって、 さらに、
前記表示ュニッ卜の周囲に設けられた情報読み取リ手段によって外界の情報を 光学的に読み取る工程と、
読み取られた光学的情報に応じた画像を前記表示ュニッ卜に表示する工程と、 を含む、 情報表示方法。 請求項 2 9 . 請求項 2 8記載の身体装着型情報表示装置であって、
前記外界の情報は、 読み取るユーザには、 そのままでは理解できない情報であ し八
前記理解できない情報は、 前記表示ュニッ卜にそのユーザが理解できる情報と して表示されることを特徴とする情報表示方法。 請求項 3 0 . 請求項 2 8または請求項 2 9記載の情報表示方法であって、 さら 前記外界の情報が複数存在し、 前記複数の情報のうちから読み取るべき一つが 選択されるときに、 選択されている情報を確認する工程を備える、 情報表示方法
請求項 3 1 . 請求項 3 0記載の情報表示方法であって、
前記確認工程は、 前記铳み取るべき惰報に光点を照射する工程を備え、 前記情報読み取リエ程は、 前記光点が前記読み取るべき情報に照射されている か否かを確認してから当該情報を読み取ることを特徴とする、 情報表示方法。
PCT/JP1997/000576 1996-02-26 1997-02-26 Dispositif portable affichant des informations et procede d'affichage d'informations utilisant ledit dispositif WO1997031477A1 (fr)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US08/945,272 US6172657B1 (en) 1996-02-26 1997-02-26 Body mount-type information display apparatus and display method using the same
EP97903618A EP0827337B1 (en) 1996-02-26 1997-02-26 Wearable information displaying device
DE69736039T DE69736039T2 (de) 1996-02-26 1997-02-26 Tragbares informationsanzeigegerät

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP8/38457 1996-02-26
JP3845796 1996-02-26

Publications (1)

Publication Number Publication Date
WO1997031477A1 true WO1997031477A1 (fr) 1997-08-28

Family

ID=12525795

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP1997/000576 WO1997031477A1 (fr) 1996-02-26 1997-02-26 Dispositif portable affichant des informations et procede d'affichage d'informations utilisant ledit dispositif

Country Status (6)

Country Link
US (1) US6172657B1 (ja)
EP (1) EP0827337B1 (ja)
KR (1) KR100595834B1 (ja)
DE (1) DE69736039T2 (ja)
TW (1) TW395121B (ja)
WO (1) WO1997031477A1 (ja)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0935183A3 (en) * 1998-02-09 1999-12-15 Sel Semiconductor Energy Laboratory Co., Ltd. Information processing device with head mounted display
JP2000347596A (ja) * 1998-08-31 2000-12-15 Semiconductor Energy Lab Co Ltd 携帯情報処理システム
WO2004061519A1 (ja) * 2002-12-24 2004-07-22 Nikon Corporation ヘッドマウントディスプレイ
US7085027B2 (en) 2003-04-28 2006-08-01 Nikon Corporation Image combiner and image display
JP2009093489A (ja) * 2007-10-10 2009-04-30 Toshiba Tec Corp 商品処理装置及びposシステム
US8494212B2 (en) 2008-09-11 2013-07-23 Brother Kogyo Kabushiki Kaisha Head mounted display
JP2013210643A (ja) * 2013-04-26 2013-10-10 Sony Corp 表示装置、表示方法
JP2013218733A (ja) * 2005-08-09 2013-10-24 Deere & Co ユーザに情報を配信する方法およびシステム
JP2016040865A (ja) * 2014-08-12 2016-03-24 セイコーエプソン株式会社 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム
JP2017507380A (ja) * 2013-12-17 2017-03-16 アマゾン テクノロジーズ インコーポレイテッド アイレベルスキャナ及びディスプレイのポインタ追跡
JP2018010318A (ja) * 2014-10-24 2018-01-18 イメージン コーポレイション マイクロディスプレイベースの没入型ヘッドセット
JP2018104933A (ja) * 2016-12-23 2018-07-05 前田建設工業株式会社 土木建築工事における施工管理装置
JP2019065467A (ja) * 2017-09-28 2019-04-25 大和ハウス工業株式会社 杭位置検査装置及び杭位置検査方法
WO2019113504A1 (en) 2017-12-08 2019-06-13 Facebook Technologies, Llc Selective tracking of a head-mounted display

Families Citing this family (191)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW362207B (en) * 1997-05-08 1999-06-21 Shimadzu Corp Display system
AU708668B2 (en) * 1997-11-21 1999-08-12 Xybernaut Corporation A computer structure for accommodating a PC card
CA2310114A1 (en) 1998-02-02 1999-08-02 Steve Mann Wearable camera system with viewfinder means
US7248232B1 (en) 1998-02-25 2007-07-24 Semiconductor Energy Laboratory Co., Ltd. Information processing device
US6614408B1 (en) 1998-03-25 2003-09-02 W. Stephen G. Mann Eye-tap for electronic newsgathering, documentary video, photojournalism, and personal safety
ATE242573T1 (de) * 1998-03-25 2003-06-15 W Stephen G Mann Tragbares kamerasystem mit visiermittel
DE69939858D1 (de) * 1998-08-31 2008-12-18 Sony Corp Bildverarbeitung
CA2261900A1 (en) * 1998-09-11 2000-03-11 Xybernaut Corporation Convertible wearable computer
US6532482B1 (en) * 1998-09-25 2003-03-11 Xybernaut Corporation Mobile computer with audio interrupt system
JP2000194726A (ja) * 1998-10-19 2000-07-14 Sony Corp 情報処理装置及び方法、情報処理システム並びに提供媒体
US6456261B1 (en) * 1998-11-23 2002-09-24 Evan Y. W. Zhang Head/helmet mounted passive and active infrared imaging system with/without parallax
US7640007B2 (en) * 1999-02-12 2009-12-29 Fisher-Rosemount Systems, Inc. Wireless handheld communicator in a process control environment
US6806847B2 (en) * 1999-02-12 2004-10-19 Fisher-Rosemount Systems Inc. Portable computer in a process control environment
US7230582B1 (en) 1999-02-12 2007-06-12 Fisher-Rosemount Systems, Inc. Wearable computer in a process control environment
DE50007901D1 (de) * 1999-03-02 2004-10-28 Siemens Ag Nutzung von augmented reality-basistechnologien zur situationsgerechten unterstützung des facharbeiters durch entfernte experten
US6671100B1 (en) 1999-10-14 2003-12-30 Stratos Product Development Llc Virtual imaging system
US7027955B2 (en) * 1999-10-15 2006-04-11 Timekeeping Systems, Inc. Guard tour system incorporating a positioning system
AU2001233019A1 (en) * 2000-01-28 2001-08-07 Intersense, Inc. Self-referenced tracking
EP1585066A3 (en) * 2000-03-31 2008-11-05 FUJIFILM Corporation Work data collection method
CA2406000A1 (en) * 2000-04-12 2001-10-25 Thomas D. Laing Interactive video device and method of use
DE10018490A1 (de) * 2000-04-14 2001-11-29 Winkler & Duennebier Ag Terminal zum Bedienen und/oder zur Anzeige der Betriebswerte einer Maschine
JP3886898B2 (ja) * 2000-06-30 2007-02-28 シャープ株式会社 表示装置及び表示システム
DE10040563A1 (de) * 2000-08-15 2002-02-28 Gavitec Gmbh Vorrichtung mit einer Decodiereinheit zur Decodierung von optischen Codes
US7262685B2 (en) * 2000-12-11 2007-08-28 Asap Automation, Llc Inventory system with barcode display
DE10063089C1 (de) * 2000-12-18 2002-07-25 Siemens Ag Anwendergesteuerte Verknüpfung von Informationen innerhalb eines Augmented-Reality-Systems
US20040201695A1 (en) * 2001-02-15 2004-10-14 Rei Inasaka System for delivering news
WO2002071384A1 (en) * 2001-03-05 2002-09-12 Warren Smith Three-dimensional display system and method
EP1744286A3 (en) * 2001-03-28 2008-11-05 FUJIFILM Corporation Work data collection method
US7508946B2 (en) 2001-06-27 2009-03-24 Sony Corporation Integrated circuit device, information processing apparatus, memory management method for information storage device, mobile terminal apparatus, semiconductor integrated circuit device, and communication method using mobile terminal apparatus
US6798392B2 (en) * 2001-10-16 2004-09-28 Hewlett-Packard Development Company, L.P. Smart helmet
US7126558B1 (en) * 2001-10-19 2006-10-24 Accenture Global Services Gmbh Industrial augmented reality
US7661818B2 (en) * 2001-11-07 2010-02-16 Michael Waters Clip-on light apparatus
US8491118B2 (en) * 2001-11-07 2013-07-23 Michael Waters Lighted reading glasses
US8388164B2 (en) 2005-05-17 2013-03-05 Michael Waters Hands-Free lighting devices
US8235524B2 (en) * 2001-11-07 2012-08-07 Michael Waters Illuminated eyewear
JP2004198450A (ja) * 2002-12-16 2004-07-15 Sharp Corp 画像表示システム
US20040160463A1 (en) * 2003-02-18 2004-08-19 Battles Amy E. System and method for displaying menu information in an electronic display
US7417782B2 (en) * 2005-02-23 2008-08-26 Pixtronix, Incorporated Methods and apparatus for spatial light modulation
US7063256B2 (en) * 2003-03-04 2006-06-20 United Parcel Service Of America Item tracking and processing systems and methods
US7090134B2 (en) * 2003-03-04 2006-08-15 United Parcel Service Of America, Inc. System for projecting a handling instruction onto a moving item or parcel
CN100416336C (zh) * 2003-06-12 2008-09-03 美国西门子医疗解决公司 校准真实和虚拟视图
US7369101B2 (en) 2003-06-12 2008-05-06 Siemens Medical Solutions Usa, Inc. Calibrating real and virtual views
NZ529890A (en) * 2003-12-02 2004-02-27 Michael Andrew Buck Mobile geographical information display system
DE10357190B4 (de) 2003-12-08 2020-06-18 Carl Zeiss Ag Anzeigevorrichtung und Anzeigeverfahren
US7295183B2 (en) * 2004-03-09 2007-11-13 Em Microelectronic-Marin Sa Extension of battery life in a battery-powered optical pointing device
JP4266878B2 (ja) * 2004-04-22 2009-05-20 Necディスプレイソリューションズ株式会社 映像表示装置
US7561717B2 (en) * 2004-07-09 2009-07-14 United Parcel Service Of America, Inc. System and method for displaying item information
US7710395B2 (en) * 2004-07-14 2010-05-04 Alken, Inc. Head-mounted pointing and control device
WO2006036725A1 (en) * 2004-09-22 2006-04-06 Motion Research Corporation Ambient light display and system for displaying data
US9229222B2 (en) 2005-02-23 2016-01-05 Pixtronix, Inc. Alignment methods in fluid-filled MEMS displays
US8519945B2 (en) 2006-01-06 2013-08-27 Pixtronix, Inc. Circuits for controlling display apparatus
US8159428B2 (en) 2005-02-23 2012-04-17 Pixtronix, Inc. Display methods and apparatus
US20060209012A1 (en) * 2005-02-23 2006-09-21 Pixtronix, Incorporated Devices having MEMS displays
US9261694B2 (en) * 2005-02-23 2016-02-16 Pixtronix, Inc. Display apparatus and methods for manufacture thereof
US7999994B2 (en) 2005-02-23 2011-08-16 Pixtronix, Inc. Display apparatus and methods for manufacture thereof
US7304786B2 (en) * 2005-02-23 2007-12-04 Pixtronix, Inc. Methods and apparatus for bi-stable actuation of displays
US9158106B2 (en) 2005-02-23 2015-10-13 Pixtronix, Inc. Display methods and apparatus
US8310442B2 (en) 2005-02-23 2012-11-13 Pixtronix, Inc. Circuits for controlling display apparatus
US20070205969A1 (en) * 2005-02-23 2007-09-06 Pixtronix, Incorporated Direct-view MEMS display devices and methods for generating images thereon
US8482496B2 (en) * 2006-01-06 2013-07-09 Pixtronix, Inc. Circuits for controlling MEMS display apparatus on a transparent substrate
US7405852B2 (en) * 2005-02-23 2008-07-29 Pixtronix, Inc. Display apparatus and methods for manufacture thereof
US7746529B2 (en) 2005-02-23 2010-06-29 Pixtronix, Inc. MEMS display apparatus
US9082353B2 (en) 2010-01-05 2015-07-14 Pixtronix, Inc. Circuits for controlling display apparatus
US9526292B2 (en) 2005-05-17 2016-12-27 Michael Waters Power modules and headgear
US8979295B2 (en) 2005-05-17 2015-03-17 Michael Waters Rechargeable lighted glasses
JP2007049684A (ja) * 2005-07-13 2007-02-22 Canon Inc 装着機構及び頭部装着型映像表示装置
US7800650B1 (en) * 2006-01-30 2010-09-21 John Prieto Multi-functional portable viewfinder for use with a digital camcorder
US8526096B2 (en) 2006-02-23 2013-09-03 Pixtronix, Inc. Mechanical light modulators with stressed beams
US7876489B2 (en) * 2006-06-05 2011-01-25 Pixtronix, Inc. Display apparatus with optical cavities
JP5228305B2 (ja) * 2006-09-08 2013-07-03 ソニー株式会社 表示装置、表示方法
JP5201351B2 (ja) * 2006-09-19 2013-06-05 株式会社ニコン 出力装置
KR100812245B1 (ko) * 2006-10-11 2008-03-13 한국과학기술원 방향 센서와 기울기 센서를 이용하여 포인팅이 가능한직관적인 네비게이션 시스템 및 그에 따른 직관적인 포인팅방법
EP2080045A1 (en) 2006-10-20 2009-07-22 Pixtronix Inc. Light guides and backlight systems incorporating light redirectors at varying densities
US7852546B2 (en) 2007-10-19 2010-12-14 Pixtronix, Inc. Spacers for maintaining display apparatus alignment
US9176318B2 (en) 2007-05-18 2015-11-03 Pixtronix, Inc. Methods for manufacturing fluid-filled MEMS displays
JP4743132B2 (ja) * 2007-02-15 2011-08-10 ティアック株式会社 複数のファンクションキーを有する電子機器
CN101785046A (zh) 2007-08-19 2010-07-21 环弓有限公司 穿在手指上的装置和相关使用方法
US7699486B1 (en) * 2007-10-29 2010-04-20 Edward Beiner Illuminated eyeglass assembly
US8491145B2 (en) * 2007-12-18 2013-07-23 Waters Industries, Inc. Illuminated headgear having switch devices and packaging therefor
US8757831B2 (en) 2007-12-18 2014-06-24 Michael Waters Headgear having an electrical device and power source mounted thereto
JP5523340B2 (ja) * 2007-12-18 2014-06-18 ウォーターズ、マイケル ハンズフリー照明装置
US8248560B2 (en) 2008-04-18 2012-08-21 Pixtronix, Inc. Light guides and backlight systems incorporating prismatic structures and light redirectors
US8169679B2 (en) 2008-10-27 2012-05-01 Pixtronix, Inc. MEMS anchors
US20110205259A1 (en) * 2008-10-28 2011-08-25 Pixtronix, Inc. System and method for selecting display modes
WO2010099504A1 (en) 2009-02-27 2010-09-02 Michael Waters Lighted hat
US8890650B2 (en) * 2009-05-29 2014-11-18 Thong T. Nguyen Fluid human-machine interface
FR2949001B1 (fr) * 2009-08-07 2011-12-23 Jean Louis Eyraud Dispositif permettant a un spectateur de regarder dans son champ de vision, a la fois une scene et des donnees liees a cette scene
CN103676211B (zh) * 2009-09-30 2016-06-01 迈克尔·沃特斯 照明眼镜
WO2011097258A1 (en) 2010-02-02 2011-08-11 Pixtronix, Inc. Circuits for controlling display apparatus
KR20120132680A (ko) 2010-02-02 2012-12-07 픽스트로닉스 인코포레이티드 저온 실 유체 충전된 디스플레이 장치의 제조 방법
AU2011215777B2 (en) 2010-02-10 2015-11-26 Michael Waters Illuminated eyewear
US20110205756A1 (en) * 2010-02-19 2011-08-25 Pixtronix, Inc. Light guides and backlight systems incorporating prismatic structures and light redirectors
US8482859B2 (en) 2010-02-28 2013-07-09 Osterhout Group, Inc. See-through near-eye display glasses wherein image light is transmitted to and reflected from an optically flat film
US9128281B2 (en) 2010-09-14 2015-09-08 Microsoft Technology Licensing, Llc Eyepiece with uniformly illuminated reflective display
US9091851B2 (en) 2010-02-28 2015-07-28 Microsoft Technology Licensing, Llc Light control in head mounted displays
US9229227B2 (en) 2010-02-28 2016-01-05 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a light transmissive wedge shaped illumination system
US10180572B2 (en) 2010-02-28 2019-01-15 Microsoft Technology Licensing, Llc AR glasses with event and user action control of external applications
US9134534B2 (en) 2010-02-28 2015-09-15 Microsoft Technology Licensing, Llc See-through near-eye display glasses including a modular image source
US8488246B2 (en) 2010-02-28 2013-07-16 Osterhout Group, Inc. See-through near-eye display glasses including a curved polarizing film in the image source, a partially reflective, partially transmitting optical element and an optically flat film
US20150309316A1 (en) 2011-04-06 2015-10-29 Microsoft Technology Licensing, Llc Ar glasses with predictive control of external device based on event input
US9759917B2 (en) 2010-02-28 2017-09-12 Microsoft Technology Licensing, Llc AR glasses with event and sensor triggered AR eyepiece interface to external devices
US9097891B2 (en) 2010-02-28 2015-08-04 Microsoft Technology Licensing, Llc See-through near-eye display glasses including an auto-brightness control for the display brightness based on the brightness in the environment
US9129295B2 (en) 2010-02-28 2015-09-08 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a fast response photochromic film system for quick transition from dark to clear
US20120249797A1 (en) 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
WO2011106798A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
US8472120B2 (en) 2010-02-28 2013-06-25 Osterhout Group, Inc. See-through near-eye display glasses with a small scale image source
US8467133B2 (en) 2010-02-28 2013-06-18 Osterhout Group, Inc. See-through display with an optical assembly including a wedge-shaped illumination system
US9182596B2 (en) 2010-02-28 2015-11-10 Microsoft Technology Licensing, Llc See-through near-eye display glasses with the optical assembly including absorptive polarizers or anti-reflective coatings to reduce stray light
US9223134B2 (en) 2010-02-28 2015-12-29 Microsoft Technology Licensing, Llc Optical imperfections in a light transmissive illumination system for see-through near-eye display glasses
US8477425B2 (en) 2010-02-28 2013-07-02 Osterhout Group, Inc. See-through near-eye display glasses including a partially reflective, partially transmitting optical element
US9366862B2 (en) 2010-02-28 2016-06-14 Microsoft Technology Licensing, Llc System and method for delivering content to a group of see-through near eye display eyepieces
US20110214082A1 (en) * 2010-02-28 2011-09-01 Osterhout Group, Inc. Projection triggering through an external marker in an augmented reality eyepiece
US9285589B2 (en) 2010-02-28 2016-03-15 Microsoft Technology Licensing, Llc AR glasses with event and sensor triggered control of AR eyepiece applications
US9097890B2 (en) 2010-02-28 2015-08-04 Microsoft Technology Licensing, Llc Grating in a light transmissive illumination system for see-through near-eye display glasses
US9341843B2 (en) 2010-02-28 2016-05-17 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a small scale image source
EP2372431A3 (en) * 2010-03-24 2011-12-28 Olympus Corporation Head-mounted type display device
MX2012012645A (es) 2010-04-30 2013-02-26 Michael Waters Dispositivos de iluminacion a manos libres.
US8540364B2 (en) 2010-09-14 2013-09-24 Michael Waters Lighted glasses
US8503087B1 (en) 2010-11-02 2013-08-06 Google Inc. Structured optical surface
US8582209B1 (en) 2010-11-03 2013-11-12 Google Inc. Curved near-to-eye display
US8743464B1 (en) 2010-11-03 2014-06-03 Google Inc. Waveguide with embedded mirrors
US8576143B1 (en) 2010-12-20 2013-11-05 Google Inc. Head mounted display with deformation sensors
US8666212B1 (en) 2011-04-28 2014-03-04 Google Inc. Head mounted display using a fused fiber bundle
US9329388B1 (en) 2011-04-28 2016-05-03 Google Inc. Heads-up display for a large transparent substrate
US8699842B2 (en) 2011-05-27 2014-04-15 Google Inc. Image relay waveguide and method of producing same
US8817379B2 (en) 2011-07-12 2014-08-26 Google Inc. Whole image scanning mirror display system
US8179604B1 (en) 2011-07-13 2012-05-15 Google Inc. Wearable marker for passive interaction
US8471967B2 (en) 2011-07-15 2013-06-25 Google Inc. Eyepiece for near-to-eye display with multi-reflectors
US8767305B2 (en) 2011-08-02 2014-07-01 Google Inc. Method and apparatus for a near-to-eye display
US8472119B1 (en) 2011-08-12 2013-06-25 Google Inc. Image waveguide having a bend
US8294994B1 (en) 2011-08-12 2012-10-23 Google Inc. Image waveguide having non-parallel surfaces
US8760762B1 (en) 2011-08-12 2014-06-24 Google Inc. Image waveguide utilizing two mirrored or polarized surfaces
US8786686B1 (en) 2011-09-16 2014-07-22 Google Inc. Head mounted display eyepiece with integrated depth sensing
US9013793B2 (en) 2011-09-21 2015-04-21 Google Inc. Lightweight eyepiece for head mounted display
US9087471B2 (en) 2011-11-04 2015-07-21 Google Inc. Adaptive brightness control of head mounted display
CA2794370A1 (en) 2011-11-04 2013-05-04 Michael Waters Hat with automated shut-off feature for electrical devices
US9194995B2 (en) 2011-12-07 2015-11-24 Google Inc. Compact illumination module for head mounted display
US8873148B1 (en) 2011-12-12 2014-10-28 Google Inc. Eyepiece having total internal reflection based light folding
USD682343S1 (en) 2011-12-23 2013-05-14 Michael Waters Lighted glasses
US9526287B2 (en) 2011-12-23 2016-12-27 Michael Waters Lighted hat
US9568173B2 (en) 2011-12-23 2017-02-14 Michael Waters Lighted hat
US9609902B2 (en) 2011-12-23 2017-04-04 Michael Waters Headgear having a camera device
US8867131B1 (en) 2012-03-06 2014-10-21 Google Inc. Hybrid polarizing beam splitter
US9239415B2 (en) 2012-03-08 2016-01-19 Google Inc. Near-to-eye display with an integrated out-looking camera
US8848289B2 (en) 2012-03-15 2014-09-30 Google Inc. Near-to-eye display with diffractive lens
US8760765B2 (en) 2012-03-19 2014-06-24 Google Inc. Optical beam tilt for offset head mounted display
US9519092B1 (en) 2012-03-21 2016-12-13 Google Inc. Display method
US8749886B2 (en) 2012-03-21 2014-06-10 Google Inc. Wide-angle wide band polarizing beam splitter
US9116337B1 (en) 2012-03-21 2015-08-25 Google Inc. Increasing effective eyebox size of an HMD
US20180048750A1 (en) * 2012-06-15 2018-02-15 Muzik, Llc Audio/video wearable computer system with integrated projector
US9971400B2 (en) 2012-06-29 2018-05-15 Symbol Technologies, Llc Device and method for eye tracking data trigger arrangement
KR200473246Y1 (ko) * 2012-07-17 2014-06-24 김승진 안경형 원격 제어 장치
US8867139B2 (en) 2012-11-30 2014-10-21 Google Inc. Dual axis internal optical beam tilt for eyepiece of an HMD
WO2014100477A1 (en) 2012-12-19 2014-06-26 Michael Waters Lighted solar hat
US9134552B2 (en) 2013-03-13 2015-09-15 Pixtronix, Inc. Display apparatus with narrow gap electrostatic actuators
US9717633B2 (en) 2013-03-15 2017-08-01 Michael Waters Lighted headgear
US9361501B2 (en) * 2013-04-01 2016-06-07 Ncr Corporation Headheld scanner and POS display with mobile phone
JP6358248B2 (ja) 2013-04-11 2018-07-18 ソニー株式会社 表示装置
WO2014168010A1 (ja) * 2013-04-11 2014-10-16 ソニー株式会社 画像表示装置及び表示装置
US9069115B2 (en) 2013-04-25 2015-06-30 Google Inc. Edge configurations for reducing artifacts in eyepieces
US10262462B2 (en) 2014-04-18 2019-04-16 Magic Leap, Inc. Systems and methods for augmented and virtual reality
US9952435B2 (en) 2013-07-16 2018-04-24 Sony Corporation Display apparatus having curved image forming apparatus
JP6311714B2 (ja) 2013-07-16 2018-04-18 ソニー株式会社 表示装置
TWI518368B (zh) 2013-09-11 2016-01-21 財團法人工業技術研究院 虛像顯示裝置
US10194860B2 (en) 2013-09-11 2019-02-05 Industrial Technology Research Institute Virtual image display system
CN103591953B (zh) * 2013-11-20 2016-08-17 无锡赛思汇智科技有限公司 一种基于单摄像头的人员定位方法
US9459455B2 (en) 2013-12-19 2016-10-04 Google Inc. See-through eyepiece for head wearable display
US9389422B1 (en) 2013-12-23 2016-07-12 Google Inc. Eyepiece for head wearable display using partial and total internal reflections
US20150245016A1 (en) * 2014-02-26 2015-08-27 Thales Visionix, Inc. System and method for binocular harmonization
US9395544B2 (en) 2014-03-13 2016-07-19 Google Inc. Eyepiece with switchable reflector for head wearable display
US9915823B1 (en) 2014-05-06 2018-03-13 Google Llc Lightguide optical combiner for head wearable display
USD770143S1 (en) 2014-05-23 2016-11-01 Michael Waters Beanie with means for illumination
US10162177B2 (en) * 2014-07-11 2018-12-25 Sixense Entertainment, Inc. Method and apparatus for self-relative body tracking for virtual reality systems using magnetic tracking
FR3024003B1 (fr) 2014-07-21 2018-10-19 Morpho Dispositif et procede d'authentification de document
US9285591B1 (en) 2014-08-29 2016-03-15 Google Inc. Compact architecture for near-to-eye display system
US9366869B2 (en) 2014-11-10 2016-06-14 Google Inc. Thin curved eyepiece for see-through head wearable display
USD824557S1 (en) 2014-12-02 2018-07-31 Michael Waters Flashlight
CN208041675U (zh) 2014-12-02 2018-11-02 迈克尔·沃特斯 手电筒和通信设备
US9819850B2 (en) * 2015-03-16 2017-11-14 Sandisk Technologies Llc Modular fashion accessory
US10162180B2 (en) 2015-06-04 2018-12-25 Google Llc Efficient thin curved eyepiece for see-through head wearable display
US10146054B2 (en) 2015-07-06 2018-12-04 Google Llc Adding prescriptive correction to eyepieces for see-through head wearable displays
CN105389011A (zh) * 2015-12-01 2016-03-09 深圳还是威健康科技有限公司 一种显示旋转控制方法及智能穿戴设备
US10816800B2 (en) * 2016-12-23 2020-10-27 Samsung Electronics Co., Ltd. Electronic device and method of controlling the same
CN108241142B (zh) * 2016-12-26 2021-05-11 宏达国际电子股份有限公司 追踪系统及追踪方法
CN108303698B (zh) * 2016-12-29 2021-05-04 宏达国际电子股份有限公司 追踪系统、追踪装置及追踪方法
US10471478B2 (en) 2017-04-28 2019-11-12 United Parcel Service Of America, Inc. Conveyor belt assembly for identifying an asset sort location and methods of utilizing the same
US10814491B2 (en) * 2017-10-06 2020-10-27 Synaptive Medical (Barbados) Inc. Wireless hands-free pointer system
US10528133B2 (en) * 2018-03-13 2020-01-07 Facebook Technologies, Llc Bracelet in a distributed artificial reality system
US10572002B2 (en) 2018-03-13 2020-02-25 Facebook Technologies, Llc Distributed artificial reality system with contextualized hand tracking
US10791783B1 (en) 2019-05-16 2020-10-06 Waters Industries, Inc. Lighted headgear and accessories therefor
US11943227B2 (en) 2021-09-17 2024-03-26 Bank Of America Corporation Data access control for augmented reality devices

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0670267A (ja) * 1992-08-24 1994-03-11 Olympus Optical Co Ltd 頭部又は顔面装着式ディスプレイ装置
JPH06268943A (ja) * 1993-03-15 1994-09-22 Mitsubishi Heavy Ind Ltd 視点映像用ビデオカメラを有する頭部搭載型ディスプレイ
JPH06289318A (ja) * 1993-04-01 1994-10-18 Seiko Epson Corp 頭部装着型表示装置
JPH06326944A (ja) * 1993-05-14 1994-11-25 Olympus Optical Co Ltd 頭部装着式映像表示装置
JPH0792426A (ja) * 1993-09-24 1995-04-07 Sony Corp 視覚装置

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4690657A (en) * 1985-06-03 1987-09-01 Lodrick Sr Lawrence E Magnetically actuated amusement device
US5005213A (en) * 1986-07-10 1991-04-02 Varo, Inc. Head mounted video display and remote camera system
US4757714A (en) 1986-09-25 1988-07-19 Insight, Inc. Speed sensor and head-mounted data display
US5045843B1 (en) * 1988-12-06 1996-07-16 Selectech Ltd Optical pointing device
EP0503054A1 (en) * 1990-09-27 1992-09-16 Southern California Gas Company Apparatus having magnetic field inducing target signal transmitter and position reference transmitter for detecting concealed pipes
US5250929A (en) * 1991-07-29 1993-10-05 Conference Communications, Inc. Interactive overlay-driven computer display system
US5208449A (en) 1991-09-09 1993-05-04 Psc, Inc. Portable transaction terminal
DE69221987T2 (de) * 1991-11-01 1998-02-05 Sega Enterprises Kk Am Kopf befestigte Abbildungsvorrichtung
JP2936544B2 (ja) * 1992-02-28 1999-08-23 株式会社フジタ 視覚情報表示装置
US5305244B2 (en) * 1992-04-06 1997-09-23 Computer Products & Services I Hands-free user-supported portable computer
JPH0619526A (ja) 1992-07-06 1994-01-28 Fanuc Ltd 三次元形状変更方式
US5815411A (en) 1993-09-10 1998-09-29 Criticom Corporation Electro-optic vision system which exploits position and attitude
US5550585A (en) * 1993-03-26 1996-08-27 Allan Cherri Video inter-view system
JP3676391B2 (ja) * 1994-04-27 2005-07-27 オリンパス株式会社 頭部装着式映像表示装置
US5579026A (en) * 1993-05-14 1996-11-26 Olympus Optical Co., Ltd. Image display apparatus of head mounted type
JPH0798716A (ja) 1993-05-28 1995-04-11 Olympus Optical Co Ltd 携帯型データシステム
US5815126A (en) * 1993-10-22 1998-09-29 Kopin Corporation Monocular portable communication and display system
EP0724743A1 (en) 1993-10-22 1996-08-07 Kopin Corporation Head-mounted display system
US5610678A (en) * 1993-12-30 1997-03-11 Canon Kabushiki Kaisha Camera including camera body and independent optical viewfinder
JP2873268B2 (ja) 1994-02-24 1999-03-24 エドワード・ジョージ・ニューマン 手を使わずにユーザにより支持される携帯用計算機とその操作方法
GB9403925D0 (en) * 1994-03-01 1994-04-20 Virtuality Entertainment Ltd Optical system
JPH086708A (ja) * 1994-04-22 1996-01-12 Canon Inc 表示装置
JPH07311857A (ja) * 1994-05-16 1995-11-28 Fujitsu Ltd 画像合成表示装置およびシミュレーションシステム
DE69531593T2 (de) * 1994-06-23 2004-06-24 Seiko Epson Corp. Auf dem kopf getragene anzeigevorrichtung
JPH0821975A (ja) * 1994-07-06 1996-01-23 Olympus Optical Co Ltd 頭部装着型映像表示システム
US5742264A (en) * 1995-01-24 1998-04-21 Matsushita Electric Industrial Co., Ltd. Head-mounted display
US5689667A (en) * 1995-06-06 1997-11-18 Silicon Graphics, Inc. Methods and system of controlling menus with radial and linear portions
US5710574A (en) * 1995-11-14 1998-01-20 International Business Machines Corporation Method and system for positioning a graphical pointer within a widget of a data processing system graphical user interface
US5742263A (en) * 1995-12-18 1998-04-21 Telxon Corporation Head tracking system for a head mounted display system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0670267A (ja) * 1992-08-24 1994-03-11 Olympus Optical Co Ltd 頭部又は顔面装着式ディスプレイ装置
JPH06268943A (ja) * 1993-03-15 1994-09-22 Mitsubishi Heavy Ind Ltd 視点映像用ビデオカメラを有する頭部搭載型ディスプレイ
JPH06289318A (ja) * 1993-04-01 1994-10-18 Seiko Epson Corp 頭部装着型表示装置
JPH06326944A (ja) * 1993-05-14 1994-11-25 Olympus Optical Co Ltd 頭部装着式映像表示装置
JPH0792426A (ja) * 1993-09-24 1995-04-07 Sony Corp 視覚装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP0827337A4 *

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100426052C (zh) * 1998-02-09 2008-10-15 株式会社半导体能源研究所 信息处理设备
EP0935183A3 (en) * 1998-02-09 1999-12-15 Sel Semiconductor Energy Laboratory Co., Ltd. Information processing device with head mounted display
JP2000347596A (ja) * 1998-08-31 2000-12-15 Semiconductor Energy Lab Co Ltd 携帯情報処理システム
WO2004061519A1 (ja) * 2002-12-24 2004-07-22 Nikon Corporation ヘッドマウントディスプレイ
US7542012B2 (en) 2002-12-24 2009-06-02 Nikon Corporation Head mounted display
US7085027B2 (en) 2003-04-28 2006-08-01 Nikon Corporation Image combiner and image display
JP2013218733A (ja) * 2005-08-09 2013-10-24 Deere & Co ユーザに情報を配信する方法およびシステム
JP2009093489A (ja) * 2007-10-10 2009-04-30 Toshiba Tec Corp 商品処理装置及びposシステム
US8494212B2 (en) 2008-09-11 2013-07-23 Brother Kogyo Kabushiki Kaisha Head mounted display
JP2013210643A (ja) * 2013-04-26 2013-10-10 Sony Corp 表示装置、表示方法
JP2017507380A (ja) * 2013-12-17 2017-03-16 アマゾン テクノロジーズ インコーポレイテッド アイレベルスキャナ及びディスプレイのポインタ追跡
JP2016040865A (ja) * 2014-08-12 2016-03-24 セイコーエプソン株式会社 頭部装着型表示装置およびその制御方法、並びにコンピュータープログラム
JP2018010318A (ja) * 2014-10-24 2018-01-18 イメージン コーポレイション マイクロディスプレイベースの没入型ヘッドセット
JP2018104933A (ja) * 2016-12-23 2018-07-05 前田建設工業株式会社 土木建築工事における施工管理装置
JP2019065467A (ja) * 2017-09-28 2019-04-25 大和ハウス工業株式会社 杭位置検査装置及び杭位置検査方法
WO2019113504A1 (en) 2017-12-08 2019-06-13 Facebook Technologies, Llc Selective tracking of a head-mounted display
EP3721284A4 (en) * 2017-12-08 2021-04-28 Facebook Technologies, LLC SELECTIVE MONITORING OF A HEADSET
EP4015984A1 (en) * 2017-12-08 2022-06-22 Facebook Technologies, LLC Selective tracking of a head-mounted display

Also Published As

Publication number Publication date
TW395121B (en) 2000-06-21
EP0827337A4 (en) 1999-07-28
DE69736039T2 (de) 2007-01-11
US6172657B1 (en) 2001-01-09
EP0827337B1 (en) 2006-06-07
KR100595834B1 (ko) 2006-10-13
KR19990008058A (ko) 1999-01-25
EP0827337A1 (en) 1998-03-04
DE69736039D1 (de) 2006-07-20

Similar Documents

Publication Publication Date Title
WO1997031477A1 (fr) Dispositif portable affichant des informations et procede d'affichage d'informations utilisant ledit dispositif
US10354449B2 (en) Augmented reality lighting effects
US10642564B2 (en) Display system, display device, information display method, and program
JP6387825B2 (ja) 表示システム、及び、情報表示方法
US6483483B2 (en) Eyeglasses type image display apparatus
JP4648551B2 (ja) 携帯電話機
CN100476783C (zh) 过程控制环境中的便携计算机
EP1451639B1 (en) Portable multimode display device
EP2458486A1 (en) Information processing device, information processing method, and program
US6611242B1 (en) Information transmission system to transmit work instruction information
CN108376029B (zh) 显示系统
JP3579096B2 (ja) 表示装置
CN102714670A (zh) 便携信息终端和屏幕显示控制方法
JP6590050B2 (ja) 表示装置、表示システム、表示装置の制御方法、及び、プログラム
JPH0863327A (ja) 複数の異なるlcdパネルと共通フレームバッファ出力端子との間の標準インタフェースシステム
JP2001133854A (ja) カメラシステム及び表示装置
JP4217021B2 (ja) 座標入力装置
EP3901737A1 (en) Display apparatus, display system, and display method
WO2021181604A1 (ja) 情報端末装置、及びそのアプリケーション動作モード制御方法
US11720313B2 (en) Display system, display method and program
JP2019117308A (ja) ヘッドマウントディスプレイ
JP2019032728A (ja) 表示装置および表示方法
EP3220259A1 (en) Terminal device, data processing system, program and data processing method
KR100482008B1 (ko) 컴퓨터시스템 및 그 영상신호표시방법
JP2002229735A (ja) 情報処理装置

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): JP KR US

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE CH DE DK ES FI FR GB GR IE IT LU MC NL PT SE

WWE Wipo information: entry into national phase

Ref document number: 1019970707582

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 08945272

Country of ref document: US

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 1997903618

Country of ref document: EP

WWP Wipo information: published in national office

Ref document number: 1997903618

Country of ref document: EP

WWP Wipo information: published in national office

Ref document number: 1019970707582

Country of ref document: KR

WWR Wipo information: refused in national office

Ref document number: 1019970707582

Country of ref document: KR

WWG Wipo information: grant in national office

Ref document number: 1997903618

Country of ref document: EP