CN101341457A - 利用3d定位增强电视应用的方法和系统 - Google Patents
利用3d定位增强电视应用的方法和系统 Download PDFInfo
- Publication number
- CN101341457A CN101341457A CNA2006800061899A CN200680006189A CN101341457A CN 101341457 A CN101341457 A CN 101341457A CN A2006800061899 A CNA2006800061899 A CN A2006800061899A CN 200680006189 A CN200680006189 A CN 200680006189A CN 101341457 A CN101341457 A CN 101341457A
- Authority
- CN
- China
- Prior art keywords
- information
- information collection
- collection
- screen
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000002708 enhancing effect Effects 0.000 title description 2
- 230000004044 response Effects 0.000 claims description 29
- 230000008859 change Effects 0.000 claims description 27
- 238000012546 transfer Methods 0.000 claims description 19
- 230000000007 visual effect Effects 0.000 claims description 17
- 208000003443 Unconsciousness Diseases 0.000 claims description 14
- 238000012545 processing Methods 0.000 claims description 10
- 230000008676 import Effects 0.000 claims description 3
- 230000001965 increasing effect Effects 0.000 abstract description 20
- 230000033001 locomotion Effects 0.000 abstract description 10
- 230000008520 organization Effects 0.000 abstract description 5
- 230000003247 decreasing effect Effects 0.000 abstract 1
- 230000004438 eyesight Effects 0.000 description 47
- 230000003321 amplification Effects 0.000 description 37
- 238000003199 nucleic acid amplification method Methods 0.000 description 37
- 238000006243 chemical reaction Methods 0.000 description 35
- 238000012544 monitoring process Methods 0.000 description 34
- 238000005516 engineering process Methods 0.000 description 26
- 230000006870 function Effects 0.000 description 19
- 230000007704 transition Effects 0.000 description 18
- 238000005096 rolling process Methods 0.000 description 10
- 230000009471 action Effects 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 9
- 230000000694 effects Effects 0.000 description 9
- 239000011159 matrix material Substances 0.000 description 9
- 230000009286 beneficial effect Effects 0.000 description 8
- 230000000875 corresponding effect Effects 0.000 description 7
- 230000007246 mechanism Effects 0.000 description 7
- 230000000712 assembly Effects 0.000 description 6
- 238000000429 assembly Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000003860 storage Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000013461 design Methods 0.000 description 5
- 230000036544 posture Effects 0.000 description 5
- 238000007639 printing Methods 0.000 description 5
- 241000183290 Scleropages leichardti Species 0.000 description 4
- 230000001276 controlling effect Effects 0.000 description 4
- 238000011156 evaluation Methods 0.000 description 4
- 238000003825 pressing Methods 0.000 description 4
- 230000009466 transformation Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000002950 deficient Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- 230000035807 sensation Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000009191 jumping Effects 0.000 description 2
- 239000010985 leather Substances 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 239000012092 media component Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000004091 panning Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000008485 antagonism Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000005587 bubbling Effects 0.000 description 1
- 238000005352 clarification Methods 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 239000004615 ingredient Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 230000001343 mnemonic effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000007794 visualization technique Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
- H04N21/44224—Monitoring of user activity on external systems, e.g. Internet browsing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
- H04N21/4438—Window management, e.g. event handling following interaction with the user interface
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/47815—Electronic shopping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4782—Web browsing, e.g. WebTV
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
- H04N21/4821—End-user interface for program selection using a grid, e.g. sorted out by channel and broadcast time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
- H04N21/4825—End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/16—Analogue secrecy systems; Analogue subscription systems
- H04N7/162—Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing
- H04N7/163—Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing by receiver means only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/16—Analogue secrecy systems; Analogue subscription systems
- H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
- H04N7/17309—Transmission or handling of upstream communications
- H04N7/17318—Direct or substantially direct transmission and handling of requests
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C2201/00—Transmission systems of control signals via wireless link
- G08C2201/30—User interface
- G08C2201/32—Remote control based on movements, attitude of remote control device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42212—Specific keyboard arrangements
- H04N21/42213—Specific keyboard arrangements for facilitating data entry
- H04N21/42214—Specific keyboard arrangements for facilitating data entry using alphanumerical characters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
- H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
Abstract
根据本发明的系统和方法提供了用于组织、选择并启动媒体项的控制架构,包括与可选的3D控制装置耦合的图形用户界面,所述界面可包括定位、点击、滚动、停悬和缩放的基本控制基元,所述基元可用于从大的或小的集中简单快速地选择例如电影、歌曲等的媒体项。当图形显示使用图像时,遥控器将手的移动和手势映射为相关命令,对详细资料的提高的/降低的级别和GUI对象的连续性进行缩放以供用户媒体项中简单地组织、选择和导航。
Description
发明人为弗兰克·A·亨莱特、内加尔·莫什里、威廉·J·纳皮尔、丹尼尔·S·辛普金斯、弗兰克·弗罗布莱斯基、凯文·康罗伊和查尔斯·W·K·格里东、发明名称为“利用3D定位增强电视应用的方法和系统”的美国专利申请。
相关申请
本申请涉及2005年2月14日递交的题为“利用自由空间定位增强电视应用的方法和系统(Method and System for Enhancing TelevisionApplication Using Free-Space Pointing)”的第60/653,229号美国临时专利申请,并要求其优先权,该申请的内容通过引用并入本文。
背景技术
本发明描述一种用于组织、选择并启动媒体项的架构。所述架构的一部分包括具有基本构件块的图形用户界面的设计和操作,基本构件块包括定位、点击、滚动、停悬、缩放。更具体地说,本发明涉及与能够与用3D定位遥控装置使用的媒体项关联的图形用户界面。
与信息的通信相关的技术在过去的几十年里有了迅速的发展。电视、蜂窝电话、互联网和光学通信技术(这里仅列出几样)结合起来将消费者淹没在可得到的信息和娱乐选择中。以电视为例,最近30年来已经引入了有线电视服务、卫星电视服务、按次计费电影和视频点播。然而,20世纪60年代的电视观众在他们的电视机上通常只能够接收到也许是四或五个无线TV频道,今天的电视观众有机会在数以百计和潜在的数以千计的节目和信息频道中选择。目前主要在旅馆等中使用的视频点播技术提供了一种用于从数以千计的电影节目单中进行家庭娱乐选择的潜能。例如TiVo股份有限公司(加利福尼亚州奥维索金街2160,95002)推出的数字视频记录(DVR)设备进一步扩大了可以得到的选择。
为终端用户提供那么多的信息和内容的技术能力给系统设计人员和服务供应商提供了机会和挑战。一个挑战是尽管终端用户通常更愿意拥有更多的选择而不愿意选择变小,但这种喜好与他们希望的即快速又简单的选择处理所相背。不幸的是,终端用户通过其来访问媒体节目的系统和界面的发展使得选择处理既不快又不简单。再次考虑电视节目的实施方式。在电视处于初期时,确定看哪一个节目是相对简单的事情,这是因为可选择的数目较少。人们可以查阅印制的节目指南,该节目指南被格式化为例如一系列的行和列,这些行和列显示出了在(1)邻近的电视频道、(2)被传输到这些频道的节目以及(3)日期和时间之间的对应关系。通过调节调谐钮,电视被调谐到所需的频道,并且观众观看到所选择的节目。在这之后,允许观众远距离调谐电视的遥控控制装置被引入。这种对用户-电视交互的增添产生了被称为“频道冲浪”的现象,借此,观众能够迅速地观看在大量频道中广播的短片段,从而可以快速得知在任意给定的时间什么节目是可看的。
尽管存在频道的数量和可观看的内容急剧增加的事实,但通常可得到的用于电视的用户界面、控制设备选择和架构在过去的30年里没有改变太多。印制的节目指南仍然是用于传递节目信息的最流行的机制。具有上下箭头的多按钮遥控器仍然是最流行的频道/内容选择装置。设计和实现TV用户界面的人们对可得到的媒体内容的增加的反应已经成为现存的选择处理和界面对象的直接延伸。这样,印制的节目指南中的行数被增加以容纳更多的频道。遥控装置中的按钮的数目也被增加以支持附加的功能和内容处理,例如,像图1所示的那样。然而,这种方法大大增加了观众浏览可得到信息所需的时间和执行选择所需动作的复杂度。有争议的是,现存界面的麻烦的本质阻碍了一些服务(例如视频点播)的商业应用,这是由于消费者反对给在他们看来已经是太慢和太复杂的界面再增加复杂度的新服务。
除了在带宽和内容方面增加之外,技术的集成还加剧了用户界面的瓶颈问题。消费者正在积极地做出反应要选择购买集成系统而不是大量可分离组件。这种趋势的一个实施方式是电视/VCR/DVD的组合,其中的三个组成部分以前是三个独立的组件,如今则作为一个集成单元而被频繁购买。这种趋势会延续下去,潜在的最终结果是目前在家庭中可以找到的大部分(如果不是全部的话)通信设备将会组合在一起作为集成单元,例如,电视/VCR/DVD/互联网接入/收音机/立体声单元。即便是那些继续购买分离组件的人们也会期望上述单独组件的无缝控制和这些分立组件之间的互相交互。随着这种集成度的增长,产生了使用户界面更加复杂的潜在可能。例如,在所谓的“通用”遥控单元(例如TV遥控单元和VCR遥控单元功能的组合)被提出时,这些通用遥控单元上的按钮的数目通常地多于单个TV遥控单元或VCR遥控单元上的按钮数目。如果不能准确地找到该遥控装置中的正确按钮,这些增加了数目的按钮和功能使人除了只能在控制TV或VCR的最简单的方面外很难控制其它任何事情。许多时候,这些通用的遥控装置不能提供足够的按钮以访问某些TV所特有的许多层面上的控制或特性。在这种情况下,仍然需要原始设备的遥控单元,并且由于集成的复杂度导致的用户界面问题,所以处理多遥控的最初争论仍然存在。一些遥控单元通过增加可用专家命令编制的“软”按钮解决了这个问题。这些软按钮有时具有附随的LCD显示装置来指示它们的动作。这种方式也具有缺陷,即,如果不将视线从TV转移到遥控装置,它们就难以使用。这些遥控单元的另一个缺陷是采用了多模式以试图减少按钮个数。在这些“模式化”的通用遥控单元中,存在专门的按钮来选择该遥控装置是否与TV、DVD播放器、有线机顶盒和VCR等通信。这产生了许多使用性的问题,包括发送命令到错误的装置、迫使用户通过观看遥控装置来确信其是否处于正确的模式,并且它不能给多装置的集成提供任何的简化。这些通用遥控单元的最大好处是它可通过允许用户将用于多个装置的命令序列编制到遥控装置中来提供一定的集成度。这是一个较困难的任务,以至于许多用户雇佣职业的安装人员来对他们的通用遥控单元进行程序编制。
人们还做出了一些尝试来使终端用户和媒体系统之间的屏幕界面适应现代需求。电子节目指南(EPG)被开发并被实现以取代前述的媒体指南。早期的EPG基本提供的是印制的媒体指南的电子复制品。例如,有线服务操作员提供了模拟的EPG,其中,专用的频道显示了频道的缓慢滚动格栅(grid)和它们在一些时间范围(例如,下两个小时)中相关的节目。利用这种方式即便是滚动通过一百个频道也是冗长缓慢的,并且不能够可行地升级以包括大量的附加内容安排(deployment),例如,视频点播。更加精深复杂的数字EPG也被开发出来。在数字EPG中,节目表信息(以及可选的应用/系统软件)被传递到专用的EPG设备,例如,数字机顶盒(STB)。数字的EPG具有更大的灵活性来为媒体系统设计用户界面,这是因为它们能够提供局部交互,并能够在用户和将被观看的媒体节目之间置入一个或多个界面层。可在卡门(Kamen)等人的第6,421,067号美国专利中找到上述界面的一个实施方式,该文公开的内容通过引用并入本文。图2示出了在’067号专利中描述的一种GUI(图形用户界面)。在图2中,根据卡门等人的专利,第一栏190列出了节目频道,第二栏191表示当前正在播放的节目,栏192表示在下半个小时播放的节目,第四栏193表示在半个小时之后播放的半小时节目。棒球棒图标121横跨栏191和192,以此表示预计棒球比赛继续到与栏192对应的时间档。然而,文本框111没有延伸到栏192。这表示预计足球比赛不会延伸到与栏192对应的时间档。如图所示,象形图标194表示在足球比赛之后,ABC将播出赛马节目。图2中的图标能够使用游标(未示出)来启动(actuate)以执行各种操作,例如下载与所选择节目相关的信息。在美国第6,314,575、6,412,110和6,577,350号专利中还描述了其它的数字EPG和相关界面,其公开的内容通过引用并入本文。
然而,上述的界面具有(在其它的缺点中)不能够容易地在媒体项目的大集合和媒体项目的小集合之间调整大小(scale)的问题。例如,依赖于节目列表的界面可以为小的媒体节目集合很好地工作,但是对于浏览大的媒体节目集合却是冗长乏味的。与用于大媒体节目集合的列表界面相比,依赖于分等级的导航(navigation)(例如树结构)的界面可具有更快的遍历速度,但是不适于小的媒体节目集合。另外,用户趋向于失去在其中用户不得不在树结构中移动经过三层或更多层的选择处理的兴趣。对于所有的这些情况,目前的遥控单元通过迫使用户反复地按下上按钮和下按钮来遍历上述列表或分级结构以更冗长乏味地进行这些选择处理。在可以使用选择跳跃控制时(例如上翻页和下翻页),用户经常不得不看该遥控装置以找到这些具体的按钮,或不得不经过训练以知道它们恰好存在。
因此,期望得到一种简化用户与媒体系统之间的控制和屏幕界面、并加快选择过程、而同时允许服务提供商通过便利地向用户供应大量媒体节目和新的服务来利用对终端用户设备增加的可用带宽的益处的组织架构、技术和系统。此外,期望得到一种提供简单快速地选择而不管被浏览媒体项集合的大小的界面。
发明内容
根据本发明的系统和方法通过提供包括用户界面架构的用于组织、选择、并启动媒体项的总体控制架构满足了上述需要和其它需要,用户界面架构为简单快速选择媒体项作准备。可使用3D定位装置实现对该架构的控制,3D定位装置包括用于在相关图形用户界面上定位、点击、并滚动通过选项的按钮和滚动轮的最小集合。当定位器停悬在选项上时,示例性的图形用户界面(GUI)通过使用屏幕上的定位器、图形动画向用户提供反馈,并将选项缩小和放大以在概观屏幕和详细屏幕之间平稳导航。本发明的示例性实施方式使用进行缩放以用于增加/降低GUI对象的详情和连续性的级别的图像,以允许用户简单导航。根据本发明的图形用户界面在虚拟表面组织媒体项选项。相似的选项可分组在一起。最初,界面为呈现出该虚拟表面的缩小视图,并且在多数情况下,在这一级别不会看到实际选项的全部细节。随着用户逐渐放大,将显示出关于媒体项组或选项的更多细节。在不同的缩放级别,可使用不同的控制,这样用户可播放选项组、个别选项、或在虚拟表面的另一部分浏览其它相关媒体项。
根据本发明的一个示例性实施方式,使用具有在电视屏幕上显示输出的软件应用的3D定位装置的方法包括以下步骤:在电视屏幕上显示与该软件应用相关联的第一组信息,其中该软件应用包括电子节目指南、电视平面控制、照片册、家庭视频集、以及购物界面;移动3D定位装置;处理与3D定位装置的移动相关的数据,以补偿该3D定位装置无意识的移动;基于处理过的数据,将显示在电视屏幕上的游标移动到电视屏幕上新的位置;以及响应于游标的新位置改变电视屏幕上第一组信息的显示。
根据本发明另一个示例性实施方式,一种系统包括3D定位装置、电视、用于运行在电视上显示输出的软件应用的处理器,其中处理器首先在电视上显示第一信息集,第一信息集与电子节目指南、电视屏幕控制、照片册、家庭视频集和购物界面中的至少之一相关联。进一步地,响应于3D定位装置的移动,处理器补偿来自3D定位装置无意识的移动带来的数据输出,然后基于经过补偿的数据,将在电视上显示的游标移动到电视上新位置;以及响应于游标的新位置改变第一信息集在电视上的显示。
根据本发明另一个示例性实施方式,用于将3D定位装置与在电视上显示输出的软件应用一起使用的系统包括:用于在电视上显示与软件应用相关联的第一信息集的装置,其中软件应用包括电子节目指南、电视屏幕控制、照片册、家庭视频集和购物界面中的至少之一;用于移动3D定位装置的装置;用于处理与3D定位装置的移动相关的数据以补偿3D定位装置的无意识的移动的装置;用于基于处理过的数据将显示在电视上的游标移动到电视上的新位置的装置;以及用于响应于游标的新位置改变电视屏幕上的第一信息集的显示的装置。
根据本发明的另一个示例性实施方式,用于响应于3D定位装置的移动在电视屏幕上显示信息的软件应用包括:用于处理移动数据以从中去除无意识移动的装置,用于响应于处理过的移动数据对游标在电视上重定位的装置,以及用于仅响应于游标的重定位改变电视上信息的显示的装置。
附图说明
附图示出了本发明的示例性实施方式,其中:
图1示出了用于娱乐系统的传统遥控单元;
图2示出了用于娱乐系统的传统图形用户界面;
图3示出了在其中能够实现本发明的示例性实施方式(显示和遥控)的一个示例性媒体系统;
图4详细地显示了图3中的系统控制器;
图5-8示出了根据本发明一个示例性实施方式的用于媒体系统的图形用户界面;
图9描述了根据本发明一个示例性实施方式的示例性数据结构;
图10(a)和10(b)描述了利用图9所示的根据本发明一个示例性实施方式的数据结构建立的示例性GUI的一部分的缩小和放大版本;
图11示出了用于产生根据本发明的示例性实施方式的GUI显示的有序的双向链表;
图12(a)和12(b)显示了另一示例性GUI的一部分的缩小和放大版本,它用于描述根据本发明的示例性实施方式的节点监视算法的操作;
图13(a)和13(b)示出了根据本发明的示例性实施方式的示例性数据结构,其被用来描述在GUI从图12(a)中的视图向图12(b)中的视图转换时节点监视算法的操作;
图14示出了根据本发明另一个示例性实施方式的、包括实现分辨率一致的缩放的虚拟相机的数据结构;
图15(a)和15(b)显示了示例性GUI的一部分的缩小和放大版本,其示出了根据本发明的示例性实施方式的语义缩放;
图16-20示出了根据本发明另一个示例性实施方式的可缩放的图形用户界面;
图21描述了一组示例性的、能够根据本发明的示例性实施方式被提供的覆盖控制(overlay control);
图22描述了用于实现根据本发明的可缩放图形用户界面的示意性架构;
图23(a)-23(b)是根据本发明的示例性实施方式的、说明利用3D定位在电子节目指南中选择不同的频道的GUI屏幕;
图24(a)-24(b)是根据本发明的示例性实施方式的、说明利用3D定位在电子节目指南中滚动频道列表的GUI屏幕;
图25(a)-25(f)是根据本发明的示例性实施方式的、说明利用3D定位显示和/或去除与视频馈送(video feed)相关联的控制元件的GUI屏幕;
图26(a)-26(b)是根据本发明的示例性实施方式的、说明利用3D定位显示链接以使电子节目指南中的媒体项之间能更高效地转换的GUI屏幕;
图27(a)-27(b)是根据本发明的示例性实施方式的、说明利用3D定位显示和/或去除视频流中的传输覆盖控制的GUI屏幕;
图28(a)-28(b)是根据本发明的示例性实施方式的、说明利用3D定位在照片集界面中操作照片的GUI屏幕;
图29(a)-29(b)是根据本发明的示例性实施方式的、说明利用3D定位在家庭视频集界面中操作视频的GUI屏幕;
图30(a)-30(b)是根据本发明的示例性实施方式的、说明利用3D定位在界面中操作日程表的GUI屏幕;
图31(a)-31(b)是根据本发明的示例性实施方式的、说明利用3D定位操作因特网界面的GUI屏幕;
图32(a)-32(c)是根据本发明的示例性实施方式的、说明利用3D定位操作音乐界面的GUI屏幕;以及
图33(a)-33(f)是根据本发明的示例性实施方式的、说明利用3D定位操作购物界面的GUI屏幕。
具体实施方式
下面参照附图对本发明进行详细的说明。在不同的附图中,相同或相似的元件用同一附图标号表示。此外,以下对本发明的详细说明并不是对本发明的限制。相反,本发明的范围是由所附权利要求来限定的。
为提供上下文以便于讨论,首先参考图3对其中可以实现本发明的一个示例性的集成媒体系统200进行详细描述。但是,本领域普通技术人员可以预见到,本发明并不仅限于在这类媒体系统中实现,而是可以在其中包括更多或更少的组件。在本系统中,输入/输出(I/O)总线210将媒体系统200中的各个组件连接在一起。该I/O总线210代表多种用于对媒体系统组件之间的信号进行传输的机制和技术中的任意一种。例如,该I/O总线210可以包括适当数量的用于传输音频信号的独立音频“插头”电缆、用于传输视频信号的同轴电缆、用于传输控制信号的双线式串行线路或红外线或射频收发器、光纤或任何用于传输其它类型的信号的其它传输机制。
在这个示例性的实施方式中,媒体系统200包括电视/监视器212、视频卡式记录器(VCR)214、数字化视频盘(DVD)记录/回放装置216、音频/视频调谐器218和小型碟播放机220,这些器件都被连接到I/O总线210上。VCR 214、DVD 216和小型碟播放机220可以是单光盘或单磁带式设备,也可以是多光盘或多磁带式设备。它们可以是独立的单元或者被集成在一起。此外,媒体系统200还包括一个麦克风/扬声器系统222、摄像机224和无线I/O控制装置226。根据本发明的示例性实施方式,无线I/O控制装置226是支持3D定位的媒体系统遥控单元,它具有最小数目的按钮以用于支持导航,并通过RF信号与娱乐系统200进行通信。例如,无线I/O控制装置226可以是利用回转仪(gyroscope)或其它机制来限定屏幕位置和位移矢量从而确定出所需的特殊命令的3D定位装置。在无线I/O控制装置226上还可包括将启动在下面描述的“点击”基元(primitive)的一组按钮,以及包括“后退”按钮。在另一个示例性的实施方式中,无线I/O控制装置226是通过IR信号与媒体系统200的组件进行通信的媒体系统遥控单元。在另一个实施方式中,无线I/O控制装置134可以在外观上类似于典型的媒体系统遥控装置,同时增加有可允许用户在媒体系统100的显示器中设置鼠标位置的跟踪球或其它导航机制的特性。
媒体系统200还包括系统控制器228。根据本发明的一个示例性的实施方式所述,系统控制器228能够操作以存储和显示可从多个娱乐系统数据源获得的娱乐系统数据,并能控制与系统各组件相关的多种特征。如图3所示,必要时,系统控制器228可通过I/O总线210被直接或者间接地连接到系统的各个组件。在一个示例性的实施方式中,除I/O总线210外,或者用来替代I/O总线210,系统控制器228配备有无线通信发射机(或收发器),它能够通过IR信号或RF信号与系统组件进行通信。无论控制媒质是什么,系统控制器228都被设置成能够通过下文所述的图形用户界面来控制媒体系统200中的各个媒体组件。
如图3进一步所示,媒体系统200可以被设置用于接收来自多个媒体源和服务提供商的媒体节目。在这个示例性的实施方式中,媒体系统200从以下数据源中的任一个或全部接收信息并且可选择地向其发送信息:有线广播230,卫星广播232(例如通过卫星天线),广播电视网234的甚高频(VHF)或超高频(UHF)射频通信(例如通过空中的天线),电话网236和有线调制解调器238(或者其它的互联网内容源)。本领域技术人员可以预见到,图3所示的媒体组件和媒体源仅仅是一个示例,媒体系统200可以包括更多或者更少的这些组件。例如,对于上述系统的其它形式的输入包括AM/FM无线装置和卫星无线装置。
图4是示出根据本发明的示例性的系统控制器228的方框图。系统控制器228例如能够实现为机顶盒,并例如包括处理器300、存储器302、显示器控制器304、其它设备控制器(例如,与系统200的其它组件相关的装置)、一个或多个数据存储设备308以及I/O接口310。这些组件通过总线312与处理器300进行通信。本领域技术人员可以预见到,可使用一个或多个处理单元来实现处理器300。存储设备302可例如包括DRAM或SRM、ROM,这些存储设备中的一些可以被指定成存储待由处理器300运行的软件和/或这些程序使用的数据的高速缓冲存储器,这些软件和数据包括与在下面描述的图形用户界面相关联的软件和/或数据。显示器控制器304可由处理器300操作以控制监视器212的显示,以连通其它事情一起显示在下面描述的GUI屏幕和对象。根据本发明的示例性实施方式的可缩放的GUI提供了与分辨率无关的缩放,从而使得监视器212能够以任意的分辨率进行显示。设备控制器306提供了媒体系统200的其它组件和处理器300之间的接口。数据存储器308可包括一个或多个硬盘驱动器、软盘驱动器、CD-ROM设备或其它的大容量存贮器设备。输入/输出接口310可包括多种接口中的一个或多个,包括例如键盘接口、RF接口、IR接口和麦克风/语音接口。根据本发明示例性的实施方式,I/O接口310将包括用于接收与无线定位装置的运动关联的位置信息的接口。
根据本发明的示例性实施方式的图形用户界面由系统控制器228响应处理器执行包含于存储器302中的指令序列来生成和控制,以显示媒体项选择信息。上述指令可从其它计算机可读媒介(例如数据存储设备308)或从外接于媒体系统200的计算机读入到存储器302中。对包含于存储器302中的指令序列的执行使得处理器在监视器212中连同其它的事情一起生成图形用户接口对象和控制。在可选的实施方式中,可使用硬连线电路来代替或与软件指令组合来实现本发明。如在背景技术部分中提到的那样,传统的与电视工业关联的界面架构在为用户提供简单且全面的选择体验能力方面具有严重的缺陷。因此,在本文中描述的控制架构克服了这些限制,并因此适于与电视一起使用,当然不排除与其它装置一起使用。还应该预见到在本文中描述的创新的控制架构、图形用户界面和/或各种算法可应用于与计算机和其它非电视设备使用的接口中。为了区别本发明的示例性实施方式的这些各种应用,在本说明书中使用术语“电视”和“TV”来指代显示器设备的子集,而术语“GUI”、“GUI屏幕”和“显示屏”是普通的,并指电视显示器、计算机显示器和其它任意显示器设备。更具体地说,术语“电视”和“TV”的意图是指在无需使用适配器就可将电视信号转换为其它格式(例如,计算机视频格式)的情况下能够显示电视信号(例如,NTSC信号、PAL信号或SECAM信号)的显示器设备的子集。此外,术语“电视”和“TV”指通常能从几英尺或更远的距离观看的显示器子集(例如沙发到家庭活动室TV),而计算机显示器通常是近距离观看的(例如,从椅子到桌面的显示器)。
在描述了能够用来实现根据本发明的包括可缩放图形界面的控制架构后,现在描述这些界面的几个实施例。根据本发明的示例性实施方式,用户界面显示了可按类别分组的可选择项。用户将遥控单元指向感兴趣的一个或多个种类,并且按下选择按钮以进行放大,或按下“后退”按钮缩放回原来的状态。用户的每次放大或缩放回原来状态的动作都使得通过用户界面显示于屏幕中的可选择的节目的放大等级和/或内容产生变化。根据示例性的实施方式,每次放大等级的改变可以是一致的,即以预定的级别来改变放大等级。本发明的示例性实施方式还提供了并入有几个可视化技术以实现放大到很大比例的用户界面。这些技术包括构件块和能够获得可缩放和易于使用的技术(尤其是采用用户界面来提高用户视觉记忆以快速地重新访问用户界面对象的技术)的组合。
用户界面在很大程度上是视觉体验。在这样的环境中,本发明的示例性实施方式使用了用户能够记起该视觉环境中的对象位置的能力。这通过为用户界面选择项提供稳定的、相关的(dependable)位置来实现。每一个对象在可缩放布局中都具有相应的位置。一旦用户发现感兴趣的对象,就会本能地记起设置对象的方向。如果该对象是特别感兴趣的,则用户可能会不止一次地访问该项目,这会加强用户对到该对象的路径的记忆。根据本发明的示例性实施方式的用户界面提供了视觉记忆系统(visual mnemonics),它能够帮助用户记起所感兴趣的项目的位置。该视觉记忆系统包括移动(pan)和缩放动画、通过用户界面的虚拟面生成运动的地理感觉的转场效果、和一致的缩放功能性(functionality),基于下面描述的实施例,它们连同其它的事情一起将变得更加显而易见。
组织机制被提供以使得用户能够从极多的节目组中进行选择,而同时屏蔽与大量选择组关联的细节。根据本发明,可以使用各种类型的组织机制,在下面给出实施例。
首先参照图5到图8,其中描述了根据本发明的示例性实施方式的包括可缩放图形用户界面的示例性控制架构在显示和选择音乐媒体节目中的使用。在后面的附图中还可看到与根据本发明的界面相关联的不同的替代的和/或附加的GUI屏幕。图5描绘了处于最大缩小状态的可缩放的GUI。其中,界面显示了一组形状(shape)500。显示在各个形状500中的是文本502和/或图片504,用于描述通过GUI的这些部分可对媒体节目选择组进行操作。如图5所示,形状500为矩形的,文本502和/或图片504描述了媒体的种类。然而,本领域的技术人员应该认识到,首先看到的这些GUI组能够表示用户可得到的媒体选择的其它方面,例如,艺术家、出品年份、艺术家的居住区域、节目的长度或选择的其它特征。而且用来在GUI中概略描述各种分组的形状不一定要是矩形的。除了形状组500中的文本500和/或图片504外,或作为对文本500和/或图片504的替代,专辑封面(album cover)的缩小版本和其它图标能够用来为用户提供进一步的浏览提示。GUI506的背景部分可以显示为纯色,或可以是例如映射图的图片的一部分,以帮助用户记起种类的空间位置,从而在以后需要较少阅读就能使用该界面。选择定位器(游标)508跟随输入设备的运动,并在用户按下该设备中的按钮(在图5中未示出)时指出将要放大的位置。
根据本发明的一个示例性实施方式,输入设备可以是无线鼠标,例如,由Gyration inc.(回转有限公司),(位于加利福尼亚的萨拉托加林荫道12930,萨拉托加大厦C,95070(12930 Saratoga Avenue,Bldg.C,Saratoga,CA 95070))制造的无线鼠标,它与支持定位、点击、滚动、停悬和缩放构件块(将在下面进行更加详细的描述)的图形用户接口耦合。在和本发明一起使用时会带来有益效果的该示例性输入设备的一个特征是,其仅具有两个按钮和一个滚动轮,也就是三个输入启动对象。这些按钮中的一个能够被配置成放大(选择)按钮,另一个按钮能够被配置为缩小(后退)按钮。与例如图1所示的传统遥控控制单元相比,本发明通过大大减少按钮的个数等来简化用户在选择他或她的媒体节目时所面对的GUI的这些方面。根据本发明的示例性实施方式的输入设备的附加优选(但不是必需)特征是它们为用户提供了“3D定位3D定位”的能力。在该说明书中使用的短语“3D定位”指用户在显示屏前空中的三维(或更多)空间自由移动输入设备的能力,以及用户界面将这些运动直接转换为游标在屏幕上的运动的相应能力。因此,“3D定位”不同于传统的计算机鼠标定位技术,传统的计算机鼠标定位技术使用不同于显示屏的表面(例如桌子表面或鼠标垫)作为代理(proxy)表面,鼠标在这些表面的相对运动被转化成计算机显示屏中的游标运动。使用3D定位来控制根据本发明的示例性实施方式的架构进一步简化了用户的选择过程,而同时提供了将姿势(gesture)作为可区别的输入引入到上述界面的机会。姿势可被看作是能够随时间变化的可识别运动模式,该模式可被转换为GUI命令,例如以x、y、z、平摆(yaw)、俯仰(pitch)和摇摆维度的或它们任意的子组合的运动的函数。然而,本领域的技术人员应该认识到任意适合的输入设备能够与根据本发明的可缩放的GUI一起使用。其它适合的输入设备的实施方式包括但不限于跟踪球、触摸垫(touchpad)、传统的TV遥控设备、语音输入设备、任意能够将用户的姿势传递/转换成GUI命令的设备,或它们的任意组合。其意图是在本文中进行描述的GUI功能的每个方面都能够使用至少一个姿势和语音命令在根据本发明的架构中启动。可选的实现包括使用游标和/或其它遥控键或甚至是语音输入来识别选择的节目。
图6显示了如果用户从图5中选择种类3(例如,通过在显示器212中将游标508在矩形环绕种类3围绕的区域上移动,并在输入设备中按下按钮)的话将被显示的种类3进行放大的图。本发明的界面能够产生从图5到图6的缩放,从而使得用户清楚产生了缩放。上述产生的缩放/转场效果的实施例将在下面进行描述。一旦包含种类3的形状516占用了大部分的显示器212中的屏幕,上述界面显示了在上述种类中具有专辑的艺术家。在该实施例中,显示了七个不同的艺术家和/或它们的作品。与种类3相邻的未选择的种类515(其在图5中为缩小视图)仍然与在视图上放大的种类3相邻,但是它在显示器212的边缘处于被部分剪切的状态。这些未选择的种类能够通过选择指针508对它们的选择进行快速浏览。然而应该认识到本发明的其它示例性实施方式能够忽略被剪切相邻对象,相反仅显示未被剪切的选择。艺术家组(例如,艺术家组512)中的每一个都能够包含缩小专辑封面的图像、艺术家的照片或可由用户定制的艺术作品(如果上述分类包含用户建立的播放列表的话)。
用户则可以选择一个艺术家组用于进一步浏览和/或选择。图7显示了响应用户经由对游标508进行定位、并启动输入设备而选择了艺术家3的进一步放大的视图,其中,可以看到专辑封面520的图片。如图从图5和图6的GUI屏幕转变一样,未被选择的、邻近的艺术家(在该实施例中是艺术家#2、6和7)被显示为朝向被放大的显示中的侧边,用户能够使用选择指针508对它们进行点击,从而看到这些艺术家的全部视图。除了专辑封面的图像520外,在界面的这部分中,艺术家信息524能够作为艺术家组中的节目而显示。这些信息可包含例如艺术家的照片、传记、琐事、作品目录、影响、链接网址和其它有关数据。照片册图片520中的每一个可包含照片册封面的图片,以及可选地包含有文本数据。在照片册图片520包括用户创建的艺术家列表的情况下,图形用户界面能够显示通过该界面自动选择或用户预先选择的图片。
最后,在用户从组521中选择专辑封面图片520时,上述界面缩放到如图8所示的专辑封面。随着缩放的继续,该专辑封面能够退为或变为包含这样一些项目的视图,例如,专辑530的艺术家和标题、曲目列表532、与专辑相关的进一步信息536、专辑封面的更小版本528、以及用于回放内容、修改分类、链接到艺术家网页,或找出与选择有关的任意其它信息的控制信息534。相邻的专辑538显示出那些能够通过使用选择定位器508选择,以使得界面显示它们的内容。如上所提到的那样,本发明可选择的实施方式能够例如放大到仅显示被选择的对象(例如,专辑5),并忽略未被选择的对象(例如,专辑4和6)的剪切部分。该最终的缩放提供了语义性缩放(semantic zooming)的一个实施方式,其中在先前的缩放等级中不可见的某些GUI元件被显示出来。各种用于实现根据本发明的示例性实施方式的技术在下面进行描述。
如图5-8以及说明书中示出的那样,该示例性实施方式的图形用户界面提供了对音乐集的浏览。根据本发明的界面还能够用于视频集,例如用于DVD、VHS带、其它记录的媒体、视频点播、视频片段和家庭影院。其它的音频使用包括对无线电节目、教学磁带、文史资料和声音剪接的浏览。还能够使用本发明来组织和访问印制的或文本媒体,例如新闻故事和电子书。
根据前面的描述,本领域的技术人员应该认识到,根据本发明的可缩放的图形用户界面为用户提供了快速且容易地浏览大量(或较少)媒体项的能力。这种能力可归因于本发明的示例性实施方式的界面的许多特性,这些特性包括但不限于:(1)使用图像作为用于特殊媒体项的全部或部分选择信息,(2)使用缩放来快速提供与用户进行选择所需的尽可能多或尽可能少的信息,以及(3)使用几种GUI技术,它们被组合起来给用户所有界面都位于同一平面的感觉,从而能够完成GUI的导航,并通过用户的方向感觉而被记住。根据本发明的GUI的后一方面能够连同其它事情一起将各种GUI屏幕“地理性地”连接起来,它通过使尽可能多的GUI对象从一个GUI屏幕到下一个GUI屏幕保持连续而实现,例如,通过显示相邻的、环绕于当前GUI屏幕边沿的未被选择的对象的边缘。可选地,如果期望得到清楚的视图以及其它的GUI技术提供地理性的反馈,则可以忽略被剪切的对象。如在该文中使用的那样,短语“GUI屏幕”指在同一时间呈现于一个或多个显示器单元中的一组GUI对象。GUI屏幕可被呈现于输出媒体项的同一显示器中,或者它可被呈现在不同的显示器中。显示器可以是TV显示器,计算机监视器或任意其它合适的GUI输出设备。
另一个提高用户感觉到GUI屏幕是连接性的GUI效果是在执行缩放时、或在用户选择与当前被选择的对象的缩放等级相等的邻近对象时产生的移动动画(panning animation)效果。返回到图5所示的实施例,在用户最初观看该GUI屏幕时,他或她的观察点集中在点550附近。然而,在他或她选择种类3进行放大时,他或她的观察点转移到点552。根据本发明的示例性实施方式,放大处理被激励以将POV中心从点550转移到点552。这种移动动画能够被用来改变各种GUI,例如从缩放等级的改变,或将一个对象改变到同一GUI放大等级中的另一个对象的改变。因此,如果(例如)位于图6的GUI屏幕中的用户选择最左侧的未被选择的种类515(种类2),则将发生移动动画,这将给用户在视觉上以左或西“移”的印象。本发明的示例性实施方式使用上述技术来提供GUI屏幕之间的定向运动是一致的感觉,从而使用户更加快速地在放大等级之间和在相同放大等级的媒体项之间浏览GUI。
能够使用各种数据结构和算法来实现根据本发明的可缩放的GUI。例如,用于在显示照片的图像浏览器中进行移动和缩放的数据结构和算法在例如下面的论文中已经被描述:“Quantum Treemaps andBubblemaps for a Zoomable Image Browser”,Benjamin B.Bederson,UIST2001,ACM Symposium on User Interface Software and Technology,CHI Letters,3(2),pp.71-80(本杰明·B·比得森的题为“用于可缩放图像浏览器的量子数图和冒泡图”,UIST2001,用户界面软件和技术的ACM论坛,CHI学报,3(2),第71-80页),其被并入本文作为参考。然而,为了提供用于媒体选择的、能够以高的等级来在大量的应用中进行切换,并且能够使用户以较低的等级控制所选择的图像以执行各种媒体选择功能的GUI,需要附加的结构和算法。
可缩放的GUI可被概念化为能够在显示设备的视区中的用户界面组件的场景周围支持移动和缩放动画。为了完成这种效果,根据本发明的示例性实施方式的可缩放的GUI能够使用场景图数据结构(scenegraph data structure)来实现。在场景图中的每一个节点表示用户界面组件的某些部分,例如按钮或文本标签或一组界面组件。节点内部的子节点表示图形元素(线、文本、图像等)。例如,在场景图中的一个应用可以被表示为具有用于其界面中的图形元素的各馈送节点的节点。两种特殊类型的节点在本文中被称为相机(camera)和分层(layer)。相机是通过着眼于分层节点而将视区提供到场景图的其它部分的节点。在这些分层节点的下面是用户界面元素。用于可缩放界面的控制逻辑通过编程调整相机视线变化,以提供移动或缩放效果。
图9显示了包含基本可缩放的界面元素的场景图,这些元素能够用来实现本发明的示例性实施方式,具体地讲,该场景图包含了一个相机节点900和一个分层节点902。相机节点900和分层节点902之间的点划线表示相机节点900被配置成将分层节点902的子节点绘制(render)到相机的视区中。被联结的显示器设备904使用户看到相机的视区。分层节点具有描绘圆和一对椭圆的三个子节点904。该场景图还进一步指出,通过节点912-918在上述圆中画出了矩形,以及在矩形画出了三个三角形。场景图通过根节点920被联系入其它数据结构的其它场景图。节点906-918中的每一个具有通过使用局部坐标变换矩阵使其相对于其父节点进行比例缩放和定位的能力。图10(a)和10(b)分别示出了通过相机以第一放大等级缩小、以及以第二放大等级放大的场景图的样子。
绘制场景图可实现如下。当显示器904需要更新时,例如用户触发了从图10(a)的视图到图10(b)的视图的放大,则重画事件调用联结到显示器904的相机节点900以绘制相机节点900自身。这样反过来使得相机节点900通知分层节点902绘制相机视区内的区域。分层节点902通过通知它的子节点绘制这些子节点自身而将其本身绘制,等等。用于上述区域更新的当前变换矩阵和外接长方形在各个步骤被传递(pass),并且可选地得到修改以通知各个节点它们应该用来进行绘制的适当比例和偏移。由于在根据本发明的可缩放的GUI内操作的应用的场景图可包括数以千计的节点,所以各个节点能够检测变换矩阵以及要被更新的区域,以确保它们的绘制操作真正能够被用户看到。尽管前面描述的实施例描述了包括一个相机节点和一个分层节点的场景图,但是应该预见到,本发明的示例性实施方式能够嵌入多个相机和分层。这些被嵌入的相机能够为用户提供用户节点元素,例如指示在整个可缩放界面中用户当前视线区域的小的缩小图,并且能够允许用户界面组件可独立地缩放和移动。
在使用可缩放界面来协调多应用(例如像将在下面参照图14-18描述的示例性电影浏览器一样)的操作时,用于每个应用的存储和资源需求可能会超过在媒体系统中的总有效存储。这就暗示在用户不再看它们时,需将这些应用的一些或全部代码和数据卸载。然而,在根据本发明的可缩放的GUI中,提供这样的外观是期望的,即,使一些或所有应用对于用户总是看起来是激活的。为了满足上述两个对抗的目标,对于用户视线来说是“幕外(off-screen)”的应用能够进入到临时挂起的状态。为了在根据本发明的可缩放的GUI中实现这个功能,将事件发送到应用以指示它们何时进入和退出视区。实现上述事件的一个方式是在绘制组件的代码中增加逻辑,从而检测用户何时进入视区。然而,这意味者该通知逻辑在每个绘制事件被调用,并且更重要的是它不能够容易地检测用户何时浏览过远离组件的视区。另一种用于将事件发送到应用的方法是将通知逻辑并入到GUI浏览元件(例如超级链接和按钮)中,从而使得在它们改变相机视区以将所感兴趣的组件包括进来时,将通知发送到上述组件。然而,这需要程序员来警惕地(vigilantly)将通知代码增加到所有可能的浏览UI元素中。
根据一个示例性实施方式,能够使用有计算效率节点监视算法来通知应用GUI组件和/或应用在何时进入和退出相机视区。在高的等级上,该节点监视算法具有三个主要处理级:(1)初始化,(2)视区改变评估,以及(3)场景图改变评估。初始化级计算由视区改变评估级使用的节点量,并且初始化正确的数据结构。视区改变评估级在视区改变时被调用,并通知所有进入或退出视区的监视节点。最后,场景图改变评估级更新在初始级产生的计算,这些计算由于在场景图中的变化而变得无效。例如,如果监视节点的先辈节点(ancestor node)在场景图中改变了位置,则在初始级中进行的计算需要重新计算。
在这些级中,视区改变评估级驱动节点监视算法的其余部分。为了描绘节点在何时进入和退出视区,初始化步骤确定期望节点的边界矩形,并将其从其局部坐标系统转变到视区的局部坐标系统。按照这种方式,检测节点进入不需要在各个视区改变处进行一系列坐标转换。由于该节点的父节点可具有转换矩阵,所以该初始步骤需要从该节点直到相机节点来遍历场景图。如下所述,如果在场景图数据结构中使用嵌入的相机节点,则需要多个边界矩形来容纳在多个位置出现的节点。
在视区坐标系统中计算出用于各个监视节点的边界矩形后,初始化级将边界矩阵增加到视区改变评估数据结构中。上述节点监视算法使用基本的构件块用于屏幕中的每一维度。在根据一些示例性实施方式的可缩放界面中,这包括x维度、y维度以及比例维度。然而,如在下面所述的那样,其它示例性实施方式可具有附加的或不同的维度。比例维度描述了在视区的节点的放大等级,并且通过下式来描述:
其中,s是比例,d是从该节点的一个点到该节点的局部坐标中的另一个点的距离,以及d’是在该视区中上述点到另一点的距离。
图11显示了用于检测一个维度的场景进入和退出的示例性构件块。下面描述在x维度的处理,但是本领域的技术人员应该认识到能够以相似的方式处理其它的维度。区域块1100包含被转换边界矩形坐标的基准(references)。这包括矩形的左和右(顶部和底部或最小和最大比例)偏移量。左和右偏移量分别存储在转换块1102和1104中,转换块1102和1104本身置于有序的双向链表中,从而使得较低编号的偏移量朝向起始位置。当前的视区边界存储于视线边界区块1106。区块1106具有指向刚好超出视图的左侧和右侧的转换块的指针,例如,直接位于由视图左侧指向的区块的右侧的转换块出现在视图中,除非上述由视图左侧指向的区块由视区右侧指向。
在视区改变时,对于每一维度发生下述处理。首先,检测视图左侧和视图右侧指针以确认它们是否需要移动以包括或排除转换块。接下来,如果上述指针中的一个或两个需要移动,则它们略过(slide over)上述转换块以到达它们新的位置。接着,对于由视图左侧和视图右侧指针经过的每个转换块,上述节点监视算法执行在下面将描述的转换块通知编码。该通知编码确定其各自的节点是否有可能进入或退出的视区。如果具有,则该节点被添加到后处理列表(post processing list)中。最后,在用于各个维度的该处理的结尾,检测上述后处理列表中的各个节点其视区状态是否真实地发生了改变(与先改变然后变回相反)。如果真的发生了改变,则上述算法发送事件到上述组件。应该注意到,如果视区快速跳转到可缩放的界面的新区域,则上述算法可检测到更多伪进入和退出事件。
转换块通知编码能够被实现成检查表,该检查表确定移入和移出用于该维度的节点是否被检测。下面显示了示例性的上述表。
节点侧 | 视图侧 | 视图移动方向 | 局部相交通知 | 完全相交通知 |
左 | 左 | 左 | 无 | 进入 |
左 | 左 | 右 | 无 | 退出 |
右 | 左 | 左 | 进入 | 无 |
右 | 左 | 右 | 退出 | 无 |
左 | 右 | 左 | 退出 | 无 |
左 | 右 | 右 | 进入 | 无 |
右 | 右 | 左 | 无 | 退出 |
右 | 右 | 右 | 无 | 进入 |
表1-转换通知表
第1、2和3栏是转换通知表的输入。具体地说,节点监视算法使用节点侧、视图侧和视图移动方向的组合来编址该表,以确定该评估的节点是否被进入、退出或没有影响。栏1指由视区指针经过的转换块所表征的节点侧。栏2指视区侧,栏3指在视区通过节点的转换块时该视区侧移动的方向。输出栏4或5是在上述节点部分或完全可视时根据该节点是否应该被通知来进行选择的。例如,在一些实现方案中,理想的情况是仅在应用(例如视频流窗口)完全可视之后才通知该应用,这是因为将部分可视的视频窗口加载到可缩放的GUI中在视觉上是分裂性的。
在该表的输出表示进入和退出时,该节点监视算法将该节点添加到后处理列表。表1中的输出栏基于下面的规则来填充(populate)。如果该节点在所有的维度相交,则在上述后处理步骤中发送进入通知。如果该节点在视图中并且现在一个或多个维度停止交叉,则将发送退出通知。为了降低后处理列表中的节点个数,转换块通知编码在将该节点添加到列表之前检测与其它维度的交叉。这在所有数目的维度(例如,三个或更多)中仅有一个或两个维度交叉时,免去了后处理步骤。在用户界面对象(例如,应用)要被通知其在GUI中的视区状态时,它用上述节点监视算法登记一个函数(function)。在上述应用进入或退出视图时,节点监视算法用指示发生什么情况的参数来调用该应用所登记的函数。作为一种选择,能够使用消息传递来执行通知。在这种情况下,各个应用具有事件队列。上述应用告诉节点监视算法如何与其事件队列来通信。例如,它能够指出队列的地址。接着,在节点监视检测出转换时,它建立包含通知起因的数据结构,并将其置于该应用的队列中。
除了使用用于应用存储管理的节点监视通知,该算法还能够用于根据本发明的可缩放GUI中的其它功能。例如,节点监视算法能够用来基于用户视图的焦点来改变应用行为,例如通过将音频输出焦点切换到当前可视的应用中。其它用于节点监视算法的应用在放大等级改变时,将载入或卸载较高的分辨率,并将图像进行合成。这通过使绘图实施者(renderer)绘制较少的、分辨率更加接近匹配显示器的对象,来降低了其计算负载。除了使节点监视算法监视相机的视区外,使它监视浏览编码(navigation code)也是有用的,该浏览编码告诉视区在动画制造之后该视区所结束的位置。这较早地通知组件它们将出现在视图中,并且还能够使得根据本发明实施方式的可缩放的GUI避免将通知发送到由于移动动画而被溢出的节点。
为了更好地理解节点操作监视算法的操作,下面将参照图12(a)、12(b)、13(a)和13(b)来描述实施例。图12(a)和12(b)示出了两个不同放大等级的、可缩放的图形用户界面的一部分。在图12(a)的较低放大等级处可以看见三个节点:圆形、三角形和椭圆。在图12(b)中,该视图被放大,从而使得椭圆和圆形仅部分可见,三角形完全不可见。这些节点可例如表征依赖于有效事件通知的应用或用户界面组件,并因此由根据本发明的示例性实施方式的节点监视算法跟踪。在该实施例中,在图12(a)和12(b)明确示出了用于各个节点的边界矩形,尽管本领域的技术人员应该认识到在GUI中通常不会显示这些边界矩形。在12(a)和12(b)中对各个边界矩形的各边进行了标注,这些标注将用来显示边界矩形的边与上面描述的转换块数据结构之间的对应关系。
图13(a)示出了用于图(12)的缩小视图的水平维度的示例性节点监视数据结构。在该图中,节点边界矩形的各边使用转换块来表征。水平转换块以它们在GUI中出现的从左到右的顺序显示于图13(a)中。例如,圆形的左边C左首先出现,接着三角形的左边T左,等等,直到椭圆的右边E右出现为止。该列表的两端用空标志转换块来标记。在图13(a)中还显示了用于各个节点和指向它们边界矩形的水平转换块的相应指针的区域块。在图13(a)的底部是视图边界数据结构,它包含指向刚好位于当前视图之外的转换块的指针。对于该缩小的视图,所有节点是完全可见的,并因此它们所有的转换块位于由视图边界数据结构指向的转换块之间。
图13(b)显示了用于图12(b)的放大视图的节点监视数据结构。在该图中,可以看出数据结构的视图边界部分被改变,从而使得它指向用于三角形的右边T右以及椭圆的右边E右的转换块,这是因为上述两个边界矩形边正好位于当前(放大)视图之外。
在给出上述示例性数据结构和GUI场景后,在进行缩放转换时节点监视算法内的相关处理如下所述。首先从视图的左侧开始,节点监视算法将视图左侧指针向右移动,直到到达刚好处于左侧视图之外的转换块。如图13(b)所示,视图左侧指针首先通过C左转换块。对于此实施例,假设圆形节点表征与可缩放的GUI关联的应用或其它用户界面对象(其在视图中不完全可视时,需要通知)。给出到节点监视算法的上述输入后,表1示出该圆形节点对于水平维度应该接收退出通知。当然,节点监视算法在通知该节点之前通常会集合来自所有维度的通知,以避免发送多余的退出通知。接下来,视图左侧指针通过三角形的左边T左。如果该三角形节点在其完全离开视图时请求通知,则该节点监视算法在每个表1中指出不需要通知。然而,在视图指针通过T右时,表1示出该三角形完全退出视图,并且应该被通知。视图指针停止在这里,因为圆形边界矩形的右边C右在视图中仍然可见。
节点监视算法从右侧的处理是相似的。视图右侧指针左移到椭圆的右边E右。根据椭圆是否请求全部或部分的通知,该节点监视算法会或不会按照表1对椭圆发送通知。能够使用相似的数据结构以及顶和底边界矩形值来以相似的方式处理垂直维度。本领域的技术人员还应该认识到在需要更精确的通知时,可使用多个边界矩形逼近非矩形的节点。此外,本发明设想能够通过节点监视算法来跟踪并处理通过其它维度的运动,例如,第三几何(深度或比例)维度,以及非几何维度,例如时间、内容定级(成人,PG-13等)以及内容类型(戏剧、喜剧等)。根据使用的维度的个数,该算法更精确地检测边界段、矩形和n维超立方体的交叉。
除了上面描述的节点监视算法外,本发明的示例性实施方式提供了能够在根据本发明的示例性实施方式的可缩放的GUI中使用的分辨率一致的语义缩放算法。语义缩放是指根据组件的放大等级对可缩放的GUI中的组件进行增加、去除或改变组件的细节。例如,在下面描述的电影浏览器界面中,当用户将镜头足够接近影片的图像时,该浏览器改变以显示影片元数据以及回放控制。该放大等级的计算是基于组件在显示器设备中使用的像素个数的。该可缩放的GUI能够存储门限放大等级,该门限放大等级指示将在何时进行切换,例如从没有影片元数据和回放控制的视图切换至具有影片元数据和回放控制的视图。
电视和计算机显示器具有变化范围很大的显示器分辨率。一些监视器具有足够高的分辨率,从而使得可呈现在低分辨率显示器中的图片和文本太小以至于完全不可阅读。这还对于使用语义缩放、尤其是在高分辨率显示器(例如,HDTV)中的应用产生问题。在这种情况下,基于显示的像素个数绘制的语义缩放码在可阅读更详细的视图前将改变图像。程序性地修改语义缩放改变组件的门限仅能够对一个分辨率起到作用。
理想的结果是所有的监视器分辨率都进行一致的语义缩放。一种解决方法是在高分辨率的监视器中使用较低分辨率的显示模式,以使得在所有显示器中的分辨率是一致的。然而,如果语义缩放仍然如期望的那样进行的话,高分辨率的监视器用户更喜欢以它们最佳的分辨率来绘制图片。因此,本发明的示例性实施方式提供了一种支持所述不同分辨率显示、而不存在前述语义观看问题的语义缩放技术。这能够例如通过在场景内建立虚拟显示器来实现。通过使用内嵌的虚拟相机节点1200和增加逻辑来补偿显示器分辨率,在图14中示出了这种技术。该虚拟的相机节点1200定义了其尺寸映射到用户视线距离和监视器尺寸的视区。例如,大的虚拟相机视区表示用户要么是非常近地坐在监视器前,要么具有足够大的监视器来分辨许多细节。可选地,小的视区表示用户远离监视器,并需要大的字体和图像。该可缩放的GUI编码能够基于在上述虚拟相机中看到的,并使用用户最佳观看状态的组件的放大等级中的语义缩放转换。
附着到显示器设备1204的主相机节点1202具有通过配置以使其显示虚拟相机1200正在显示的各种事物的视区。由于图示影像和文本在该主相机1202之前没有映射成像素,所以不会从虚拟相机中发生质量下降。这种结果是高精确度的监视器显示器显示高质量的图像,并且不会触发使显示难于阅读的语义缩放改变。
根据本发明的示例性实施方式,上述处理实现如下。在场景图中的各相机和节点具有相关的转换矩阵(T1到Tn)。这些矩阵将节点的局部坐标系统转换至针对显示器的下一节点的局部坐标系统。在图中,T1从其视区将坐标转换到显示器坐标。同样,T2将其局部坐标系统转换到相机的视区。如果叶节点1206需要在显示器中绘制一些内容,则它计算下面的转换矩阵:
A=T1T2…Tn
该计算能够在通过场景图时被执行。由于改变组件来支持语义缩放是基于虚拟相机1200的,所以执行下面的计算:
B=T4T5…Tn
通常可通过询问监视器的分辨率和检查场景图而事先确定T1到T3。因此,从A确定B是通过下式对这些矩阵求逆和相乘实现的:
B=(T1T2T3)-1A
对于事先计算T1到T3时存在问题的这种情况,例如,如果图形API隐藏了附加的转换的话,可将逻辑增加到虚拟相机,从而拦截(intercept)将用来绘制到显示器的转换矩阵。这些被拦截的转换矩阵接着被求逆并进行相乘(如上所述),以计算语义缩放门限。
根据本发明的示例性实施方式的可缩放的界面的一个有利特征是它具有能够在导航界面时维护上下文的能力。所有的界面组件看来似乎存在于可缩放的世界中,用户仅需要移动和缩放来达到任意的它们。上述的语义缩放技术根据缩放或放大等级改变上述组件的外观。图15(a)和15(b)提供了用于组件的语义缩放的实施例,其中该组件的缩小的版本(图15(a))是图片,放大版本(图15(b))包括相同的图片以及一些控制和细节。对此更详细的一些实施例在下面给出。与语义缩放有关的一个挑战是在视图之间会突然发生改变,以及在两个上述视图之间转换时,例如α混合的转换技术不会在视觉上提供满意的结果。
因此,本发明的示例性实施方式在所有的组件视图中提供一些公用(common)的图像和文本,以在执行语义缩放时对转场效果提供焦点。例如,在图15(a)和15(b)中,公用元素是图片。在放大版本和缩小版本之间的转场效果能够例如使用上述节点监视算法通过以下方式来触发。首先,在主相机的视区从组件的缩小版本转换到放大版本时,用上述节点监视算法执行登记以接收事件。接着,在事件发生时,能够显示展示从它们缩小版本位置缩放和转换到它们放大版本位置的公用元素的动画。同时,相机视区继续推进到上述组件。
在浏览下面参照图16-20描述的另一示例性实施方式后,根据本发明的图形用户界面的这些能力将变得更加显而易见。在图16-20中,启始GUI屏幕1400显示多个像媒体组一样操作的组织对象。完全是示例性的家庭影院、影片、TV、体育、收音机、音乐和新闻的媒体组表示当然能够包括不同的、更多或更少的媒体组。在通过用户启动这些图标中的一个时,根据本发明的该示例性实施方式的GUI将显示多个图像,这些多个图像中的每一个被分组成特殊的类别和种类。例如,如果用户启动图16中的“影片”图标,则能够显示图17的GUI屏幕。在图17中显示了大量的(例如120个或更多的)选择对象。这些选择对象能够被分类为特殊的组,例如,动作、古典、喜剧、戏剧、家庭剧和新发行影片。本领域的普通技术人员应该认识到能够提供更多或更少的种类。在该示例性实施方式中,媒体项的图像可以是与各影片选择关联的特征封面。尽管在图17中的区块太小而不能允许显示该选择项图像的相对多的组的详细描述,但是在应用中,这些图像的放大等级可使通过与影片关联的图像辨别这些影片的身份,即便是这些文本中的一些或全部可以是太小以至于不能容易地阅读。
可将游标(在图17中未示出)置于一组影片图像上并驱动输入设备为该组中的一个提供选择指示。在该实施例中,用户选择戏剧组,则用户图形界面显示戏剧图像组中的缩放版本,如图18所示。和前述实施方式一样,在GUI从图17中的GUI屏幕切换到图18中的GUI屏幕时,还会显示转场效果,例如,在缩放之前或在缩放过程当中,该GUI可以将视图从图17中的GUI屏幕的中心移动到戏剧组图像的中心。应该注意到,尽管图18的戏剧组的缩放版本仅显示了戏剧组中的所有图像的子集,但是该缩放版本能够可选地包含被选择组中的所有图像。在任意给定的GUI屏幕的放大版本中显示或不显示被选择组中的所有图像能够基于(例如)组内的媒体项的个数,以及用于特殊缩放等级的媒体项的最小期望放大等级来进行。根据本发明的GUI的后一特征能够通过系统设计员/服务提供商预先确定,或通过用户经由GUI中的软件设置来定制。例如,可通过服务提供商和终端用户中的一个和两个来配置组内的媒体项的个数以及最小和/或最大放大等级。上述特征使得那些例如具有不好的视力的用户能够增加被显示的媒体项的放大等级。相反,视力非常好的用户可减小放大等级,以及增加在任意给定事件显示在GUI屏幕中的媒体项个数,并减少浏览时间。
能够在根据本发明的图形用户界面中使用的一个示例性的转场效果被称为“鞋到细节(shoe-to-detail)”视图效果。在被启动时,该转场效果获取缩小的图像并同时将该缩小的图像收缩和转换到更小的视图,即,下一更高等级的缩放。从在图17中的GUI屏幕中使用的放大等级转换到在图18中的GUI屏幕中使用的更大的放大等级,这导致GUI为显示于图18的放大版本中的图像披露出附加的细节。该GUI根据这些细节在当前被选择的缩放等级是否很好地被显示,来选择性地显示或隐藏各种缩放等级的细节。和试图分辩细节而不论它们对于肉眼的可视能力如何的相机缩放不同,本发明的示例性实施方式规定了可配置的缩放等级参数,这些参数规定了在何时显示全部图像和何时显示具有被扣留细节的图像版本之间的转换点。该转换点能够基于独立于图像描述的内部分辨率,而不是基于TV/监视器212的分辨率。利用这种方式,根据本发明的GUI是一致的,而不论在媒体系统中使用的显示设备的分辨率是多小。
在该示例性实施方式中,能够通过将游标经过特殊图像之上来提供用于特殊图像的附加量的放大。这种特征在图19中显示,其中,游标在影片“阿波罗13”的图像上滚动。尽管在图19中未示出,与图18中GUI屏幕中处于较低放大等级的相应图像相比,上述附加的放大例如能够使实现与相关媒体项的特征封面中的引文“休斯顿,我们遇到了麻烦”变得更加清晰可读。用户对于该图像的选择,例如通过在输入设备上按下按钮,能够进一步缩放以显示图20中显示的细节。这还提供了另一个如前所述的语义缩放的实施例,这是因为在图19的GUI屏幕中不可见的各种信息和控制元素被显示在图20的GUI屏幕中。例如,关于影片“阿波罗13”的主要包括影片放映时间、价格和演员的信息被显示。本领域的技术人员应该认识到,其它类型的信息能够在这里提供。该GUI附加地包括GUI控制对象,GUI控制对例如包括用于购买该影片、观看电影预告片或返回到前一GUI屏幕(其还能够在输入设备中按下放大按钮来实现)的按钮控制对象。还能够使用超级链接来允许用户例如跳转到与相关影片(在图20的GUI屏幕的右下角处标志)关联的GUI屏幕,或与该影片中的演员相关的信息。在该实施例中,在标题“影片目录(Filmography)”下的一些或全部电影名能够实现为超级链接,在用户通过输入设备启动时,这些链接将使得GUI为被指示的电影显示与图20中的GUI屏幕对应的GUI屏幕。
在用户启动超级链接时还能够使用转场效果。由于超级链接可以高的放大等级来产生,因此,简单地跳转到被链接的媒体项可使用户失去他或她对媒体项选择“映射图”的跟踪。相应地,本发明的示例性实施方式提供了转场效果以在启动超级链接时,帮助维持用户的地理性位置感觉。为此而使用的一个示例性的转场效果是跳跃转换。在该转场效果的初始阶段,GUI缩小并以超级链接指向的项的方向移动。缩小和移动在目的图像和原始图像都被用户看见之前持续进行。再次使用图20的实施例,如果用户选择超级链接用于“拯救大兵瑞恩”,则该超级链接的跳跃效果的第一阶段将包括缩小并朝图像“拯救大兵瑞恩”移动,直到用于“拯救大兵瑞恩”的图像和“阿波罗13”对于用户是可视的位置。在此,该转场效果给用户带来以弧形朝向目的图像向上移动的视觉印象。一旦目标图像出现在视图中,转场效果的第二阶段给用户带来放大和例如以上述弧形的另一半移动到目的图像的视觉印象。跳跃时间,即显示第一阶段和第二阶段的时间量,在任意两个超级链接图像项之间是可以是固定的。可选地,跳跃时间可以变化,例如基于在GUI上前进的距离。例如,跳跃时间能够被参数化为:跳跃时间(HopTime)=Alog(放大比例等级/跳跃顶点比例等级)+B(超级链接媒体项之间的距离)+C,其中,A、B、和C被合适地选择为恒定值。
上面参照图9-13(b)描述的节点监视算法还能够用来帮助在图19的示例性GUI屏幕和图20的示例性GUI屏幕中描述的缩放等级之间进行转换。与较低缩放等级的图像相比,包含文本和/或控制元素(它们在被选择的图像的其它缩放等级是看不见的)的GUI屏幕的绘制需要更强的计算和/或存储。相应地,该节点监视算法能够在本发明的示例性实施方式中使用,以通过监视GUI的导航节点以更加快速地识别被缩放的媒体项,从而帮助预先载入GUI屏幕,例如在图20中显示的GUI屏幕。
被包含在本发明的示例性实现中的是屏幕位置和基于语义的导航控制。当用户将游标定位于接近或者处于与屏幕中的这些控制关联的区域(在其中这些控制是正确的,如图21所示)中时,这些控制区域出现。例如,在播放影片时,快进、后退、暂停、停止等这些所谓的技巧(trick)功能在语义上是适当的。在该示例性实施方式中,分配给这些功能的屏幕区域在右下角,并且在游标位于这些区域附近或位于其中时,显示用于这些技巧功能的图标集。当被使用的功能明确结束或游标重新被定位于屏幕中的其它位置时,这些图标则消失。还能够使用同样的技术来覆盖如同文本搜索和室内屏幕选择的其它导航特征。在该示例性的实现中,这些控制在所有的屏幕上是语义相关的,并且配与它们的区域位于右上角。在游标位于这些区域或这些区域附近时,显示用于这些导航控制的图标集。在功能被启动或游标重新位于屏幕的其它位置时,这些图标则消失。应该注意到,出于用户训练的目的,关联的控制图标可初始可选地暂时显示(例如5秒)在一些或所有的相关屏幕中,以使不熟练的用户注意到它们的存在。
在提供了根据本发明的可缩放的图形用户界面的一些实施例后,现在描述使用上述界面的示例性架构和结构(infrastructure)。图22提供了架构图,其中,与各种高级应用1900(例如,影片、电视、收音机和体育)关联的可缩放的界面由基元(primitive)1902(在图中被称为“原子”)扮演。在该示例性实施方式中,基元1902包括定位、点击、缩放、停悬和滚动,当然本领域的技术人员应该认识到其它的基元也能够包含在该组中,例如,移动和拖拽。如上所述,操作定位和点击基元,以确定游标的位置,并且在例如用户启动手持输入设备中的放大或缩小按钮时,触发事件。这些基元简化了导航并去除了用于重复上、下、左、右按钮的需要。如上所述,缩放基元用来纵览可能的选择,并在用户缩小他或她的选择时给予用户上下文。这种构思使该界面能够按照大量的媒体选择和任意的显示大小来规定。滚动基元处理来自示例性手持输入设备中的滚动轮输入设备的输入,并能够用来例如加速线性菜单导航。停悬按钮基元动态地放大指针下面的选择(和/或改变选择的内容),以使得用户能够浏览潜在的选择而无需实际执行。能够以大量不同的方式在根据本发明的GUI中启动前述各个基元的操作。例如,定位、点击、停悬、停悬和缩放可以与用户能够执行的不同姿势关联。这些姿势能够经由输入设备(不管它是否是3D定位器、跟踪球、触摸垫等)被传递到系统,并被转换成适当基元的启动。同样,各个基元能够与各自的语音命令关联。
在低级的基元1902和高级的应用1900之间存在各种软硬件结构1904,它们用来产生与根据本发明的可缩放的GUI关联的图像。如在图22中看到的那样,该结构1904能够包括手持输入设备/定位器、应用程序接口(API),可缩放的GUI屏幕、开发工具等。
前面的示例性实施方式在本质上是完全描述性的。以各等级提供到用户的缩放等级个数以及特殊的信息和控制是变化的。本领域的技术人员应该认识到本发明提供了革命性的技术用于使用可缩放的界面来呈现大和小组的媒体项,从而使得用户能够容易地搜索、浏览、组织和回放媒体项,例如影片和音乐。根据本发明的图形用户界面在虚拟的表面中组织媒体项选择,从而使得相似的选择被组合在一起。最开始,该界面传送上述表面的缩小视图,并且在大部分情况下,在该等级是看不见实际的选择的,而仅仅看到它们的组名。随着用户逐渐向内缩放,显示关于媒体项组或选择的更多细节。在各个缩放等级可得到不同的控制,从而使得用户能够播放选择的组或单个的选择、或者到达虚拟面的其它部分以浏览其它相关的媒体项。根据本发明的示例性实施方式的缩放图形用户界面能够包含嵌套到任意深度的图像种类以及种类的种类。媒体项能够包括局部存储的内容、广播提供商的广播、经由来自内容提供商的直接连接或在对等基础上接收的信息。媒体项能够以日程安排的格式提供,其中,日期/时间信息在一些等级的GUI提供。另外,根据本发明的示例性实施方式的架构和GUI还能够应用到在其中将用于选择的项出售给用户的电视商业中。
为了作出选择,传统的电视应用假设用户必须自觉地并有意地从一组相关屏幕区域或对象中选择。通常,使用上/下/左/右的箭头并使屏幕突出感兴趣的区域来完成选择。当用户达到目的时,她或他按下例如“OK”按钮进行处理。通过对比,本发明的示例性实施方式允许用户直接指向屏幕上任何感兴趣的区域。这使得选择更直观和快速。还允许显示增强的信息作为定位的一部分显示,本文中称为“语义停悬”。本发明的示例性实施方式中语义停悬的一个实施例是,在TV应用的节目名称上停悬使得关于该节目的扩展信息被显示。此外,还允许对感兴趣的区域采取相关操作。用户就容易地指向可包含或不包含感兴趣的具体对象的屏幕区域,并使用与屏幕上的各处都没有相关性的操作。在根据本发明的应用中,该操作的一个实施例是将游标移动到屏幕的左边以使用频道选择特性。然后用户可使用滚动轮改变频道或仅指向滑动条以设置相应的频道。使用传统的导航方案,这些都不容易实现。
根据本发明的示例性实施方式,关于使3D装置和屏幕导航系统相结合的另一个独特特性在于处理抖动和多余移动的能力。这与桌面鼠标和PC屏幕的情况很不相同。在那样的情况下,由于摩擦和静止的能力,鼠标静止在平面上,且多余的移动自然地被滤掉。然而,使用3D装置,其以任意的角度握在用户手中,产生非常不同的控制环境。与处理3D装置的移动数据相关联的算法和/或接受数据的应用必须处理抖动和多余移动。根据本发明的实施方式的这种组合的另一特征是精度。通常,桌面鼠标的定位分辨率优于3D装置。这意味着桌面鼠标可指向比3D装置可指向的更小的屏幕对象。
根据本发明的示例性实施方式的系统解决了全部三个问题。就算法本身而言,对抖动和期望的移动进行了建模和处理,以使得只使用期望的移动。此外,仅仅因为用户按下3D定位装置的按钮或滚动其滚动轮而产生的、3D装置的移动被建模并被补偿。此外,在接收与3D定位装置的用户移动相关联的、处理过的移动数据的下游应用(downstream application)中,在该应用屏幕的设计中已包括了3D分辨率和移动特性的知识,其还提供或进行语义反馈以使系统更容易控制。
3D定位结合屏幕导航的益处还包括由于这种配对可出现在各种应用中的新的特性和功能。根据不同的应用分类,下面列出了某些实施例。应注意到,图23-33示出的全部GUI屏幕可使用上述技术进行导航。
电视:在电视指南中,存在以下示例性的有益效果:
1.在节目列表定位后显示关于节目的额外信息,而不用点击或要求屏幕改变(语义停悬)。例如参见示出该技术的图23(a)和23(b)。其中,电子节目指南具有多个频道以及用于显示在GUI屏幕(其可例如从上文所述的高级GUI屏幕访问)上的这些频道的节目信息。在图23(a)所示的时刻,当前选择的频道信息窗格2300显示与频道15从早上8:30到9:00播放的节目,即“Happy Day(快乐的一天)”相关联的信息。游标2302此时没有指向节目列表。在如图23(b)所示的另一个时刻,例如通过在电视屏幕前相应地移动3D定位装置,已将游标移动到指向显示频道15在上午9:00播放的“Beverly Hillbillies(贝弗利山里人)”。根据本发明的该示例性实施方式,这使得自动显示在当前选择的频道信息窗格2300内的信息变为如图23(b)所示的关于重新选择的节目的信息,而无需除了来自用户的定位之外的任何输入。在此实施例中,GUI屏幕还可具有实况馈送(live feed)区域2304,其显示与当前选择的频道相关联的视频和/或音频。
2.在节目列表间滚动简化了对长的线性列表的导航。此外,这种滚动可通过使用例如3D定位装置在电视上定位而容易地实现。参见例如图24(a)和24(b)。图24(a)中,GUI屏幕当前显示具有频道2-10及其相应节目信息的节目指南。通过将游标2400移动到列表下方示出的屏幕部分,可自动激活滚动功能,以使节目指南向下滚动而需要用户采取其它任何操作。这种滚动行动产生的GUI屏幕如图24(b)所示。
3.在被请求时才出现例如音量和频道的屏幕控制器。例如,图25(a)示出了这样的GUI屏幕,其中选择了特殊的电视频道,且与该频道相关联的视频和音频馈送正由系统输出。通过在电视前移动3D定位器,并相应地将游标2500移动到GUI屏幕的右手侧,音量控制滑动条2502显示在屏幕上并可由用户操纵,例如通过向上或向下拖动音量图标2504。如果用户移动3D定位器以使游标移动到GUI屏幕的左手侧,则显示频道变换控制器2506,如图25(c)所示。某些节目指南信息还可显示在弹出面板2508上,其可例如通过指向标签(如图25(d)所示)来操纵。通过指向频道控制条2510,显示弹出2512,以指示位于在频道控制条2510上指向的位置的频道(图25(e))。随后在预定时间段内在该位置上输入(例如,按下按钮等)或暂停的结果是,将改变频道以及相应地改变显示窗格2508内的信息(图25(f))。
4.可视的浏览器向用户同时呈现多个选择,用户仅通过指向操作就可从中选择。本发明的示例性实施方式的这一方面在如上所述的图17-20中已说明。
5.当用户停悬或选择项目时显示自动的交叉链接建议。本发明的示例性实施方式的这一方面可在与本文描述的界面和系统相关联的各种GUI屏幕中看到。例如,如图26(a)所示,可基于由图中示出的GUI屏幕上部的显示窗格2602表明的“Paid Programming(付费节目)”的最初的用户选择,在节目指南的右边窗格2600中提供基于该最初用户选择的其它“请求(on-demand)”GUI屏幕的交叉链接。例如,如果用户在显示窗格2600内操作“Movielink(电影链接)”链接,例如通过将游标移至其上并点击“Movielink”文本,则作为该操作的结果显示图26(b)所示的GUI屏幕。
6.屏幕上的传送控制器(例如回放、快进、播放、停止、场景跳过、结束和开始)可用于视频播放的简单控制。和上述的音量和频道选择控制器类似,可响应于用户将游标移动到显示区域的预定部分显示这些控制器。例如参见图27(a)和27(b)所示,其中在图27(b)中响应于将游标2702移动到由框2704限定的区域内而在屏幕上显示传送控制器2700。
照片:在照片应用中,具有以下示例性的有益效果:
1.在照片集上定位后,用户可自动地或可选地通过拖放动作将其增加到播放列表。例如如图28(a)所示,指向“Europe(欧洲)”集中的特殊照片(通过以与上文中关于电影和图17-20描述的方法非常相同的方式放大照片的书架的一部分实现)产生“停悬放大”效果,其中照片2800被放大并自动增加到GUI屏幕的播放列表部分2801。将照片2800的小版本2802放置到播放列表部分2801以表示其添加到该列表中。
2.放大照片册可提供更多的上下文信息并可用于分层分类。随着照片播放列表内容的增多,将出现滚动控制器2805以限制任何时间在播放列表部分2801显示的小版本图像的数量(见图28(b))。
3.屏幕上的传送控制器,例如在图28(a)和28(b)中的“Play(播放)”和“Clear(取消)”按钮,可用于容易地对幻灯片节目播放进行控制。
家庭电影:在家庭电影应用中,具有以下示例性的有益效果:
1.在家庭视频集的定位后,用户可自动地或可选地通过拖放动作将其添加到播放列表中,如图29(a)所示。其中,通过指向GUI屏幕中的集区域2902中的“Hats Part3(帽子第三部分)”的图像,将其从“Ballet(芭蕾舞剧)”集中添加到播放列表2900。选择GUI左上部分的“Recital(独奏会)”按钮将集区域内的图像改变为被存储作为“Recital”集的一部分的图像,从“Recital”集中将另一个家庭电影添加到播放列表2900中,如图29(b)所示。
2.放大照片册可提供更多的上下文信息并用于分级分类。
3.屏幕上的传送控制器,例如“Play”和“Clear”按钮,可用于家庭视频和家庭视频播放列表播放的简单控制,如图28(a)和28(b)所示。
日程表:在日程表应用中,具有以下示例性的有益效果:
1.用户可在日程表上停悬,并无需点击就看见关于该天的约定的附加信息,如图30(a)和30(b)所示。
2.用户可放大一天以看见附加详细信息或使用屏幕上的文本输入系统在屏幕上编辑这些详细信息。
3.用户可对日程表分类以找出感兴趣的不同成员之间的冲突。
因特网浏览:在因特网浏览应用中,具有以下示例性的有益效果:
1.用户可以与在桌面型电脑上非常相似的方式在电视上进行网上冲浪,例如如图31(a)所示。其差别在于需处理3D的复杂性。
2.如果用户不想用键盘,则可使用屏幕上的工具实现屏幕上的文本输入,例如如图31(b)所示。
音乐:在音乐应用中,具有以下示例性的有益效果:
1.用户可指向音乐列表或可视的音乐表演,并自动将其增加到播放列表或仅将其播放。例如,用户可导航到如图32(a)所示的专辑封面的书架的一部分,并通过指向特殊的专辑选择该专辑。这可产生如图32(b)所示的屏幕显示,其中可选择单独的音轨并将其增添到GUI屏幕的播放列表部分3200。
2.用户可通过指向感兴趣的交叉链接(相似的音乐家或相似的专辑)简单地导航交叉链接。
3.屏幕上的传送控制器3202可用于如图32(c)所示简单控制歌曲或播放列表的播放,并还可添加到任何可视的显示中。
购物:在购物应用中,具有以下示例性的有益效果:
1.用户可指向购物项目列表或可视的商品图像,并自动将其添加到购物车或仅购买商品。例如,如图33(a)所示,在第一缩放层,可使用某些一般的短语或图像示出大量待销售的不同类别的商品。当用户将游标3300在例如图33(b)中的“Handbags(手提包)”的特殊类别上暂停时,将该图像稍微放大以表示当前的选择。然后自动地或通过另外的用户输入(例如按下按钮),可实现“Handbags”类别的放大,例如在图33(c)中示出了手提包的书架。通过在图33(c)中的商品的“Smooth Leather(光滑皮革)”类别上停悬放大,游标在书架中的位置再次指示当前选择。当再在指向该类别并经过一段时间之后自动实现或响应于通过手握式设备产生的具体的用户输入实现再次放大,从而产生如图33(d)所示的该类别的更详细的视图。选择特殊手提包的图像可通过例如以上所述的缩放、移动(panning)、和/或转换效果,产生图33(e)所示的详细视图的放大。
2.用户可通过指向感兴趣的交叉链接(像相同商店的其它商品、相配的物件、相似的设计人)简单地导航交叉链接。例如,如图33(e)所示,相配的鞋的交叉链接显示为图像3300。如果激活该链接,用户则可进入该项目的详细视图,而无需通过对各种更高级别的屏幕进行导航来实现,如图33(f)所示。
3.用户可通过停悬或缩放简单地得到感兴趣的项目的更多信息。
允许用户只指向屏幕以指示其想要的商品。可选地,手势本身可认为是应用输入的一部分。通过调整应用以考虑(例如抖动、多余移动、屏幕分辨率)并利用(例如语义停悬、缩放、屏幕图像相关控制)3D导航,可提供正确强大的交互式电视应用。在2005年5月2日提交的题为“用于去除3D定位装置中的无意识移动的方法和装置”的第11/119,987号美国专利申请中提供了用于控制3D定位装置的无意识移动的示例性技术的额外的讨论,其内容通过引用并入本文。
以上所述的示例性实施方式趋向于对本发明的各方面进行说明,而不是限制性的。因此本发明在详细的实施上能具有多种变体,这些变体可由本领域技术人员从本文的说明中得出。如下文的权利要求所述,认为全部这些变体和修改都在本发明的范围和精神内。除非明确说明,否则本发明的说明书中使用的元素、动作、或指示都不应被解释为对本发明是决定的或本质的。同样,本文使用的“一个”趋向于包括一个或多个项目。
Claims (53)
1.用于将3D定位装置与在电视屏幕上显示输出的软件应用一起使用的方法,所述方法包括以下步骤:
在所述电视屏幕上显示与所述软件应用相关联的第一信息集,其中所述软件应用包括电子节目指南、电视屏幕控制器、照片册、家庭视频集和购物界面中的至少之一;
移动所述3D定位装置;
处理与所述3D定位装置相关联的数据,以补偿所述3D定位装置的无意识的移动;
基于所述处理过的数据,将显示在所述电视屏幕上的游标移动到所述电视屏幕上的新位置;以及
响应于所述游标的新位置,在所述电视屏幕上改变所述第一信息集的显示。
2.如权利要求1所述的方法,其中所述无意识的移动由与持有所述3D定位装置的用户相关联的抖动产生。
3.如权利要求1所述的方法,其中所述无意识的移动由用户启动所述3D定位装置上的可移动元件产生。
4.如权利要求1所述的方法,进一步包括以下步骤:
至少部分基于所述游标在所述移动步骤之后的新位置,在所述电视屏幕上显示第二信息集,所述第二信息集不同于所述第一信息集。
5.如权利要求4所述的方法,其中所述第一信息集包括多个图像,且所述第二信息集是与所述第一信息集相关联的停悬放大的图像。
6.如权利要求4所述的方法,其中显示所述第二信息集的步骤除了移动所述游标之外还要求用户进行额外的输入。
7.如权利要求4所述的方法,其中显示所述第二信息集的步骤进一步包括:
直接响应于所述游标位置显示所述第二信息集,而不要求用户进行任何的额外输入。
8.如权利要求4所述的方法,其中所述第一信息集是节目指南,且所述第二信息集通过滚动节目的线性列表显示。
9.如权利要求4所述的方法,其中所述第一信息集是节目指南,且所述第二信息集是响应于用户请求显示的屏幕控制器。
10.如权利要求4所述的方法,其中所述第一信息集是节目指南,且所述第二信息集包括交叉链接,所述交叉链接响应于在作为所述第一信息集的一部分显示的项目上停悬或选择所述项目而显示
11.如权利要求4所述的方法,其中所述第一信息集是节目指南,且所述第二信息集包括与视频播放的控制相关联的屏幕上的传送控制器。
12.如权利要求4所述的方法,其中所述第一信息集是照片集,且所述第二信息集是添加了所述照片集的播放列表。
13.如权利要求4所述的方法,其中所述第一信息集是照片集,且所述第二信息集是所述照片册的放大版本,所述放大版本提供与所述照片册相关联的上下文信息,其中允许对所述上下文信息分级分类。
14.如权利要求4所述的方法,其中所述第一信息集是照片集,且所述第二信息集包括屏幕上的传送控制器,所述传送控制器使用户控制照片的幻灯片显示。
15.如权利要求4所述的方法,其中所述第一信息集是视频集,且所述第二信息集是添加了所述视频集的播放列表。
16.如权利要求4所述的方法,其中所述第一信息集是视频集,且所述第二信息集是所述视频集的放大版本,所述放大版本提供与之相关联的上下文信息,其中允许对所述上下文信息分级分类。
17.如权利要求4所述的方法,其中所述第一信息集是视频集,且所述第二信息集包括屏幕上的传送控制器,所述传送控制器使用户控制所述视频集的呈现。
18.如权利要求4所述的方法,其中所述第一信息集是日程表,且所述第二信息集是响应于所述游标在所述日程表的相应部分上的移动显示在所述电视屏幕上的与所述日程表上的特殊日子相关联的信息。
19.如权利要求4所述的方法,其中所述第一信息集是日程表,且所述第二信息集是与所述日程表上的特殊日子相关联的信息,所述信息可由用户通过屏幕上的文本输入系统进行编辑。
20.如权利要求4所述的方法,其中所述第一信息集是日程表,且所述第二信息集所述日程表的分类版本。
21.如权利要求4所述的方法,其中所述第一信息集是因特网网页,且所述第二信息集是不同的因特网网页。
22.如权利要求4所述的方法,其中所述第一信息集是因特网网页,且所述第二信息集是包括由用户通过屏幕上的文本输入工具输入的某些附加文本的因特网网页。
23.如权利要求4所述的方法,其中所述第一信息集是音乐列表,且所述第二信息集是响应于所述游标的移动而添加了所述音乐列表的播放列表。
24.如权利要求4所述的方法,其中所述第一信息集包括与音乐相关联的交叉链接,且所述第二信息集是响应于所述游标的移动通过所述交叉链接之一得到的其它音乐信息。
25.如权利要求4所述的方法,其中所述第一信息集包括可选的音乐媒体项,且所述第二信息集包括用于控制音乐播放的屏幕上的传送控制器。
26.如权利要求4所述的方法,其中所述第一信息集包括购物商品列表或可视图像,且所述第二信息集包括购物车。
27.一种系统,包括:
3D定位装置;
电视;
处理器,用于运行显示在所述电视上的软件应用,其中所述处理器最初在所述电视上显示第一信息集,所述第一信息集与电子节目指南、电视屏幕控制器、照片册、家庭视频集以及购物界面中的至少之一相关联,
其中,响应于所述3D定位装置的移动,所述处理器补偿所述3D定位装置用于无意识的移动的数据输出,然后基于所述经过补偿的数据将显示在所述电视上的游标移动到所述电视上的新位置;以及
其中,响应于所述游标的所述新位置,在所述电视屏幕上改变所述第一信息集的显示。
28.如权利要求27所述的系统,其中所述无意识的移动由与持有所述3D定位装置的用户相关联的抖动产生。
29.如权利要求27所述的系统,其中所述无意识的移动由用户启动所述3D定位装置上的可移动元件产生。
30.如权利要求27所述的系统,其中所述第一信息集包括多个图像,且改变所述第一信息集的显示是对与所述第一信息集相关联的图像进行停悬放大。
31.如权利要求27所述的系统,其中改变所述第一信息集的显示要求用户在移动所述游标之外进行额外输入。
32.如权利要求27所述的系统,改变所述第一信息集的显示直接响应于所述新的游标位置而实现,而不要求用户进行任何的额外输入。
33.如权利要求27所述的系统,其中所述第一信息集是节目指南,且改变所述第一信息集的显示包括滚动节目的线性列表。
34.如权利要求27所述的系统,其中所述第一信息集是节目指南,且改变所述第一信息集的显示是响应于用户请求而显示的屏幕控制器。
35.如权利要求27所述的系统,其中所述第一信息集是节目指南,且改变所述第一信息集的显示包括交叉链接,所述交叉链接响应于在作为所述第一信息集的一部分显示的项目上停悬或选择所述项目而显示。
36.如权利要求27所述的系统,其中所述第一信息集是节目指南,且改变所述第一信息集的显示包括与视频播放的控制相关联的屏幕上的传送控制器。
37.如权利要求27所述的系统,其中所述第一信息集是照片集,且改变所述第一信息集的显示是添加了所述照片集的播放列表。
38.如权利要求27所述的系统,其中所述第一信息集是照片集,且改变所述第一信息集的显示是所述照片册的放大版本,所述放大版本提供与所述照片册相关联的上下文信息,其中允许对所述上下文信息分级分类。
39.如权利要求27所述的系统,其中所述第一信息集是照片集,且改变所述第一信息集的显示包括屏幕上的传送控制器,所述传送控制器使用户控制照片的幻灯片显示。
40.如权利要求27所述的系统,其中所述第一信息集是视频集,且其中所述第一信息集的所述显示的所述改变是添加了所述视频集的播放列表。
41.如权利要求27所述的系统,其中所述第一信息集是视频集,且改变所述第一信息集的显示是所述视频集的放大版本,所述放大版本提供与所述视频集相关联的上下文信息,其中允许对所述上下文信息分级分类。
42.如权利要求27所述的系统,其中所述第一信息集是视频集,且改变所述第一信息集的显示包括屏幕上的传送控制器,所述传送控制器使用户控制所述视频集的呈现。
43.如权利要求27所述的系统,其中所述第一信息集是日程表,且改变所述第一信息集的显示是响应于所述游标在所述日程表的相应部分上的移动,而显示在所述电视屏幕上的与所述日程表上的特殊日子相关联的信息。
44.如权利要求27所述的系统,其中所述第一信息集是日程表,且改变所述第一信息集的显示是与所述日程表上的特殊日子相关联的信息,所述信息可由用户通过屏幕上的文本输入系统进行编辑。
45.如权利要求27所述的系统,其中所述第一信息集是日程表,且改变所述第一信息集的显示是所述日程表的分类版本。
46.如权利要求27所述的系统,其中所述第一信息集是因特网网页,且改变所述第一信息集的显示是不同的因特网网页。
47.如权利要求27所述的系统,其中所述第一信息集是因特网网页,且改变所述第一信息集的显示包括由用户通过屏幕上的文本输入工具输入的某些附加文本的因特网网页。
48.如权利要求27所述的系统,其中所述第一信息集是音乐列表,且改变所述第一信息集的显示是响应于所述游标的移动而添加了所述音乐列表的播放列表。
49.如权利要求27所述的系统,其中所述第一信息集包括与音乐相关联的交叉链接,且改变所述第一信息集的显示是响应于所述游标移动通过所述交叉链接之一得到的其它音乐信息。
50.如权利要求27所述的系统,其中所述第一信息集包括可选的音乐媒体项,且所述第二信息集包括用于控制音乐播放的屏幕上的传送控制器。
51.如权利要求27所述的系统,其中所述第一信息集是包括购物商品列表或可视图像,且改变所述第一信息集的显示包括购物车。
52.用于将3D定位装置与在电视屏幕上显示输出的软件应用一起使用的系统,包括:
用于将与所述软件应用相关联的第一信息集显示在所述电视屏幕上的装置,其中所述软件应用包括电子节目指南、电视屏幕控制器、照片册、家庭视频集和购物界面中的至少之一;
用于移动所述3D定位装置的装置;
用于处理与所述3D定位装置相关联的数据、以补偿所述3D定位装置的无意识的移动的装置;
用于基于所述经过处理的数据,将显示在所述电视屏幕上的游标移动到所述电视屏幕上的新位置的装置;以及
用于响应于所述游标的新位置改变所述电视屏幕上所述第一信息集的显示的装置。
53.用于响应于3D定位装置的移动在电视屏幕上显示信息的软件应用,包括:
用于处理移动数据以从中去除无意识的移动的装置;
用于响应于所述处理过的移动数据在所述电视屏幕上重新定位游标的装置;以及
用于仅响应于所述游标的所述重新定位改变在所述电视屏幕上的信息的显示的装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US65322905P | 2005-02-14 | 2005-02-14 | |
US60/653,229 | 2005-02-14 | ||
PCT/US2006/005108 WO2006088831A2 (en) | 2005-02-14 | 2006-02-14 | Methods and systems for enhancing television applications using 3d pointing |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101341457A true CN101341457A (zh) | 2009-01-07 |
CN101341457B CN101341457B (zh) | 2014-01-29 |
Family
ID=36916974
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200680006189.9A Active CN101341457B (zh) | 2005-02-14 | 2006-02-14 | 利用3d定位增强电视应用的方法和系统 |
Country Status (6)
Country | Link |
---|---|
US (4) | US7839385B2 (zh) |
EP (1) | EP1851955A4 (zh) |
JP (1) | JP2008536196A (zh) |
KR (1) | KR20080003788A (zh) |
CN (1) | CN101341457B (zh) |
WO (1) | WO2006088831A2 (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102253735A (zh) * | 2010-05-17 | 2011-11-23 | 佳能株式会社 | 信息处理装置和显示装置及其控制方法以及显示系统 |
CN102348133A (zh) * | 2010-07-28 | 2012-02-08 | Lg电子株式会社 | 图像显示装置及图像显示装置的操作方法 |
CN102469369A (zh) * | 2010-11-15 | 2012-05-23 | Lg电子株式会社 | 图像显示设备及其操作方法 |
CN102789455A (zh) * | 2011-05-17 | 2012-11-21 | 冠捷投资有限公司 | 网页的文字选项放大方法及系统 |
CN103026691A (zh) * | 2010-06-16 | 2013-04-03 | 高通股份有限公司 | Rf测距辅助式局部运动感测 |
CN103124360A (zh) * | 2011-11-18 | 2013-05-29 | 联想(北京)有限公司 | 一种用于3d图像信号的显示处理方法、装置及电子设备 |
CN101778224B (zh) * | 2009-01-09 | 2013-07-03 | 索尼公司 | 显示设备和显示方法 |
CN103702154A (zh) * | 2013-12-04 | 2014-04-02 | 京东方科技集团股份有限公司 | 触摸屏遥控器及其遥控方法 |
US8704958B2 (en) | 2009-06-01 | 2014-04-22 | Lg Electronics Inc. | Image display device and operation method thereof |
CN105872683A (zh) * | 2015-02-10 | 2016-08-17 | 三星电子株式会社 | 图像显示设备和方法 |
CN105916050A (zh) * | 2016-05-03 | 2016-08-31 | 乐视控股(北京)有限公司 | 电视购物信息处理方法和装置 |
US9467119B2 (en) | 2009-05-29 | 2016-10-11 | Lg Electronics Inc. | Multi-mode pointing device and method for operating a multi-mode pointing device |
CN106658141A (zh) * | 2016-11-29 | 2017-05-10 | 维沃移动通信有限公司 | 一种视频处理方法及移动终端 |
Families Citing this family (240)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8781940B2 (en) | 2000-01-26 | 2014-07-15 | Ebay Inc. | Method and apparatus for facilitating user selection of a category item in a transaction |
WO2003028365A1 (fr) * | 2001-09-26 | 2003-04-03 | Sanyo Electric Co., Ltd. | Appareil de selection de mode et camera numerique |
KR20080003788A (ko) * | 2005-02-14 | 2008-01-08 | 힐크레스트 래보래토리스, 인크. | 3d 포인팅을 이용하여 텔레비젼 어플리케이션을향상시키는 방법 및 시스템 |
US8819569B2 (en) * | 2005-02-18 | 2014-08-26 | Zumobi, Inc | Single-handed approach for navigation of application tiles using panning and zooming |
EP2902883A1 (en) * | 2005-05-04 | 2015-08-05 | Hillcrest Laboratories, Inc. | Method and system for scrolling in user interfaces |
JP2007043629A (ja) * | 2005-06-30 | 2007-02-15 | Sony Corp | グラフィック・ユーザ・インタフェース装置と操作入力処理方法及び双方向コミュニケーション装置 |
JP4799068B2 (ja) * | 2005-07-26 | 2011-10-19 | キヤノン株式会社 | テレビ受信装置及びその表示制御方法 |
EP1938600A2 (en) * | 2005-09-08 | 2008-07-02 | The DIRECTV Group, Inc. | Mosaic channel video stream with interactive services |
BRPI0618019A2 (pt) * | 2005-10-28 | 2011-08-16 | Directv Group Inc | método para seletivamente exibir sinal de televisão, infra-estrutura, sistema para seletivamente exibir programa de vìdeo |
US8850478B2 (en) * | 2005-12-02 | 2014-09-30 | Hillcrest Laboratories, Inc. | Multimedia systems, methods and applications |
JP4770460B2 (ja) * | 2005-12-28 | 2011-09-14 | ソニー株式会社 | 画像記録装置、画像記録方法、画像処理装置、画像処理方法及びプログラム |
CA2640425C (en) * | 2006-02-02 | 2016-06-14 | The Directv Group, Inc. | Interactive mosaic channel video stream with additional programming sources |
BRPI0708681A2 (pt) * | 2006-02-02 | 2011-06-07 | Directv Group Inc | canal de vìdeo matricial interativo e sistemas para distribuir e exibir o mesmo |
BRPI0707933A2 (pt) * | 2006-02-17 | 2011-05-17 | Directv Group Inc | sistema e aparelho para determinar classificação de visualização dinámica |
AR059820A1 (es) * | 2006-03-10 | 2008-04-30 | Directv Group Inc | Sistema para seleccionar predicciones a traves de multiples plataformas. |
AR059818A1 (es) * | 2006-03-10 | 2008-04-30 | Directv Group Inc | Visor en pantalla personalizable para la presentacion de datos |
AR059819A1 (es) * | 2006-03-10 | 2008-04-30 | Directv Group Inc | Determinacion dinamica de la presentacion multiples celdas de video en un visor en pantalla. |
JP2007304666A (ja) * | 2006-05-08 | 2007-11-22 | Sony Computer Entertainment Inc | 情報出力システム及び情報出力方法 |
US20080004960A1 (en) * | 2006-06-30 | 2008-01-03 | Microsoft Corporation Microsoft Patent Group | Interactive promotional space in a discovery interface |
US8949895B2 (en) * | 2006-08-18 | 2015-02-03 | The Directv Group, Inc. | Mosaic channel video stream with personalized interactive services |
EP2074821A1 (en) * | 2006-08-23 | 2009-07-01 | The DirecTV Group, Inc. | Selective display of overlay video streams via interactive alert icons |
US20080222675A1 (en) * | 2006-08-29 | 2008-09-11 | Hillcrest Laboratories, Inc. | Pointing capability and associated user interface elements for television user interfaces |
WO2008027464A2 (en) * | 2006-08-30 | 2008-03-06 | The Directv Group, Inc. | Mosaic channel video stream with interactive services |
US8106856B2 (en) | 2006-09-06 | 2012-01-31 | Apple Inc. | Portable electronic device for photo management |
US20080062137A1 (en) * | 2006-09-11 | 2008-03-13 | Apple Computer, Inc. | Touch actuation controller for multi-state media presentation |
US8291346B2 (en) | 2006-11-07 | 2012-10-16 | Apple Inc. | 3D remote control system employing absolute and relative position detection |
US20080209472A1 (en) * | 2006-12-11 | 2008-08-28 | David Eric Shanks | Emphasized mosaic video channel with interactive user control |
US20080189738A1 (en) * | 2006-12-18 | 2008-08-07 | Purpura Richard F | Active channel for interactive television services |
US8015581B2 (en) * | 2007-01-05 | 2011-09-06 | Verizon Patent And Licensing Inc. | Resource data configuration for media content access systems and methods |
KR101437653B1 (ko) * | 2007-01-26 | 2014-09-12 | 삼성전자주식회사 | 재생시점 변경용 gui 제공방법 및 이를 적용한 영상기기 |
KR20080071452A (ko) * | 2007-01-30 | 2008-08-04 | 삼성전자주식회사 | 리스트 생성용 gui 제공방법 및 이를 적용한 영상기기 |
KR100922493B1 (ko) * | 2007-06-27 | 2009-10-20 | 삼성전자주식회사 | 줌을 이용한 브라우저 탐색 방법 및 장치 |
WO2009032243A1 (en) * | 2007-09-05 | 2009-03-12 | Opentv, Inc. | Banner interface video function navigation |
US8760400B2 (en) * | 2007-09-07 | 2014-06-24 | Apple Inc. | Gui applications for use with 3D remote controller |
US8359545B2 (en) * | 2007-10-16 | 2013-01-22 | Hillcrest Laboratories, Inc. | Fast and smooth scrolling of user interfaces operating on thin clients |
US20090144776A1 (en) * | 2007-11-29 | 2009-06-04 | At&T Knowledge Ventures, L.P. | Support for Personal Content in a Multimedia Content Delivery System and Network |
US8549407B2 (en) * | 2007-12-05 | 2013-10-01 | Ebay Inc. | Multi-dimensional dynamic visual browsing |
US8395660B2 (en) * | 2007-12-13 | 2013-03-12 | Apple Inc. | Three-dimensional movie browser or editor |
US8194037B2 (en) * | 2007-12-14 | 2012-06-05 | Apple Inc. | Centering a 3D remote controller in a media system |
US8881049B2 (en) * | 2007-12-14 | 2014-11-04 | Apple Inc. | Scrolling displayed objects using a 3D remote controller in a media system |
US20090153475A1 (en) * | 2007-12-14 | 2009-06-18 | Apple Inc. | Use of a remote controller Z-direction input mechanism in a media system |
US8341544B2 (en) * | 2007-12-14 | 2012-12-25 | Apple Inc. | Scroll bar with video region in a media system |
US20090185080A1 (en) * | 2008-01-18 | 2009-07-23 | Imu Solutions, Inc. | Controlling an electronic device by changing an angular orientation of a remote wireless-controller |
US20090193465A1 (en) * | 2008-01-25 | 2009-07-30 | Sony Corporation | Expanded playlist for tv video player |
KR101416235B1 (ko) * | 2008-02-12 | 2014-07-07 | 삼성전자주식회사 | 3차원 위치 입력 방법 및 장치 |
US20090327969A1 (en) * | 2008-06-27 | 2009-12-31 | Microsoft Corporation | Semantic zoom in a virtual three-dimensional graphical user interface |
KR101556135B1 (ko) | 2008-09-01 | 2015-10-13 | 엘지전자 주식회사 | 이동단말기 및 그 제어 방법 |
FR2937157B1 (fr) * | 2008-10-10 | 2011-06-17 | Nageeb Mohammad Earally | Dispositif d'exploitation des donnees par navigation immersive concrete mise en oeuvre au sein d'une interface graphique |
US20100107100A1 (en) | 2008-10-23 | 2010-04-29 | Schneekloth Jason S | Mobile Device Style Abstraction |
US8411046B2 (en) | 2008-10-23 | 2013-04-02 | Microsoft Corporation | Column organization of content |
US8386954B2 (en) * | 2008-11-21 | 2013-02-26 | Microsoft Corporation | Interactive media portal |
KR101527386B1 (ko) * | 2008-12-08 | 2015-06-10 | 삼성전자 주식회사 | 디스플레이장치 및 그 제어방법 |
US20140258039A1 (en) | 2013-03-11 | 2014-09-11 | Hsni, Llc | Method and system for improved e-commerce shopping |
US20100153996A1 (en) * | 2008-12-17 | 2010-06-17 | Migos Charles J | Gesture based electronic program management system |
USD736254S1 (en) * | 2008-12-26 | 2015-08-11 | Sony Corporation | Display panel or screen with an icon |
US8441388B2 (en) | 2009-01-06 | 2013-05-14 | Hong Kong Applied Science And Technology Research Institute Co., Ltd. | Remote control devices and methods |
US8130134B2 (en) | 2009-01-06 | 2012-03-06 | Hong Kong Applied Science and Technology Research Institute Company Limited | Reduced instruction set television control system and method of use |
US20100171696A1 (en) * | 2009-01-06 | 2010-07-08 | Chi Kong Wu | Motion actuation system and related motion database |
US20100188579A1 (en) * | 2009-01-29 | 2010-07-29 | At&T Intellectual Property I, L.P. | System and Method to Control and Present a Picture-In-Picture (PIP) Window Based on Movement Data |
US20100192181A1 (en) * | 2009-01-29 | 2010-07-29 | At&T Intellectual Property I, L.P. | System and Method to Navigate an Electonic Program Guide (EPG) Display |
US20100188429A1 (en) * | 2009-01-29 | 2010-07-29 | At&T Intellectual Property I, L.P. | System and Method to Navigate and Present Image Libraries and Images |
US8355698B2 (en) | 2009-03-30 | 2013-01-15 | Microsoft Corporation | Unlock screen |
US8175653B2 (en) | 2009-03-30 | 2012-05-08 | Microsoft Corporation | Chromeless user interface |
WO2010124136A1 (en) * | 2009-04-24 | 2010-10-28 | Delta Vidyo, Inc. | An efficient video skimmer |
KR101545490B1 (ko) * | 2009-05-29 | 2015-08-21 | 엘지전자 주식회사 | 영상표시장치 및 그 동작방법 |
KR20100128958A (ko) * | 2009-05-29 | 2010-12-08 | 엘지전자 주식회사 | 영상표시장치 및 그 제어방법 |
US20100306688A1 (en) * | 2009-06-01 | 2010-12-02 | Cho Su Yeon | Image display device and operation method therefor |
KR101565342B1 (ko) * | 2009-06-01 | 2015-11-03 | 엘지전자 주식회사 | 영상 표시 장치 및 그 동작 방법 |
KR101572843B1 (ko) * | 2009-06-03 | 2015-11-30 | 엘지전자 주식회사 | 영상 표시 장치 및 그 동작 방법 |
AU2010260165B2 (en) * | 2009-06-15 | 2014-07-03 | Microsoft Technology Licensing, Llc | Mobile communications device user interface |
KR101607264B1 (ko) * | 2009-07-10 | 2016-04-11 | 엘지전자 주식회사 | 3d 포인팅 디바이스, dtv, dtv의 제어방법 및 dtv 시스템 |
US9076264B1 (en) * | 2009-08-06 | 2015-07-07 | iZotope, Inc. | Sound sequencing system and method |
JP2011066539A (ja) * | 2009-09-15 | 2011-03-31 | Toshiba Corp | 番組情報の表示制御装置及び番組情報の表示制御方法 |
EP3855297A3 (en) | 2009-09-22 | 2021-10-27 | Apple Inc. | Device method and graphical user interface for manipulating user interface objects |
US8780069B2 (en) | 2009-09-25 | 2014-07-15 | Apple Inc. | Device, method, and graphical user interface for manipulating user interface objects |
US8832585B2 (en) | 2009-09-25 | 2014-09-09 | Apple Inc. | Device, method, and graphical user interface for manipulating workspace views |
US8766928B2 (en) | 2009-09-25 | 2014-07-01 | Apple Inc. | Device, method, and graphical user interface for manipulating user interface objects |
US8799826B2 (en) | 2009-09-25 | 2014-08-05 | Apple Inc. | Device, method, and graphical user interface for moving a calendar entry in a calendar application |
US8601510B2 (en) * | 2009-10-21 | 2013-12-03 | Westinghouse Digital, Llc | User interface for interactive digital television |
KR20110055962A (ko) * | 2009-11-20 | 2011-05-26 | 삼성전자주식회사 | 디스플레이장치 및 그 제어방법 |
KR101632077B1 (ko) * | 2009-11-24 | 2016-07-01 | 엘지전자 주식회사 | 네트워크 tv의 메뉴 화면 편집 방법 |
US20110126234A1 (en) * | 2009-11-24 | 2011-05-26 | DOOREME, Inc. | Media content distribution system and method |
US9479838B2 (en) * | 2009-11-24 | 2016-10-25 | Sam Makhlouf | System and method for distributing media content from multiple sources |
KR20110060650A (ko) * | 2009-11-30 | 2011-06-08 | 엘지전자 주식회사 | 네트워크에 접속가능한 tv의 동작 모드 전환 방법 |
KR101651430B1 (ko) * | 2009-12-18 | 2016-08-26 | 삼성전자주식회사 | 휴대용 단말기에서 출력 데이터의 사이즈를 조절하기 위한 장치 및 방법 |
WO2011090467A1 (en) * | 2009-12-28 | 2011-07-28 | Hillcrest Laboratories Inc. | Tv internet browser |
TWI426777B (zh) * | 2010-01-07 | 2014-02-11 | Dynalab Singapore Ltd | 電視機操作互聯網首頁引用個人電腦畫面形式互聯網首頁的方法 |
KR101635560B1 (ko) * | 2010-01-08 | 2016-07-01 | 엘지전자 주식회사 | 영상표시장치 및 그 동작방법 |
US8677268B2 (en) | 2010-01-26 | 2014-03-18 | Apple Inc. | Device, method, and graphical user interface for resizing objects |
US8539386B2 (en) | 2010-01-26 | 2013-09-17 | Apple Inc. | Device, method, and graphical user interface for selecting and moving objects |
US8539385B2 (en) | 2010-01-26 | 2013-09-17 | Apple Inc. | Device, method, and graphical user interface for precise positioning of objects |
US9043839B2 (en) | 2010-02-19 | 2015-05-26 | Thomson Licensing | Media content spatial navigation |
USD666632S1 (en) * | 2010-04-28 | 2012-09-04 | IndiePlaya, Inc. | Display panel portion or screen portion with transitional indicator of the operation of a computer-programmed device |
US20110314416A1 (en) * | 2010-06-17 | 2011-12-22 | Microsoft Corporation | Collected media content data |
US9053562B1 (en) | 2010-06-24 | 2015-06-09 | Gregory S. Rabin | Two dimensional to three dimensional moving image converter |
US8957920B2 (en) * | 2010-06-25 | 2015-02-17 | Microsoft Corporation | Alternative semantics for zoom operations in a zoomable scene |
KR20120007829A (ko) | 2010-07-15 | 2012-01-25 | 삼성전자주식회사 | 컨텐츠 리스트 제공방법 및 이를 적용한 디스플레이 장치 |
US9786159B2 (en) | 2010-07-23 | 2017-10-10 | Tivo Solutions Inc. | Multi-function remote control device |
KR101742986B1 (ko) * | 2010-07-26 | 2017-06-15 | 엘지전자 주식회사 | 영상표시기기 및 그 동작 방법 |
US8972879B2 (en) | 2010-07-30 | 2015-03-03 | Apple Inc. | Device, method, and graphical user interface for reordering the front-to-back positions of objects |
US9098182B2 (en) | 2010-07-30 | 2015-08-04 | Apple Inc. | Device, method, and graphical user interface for copying user interface objects between content regions |
US9081494B2 (en) | 2010-07-30 | 2015-07-14 | Apple Inc. | Device, method, and graphical user interface for copying formatting attributes |
US9398339B2 (en) * | 2010-09-01 | 2016-07-19 | Lg Electronics Inc. | Image display apparatus and method for operating the same |
US8385721B2 (en) | 2010-09-08 | 2013-02-26 | Telefonaktiebolaget L M Ericsson (Publ) | Media playlist methods and apparatus |
CN102402192A (zh) * | 2010-09-19 | 2012-04-04 | 钰宝科技股份有限公司 | 无线式荧幕显示控制装置 |
BRPI1003568A2 (pt) * | 2010-10-29 | 2012-06-12 | Log On Multimidia Ltda | navegador audiovisual dinÂmico e mÉtodo |
US9377876B2 (en) * | 2010-12-15 | 2016-06-28 | Hillcrest Laboratories, Inc. | Visual whiteboard for television-based social network |
US8689123B2 (en) | 2010-12-23 | 2014-04-01 | Microsoft Corporation | Application reporting in an application-selectable user interface |
US8786549B2 (en) | 2011-03-11 | 2014-07-22 | Seiko Epson Corporation | Gyro mouse de-drift and hand jitter reduction |
US8972267B2 (en) * | 2011-04-07 | 2015-03-03 | Sony Corporation | Controlling audio video display device (AVDD) tuning using channel name |
SG185148A1 (en) * | 2011-04-07 | 2012-11-29 | Glory One Dev Ltd Hk | An apparatus and method for enabling access to a plurality of activities |
US8923686B2 (en) | 2011-05-20 | 2014-12-30 | Echostar Technologies L.L.C. | Dynamically configurable 3D display |
US9104307B2 (en) | 2011-05-27 | 2015-08-11 | Microsoft Technology Licensing, Llc | Multi-application environment |
US9158445B2 (en) | 2011-05-27 | 2015-10-13 | Microsoft Technology Licensing, Llc | Managing an immersive interface in a multi-application immersive environment |
RU2455676C2 (ru) | 2011-07-04 | 2012-07-10 | Общество с ограниченной ответственностью "ТРИДИВИ" | Способ управления устройством с помощью жестов и 3d-сенсор для его осуществления |
US9338510B2 (en) | 2011-07-31 | 2016-05-10 | Google Inc. | Systems and methods for presenting home screen shortcuts |
US9256361B2 (en) | 2011-08-03 | 2016-02-09 | Ebay Inc. | Control of search results with multipoint pinch gestures |
JP5781394B2 (ja) | 2011-08-12 | 2015-09-24 | 株式会社ソニー・コンピュータエンタテインメント | 電子機器 |
US9766782B2 (en) | 2011-08-19 | 2017-09-19 | Apple Inc. | Interactive content for digital books |
US20130057587A1 (en) | 2011-09-01 | 2013-03-07 | Microsoft Corporation | Arranging tiles |
US8922575B2 (en) | 2011-09-09 | 2014-12-30 | Microsoft Corporation | Tile cache |
US9146670B2 (en) | 2011-09-10 | 2015-09-29 | Microsoft Technology Licensing, Llc | Progressively indicating new content in an application-selectable user interface |
US8743055B2 (en) | 2011-10-13 | 2014-06-03 | Panasonic Corporation | Hybrid pointing system and method |
JP6275367B2 (ja) * | 2011-11-21 | 2018-02-07 | アルパイン株式会社 | 表示装置及びそれが適用される検索装置 |
JP5930363B2 (ja) * | 2011-11-21 | 2016-06-08 | 株式会社ソニー・インタラクティブエンタテインメント | 携帯情報機器およびコンテンツ表示方法 |
EP2801215B1 (en) * | 2012-01-03 | 2019-12-11 | LG Electronics Inc. | Image display apparatus and method for operating the same |
KR101919008B1 (ko) * | 2012-02-24 | 2018-11-19 | 삼성전자주식회사 | 정보 제공 방법 및 이를 위한 이동 단말기 |
USD726735S1 (en) | 2012-03-30 | 2015-04-14 | Sony Corporation | Display screen with graphical user interface |
JP5873390B2 (ja) | 2012-05-24 | 2016-03-01 | キヤノン株式会社 | 表示制御装置及びその制御方法、プログラム、並びに記憶媒体 |
US9508169B2 (en) * | 2012-09-14 | 2016-11-29 | Google Inc. | Method and apparatus for contextually varying amounts of imagery on a map |
US9075618B2 (en) * | 2012-11-02 | 2015-07-07 | Microsoft Technology Licensing, Llc | Cross-platform data visualizations using common descriptions |
KR20140085061A (ko) | 2012-12-27 | 2014-07-07 | 삼성전자주식회사 | 디스플레이 장치 및 이의 제어 방법 |
EP2753092A1 (en) | 2013-01-02 | 2014-07-09 | Samsung Electronics Co., Ltd | Display apparatus, input apparatus, and method for compensating coordinates using the same |
AU350141S (en) * | 2013-01-04 | 2013-08-13 | Samsung Electronics Co Ltd | Display Screen For An Electronic Device |
KR20140094671A (ko) * | 2013-01-18 | 2014-07-30 | 삼성전자주식회사 | 가이드를 제공하는 방법 및 전자 장치 |
USD753685S1 (en) * | 2013-02-06 | 2016-04-12 | Life Technologies Corporation | Thermal cycler display screen with graphical user interface |
US9223473B2 (en) * | 2013-03-13 | 2015-12-29 | Comcast Cable Communications, Llc | Supplemental services interface |
US9383890B2 (en) | 2013-03-14 | 2016-07-05 | General Electric Company | Semantic zoom of graphical visualizations in industrial HMI systems |
US9992021B1 (en) | 2013-03-14 | 2018-06-05 | GoTenna, Inc. | System and method for private and point-to-point communication between computing devices |
US11073979B2 (en) | 2013-03-15 | 2021-07-27 | Arris Enterprises Llc | Non-linear navigation of data representation |
US9164653B2 (en) | 2013-03-15 | 2015-10-20 | Inspace Technologies Limited | Three-dimensional space for navigating objects connected in hierarchy |
US10182272B2 (en) | 2013-03-15 | 2019-01-15 | Samir B Makhlouf | System and method for reinforcing brand awareness with minimal intrusion on the viewer experience |
US9781490B2 (en) | 2013-03-15 | 2017-10-03 | Samir B. Makhlouf | System and method for engagement and distribution of media content |
US9326043B2 (en) | 2013-03-15 | 2016-04-26 | Samir B. Makhlouf | System and method for engagement and distribution of media content |
USD738394S1 (en) | 2013-06-09 | 2015-09-08 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
USD758417S1 (en) * | 2013-06-10 | 2016-06-07 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
USD741350S1 (en) | 2013-06-10 | 2015-10-20 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
USD739870S1 (en) | 2013-08-09 | 2015-09-29 | Microsoft Corporation | Display screen with graphical user interface |
USD778310S1 (en) | 2013-08-09 | 2017-02-07 | Microsoft Corporation | Display screen with graphical user interface |
USD771111S1 (en) | 2013-08-30 | 2016-11-08 | Microsoft Corporation | Display screen with graphical user interface |
USD752079S1 (en) * | 2013-10-15 | 2016-03-22 | Deere & Company | Display screen with graphical user interface |
USD745046S1 (en) | 2013-10-25 | 2015-12-08 | Microsoft Corporation | Display screen with animated graphical user interface |
USD753716S1 (en) | 2013-11-21 | 2016-04-12 | Microsoft Corporation | Display screen with icon |
USD772278S1 (en) | 2013-12-18 | 2016-11-22 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
USD754187S1 (en) * | 2013-12-30 | 2016-04-19 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with graphical user interface |
USD757043S1 (en) * | 2014-05-29 | 2016-05-24 | Comcast Cable Communications, Llc | Display screen with graphical user interface |
USD769892S1 (en) | 2014-05-30 | 2016-10-25 | Apple Inc. | Display screen or portion thereof with graphical user interface |
US9971492B2 (en) * | 2014-06-04 | 2018-05-15 | Quantum Interface, Llc | Dynamic environment for object and attribute display and interaction |
TWD175539S (zh) * | 2014-06-06 | 2016-05-11 | 樂視移動智慧資訊技術(北 | 顯示螢幕之圖形化使用者介面 |
US10719132B2 (en) * | 2014-06-19 | 2020-07-21 | Samsung Electronics Co., Ltd. | Device and method of controlling device |
USD754184S1 (en) * | 2014-06-23 | 2016-04-19 | Google Inc. | Portion of a display panel with an animated computer icon |
KR102227088B1 (ko) | 2014-08-11 | 2021-03-12 | 엘지전자 주식회사 | 전자기기 및 그것의 제어방법 |
WO2016063258A1 (en) | 2014-10-24 | 2016-04-28 | Realitygate (Pty) Ltd | Target-directed movement in a user interface |
CN105812954A (zh) * | 2014-12-30 | 2016-07-27 | 乐视致新电子科技(天津)有限公司 | 一种基于关屏的播放方法及装置 |
USD760273S1 (en) * | 2015-01-02 | 2016-06-28 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with graphical user interface |
CN105808182B (zh) | 2015-01-15 | 2019-09-17 | 财团法人工业技术研究院 | 显示控制方法及系统、广告破口判断装置、影音处理装置 |
USD771106S1 (en) * | 2015-02-06 | 2016-11-08 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with animated graphical user interface |
WO2016135677A1 (en) * | 2015-02-26 | 2016-09-01 | Realitygate (Pty) Ltd | Navigating a set of selectable items in a user interface |
USD781896S1 (en) * | 2015-03-18 | 2017-03-21 | Google Inc. | Display screen or portion thereof with transitional graphical user interface |
USD780784S1 (en) * | 2015-03-18 | 2017-03-07 | Google Inc. | Display screen or portion thereof with transitional graphical user interface |
USD789394S1 (en) * | 2015-03-18 | 2017-06-13 | Google Inc. | Display screen or portion thereof with transitional graphical user interface |
EP3276953A1 (en) * | 2015-03-27 | 2018-01-31 | Panasonic Intellectual Property Management Co., Ltd. | Video playback device and program information display method |
USD796541S1 (en) * | 2015-04-12 | 2017-09-05 | Adp, Llc | Display screen with graphical user interface |
KR20160123879A (ko) * | 2015-04-17 | 2016-10-26 | 삼성전자주식회사 | 전자 장치 및 그의 화면 표시 방법 |
IL296030A (en) | 2015-04-20 | 2022-10-01 | Snap Inc | Method and system for interactive content |
USD786284S1 (en) | 2015-05-21 | 2017-05-09 | Layer3 TV, Inc. | Display screen or portion thereof with an animated graphical user interface |
USD786285S1 (en) * | 2015-05-21 | 2017-05-09 | Layer3 TV, Inc. | Display screen or portion thereof with an animated graphical user interface |
USD765699S1 (en) | 2015-06-06 | 2016-09-06 | Apple Inc. | Display screen or portion thereof with graphical user interface |
USD809537S1 (en) * | 2015-06-30 | 2018-02-06 | Whirlpool Corporation | Control panel for appliance with embedded display screen having a graphical user interface |
USD809536S1 (en) * | 2015-06-30 | 2018-02-06 | Whirlpool Corporation | Control panel for appliance with embedded display screen having a graphical user interface |
USD780212S1 (en) * | 2015-08-12 | 2017-02-28 | Samsung Electronics Co., Ltd | Display screen or portion thereof with transitional graphical user interface |
KR102393510B1 (ko) * | 2015-08-25 | 2022-05-03 | 엘지전자 주식회사 | 디스플레이 디바이스 및 그 제어 방법 |
USD813266S1 (en) * | 2015-10-08 | 2018-03-20 | Smule, Inc. | Display screen or portion thereof with graphical user interface |
USD807381S1 (en) * | 2015-10-08 | 2018-01-09 | Smule, Inc. | Display screen or portion thereof with animated graphical user interface |
USD805529S1 (en) * | 2015-10-08 | 2017-12-19 | Smule, Inc. | Display screen or portion thereof with animated graphical user interface |
KR102407191B1 (ko) * | 2015-12-23 | 2022-06-13 | 삼성전자주식회사 | 영상 표시 장치 및 영상 표시 방법 |
WO2017120300A1 (en) * | 2016-01-05 | 2017-07-13 | Hillcrest Laboratories, Inc. | Content delivery systems and methods |
USD796549S1 (en) * | 2016-02-05 | 2017-09-05 | Hotel Revup, Llc | Portion of a display panel with a computer generated icon |
USD797143S1 (en) * | 2016-02-05 | 2017-09-12 | Hotel Revup, Llc | Portion of a display panel with a computer generated icon |
USD809003S1 (en) | 2016-04-26 | 2018-01-30 | Google Inc. | Display screen or portion thereof with transitional user interface for an image grid |
USD821439S1 (en) * | 2016-04-26 | 2018-06-26 | Google Llc | Display screen or portion thereof with transitional graphical user interface for an image grid |
US10222960B2 (en) | 2016-04-26 | 2019-03-05 | Google Llc | Animation of user interface elements |
US10684756B2 (en) * | 2016-04-27 | 2020-06-16 | Rockwell Collins, Inc. | Avionics picture-in-picture display |
GB2550131A (en) * | 2016-05-09 | 2017-11-15 | Web Communications Ltd | Apparatus and methods for a user interface |
USD826977S1 (en) | 2016-07-27 | 2018-08-28 | Beckman Coulter, Inc. | Display screen with graphical user interface for a laboratory instrument |
USD834044S1 (en) * | 2016-07-27 | 2018-11-20 | Beckman Coulter, Inc. | Display screen with graphical user interface for a laboratory instrument |
CN106572392A (zh) * | 2016-11-15 | 2017-04-19 | 深圳前海茂佳软件科技有限公司 | 基于智能电视的应用程序自启动方法、装置及智能电视 |
US10140675B2 (en) | 2016-11-28 | 2018-11-27 | Google Llc | Image grid with selectively prominent images |
USD798899S1 (en) * | 2016-12-23 | 2017-10-03 | Beijing Kingsoft Internet Security Software Co., Ltd. | Mobile terminal display screen with a graphical user interface |
USD885414S1 (en) | 2016-12-30 | 2020-05-26 | Whirlpool Corporation | Appliance display screen or portion thereof with graphic user interface |
USD863379S1 (en) | 2016-12-30 | 2019-10-15 | Whirlpool Corporation | Control panel for an appliance |
USD822049S1 (en) * | 2017-03-08 | 2018-07-03 | Google Inc. | Display screen with animated graphical user interface |
USD849767S1 (en) * | 2017-03-08 | 2019-05-28 | Google Llc | Display screen with graphical user interface |
USD823873S1 (en) | 2017-03-08 | 2018-07-24 | Google Llc | Display screen with graphical user interface |
USD823872S1 (en) | 2017-03-08 | 2018-07-24 | Google Llc | Display screen with graphical user interface |
USD834051S1 (en) * | 2017-04-12 | 2018-11-20 | Otis Elevator Company | Display screen or portion thereof with graphical user interface |
USD834052S1 (en) | 2017-04-12 | 2018-11-20 | Otis Elevator Company | Display screen or portion thereof with transitional graphical user interface |
USD846587S1 (en) | 2017-06-04 | 2019-04-23 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
USD889477S1 (en) | 2018-03-06 | 2020-07-07 | Google Llc | Display screen or a portion thereof with an animated graphical interface |
USD873842S1 (en) * | 2018-03-23 | 2020-01-28 | Martell Broadcasting Systems, Inc. | Display screen with transitional search results user interface |
USD880518S1 (en) * | 2018-03-23 | 2020-04-07 | Martell Broadcasting Systems, Inc. | Display screen with episode watch page user interface |
USD877182S1 (en) * | 2018-05-07 | 2020-03-03 | Google Llc | Display screen or portion thereof with transitional graphical user interface |
USD894952S1 (en) | 2018-05-07 | 2020-09-01 | Google Llc | Display screen or portion thereof with an animated graphical interface |
USD877181S1 (en) * | 2018-05-07 | 2020-03-03 | Google Llc | Display screen or portion thereof with graphical user interface |
USD859450S1 (en) | 2018-05-07 | 2019-09-10 | Google Llc | Display screen or portion thereof with an animated graphical interface |
USD888755S1 (en) | 2018-05-07 | 2020-06-30 | Google Llc | Display screen or portion thereof with transitional graphical user interface |
USD870744S1 (en) * | 2018-05-07 | 2019-12-24 | Google Llc | Display screen or portion thereof with graphical user interface |
USD877161S1 (en) * | 2018-05-07 | 2020-03-03 | Google Llc | Display screen or portion thereof with transitional graphical user interface |
USD858555S1 (en) | 2018-05-07 | 2019-09-03 | Google Llc | Display screen or portion thereof with an animated graphical interface |
USD894951S1 (en) * | 2018-05-07 | 2020-09-01 | Google Llc | Display screen or portion thereof with an animated graphical interface |
USD877183S1 (en) * | 2018-05-07 | 2020-03-03 | Google Llc | Display screen or portion thereof with transitional graphical user interface |
USD858556S1 (en) * | 2018-05-07 | 2019-09-03 | Google Llc | Display screen or portion thereof with an animated graphical interface |
USD870746S1 (en) * | 2018-05-07 | 2019-12-24 | Google Llc | Display screen or portion thereof with graphical user interface |
USD870745S1 (en) | 2018-05-07 | 2019-12-24 | Google Llc | Display screen or portion thereof with graphical user interface |
USD877764S1 (en) * | 2018-05-25 | 2020-03-10 | Roto-Die Company, Inc. | Display screen with transitional graphical user interface |
USD877175S1 (en) | 2018-06-04 | 2020-03-03 | Apple Inc. | Electronic device with graphical user interface |
USD928194S1 (en) | 2018-07-28 | 2021-08-17 | Beckman Coulter, Inc. | Display screen or portion thereof with graphical user interface |
KR102607182B1 (ko) * | 2018-09-12 | 2023-11-28 | 주식회사 케이티 | 공간 영상 투영 장치 |
USD883319S1 (en) | 2018-10-29 | 2020-05-05 | Apple Inc. | Electronic device with graphical user interface |
USD921002S1 (en) | 2019-05-06 | 2021-06-01 | Google Llc | Display screen with animated graphical interface |
USD921001S1 (en) | 2019-05-06 | 2021-06-01 | Google Llc | Display screen or portion thereof with an animated graphical user interface |
DK201970535A1 (en) | 2019-05-06 | 2020-12-21 | Apple Inc | Media browsing user interface with intelligently selected representative media items |
USD921647S1 (en) | 2019-05-06 | 2021-06-08 | Google Llc | Display screen or portion thereof with an animated graphical user interface |
USD921000S1 (en) | 2019-05-06 | 2021-06-01 | Google Llc | Display screen or portion thereof with an animated graphical user interface |
USD912694S1 (en) | 2019-06-01 | 2021-03-09 | Apple Inc. | Electronic device with graphical user interface |
USD956060S1 (en) * | 2019-08-16 | 2022-06-28 | Aristocrat Technologies Australia Pty Limited | Display screen or portion thereof with graphical user interface |
AU2019216700A1 (en) | 2019-08-16 | 2021-03-04 | Aristocrat Technologies Australia Pty Limited | Gaming device with upgradeable symbol awards |
DK202070616A1 (en) | 2020-02-14 | 2022-01-14 | Apple Inc | User interfaces for workout content |
US20210357110A1 (en) * | 2020-05-13 | 2021-11-18 | Cbs Interactive Inc. | Systems and methods for generating consistent user interfaces across multiple computing platforms |
EP4171022B1 (en) * | 2021-10-22 | 2023-11-29 | Axis AB | Method and system for transmitting a video stream |
Family Cites Families (73)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4745402A (en) | 1987-02-19 | 1988-05-17 | Rca Licensing Corporation | Input device for a display system using phase-encoded signals |
US5045843B1 (en) | 1988-12-06 | 1996-07-16 | Selectech Ltd | Optical pointing device |
JPH03206552A (ja) | 1989-10-17 | 1991-09-09 | Sharp Corp | 表示処理システム |
US5341466A (en) | 1991-05-09 | 1994-08-23 | New York University | Fractal computer user centerface with zooming capability |
US5359348A (en) | 1992-05-21 | 1994-10-25 | Selectech, Ltd. | Pointing device having improved automatic gain control and information reporting |
DE69418908T2 (de) | 1993-01-26 | 2000-01-20 | Sun Microsystems Inc | Verfahren und Gerät zum Informationsanschauen in einer Rechnerdatenbank |
JPH07284166A (ja) | 1993-03-12 | 1995-10-27 | Mitsubishi Electric Corp | 遠隔操作装置 |
US5297061A (en) * | 1993-05-19 | 1994-03-22 | University Of Maryland | Three dimensional pointing device monitored by computer vision |
US5524195A (en) | 1993-05-24 | 1996-06-04 | Sun Microsystems, Inc. | Graphical user interface for interactive television with an animated agent |
US5619249A (en) | 1994-09-14 | 1997-04-08 | Time Warner Entertainment Company, L.P. | Telecasting service for providing video programs on demand with an interactive interface for facilitating viewer selection of video programs |
US5671342A (en) | 1994-11-30 | 1997-09-23 | Intel Corporation | Method and apparatus for displaying information relating to a story and a story indicator in a computer system |
US6732369B1 (en) | 1995-10-02 | 2004-05-04 | Starsight Telecast, Inc. | Systems and methods for contextually linking television program information |
US6049823A (en) | 1995-10-04 | 2000-04-11 | Hwang; Ivan Chung-Shung | Multi server, interactive, video-on-demand television system utilizing a direct-access-on-demand workgroup |
US5793438A (en) | 1995-11-13 | 1998-08-11 | Hyundai Electronics America | Electronic program guide with enhanced presentation |
US5796395A (en) | 1996-04-02 | 1998-08-18 | Wegener Internet Projects Bv | System for publishing and searching interests of individuals |
KR100188659B1 (ko) | 1996-06-28 | 1999-06-01 | 윤종용 | 방송에약녹화 시스템의 방송 프로그램 안내 표시장치및그방법 |
AU3908297A (en) | 1996-08-06 | 1998-02-25 | Starsight Telecast Incorporated | Electronic program guide with interactive areas |
US6195089B1 (en) | 1996-08-14 | 2001-02-27 | Samsung Electronics Co., Ltd. | Television graphical user interface having variable channel changer icons |
US6016144A (en) | 1996-08-14 | 2000-01-18 | Samsung Electronics Co., Ltd. | Multi-layered television graphical user interface |
US6411308B1 (en) | 1996-08-14 | 2002-06-25 | Samsung Electronics Co., Ltd. | Television graphical user interface having variable channel control bars |
US5835156A (en) | 1996-08-14 | 1998-11-10 | Samsung Electroncis, Ltd. | Television graphical user interface employing remote random access pointing device |
US5978043A (en) | 1996-08-14 | 1999-11-02 | Samsung Electronics Co., Ltd. | TV graphical user interface that provides customized lists of programming |
US6181333B1 (en) | 1996-08-14 | 2001-01-30 | Samsung Electronics Co., Ltd. | Television graphical user interface having channel and program sorting capabilities |
US5955988A (en) | 1996-08-14 | 1999-09-21 | Samsung Electronics Co., Ltd. | Graphical user interface for establishing installation location for satellite based television system |
US6191781B1 (en) | 1996-08-14 | 2001-02-20 | Samsung Electronics, Ltd. | Television graphical user interface that combines electronic program guide with graphical channel changer |
US6057831A (en) | 1996-08-14 | 2000-05-02 | Samsung Electronics Co., Ltd. | TV graphical user interface having cursor position indicator |
US5940072A (en) | 1996-08-15 | 1999-08-17 | Samsung Information Systems America | Graphics decompression using system ROM indexing in TV set top box |
US5790121A (en) | 1996-09-06 | 1998-08-04 | Sklar; Peter | Clustering user interface |
US6037933A (en) | 1996-11-13 | 2000-03-14 | Samsung Electronics Co., Ltd. | TV graphical user interface for providing user access to preset time periods of TV program information |
US6154723A (en) | 1996-12-06 | 2000-11-28 | The Board Of Trustees Of The University Of Illinois | Virtual reality 3D interface system for data creation, viewing and editing |
US6453471B1 (en) | 1996-12-13 | 2002-09-17 | Starsight Telecast, Inc. | Electronic programming guide with movie preview |
US6005565A (en) | 1997-03-25 | 1999-12-21 | Sony Corporation | Integrated search of electronic program guide, internet and other information resources |
US6271831B1 (en) * | 1997-04-03 | 2001-08-07 | Universal Electronics Inc. | Wireless control and pointer system |
US5982369A (en) | 1997-04-21 | 1999-11-09 | Sony Corporation | Method for displaying on a screen of a computer system images representing search results |
US6397387B1 (en) | 1997-06-02 | 2002-05-28 | Sony Corporation | Client and server system |
KR100317632B1 (ko) | 1997-07-21 | 2002-02-19 | 윤종용 | 메뉴 선택 제어방법 |
US6175362B1 (en) | 1997-07-21 | 2001-01-16 | Samsung Electronics Co., Ltd. | TV graphical user interface providing selection among various lists of TV channels |
US6680694B1 (en) | 1997-08-19 | 2004-01-20 | Siemens Vdo Automotive Corporation | Vehicle information system |
US6005578A (en) | 1997-09-25 | 1999-12-21 | Mindsphere, Inc. | Method and apparatus for visual navigation of information objects |
US5912612A (en) | 1997-10-14 | 1999-06-15 | Devolpi; Dean R. | Multi-speed multi-direction analog pointing device |
US6092076A (en) | 1998-03-24 | 2000-07-18 | Navigation Technologies Corporation | Method and system for map display in a navigation application |
US6163749A (en) | 1998-06-05 | 2000-12-19 | Navigation Technologies Corp. | Method and system for scrolling a map display in a navigation application |
US6268849B1 (en) | 1998-06-30 | 2001-07-31 | United Video Properties, Inc. | Internet television program guide system with embedded real-time data |
JP2000029598A (ja) | 1998-07-13 | 2000-01-28 | Matsushita Electric Ind Co Ltd | 表示制御装置、表示制御方法及び表示制御プログラムを記録したコンピュータ読み取り可能な記録媒体 |
US6295646B1 (en) | 1998-09-30 | 2001-09-25 | Intel Corporation | Method and apparatus for displaying video data and corresponding entertainment data for multiple entertainment selection sources |
KR100301016B1 (ko) | 1998-10-27 | 2001-09-06 | 윤종용 | 온-스크린메뉴선택방법및그장치 |
KR20000027424A (ko) | 1998-10-28 | 2000-05-15 | 윤종용 | 방송되는 프로그램 타이틀을 표시하는 프로그램 가이드 제어방법 |
US6452609B1 (en) | 1998-11-06 | 2002-09-17 | Supertuner.Com | Web application for accessing media streams |
US6577350B1 (en) | 1998-12-21 | 2003-06-10 | Sony Corporation | Method and apparatus for displaying an electronic program guide |
TW460839B (en) * | 1999-01-08 | 2001-10-21 | Lg Electronics Inc | User interface method of image display device |
US6429813B2 (en) | 1999-01-14 | 2002-08-06 | Navigation Technologies Corp. | Method and system for providing end-user preferences with a navigation system |
US6426761B1 (en) | 1999-04-23 | 2002-07-30 | Internation Business Machines Corporation | Information presentation system for a graphical user interface |
US7194702B1 (en) | 1999-06-29 | 2007-03-20 | Gateway Inc. | System method apparatus and software for minimizing unintended cursor movement |
JP2001050767A (ja) | 1999-08-06 | 2001-02-23 | Aisin Aw Co Ltd | ナビゲーション装置および記憶媒体 |
US6349257B1 (en) | 1999-09-15 | 2002-02-19 | International Business Machines Corporation | System for personalized mobile navigation information |
US6753849B1 (en) | 1999-10-27 | 2004-06-22 | Ken Curran & Associates | Universal remote TV mouse |
US6415226B1 (en) | 1999-12-20 | 2002-07-02 | Navigation Technologies Corp. | Method and system for providing safe routes using a navigation system |
US6421067B1 (en) | 2000-01-16 | 2002-07-16 | Isurftv | Electronic programming guide |
US20020112237A1 (en) | 2000-04-10 | 2002-08-15 | Kelts Brett R. | System and method for providing an interactive display interface for information objects |
US6385542B1 (en) | 2000-10-18 | 2002-05-07 | Magellan Dis, Inc. | Multiple configurations for a vehicle navigation system |
JPWO2002056217A1 (ja) * | 2000-12-27 | 2004-05-20 | 富士通株式会社 | ショッピングシステム |
US6847351B2 (en) | 2001-08-13 | 2005-01-25 | Siemens Information And Communication Mobile, Llc | Tilt-based pointing for hand-held devices |
US7093201B2 (en) * | 2001-09-06 | 2006-08-15 | Danger, Inc. | Loop menu navigation apparatus and method |
US7511710B2 (en) * | 2002-11-25 | 2009-03-31 | Microsoft Corporation | Three-dimensional program guide |
US20040123320A1 (en) * | 2002-12-23 | 2004-06-24 | Mike Daily | Method and system for providing an interactive guide for multimedia selection |
US20040221243A1 (en) * | 2003-04-30 | 2004-11-04 | Twerdahl Timothy D | Radial menu interface for handheld computing device |
US7233316B2 (en) * | 2003-05-01 | 2007-06-19 | Thomson Licensing | Multimedia user interface |
US20040268393A1 (en) | 2003-05-08 | 2004-12-30 | Hunleth Frank A. | Control framework with a zoomable graphical user interface for organizing, selecting and launching media items |
JP2007516496A (ja) * | 2003-05-08 | 2007-06-21 | ヒルクレスト ラボラトリーズ, インコーポレイテッド | メディア項目を編成、選択及び開始するためのズーム可能なグラフィカルユーザインタフェースを有する制御フレームワーク |
US20050102634A1 (en) * | 2003-11-10 | 2005-05-12 | Sloo David H. | Understandable navigation of an information array |
US7535456B2 (en) | 2004-04-30 | 2009-05-19 | Hillcrest Laboratories, Inc. | Methods and devices for removing unintentional movement in 3D pointing devices |
JP2007535773A (ja) | 2004-04-30 | 2007-12-06 | ヒルクレスト・ラボラトリーズ・インコーポレイテッド | 自由空間ポインティングデバイスおよびポインティング方法 |
KR20080003788A (ko) * | 2005-02-14 | 2008-01-08 | 힐크레스트 래보래토리스, 인크. | 3d 포인팅을 이용하여 텔레비젼 어플리케이션을향상시키는 방법 및 시스템 |
-
2006
- 2006-02-14 KR KR1020077020993A patent/KR20080003788A/ko not_active Application Discontinuation
- 2006-02-14 JP JP2007555331A patent/JP2008536196A/ja active Pending
- 2006-02-14 WO PCT/US2006/005108 patent/WO2006088831A2/en active Application Filing
- 2006-02-14 CN CN200680006189.9A patent/CN101341457B/zh active Active
- 2006-02-14 EP EP06734988A patent/EP1851955A4/en not_active Ceased
- 2006-02-14 US US11/354,329 patent/US7839385B2/en active Active
-
2010
- 2010-11-22 US US12/951,669 patent/US8169405B2/en active Active
-
2012
- 2012-04-17 US US13/448,907 patent/US8432358B2/en active Active
-
2013
- 2013-04-15 US US13/863,023 patent/US9436359B2/en active Active
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101778224B (zh) * | 2009-01-09 | 2013-07-03 | 索尼公司 | 显示设备和显示方法 |
US9467119B2 (en) | 2009-05-29 | 2016-10-11 | Lg Electronics Inc. | Multi-mode pointing device and method for operating a multi-mode pointing device |
US8704958B2 (en) | 2009-06-01 | 2014-04-22 | Lg Electronics Inc. | Image display device and operation method thereof |
US9086747B2 (en) | 2010-05-17 | 2015-07-21 | Canon Kabushiki Kaisha | Information processing device, display device, display system, method for controlling information processing device, and method for controlling display device |
CN102253735B (zh) * | 2010-05-17 | 2014-12-10 | 佳能株式会社 | 信息处理装置和显示装置及其控制方法以及显示系统 |
CN102253735A (zh) * | 2010-05-17 | 2011-11-23 | 佳能株式会社 | 信息处理装置和显示装置及其控制方法以及显示系统 |
CN103026691A (zh) * | 2010-06-16 | 2013-04-03 | 高通股份有限公司 | Rf测距辅助式局部运动感测 |
CN103026691B (zh) * | 2010-06-16 | 2015-09-16 | 高通股份有限公司 | Rf测距辅助式局部运动感测 |
CN102348133A (zh) * | 2010-07-28 | 2012-02-08 | Lg电子株式会社 | 图像显示装置及图像显示装置的操作方法 |
CN102469369A (zh) * | 2010-11-15 | 2012-05-23 | Lg电子株式会社 | 图像显示设备及其操作方法 |
CN102469369B (zh) * | 2010-11-15 | 2016-01-27 | Lg电子株式会社 | 图像显示设备及其操作方法 |
CN102789455A (zh) * | 2011-05-17 | 2012-11-21 | 冠捷投资有限公司 | 网页的文字选项放大方法及系统 |
CN103124360A (zh) * | 2011-11-18 | 2013-05-29 | 联想(北京)有限公司 | 一种用于3d图像信号的显示处理方法、装置及电子设备 |
CN103124360B (zh) * | 2011-11-18 | 2015-09-23 | 联想(北京)有限公司 | 一种用于3d图像信号的显示处理方法、装置及电子设备 |
CN103702154A (zh) * | 2013-12-04 | 2014-04-02 | 京东方科技集团股份有限公司 | 触摸屏遥控器及其遥控方法 |
CN105872683A (zh) * | 2015-02-10 | 2016-08-17 | 三星电子株式会社 | 图像显示设备和方法 |
CN105872683B (zh) * | 2015-02-10 | 2019-09-17 | 三星电子株式会社 | 图像显示设备和方法 |
CN105916050A (zh) * | 2016-05-03 | 2016-08-31 | 乐视控股(北京)有限公司 | 电视购物信息处理方法和装置 |
CN106658141A (zh) * | 2016-11-29 | 2017-05-10 | 维沃移动通信有限公司 | 一种视频处理方法及移动终端 |
Also Published As
Publication number | Publication date |
---|---|
JP2008536196A (ja) | 2008-09-04 |
US9436359B2 (en) | 2016-09-06 |
KR20080003788A (ko) | 2008-01-08 |
WO2006088831A3 (en) | 2008-07-31 |
US8432358B2 (en) | 2013-04-30 |
EP1851955A2 (en) | 2007-11-07 |
CN101341457B (zh) | 2014-01-29 |
US20120204210A1 (en) | 2012-08-09 |
WO2006088831A2 (en) | 2006-08-24 |
EP1851955A4 (en) | 2009-08-12 |
US8169405B2 (en) | 2012-05-01 |
US20060184966A1 (en) | 2006-08-17 |
US20130232417A1 (en) | 2013-09-05 |
US7839385B2 (en) | 2010-11-23 |
US20110067068A1 (en) | 2011-03-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101341457B (zh) | 利用3d定位增强电视应用的方法和系统 | |
CN101233504B (zh) | 用于用户界面的分布式软件架构 | |
CN101484869B (zh) | 用于处理一到多个对象的调整大小和布局的方法和系统 | |
KR100994011B1 (ko) | 미디어 항목들을 편성하고, 선택하며, 개시하기 위한주밍(zooming) 가능한 그래픽 유저 인터페이스를갖춘 제어 프레임워크 | |
US8601396B2 (en) | Systems and methods for node tracking and notification in a control framework including a zoomable graphical user interface | |
US8555165B2 (en) | Methods and systems for generating a zoomable graphical user interface | |
US8046705B2 (en) | Systems and methods for resolution consistent semantic zooming | |
US7834849B2 (en) | Control framework with a zoomable graphical user interface for organizing selecting and launching media items | |
JP5969388B2 (ja) | 3次元メディアガイダンスアプリケーションをナビゲートするためのシステムおよび方法 | |
CN100454220C (zh) | 用于组织、选择和启动媒体项的控制架构 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20180606 Address after: Delaware Patentee after: IDHL HOLDINGS, Inc. Address before: American Maryland Patentee before: HILLCREST LABORATORIES, Inc. |
|
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20231101 Address after: Delaware Patentee after: TAG-COMM Inc. Address before: Delaware Patentee before: IDHL HOLDINGS, Inc. |