CN102577433A - 基于听众位置的音量调整 - Google Patents

基于听众位置的音量调整 Download PDF

Info

Publication number
CN102577433A
CN102577433A CN2010800418972A CN201080041897A CN102577433A CN 102577433 A CN102577433 A CN 102577433A CN 2010800418972 A CN2010800418972 A CN 2010800418972A CN 201080041897 A CN201080041897 A CN 201080041897A CN 102577433 A CN102577433 A CN 102577433A
Authority
CN
China
Prior art keywords
loud speaker
audience
volume
player
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010800418972A
Other languages
English (en)
Other versions
CN102577433B (zh
Inventor
D·安杰洛夫
J·克拉维
R·沃克尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN102577433A publication Critical patent/CN102577433A/zh
Application granted granted Critical
Publication of CN102577433B publication Critical patent/CN102577433B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03GCONTROL OF AMPLIFICATION
    • H03G3/00Gain control in amplifiers or frequency changers without distortion of the input signal
    • H03G3/20Automatic control
    • H03G3/30Automatic control in amplifiers having semiconductor devices
    • H03G3/3005Automatic control in amplifiers having semiconductor devices in amplifiers suitable for low-frequencies, e.g. audio amplifiers
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03GCONTROL OF AMPLIFICATION
    • H03G3/00Gain control in amplifiers or frequency changers without distortion of the input signal
    • H03G3/20Automatic control
    • H03G3/30Automatic control in amplifiers having semiconductor devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01Aspects of volume control, not necessarily automatic, in sound systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13Aspects of volume control, not necessarily automatic, in stereophonic sound systems

Abstract

公开了基于听众位置的音量调整。标识一个或多个扬声器的位置,并跟踪听众的位置。对于一个或多个扬声器中的每一个,估定在该扬声器和听众之间的改变的距离。基于在该扬声器和听众之间的当前距离实时自动调整该扬声器的音量。

Description

基于听众位置的音量调整
背景
音频系统可以用于各种不同的应用。例如,现代控制台游戏系统被配置为利用能够从若干不同的扬声器播放不同声音的多通道环绕声系统。
概述
本公开内容涉及所作出的影响听众所察觉的音量的实时音频调整。实时跟踪听众的位置。随着听众的位置相对于一个或多个扬声器而改变,根据基于在听众和(各)扬声器之间的距离的预先确定的函数来调整一个或多个扬声器的个体音量。
提供本概述以便以简化形式介绍下面在详细描述中进一步描述的概念的选集。本概述不旨在标识所要求保护的本主题的关键特征或必要特征,也不预期用来限制所要求保护的本主题的范围。此外,所要求保护的本主题不限于解决本公开内容的任何部分中提到的任何或全部缺点的实现。
附图简述
图1示出当在玩家和扬声器之间的距离改变时所察觉的音量如何改变的示例。
图2在某种程度上示意性地示出根据本公开内容的实施例用于跟踪玩家的位置的示例系统。
图3A和图3B示出响应于改变的玩家位置而作出的扬声器音量调整的示例。
图4A和4B示出响应于环绕声系统中的玩家的位置而作出的扬声器音量调整的示例。
图5示出根据本公开内容的实施例基于玩家的位置来调节音量的示例方法。
图6A和图6B示出用于根据距离来调整音频输出水平的示例函数。
图7示意性地示出根据本公开内容的实施例的计算系统。
详细描述
本公开内容涉及基于听众相对于一个或多个扬声器的位置的音频衰减和放大。尽管下面在游戏系统的上下文中描述,但应理解,在此描述的基于听众相对于一个或多个扬声器的位置的音频衰减和放大可以用于许多不同的应用。
可以至少部分地通过玩家(即,听众)在物理空间内的移动来控制结合了一个或多个扬声器的游戏系统。例如,持有运动传感控制器的玩家可以通过在世界空间中摆动运动传感控制器来引起虚拟化身在游戏空间中摆动球拍。作为另一示例,基于视觉的系统可以使用一个或多个照相机来跟踪玩家的移动,且这样的移动可以被转换成游戏控制。在这样的系统中,当玩家在包含一个或多个扬声器的空间中四处移动时,玩家所察觉的声音音量可以改变。例如,当从玩家到声音源的距离增加(即,玩家移动离开扬声器)时,玩家所察觉的声音音量可以降低。同样地,当从玩家到声音源的距离减少(即,玩家向扬声器移动)时,玩家所察觉的声音音量可以增加。因而,玩家所察觉的声音音量随玩家位置而改变。
在这样的情形中,在玩家分别离开扬声器太近或太远时,玩家所察觉的声音音量可能太响亮或太安静。在所察觉的音量太响亮时,可以导致玩家不舒服。在所察觉的音量太安静时,声音可以变得令玩家听不见。此外,当环境中存在多于一个的扬声器时,例如,在环绕声系统中,当玩家在物理空间中四处移动时,声音的平衡可能不被保留。与所察觉的音量相关的这些和其他问题可以有损于玩家体验。
通过基于玩家位置调整扬声器音量,可以调节玩家所察觉的声音音量以便保持在所期望的范围和平衡。调整可以包括基于玩家的位置放大或衰减一个声音源或多个声音源的音量。
图1示出当玩家100的位置相对于扬声器102改变时玩家100所察觉的音量如何改变的示例。扬声器102所发出的声音的音量由计量104指示,且玩家100所察觉的声音音量由计量108指示。贯穿本公开内容使用这样的测量约定。当计量结合扬声器(例如,扬声器102)来使用时,填充有黑色的计量的相对量指示扬声器的相对音量(即,较多的黑色对应于较多的输出音量,而较少的黑色对应于较少的输出音量)。当计量结合听众(例如,玩家100)来使用时,填充有黑色的计量的相对量指示听众所察觉的相对音量(即,较多的黑色对应于较响亮的所察觉的声音,而较少的黑色对应于较安静的所察觉的声音)。
如图1中所示出,当扬声器102的音量被保持在恒定水平时,所得到的由玩家100察觉的声音与玩家与扬声器的距离成比例地改变。具体而言,玩家100在相对接近扬声器102的位置110处察觉相对响亮的声音,在相对远离扬声器102的位置114处察觉相对安静的声音,且在离开扬声器102的中间距离的位置106处察觉相对中等的声音。
如下面详细描述的,可以基于听众的位置实时调制声音源的相对音量,以便调节该声音源对于听众的所察觉的音量。为了以这样的方式调节音量,跟踪听众在物理空间中相对于一个或多个声音源的位置。应理解,实际上可以使用任何实时跟踪技术而不背离本公开的范围。此外,应理解,在此描述的实时调整可以包括由计算系统的处理时间引起的短的延迟。
在一个示例中,游戏系统可以跟踪持有运动传感检测器的玩家的位置。作为另一示例,压力传感垫可以向游戏系统报告位于垫上的玩家的位置。作为另一示例,可以使用声学剖面来跟踪玩家的位置。图2中示出跟踪玩家的位置的另一示例。
图2示出用来跟踪玩家200的移动的基于视觉的计算系统202的示例。计算系统202可以包括可以用来玩各种不同的游戏、播放一种或多种不同的媒体类型和/或控制或操纵非游戏应用的游戏控制台。计算系统202也可以包括显示设备206。显示设备206可以例如是高清电视,且可以用来向诸如玩家200等的玩家呈现可视信息。
在图2中,计算系统202包括捕捉设备204。捕捉设备204可以包括任何可以可视地标识玩家(例如玩家200)的位置的输入机制。例如,捕捉设备204可以被配置为经由任何合适的技术(例如,飞行时间、结构化光、立体图像等等)捕捉带有深度信息的视频。因而,捕捉设备204可以包括深度相机、摄像机、立体照相机和/或其他合适的捕捉设备。
在图2中,玩家200被示出为处于第一位置210。捕捉设备204可以接收一般地在208处示出的场景的深度图像,该场景包括在位置210处的玩家200。然后,计算系统可以在从捕捉设备204获取的深度图像中识别在位置210处的玩家200。例如,计算系统可以使用骨骼数据或头部跟踪来在深度图像中标识玩家200。一旦系统在深度图像中识别在位置210处的玩家200,该系统就可以标识玩家的位置信息。例如,位置信息可以包括三维坐标数据。在一些实施方式中,计算系统202可以在三维世界空间内定位特定的玩家身体部位或区域(例如,耳、头部的中心等等)的位置。
捕捉设备204可以通过接收包含玩家200的场景208的多个深度图像来实时监视玩家200的位置和/或玩家200的特定部位。因而,例如,如果玩家200移动到离开捕捉设备204较远的第二位置212,捕捉设备204则可以接收到另一深度图像或一系列深度图像。然后,计算系统202使用带有在位置212处的玩家200的场景的深度图像用来获取位置信息,例如,玩家200和/或玩家200的特定部位在三维世界空间内的坐标。以此方式,系统202可以在三维空间中实时跟踪玩家的位置。
基于如上所述的玩家位置跟踪,可以调节从一个或多个声音源所发出的声音音量,以便实现所期望的玩家所察觉的声音平衡。图3A和图3B示出当玩家300移动为离开声音源较近或较远时音量调节的示例。
在图3A和图3B中,示出计算系统302,例如,游戏系统。在这一示例中,计算系统302包括显示设备304、扬声器306和捕捉设备308,例如,深度相机。
在图3A中,当玩家300处于相对接近扬声器306的第一位置312时,扬声器音量被减少到由计量310所指示的水平。扬声器音量的减少补偿在玩家300和扬声器306之间的减少的距离。因而,在位置312处的玩家300所察觉的声音音量可以被维持在由计量316所指示的所期望的水平。
同样地,如果玩家300移动到离扬声器306相对较远的第二位置,例如,移动到图3B中的位置314,则扬声器音量被增加到由图3B中的计量310所指示的水平。扬声器音量的增加补偿在玩家300和扬声器306之间的增加的距离。因而,由在位置314处的玩家所察觉的声音音量可以被维持在由计量316所指示的所期望的水平。
可以使用任何合适的方法来实时自动调节音量。在一些实施方式中,对于特定的扬声器,可以调整通道专用的音频输出水平。换句话说,游戏控制台或其他计算系统可以调整被发送给放大器的音频输出的水平,以使得不需要改变放大器的放大水平就改变从扬声器所得到的音量。在一些实施方式中,可以实时改变放大器的放大水平。
图4A和图4B示出对于存在遍及房间设立的多个扬声器的情况(例如在环绕声系统中)调节音量的示例。在这样的情况中,以上参考图3A和图3B所描述的概念可以适用于环绕声系统中的两个或更多个扬声器。
图4A和图4B示出计算系统406,例如游戏系统,其包括显示设备408、捕捉设备412和多个环绕声扬声器(例如,扬声器410a、扬声器410b、扬声器410c、扬声器410d、扬声器410e、扬声器410f、扬声器410g)。
在图4A中,玩家400处于房间中的第一位置402a。可以如上参照图2所述的由捕捉设备412确定玩家400的位置。响应于玩家400的位置,将环绕声扬声器的音量水平调整到由相应的计量(例如,计量414a、计量414b、计量414c、计量414d、计量414e、计量414f、计量414g)所指示的水平。图4A中所示出的扬声器音量调整是基于如箭头所指示的从给定的扬声器到玩家400的相应距离。扬声器音量调整维持在位置402a处的玩家400所察觉的所期望的声音的音量和平衡。
如图4B中所示出,当玩家400移动到不同的位置402b时,如由捕捉设备204所跟踪的,计算系统406将扬声器410a-410g的音量水平实时自动调整到由相应的计量414a-414g所指示的水平。图4B中所示出的扬声器音量调整是基于如箭头所指示的从给定的扬声器到玩家400的相应距离,且用于维护在位置402b处的玩家400所察觉的所期望的声音的音量和平衡。
图5示出基于诸如图3A-图4B中所示出的情形等的情形中玩家的位置来调节音量的示例方法500。
在502,方法500包括标识一个或多个扬声器的位置。可以标识一个或多个扬声器位置,以使得可以估定在这样的扬声器和听众之间的相对距离。
在502a,方法500包括发出被配置为引起扬声器产生测试声音的音频信号。例如,每一扬声器可以以一个或多个具体的频率和/或幅度发出一个或多个测试声音。可以从扬声器发出不同频率的多个测试声音,以确定在不同的频带内的扬声器音量水平(例如,如果扬声器是在沙发后面,则吸收高频声音)。来自两个或更多个扬声器中的每一个的测试声音可以是不同的,以使得它们可以彼此区别。
在502b,方法500包括在例如由捕捉设备204捕捉的多个深度图像中跟踪移动话筒的位置。例如,玩家可以持有话筒并在话筒侦听测试信号的同时在扬声器环境中四处移动。
在502c,方法500包括将来自扬声器的所察觉的音量与移动话筒的位置相关联。例如,由扬声器发出的被移动话筒察觉的测试声音的音量可以与移动话筒的位置相关联。在不同的位置处的所察觉的音量的这种关联可以被用来估计扬声器的可能位置。例如,可以创建所察觉的声音的梯度图,且可以估计扬声器位置是处于对应于梯度图上最响亮的所察觉的声音的世界空间位置。
上面的标识扬声器位置的方法502是非限制性的。可以在不偏离本公开内容的预期范围的前提下使用标识一个或多个扬声器的位置的几乎任何方法。作为另一示例,玩家可以去往每一扬声器的位置以便向视觉系统指出安置该扬声器位于何处。在又另一示例中,玩家可以通过显示设备上的交互图来描述扬声器相对于初始的玩家位置的布局。
在504,方法500包括基于玩家的位置调节扬声器音量。如上参照图2所描述的,例如,在504a跟踪玩家的位置。例如,跟踪玩家的位置可以包括在从深度相机获取的深度图像中识别玩家。例如,在深度图像中识别玩家还可以包括标识玩家的三维位置。
在504b,方法500包括,对于一个或多个扬声器中的每一个,估定在该扬声器和玩家之间的改变的距离。例如,可以基于在如上所述的扬声器配置步骤中获得的扬声器位置的地图来估定在玩家和扬声器之间的改变的距离。估定在玩家和扬声器之间的改变的距离可以包括计算在两个或更多个不同的时间在该扬声器的位置和玩家的位置之间的距离。在诸如图4A和图4B中示出的示例等的环绕声系统中,改变的距离的估定可以包括估定在玩家的三维位置和多个环绕声扬声器中的每一个的三维位置之间的距离。
在504c,方法500包括,对于一个或多个扬声器中的每一个,基于在该扬声器和玩家之间的当前距离实时自动调整该扬声器的音量。自动调整可以包括基于在扬声器的三维位置和玩家的三维位置之间的当前距离调整一个或多个扬声器的音量。在一个示例中,给定的音频信号的水平可以是给定的音频输出的标称水平音量。在另一示例中,基于由各扬声器形成的空间的大小来相对于音频水平范围作出调整。
在一个示例中,可以基于在玩家和扬声器之间的当前距离的指数函数调整音量。图6A示出用于根据当前距离来调整扬声器的音频输出的示例指数函数。在图6A中,当在玩家和声音源之间的距离增加时,可以指数地增加扬声器的音量以便补偿。可以选择指数函数以便根据距离补偿所估计的音量的逆平方减少。
在另一示例中,可以基于在玩家和扬声器之间的当前距离的线性函数调整音量。图6B示出用于根据当前距离来调整扬声器的音频输出的示例线性函数。在图6B中,当在玩家和声音源之间的距离增加时,可以线性地增加扬声器的音量以便补偿。
在此描述的方法和过程可以绑定到各种不同类型的计算系统。以上所描述的计算系统202是非限制性的示例系统,其包括游戏控制台、显示设备206和捕捉设备204。作为另一个更一般的示例,图7示意性地示出可以执行在此描述的玩家跟踪、扬声器位置标识和音量调节方法和过程中的一个或多个的计算系统700。计算系统700可以采取各种不同的形式,包括但不限于游戏控制台、个人计算系统和音频/视频影院以及其他。
计算系统700可以包括逻辑子系统702、操作上连接到逻辑子系统的数据存储子系统704、显示子系统706和/或捕捉设备708。计算系统可以可选地包括图7中未示出的组件,并且/或者图7中示出的一些组件可以是未集成到计算系统中的外围组件。
逻辑子系统702可以包括被配置为执行一个或多个指令的一个或多个物理设备。例如,逻辑子系统可以被配置为执行一个或多个指令,这些指令是一个或多个程序、例程、对象、组件、数据结构或其他逻辑构造的一部分。可以实现这样的指令以执行任务、实现数据类型、变换一个或多个设备的状态或以另外方式达到所期望的结果。逻辑子系统可以包括被配置为执行软件指令的一个或多个处理器。另外,或替代地,逻辑子系统可以包括被配置为执行硬件或固件指令的一个或多个硬件或固件逻辑机器。逻辑子系统可以可选地包括遍及在一些实施方式中可以远程地定位的两个或更多个设备分布的个体组件。
数据保持子系统704可以包括被配置为保持可由逻辑子系统执行以实现在此所描述的方法和过程的数据和/或指令的一个或多个物理设备。在实现这样的方法和过程时,可以变换数据保持子系统704的状态(例如,以保持不同的数据)。数据保持子系统704可以包括可移动介质和/或内置设备。数据保持子系统704可以包括光学存储器设备、半导体存储器设备(例如,RAM、EEPROM、闪存等等)和/或磁存储器设备以及其他。数据保持子系统704可以包括具有下列特性中的一种或多种的设备:易失性、非易失性、动态、静态、读/写、只读、随机存取、顺序存取、位置可寻址、文件可寻址和内容可寻址。在一些实施方式中,逻辑子系统702和数据保持子系统704可以被集成到诸如应用专用集成电路或片上系统等的一个或多个公共设备中。
图7也示出以计算机可读的可移动介质712的形式的数据保持子系统的一个方面,其可以被用来存储和/或传输可执行以实现在此所描述的方法和过程的数据和/或指令。
显示子系统706可以用来呈现数据保持子系统704所保持的数据的可视表示。当在此所描述的方法和过程改变数据保持子系统所保持的数据且因而变换数据保持子系统的状态时,可以同样变换显示子系统706的状态以可视地表示底层数据的改变。显示子系统706可以包括利用几乎任何类型的技术的一个或多个显示设备。这样的显示设备可以在共享外壳中与逻辑子系统702和/或数据保持子系统704组合,或者这样的显示设备可以是外围显示设备。
计算系统700还包括被配置为获得一个或多个目标和/或场景的深度图像的捕捉设备708。捕捉设备708可以被配置为经由任何合适的技术(例如,飞行时间、结构化光、立体图像等等)捕捉具有深度信息的视频。因而,捕捉设备708可以包括深度相机、摄像机、立体照相机和/或其他合适的捕捉设备。
例如,在飞行时间分析中,捕捉设备708可以向场景发出红外光,且然后可以使用传感器来检测来自场景表面的后向散射光。在一些情况中,可以使用脉冲红外光,其中,可以测量在传出光脉冲和相应的传入光脉冲之间的时间并用来确定从捕捉设备到场景上的特定位置的物理距离。在一些情况中,可以将传出光波的相位与传入光波的相位进行比较以确定相移,且相移可以用来确定从捕捉设备到场景中的特定位置的物理距离。
在另一示例中,可以使用飞行时间,通过经由诸如快门光脉冲成像等的技术来分析所反射的光束随时间的强度,来间接地确定从捕捉设备到场景中的特定位置的物理距离。
在另一示例中,捕捉设备708可以利用结构化光分析来捕捉深度信息。在这样的分析中,可以将图案化的光(例如,被显示为诸如网格图案或条纹图案等的已知图案的光)投影到景物上。在景物的表面上,图案可以变得变形,且可以研究图案的这种变形以确定从捕捉设备到场景中的特定位置的物理距离。
在另一示例中,捕捉设备可以包括从不同的角度观察场景以获得可视立体数据的两个或更多个物理上分离的照相机。在这样的情况中,可以解析可视立体数据以生成深度图像。
在其他实施方式中,捕捉设备708可以利用其他技术来度量和/或计算深度值。
在一些实施方式中,可以将两个或更多个不同的照相机合并到集成捕捉设备中。例如,可以将深度相机和摄像机(例如,RGB摄像机)可以合并到公共捕捉设备。在一些实施方式中,可以协作地使用两个或更多个分离的捕捉设备。例如,可以使用深度相机和分离的摄像机。当使用摄像机时,它可以用来提供目标跟踪数据、用于景物分析的错误修正的确认数据、图像捕捉、脸部识别、手指(或其他小的特征)的高精度跟踪、光传感和/或其他功能。
应理解,可以由一个或多个捕捉设备的逻辑机器执行至少一些深度分析操作。捕捉设备可以包括被配置为执行一种或多种深度分析功能的一个或多个板载处理单元。捕捉设备可以包括固件以促进更新这样的板载处理逻辑。
计算系统700还可以包括音频设备710。音频设备710可以包括被配置为例如将音频信号发送到放大器和/或环绕声系统中的不同扬声器的一个或多个音频输出。音频设备710也可以包括话筒。逻辑子系统702可以操作上连接到音频设备710和捕捉设备708。
应理解,在此描述的配置和/或方法本质上是示例性的,且不应以限制的意义来考虑这些特定的实施例或示例,因为众多变更是可能的。在此描述的特定的例程或方法可以表示任何数量的处理策略中的一种或多种。因而,所阐释的各种动作可以以所阐释的序列、以其他序列、并行执行、或在一些情况中忽略。同样地,可以改变以上所描述的过程的次序。
本公开内容的主题包括在此公开的各种过程、系统和配置以及其他特征、功能、动作和/或性质、以及其等效物中的任何和全部的所有新颖的和不明显的组合和子组合。

Claims (15)

1.一种调节音量的方法,所述方法包括:
标识一个或多个扬声器的位置;
跟踪听众的位置;
对于所述一个或多个扬声器中的每一个,估定在所述扬声器和所述听众之间的改变的距离;以及
基于在所述扬声器和所述听众之间的当前距离实时自动调整所述扬声器的音量。
2.如权利要求1所述的方法,其特征在于,跟踪听众的位置包括在从深度相机获取的深度图像中识别所述听众。
3.如权利要求1所述的方法,其特征在于,估定在所述扬声器和所述听众之间的所述改变的距离包括计算在两个或更多个不同的时间在所述扬声器的位置和所述听众的位置之间的距离。
4.如权利要求1所述的方法,其特征在于,自动地调整所述扬声器的音量包括根据当前距离来调整音频输出水平。
5.如权利要求4所述的方法,其特征在于,自动地调整所述扬声器的音量包括根据当前距离来指数地调整音频输出水平。
6.如权利要求4所述的方法,其特征在于,自动地调整所述扬声器的音量包括根据当前距离来线性地调整音频输出水平。
7.如权利要求1所述的方法,其特征在于,标识一个或多个扬声器的位置包括,对于每一扬声器:
发出被配置为引起所述扬声器产生测试声音的音频信号;
在多个深度图像中跟踪移动话筒的位置;以及
将该扬声器的所察觉的音量与所述移动话筒的位置相关联。
8.一个计算系统,包括:
被配置为将音频信号发送给扬声器或放大器的音频输出;
被配置为捕捉可用于构建深度图像的深度信息的深度相机;
操作上连接到所述音频输出和所述深度相机的逻辑子系统;以及
保持指令的数据保持子系统,所述指令可由所述逻辑子系统执行以便:
在所述深度图像中识别听众;
标识所述听众的三维位置;
估定在所述听众的三维位置和扬声器的三维位置之间的距离;以及
基于在所述听众的三维位置和所述扬声器的三维位置之间的距离自动地设定所述音频信号的水平。
9.如权利要求8所述的计算系统,其特征在于,所述音频输出是多个环绕声音频输出中的一个,每一环绕声音频输出被配置为将音频信号发送给不同的环绕声扬声器。
10.如权利要求8所述的计算系统,其特征在于,所述数据保持子系统存储指令,所述指令可由所述逻辑子系统执行以按照在所述扬声器的三维位置和所述听众的三维位置之间的距离的指数函数自动地设定所述音频信号的水平。
11.如权利要求8所述的计算系统,其特征在于,所述数据保持子系统保持指令,所述指令可由所述逻辑子系统执行以按照在所述扬声器的三维位置和所述听众的三维位置之间的距离的线性函数自动地设定所述音频信号的水平。
12.如权利要求8所述的计算系统,其特征在于,进一步包括话筒,且其中所述数据保持子系统存储指令,所述指令可由所述逻辑子系统执行以引起所述音频输出发出被配置为引起所述扬声器产生测试声音的音频信号;在来自所述深度相机的多个深度图像中跟踪所述话筒的位置;以及将所述扬声器的所察觉的音量与所述话筒的位置相关联。
13.如权利要求8所述的计算系统,其特征在于,所述深度相机包括飞行时间深度相机。
14.如权利要求8所述的计算系统,其特征在于,所述深度相机包括结构化光深度相机。
15.如权利要求8所述的计算系统,其特征在于,所述深度相机包括立体深度相机。
CN2010800418972A 2009-09-21 2010-08-27 基于听众位置的音量调整 Active CN102577433B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/563,484 US8976986B2 (en) 2009-09-21 2009-09-21 Volume adjustment based on listener position
US12/563,484 2009-09-21
PCT/US2010/046879 WO2011034706A2 (en) 2009-09-21 2010-08-27 Volume adjustment based on listener position

Publications (2)

Publication Number Publication Date
CN102577433A true CN102577433A (zh) 2012-07-11
CN102577433B CN102577433B (zh) 2013-11-20

Family

ID=43756639

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010800418972A Active CN102577433B (zh) 2009-09-21 2010-08-27 基于听众位置的音量调整

Country Status (8)

Country Link
US (1) US8976986B2 (zh)
EP (1) EP2481222A2 (zh)
JP (1) JP5677439B2 (zh)
KR (1) KR101665156B1 (zh)
CN (1) CN102577433B (zh)
BR (1) BR112012002985A2 (zh)
RU (1) RU2553432C2 (zh)
WO (1) WO2011034706A2 (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102547533A (zh) * 2010-11-05 2012-07-04 索尼公司 声学控制设备和声学控制方法
CN104144370A (zh) * 2013-05-06 2014-11-12 象水国际股份有限公司 可追踪目标的扬声装置及其声音输出方法
CN104540015A (zh) * 2014-12-18 2015-04-22 苏州阔地网络科技有限公司 一种应用于在线课堂系统中的自动音量调节方法及设备
CN105325014A (zh) * 2013-05-02 2016-02-10 微软技术许可有限责任公司 基于用户跟踪的声场调节
WO2016127573A1 (zh) * 2015-02-13 2016-08-18 京东方科技集团股份有限公司 一种调节显示设备的音量的方法及显示设备
CN106028226A (zh) * 2016-05-27 2016-10-12 北京奇虎科技有限公司 声音播放方法及设备
CN106465003A (zh) * 2014-05-05 2017-02-22 哈曼国际工业有限公司 扬声器
CN106817667A (zh) * 2016-11-30 2017-06-09 努比亚技术有限公司 一种实现立体声的方法、装置及移动终端
CN106817657A (zh) * 2015-12-02 2017-06-09 瑞轩科技股份有限公司 自动调整发声方向的系统、音频信号输出装置及其方法
CN106878877A (zh) * 2017-03-23 2017-06-20 南京邮电大学 Vr体验场景下为用户提供环绕立体声的方法及系统
CN107046671A (zh) * 2016-02-08 2017-08-15 索尼公司 用于音频空间效果的超声波扬声器装配
CN107885323A (zh) * 2017-09-21 2018-04-06 南京邮电大学 一种基于机器学习的vr场景沉浸控制方法
CN108055633A (zh) * 2017-12-06 2018-05-18 维沃移动通信有限公司 一种音频播放方法及移动终端
CN108475180A (zh) * 2016-01-11 2018-08-31 微软技术许可有限责任公司 在多个显示区域之间分布视频
CN108810764A (zh) * 2018-07-09 2018-11-13 Oppo广东移动通信有限公司 发声控制方法、装置以及电子装置
CN109151671A (zh) * 2017-06-15 2019-01-04 宏达国际电子股份有限公司 音频处理装置、音频处理方法和计算机程序产品
CN109361969A (zh) * 2018-10-29 2019-02-19 歌尔科技有限公司 一种音频设备及其音量调节方法、装置、设备、介质
CN110367998A (zh) * 2019-03-27 2019-10-25 美律电子(深圳)有限公司 听力测试系统以及听力测试方法
CN111490840A (zh) * 2019-12-18 2020-08-04 蔡晓青 分散式播放设备管理平台
CN112019929A (zh) * 2019-05-31 2020-12-01 腾讯科技(深圳)有限公司 一种音量调节方法和装置
CN114071315A (zh) * 2021-11-04 2022-02-18 深圳Tcl新技术有限公司 音频处理方法、装置、电子设备及存储介质

Families Citing this family (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4946305B2 (ja) * 2006-09-22 2012-06-06 ソニー株式会社 音響再生システム、音響再生装置および音響再生方法
US20090312849A1 (en) * 2008-06-16 2009-12-17 Sony Ericsson Mobile Communications Ab Automated audio visual system configuration
KR20110067755A (ko) * 2009-12-15 2011-06-22 삼성전자주식회사 휴대용 단말기에서 오디오 신호 출력 방법 및 장치
US20120020487A1 (en) * 2010-07-20 2012-01-26 International Business Machines Corporation Audio device volume manager using measured distance between first and second audio devices to control volume generation by the second audio device
US8699723B2 (en) * 2010-07-20 2014-04-15 International Business Machines Corporation Audio device volume manager using measured volume perceived at a first audio device to control volume generation by a second audio device
US20120281128A1 (en) * 2011-05-05 2012-11-08 Sony Corporation Tailoring audio video output for viewer position and needs
US9183806B2 (en) * 2011-06-23 2015-11-10 Verizon Patent And Licensing Inc. Adjusting font sizes
US20130028443A1 (en) 2011-07-28 2013-01-31 Apple Inc. Devices with enhanced audio
JP2013093753A (ja) * 2011-10-26 2013-05-16 Pioneer Electronic Corp 再生システム、再生機器、再生システムの制御方法およびプログラム
WO2013115748A1 (en) * 2012-01-30 2013-08-08 Echostar Ukraine, L.L.C. Apparatus, systems and methods for adjusting output audio volume based on user location
CN103377673B (zh) * 2012-04-20 2016-12-28 联想(北京)有限公司 一种控制电子设备的方法及电子设备
US20130329921A1 (en) * 2012-06-06 2013-12-12 Aptina Imaging Corporation Optically-controlled speaker system
US10111002B1 (en) * 2012-08-03 2018-10-23 Amazon Technologies, Inc. Dynamic audio optimization
JP6085029B2 (ja) * 2012-08-31 2017-02-22 ドルビー ラボラトリーズ ライセンシング コーポレイション 種々の聴取環境におけるオブジェクトに基づくオーディオのレンダリング及び再生のためのシステム
CN103686136A (zh) * 2012-09-18 2014-03-26 宏碁股份有限公司 多媒体处理系统及音频信号处理方法
US9251787B1 (en) 2012-09-26 2016-02-02 Amazon Technologies, Inc. Altering audio to improve automatic speech recognition
KR101982243B1 (ko) 2012-09-28 2019-05-24 삼성전자주식회사 사용자 단말 장치, 전자 장치 및 그 제어 방법
CN102981422B (zh) * 2012-11-23 2015-12-23 广州华多网络科技有限公司 一种音量调节方法及系统
US9491033B1 (en) * 2013-04-22 2016-11-08 Amazon Technologies, Inc. Automatic content transfer
KR101404171B1 (ko) * 2013-04-29 2014-06-05 세종대학교산학협력단 다채널 스피커 환경에서의 음향 신호 감쇠 보정 시스템 및 방법
GB2519172B (en) * 2013-10-14 2015-09-16 Imagination Tech Ltd Configuring an audio system
GB2528247A (en) * 2014-07-08 2016-01-20 Imagination Tech Ltd Soundbar
US8995240B1 (en) * 2014-07-22 2015-03-31 Sonos, Inc. Playback using positioning information
CN104333828A (zh) * 2014-10-16 2015-02-04 苏州合欣美电子科技有限公司 一种自适应音频控制方法
KR102174850B1 (ko) 2014-10-31 2020-11-05 한화테크윈 주식회사 환경적응형 오디오 빔 포밍장치
WO2016072565A1 (ko) * 2014-11-05 2016-05-12 엘지전자 주식회사 화상출력장치, 이동 단말기 및 그것들의 제어 방법
KR102354763B1 (ko) * 2014-11-17 2022-01-25 삼성전자주식회사 주변 기기를 식별하는 전자 기기 및 이의 주변 기기 식별 방법
KR20160122029A (ko) * 2015-04-13 2016-10-21 삼성전자주식회사 스피커 정보에 기초하여, 오디오 신호를 처리하는 방법 및 장치
CN107615206A (zh) * 2015-04-30 2018-01-19 德克萨斯大学系统董事会 使用移动设备作为基于移动的控制器
KR20160139713A (ko) 2015-05-28 2016-12-07 정명훈 냉동시스템의 증발기 제상구조
AU2016274598B2 (en) * 2015-06-10 2019-06-13 3M Innovative Properties Company Communication device and network using TDMA radio communication protocol
US10681756B2 (en) 2015-06-10 2020-06-09 3M Innovative Properties Company Beacon system to improve wireless audio communication between headset communication devices
CN105262452A (zh) * 2015-10-29 2016-01-20 小米科技有限责任公司 音量调整方法、装置及终端
US9900735B2 (en) * 2015-12-18 2018-02-20 Federal Signal Corporation Communication systems
JP2017134713A (ja) * 2016-01-29 2017-08-03 セイコーエプソン株式会社 電子機器、電子機器の制御プログラム
US10048929B2 (en) * 2016-03-24 2018-08-14 Lenovo (Singapore) Pte. Ltd. Adjusting volume settings based on proximity and activity data
DE102016205184A1 (de) * 2016-03-30 2017-10-05 Siemens Aktiengesellschaft Verfahren und Anordnung zum Steuern einer Ausgabelautstärke wenigstens einer akustischen Ausgabeeinrichtung
WO2017216629A1 (en) * 2016-06-14 2017-12-21 Orcam Technologies Ltd. Systems and methods for directing audio output of a wearable apparatus
US20170372697A1 (en) * 2016-06-22 2017-12-28 Elwha Llc Systems and methods for rule-based user control of audio rendering
EP3300389B1 (en) * 2016-09-26 2021-06-16 STMicroelectronics (Research & Development) Limited A speaker system and method
EP3513379A4 (en) * 2016-12-05 2020-05-06 Hewlett-Packard Development Company, L.P. AUDIO-VISUAL TRANSMISSION ADJUSTMENTS VIA OMNIDIRECTIONAL CAMERAS
US10481856B2 (en) 2017-05-15 2019-11-19 Microsoft Technology Licensing, Llc Volume adjustment on hinged multi-screen device
US10206055B1 (en) * 2017-12-28 2019-02-12 Verizon Patent And Licensing Inc. Methods and systems for generating spatialized audio during a virtual experience
US10306394B1 (en) 2017-12-29 2019-05-28 Samsung Electronics Co., Ltd. Method of managing a plurality of devices
US10225656B1 (en) * 2018-01-17 2019-03-05 Harman International Industries, Incorporated Mobile speaker system for virtual reality environments
US10531221B1 (en) 2018-06-22 2020-01-07 EVA Automation, Inc. Automatic room filling
US10708691B2 (en) 2018-06-22 2020-07-07 EVA Automation, Inc. Dynamic equalization in a directional speaker array
US10511906B1 (en) 2018-06-22 2019-12-17 EVA Automation, Inc. Dynamically adapting sound based on environmental characterization
US10524053B1 (en) 2018-06-22 2019-12-31 EVA Automation, Inc. Dynamically adapting sound based on background sound
US10484809B1 (en) 2018-06-22 2019-11-19 EVA Automation, Inc. Closed-loop adaptation of 3D sound
US10897570B1 (en) * 2019-01-28 2021-01-19 Facebook Technologies, Llc Room acoustic matching using sensors on headset
US10674307B1 (en) 2019-03-27 2020-06-02 Facebook Technologies, Llc Determination of acoustic parameters for a headset using a mapping server
US11012776B2 (en) * 2019-04-09 2021-05-18 International Business Machines Corporation Volume adjustment model development
CN110324703A (zh) * 2019-07-31 2019-10-11 福建捷联电子有限公司 一种视听设备的动态音量调整方法
US20220150654A1 (en) * 2019-08-27 2022-05-12 Lg Electronics Inc. Display device and surround sound system
US11373315B2 (en) 2019-08-30 2022-06-28 Tata Consultancy Services Limited Method and system for tracking motion of subjects in three dimensional scene
FR3093264A1 (fr) * 2019-09-09 2020-08-28 Sagemcom Broadband Sas Procédé de diffusion d’un signal audio
FR3104734B1 (fr) * 2019-12-17 2021-12-10 Sagemcom Broadband Sas Procédé d’équilibrage de voies audio utilisant la géolocalisation UWB
US11409360B1 (en) * 2020-01-28 2022-08-09 Meta Platforms Technologies, Llc Biologically-constrained drift correction of an inertial measurement unit
US11202150B1 (en) 2020-09-11 2021-12-14 Honda Motor Co., Ltd. Audio control based on determination of physical space surrounding vehicle
WO2022271187A1 (en) * 2021-06-25 2022-12-29 Hewlett-Packard Development Company, L.P. Electronic device audio adjustment
US11741093B1 (en) 2021-07-21 2023-08-29 T-Mobile Usa, Inc. Intermediate communication layer to translate a request between a user of a database and the database
US11924711B1 (en) 2021-08-20 2024-03-05 T-Mobile Usa, Inc. Self-mapping listeners for location tracking in wireless personal area networks
WO2023150486A1 (en) * 2022-02-01 2023-08-10 Dolby Laboratories Licensing Corporation Gesture controlled audio and/or visual rendering

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4027338A1 (de) * 1990-08-29 1992-03-12 Drescher Ruediger Balanceregelung fuer stereoanlagen u. dgl.
KR20000014636A (ko) * 1998-08-22 2000-03-15 윤종용 음량 및 밸런스레벨 자동조정장치 및 그 방법
US6584201B1 (en) * 1998-07-07 2003-06-24 Lucent Technologies Inc. Remote automatic volume control apparatus
CN1627862A (zh) * 2003-12-10 2005-06-15 索尼株式会社 多个扬声器的音响系统以及自动控制方法
US20050179701A1 (en) * 2004-02-13 2005-08-18 Jahnke Steven R. Dynamic sound source and listener position based audio rendering
US7110558B1 (en) * 2000-10-30 2006-09-19 Verizon Corporate Services Group Inc. Systems and methods for automatically adjusting the volume of an audio source

Family Cites Families (186)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4288078A (en) * 1979-11-20 1981-09-08 Lugo Julio I Game apparatus
US4695953A (en) 1983-08-25 1987-09-22 Blair Preston E TV animation interactively controlled by the viewer
US4630910A (en) 1984-02-16 1986-12-23 Robotic Vision Systems, Inc. Method of measuring in three-dimensions at high speed
US4627620A (en) 1984-12-26 1986-12-09 Yang John P Electronic athlete trainer for improving skills in reflex, speed and accuracy
US4645458A (en) 1985-04-15 1987-02-24 Harald Phillip Athletic evaluation and training apparatus
US4702475A (en) 1985-08-16 1987-10-27 Innovating Training Products, Inc. Sports technique and reaction training system
US4843568A (en) 1986-04-11 1989-06-27 Krueger Myron W Real time perception of and response to the actions of an unencumbered participant/user
US4711543A (en) 1986-04-14 1987-12-08 Blair Preston E TV animation interactively controlled by the viewer
US4796997A (en) 1986-05-27 1989-01-10 Synthetic Vision Systems, Inc. Method and system for high-speed, 3-D imaging of an object at a vision station
US5184295A (en) 1986-05-30 1993-02-02 Mann Ralph V System and method for teaching physical skills
US4751642A (en) 1986-08-29 1988-06-14 Silva John M Interactive sports simulation system with physiological sensing and psychological conditioning
US4809065A (en) 1986-12-01 1989-02-28 Kabushiki Kaisha Toshiba Interactive system and related method for displaying data to produce a three-dimensional image of an object
JPS63209300A (ja) 1987-02-25 1988-08-30 Nec Home Electronics Ltd ステレオ再生装置
US4817950A (en) 1987-05-08 1989-04-04 Goo Paul E Video game control unit and attitude sensor
US5239464A (en) 1988-08-04 1993-08-24 Blair Preston E Interactive video system providing repeated switching of multiple tracks of actions sequences
US5239463A (en) 1988-08-04 1993-08-24 Blair Preston E Method and apparatus for player interaction with animated characters and objects
US4901362A (en) 1988-08-08 1990-02-13 Raytheon Company Method of recognizing patterns
US4893183A (en) 1988-08-11 1990-01-09 Carnegie-Mellon University Robotic vision system
JPH02199526A (ja) 1988-10-14 1990-08-07 David G Capper 制御インターフェース装置
US4925189A (en) 1989-01-13 1990-05-15 Braeunig Thomas F Body-mounted video game exercise device
US5229756A (en) 1989-02-07 1993-07-20 Yamaha Corporation Image control apparatus
JPH0310500A (ja) 1989-06-07 1991-01-18 Sharp Corp 音量調整装置
US5469740A (en) 1989-07-14 1995-11-28 Impulse Technology, Inc. Interactive video testing and training system
JPH03103822U (zh) 1990-02-13 1991-10-29
US5101444A (en) 1990-05-18 1992-03-31 Panacea, Inc. Method and apparatus for high speed object location
US5148154A (en) 1990-12-04 1992-09-15 Sony Corporation Of America Multi-dimensional user interface
JPH04280198A (ja) 1991-03-07 1992-10-06 Ricoh Co Ltd 効果音発生装置
US5534917A (en) 1991-05-09 1996-07-09 Very Vivid, Inc. Video image based control system
US5417210A (en) 1992-05-27 1995-05-23 International Business Machines Corporation System and method for augmentation of endoscopic surgery
US5295491A (en) 1991-09-26 1994-03-22 Sam Technology, Inc. Non-invasive human neurocognitive performance capability testing method and system
US6054991A (en) 1991-12-02 2000-04-25 Texas Instruments Incorporated Method of modeling player position and movement in a virtual reality system
DE69229474T2 (de) 1991-12-03 2000-03-02 French Sportech Corp Interaktives videosystem zur beobachtung und zum training der leistungsfähigkeit einer person
US5875108A (en) 1991-12-23 1999-02-23 Hoffberg; Steven M. Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
JPH07325934A (ja) 1992-07-10 1995-12-12 Walt Disney Co:The 仮想世界に向上したグラフィックスを提供する方法および装置
US5999908A (en) 1992-08-06 1999-12-07 Abelow; Daniel H. Customer-based product design module
US5320538A (en) 1992-09-23 1994-06-14 Hughes Training, Inc. Interactive aircraft training system and method
IT1257294B (it) 1992-11-20 1996-01-12 Dispositivo atto a rilevare la configurazione di un'unita' fisiologicadistale,da utilizzarsi in particolare come interfaccia avanzata per macchine e calcolatori.
US5495576A (en) 1993-01-11 1996-02-27 Ritchey; Kurtis J. Panoramic image based virtual reality/telepresence audio-visual system and method
US5690582A (en) 1993-02-02 1997-11-25 Tectrix Fitness Equipment, Inc. Interactive exercise apparatus
JP2799126B2 (ja) 1993-03-26 1998-09-17 株式会社ナムコ ビデオゲーム装置及びゲーム用入力装置
US5405152A (en) 1993-06-08 1995-04-11 The Walt Disney Company Method and apparatus for an interactive video game with physical feedback
US5454043A (en) 1993-07-30 1995-09-26 Mitsubishi Electric Research Laboratories, Inc. Dynamic and static hand gesture recognition through low-level image analysis
US5423554A (en) 1993-09-24 1995-06-13 Metamedia Ventures, Inc. Virtual reality game method and apparatus
US5980256A (en) 1993-10-29 1999-11-09 Carmein; David E. E. Virtual reality system with enhanced sensory apparatus
JP3419050B2 (ja) 1993-11-19 2003-06-23 株式会社日立製作所 入力装置
US5347306A (en) 1993-12-17 1994-09-13 Mitsubishi Electric Research Laboratories, Inc. Animated electronic meeting place
JP2552427B2 (ja) 1993-12-28 1996-11-13 コナミ株式会社 テレビ遊戯システム
US5577981A (en) 1994-01-19 1996-11-26 Jarvik; Robert Virtual reality exercise machine and computer controlled video system
US5580249A (en) 1994-02-14 1996-12-03 Sarcos Group Apparatus for simulating mobility of a human
US5597309A (en) 1994-03-28 1997-01-28 Riess; Thomas Method and apparatus for treatment of gait problems associated with parkinson's disease
US5385519A (en) 1994-04-19 1995-01-31 Hsu; Chi-Hsueh Running machine
US8189825B2 (en) * 1994-05-09 2012-05-29 Breed David S Sound management techniques for vehicles
US5524637A (en) 1994-06-29 1996-06-11 Erickson; Jon W. Interactive system for measuring physiological exertion
JPH0844490A (ja) 1994-07-28 1996-02-16 Matsushita Electric Ind Co Ltd インターフェイス装置
US5563988A (en) 1994-08-01 1996-10-08 Massachusetts Institute Of Technology Method and system for facilitating wireless, full-body, real-time user interaction with a digitally represented visual environment
US6714665B1 (en) 1994-09-02 2004-03-30 Sarnoff Corporation Fully automated iris recognition system utilizing wide and narrow fields of view
US5516105A (en) 1994-10-06 1996-05-14 Exergame, Inc. Acceleration activated joystick
US5638300A (en) 1994-12-05 1997-06-10 Johnson; Lee E. Golf swing analysis system
JPH08161292A (ja) 1994-12-09 1996-06-21 Matsushita Electric Ind Co Ltd 混雑度検知方法およびそのシステム
US5594469A (en) 1995-02-21 1997-01-14 Mitsubishi Electric Information Technology Center America Inc. Hand gesture machine control system
US5682229A (en) 1995-04-14 1997-10-28 Schwartz Electro-Optics, Inc. Laser range camera
US5913727A (en) 1995-06-02 1999-06-22 Ahdoot; Ned Interactive movement and contact simulation game
JP3481631B2 (ja) 1995-06-07 2003-12-22 ザ トラスティース オブ コロンビア ユニヴァーシティー イン ザ シティー オブ ニューヨーク 能動型照明及びデフォーカスに起因する画像中の相対的なぼけを用いる物体の3次元形状を決定する装置及び方法
US5682196A (en) 1995-06-22 1997-10-28 Actv, Inc. Three-dimensional (3D) video presentation system providing interactive 3D presentation with personalized audio responses for multiple viewers
US5702323A (en) 1995-07-26 1997-12-30 Poulton; Craig K. Electronic exercise enhancer
US6430997B1 (en) 1995-11-06 2002-08-13 Trazer Technologies, Inc. System and method for tracking and assessing movement skills in multidimensional space
US6308565B1 (en) 1995-11-06 2001-10-30 Impulse Technology Ltd. System and method for tracking and assessing movement skills in multidimensional space
US6073489A (en) 1995-11-06 2000-06-13 French; Barry J. Testing and training system for assessing the ability of a player to complete a task
US6098458A (en) 1995-11-06 2000-08-08 Impulse Technology, Ltd. Testing and training system for assessing movement and agility skills without a confining field
US6176782B1 (en) 1997-12-22 2001-01-23 Philips Electronics North America Corp. Motion-based command generation technology
US5933125A (en) 1995-11-27 1999-08-03 Cae Electronics, Ltd. Method and apparatus for reducing instability in the display of a virtual environment
US5641288A (en) 1996-01-11 1997-06-24 Zaenglein, Jr.; William G. Shooting simulating process and training device using a virtual reality display screen
JP2000510013A (ja) 1996-05-08 2000-08-08 リアル ヴィジョン コーポレイション 位置検出を用いたリアルタイムシミュレーション
US6173066B1 (en) 1996-05-21 2001-01-09 Cybernet Systems Corporation Pose determination and tracking by matching 3D objects to a 2D sensor
US5989157A (en) 1996-08-06 1999-11-23 Walton; Charles A. Exercising system with electronic inertial game playing
JP2001504605A (ja) 1996-08-14 2001-04-03 ラティポフ,ヌラフメド,ヌリスラモビチ 空間内のユーザの位置及び方向性を追跡及び表示するための方法、ユーザに対し仮想環境を提示するための方法及びこれらの方法を実現するためのシステム
JP3064928B2 (ja) 1996-09-20 2000-07-12 日本電気株式会社 被写体抽出方式
AUPO316096A0 (en) 1996-10-23 1996-11-14 Lake Dsp Pty Limited Head tracking with limited angle output
DE69626208T2 (de) 1996-12-20 2003-11-13 Hitachi Europ Ltd Verfahren und System zur Erkennung von Handgesten
US6009210A (en) 1997-03-05 1999-12-28 Digital Equipment Corporation Hands-free interface to a virtual reality environment using head tracking
US6100896A (en) 1997-03-24 2000-08-08 Mitsubishi Electric Information Technology Center America, Inc. System for designing graphical multi-participant environments
US5877803A (en) 1997-04-07 1999-03-02 Tritech Mircoelectronics International, Ltd. 3-D image detector
US6215898B1 (en) 1997-04-15 2001-04-10 Interval Research Corporation Data processing system and method
JP3077745B2 (ja) 1997-07-31 2000-08-14 日本電気株式会社 データ処理方法および装置、情報記憶媒体
US6188777B1 (en) 1997-08-01 2001-02-13 Interval Research Corporation Method and apparatus for personnel detection and tracking
US6289112B1 (en) 1997-08-22 2001-09-11 International Business Machines Corporation System and method for determining block direction in fingerprint images
US6720949B1 (en) 1997-08-22 2004-04-13 Timothy R. Pryor Man machine interfaces and applications
AUPO894497A0 (en) 1997-09-02 1997-09-25 Xenotech Research Pty Ltd Image processing method and apparatus
EP0905644A3 (en) 1997-09-26 2004-02-25 Matsushita Electric Industrial Co., Ltd. Hand gesture recognizing device
US6141463A (en) 1997-10-10 2000-10-31 Electric Planet Interactive Method and system for estimating jointed-figure configurations
AU1099899A (en) 1997-10-15 1999-05-03 Electric Planet, Inc. Method and apparatus for performing a clean background subtraction
AU9808298A (en) 1997-10-15 1999-05-03 Electric Planet, Inc. A system and method for generating an animatable character
US6101289A (en) 1997-10-15 2000-08-08 Electric Planet, Inc. Method and apparatus for unencumbered capture of an object
US6072494A (en) 1997-10-15 2000-06-06 Electric Planet, Inc. Method and apparatus for real-time gesture recognition
US6130677A (en) 1997-10-15 2000-10-10 Electric Planet, Inc. Interactive computer vision system
JPH11146500A (ja) 1997-11-07 1999-05-28 Matsushita Electric Ind Co Ltd 音声信号再生装置
US6181343B1 (en) 1997-12-23 2001-01-30 Philips Electronics North America Corp. System and method for permitting three-dimensional navigation through a virtual reality environment using camera-based gesture inputs
JP2002516121A (ja) 1998-03-03 2002-06-04 アリーナ, インコーポレイテッド 多次元空間における運動技術を追跡し、そして評価するためのシステムおよび方法
US6159100A (en) 1998-04-23 2000-12-12 Smith; Michael D. Virtual reality game
US6077201A (en) 1998-06-12 2000-06-20 Cheng; Chau-Yang Exercise bicycle
US20010008561A1 (en) 1999-08-10 2001-07-19 Paul George V. Real-time object tracking system
US6950534B2 (en) 1998-08-10 2005-09-27 Cybernet Systems Corporation Gesture-controlled interfaces for self-service machines and other applications
US6681031B2 (en) 1998-08-10 2004-01-20 Cybernet Systems Corporation Gesture-controlled interfaces for self-service machines and other applications
US7121946B2 (en) 1998-08-10 2006-10-17 Cybernet Systems Corporation Real-time head tracking system for computer games and other applications
US6801637B2 (en) 1999-08-10 2004-10-05 Cybernet Systems Corporation Optical body tracker
US7036094B1 (en) 1998-08-10 2006-04-25 Cybernet Systems Corporation Behavior recognition system
IL126284A (en) 1998-09-17 2002-12-01 Netmor Ltd System and method for three dimensional positioning and tracking
EP0991011B1 (en) 1998-09-28 2007-07-25 Matsushita Electric Industrial Co., Ltd. Method and device for segmenting hand gestures
WO2000034919A1 (en) 1998-12-04 2000-06-15 Interval Research Corporation Background estimation and segmentation based on range and color
US6147678A (en) 1998-12-09 2000-11-14 Lucent Technologies Inc. Video hand image-three-dimensional computer interface with multiple degrees of freedom
WO2000036372A1 (en) 1998-12-16 2000-06-22 3Dv Systems, Ltd. Self gating photosurface
US6570555B1 (en) 1998-12-30 2003-05-27 Fuji Xerox Co., Ltd. Method and apparatus for embodied conversational characters with multimodal input/output in an interface device
US6363160B1 (en) 1999-01-22 2002-03-26 Intel Corporation Interface using pattern recognition and tracking
US7003134B1 (en) 1999-03-08 2006-02-21 Vulcan Patents Llc Three dimensional object pose estimation which employs dense depth information
US6299308B1 (en) 1999-04-02 2001-10-09 Cybernet Systems Corporation Low-cost non-imaging eye tracker system for computer control
US6503195B1 (en) 1999-05-24 2003-01-07 University Of North Carolina At Chapel Hill Methods and systems for real-time structured light depth extraction and endoscope using real-time structured light depth extraction
US6476834B1 (en) 1999-05-28 2002-11-05 International Business Machines Corporation Dynamic creation of selectable items on surfaces
US6873723B1 (en) 1999-06-30 2005-03-29 Intel Corporation Segmenting three-dimensional video images using stereo
US6738066B1 (en) 1999-07-30 2004-05-18 Electric Plant, Inc. System, method and article of manufacture for detecting collisions between video images generated by a camera and an object depicted on a display
US7113918B1 (en) 1999-08-01 2006-09-26 Electric Planet, Inc. Method for video enabled electronic commerce
US6741273B1 (en) 1999-08-04 2004-05-25 Mitsubishi Electric Research Laboratories Inc Video camera controlled surround sound
US7050606B2 (en) 1999-08-10 2006-05-23 Cybernet Systems Corporation Tracking and gesture recognition system particularly suited to vehicular control applications
US6663491B2 (en) 2000-02-18 2003-12-16 Namco Ltd. Game apparatus, storage medium and computer program that adjust tempo of sound
US6633294B1 (en) 2000-03-09 2003-10-14 Seth Rosenthal Method and apparatus for using captured high density motion for animation
EP1152261A1 (en) 2000-04-28 2001-11-07 CSEM Centre Suisse d'Electronique et de Microtechnique SA Device and method for spatially resolved photodetection and demodulation of modulated electromagnetic waves
US6640202B1 (en) 2000-05-25 2003-10-28 International Business Machines Corporation Elastic sensor mesh system for 3-dimensional measurement, mapping and kinematics applications
US6731799B1 (en) 2000-06-01 2004-05-04 University Of Washington Object segmentation with background extraction and moving boundary techniques
US6788809B1 (en) 2000-06-30 2004-09-07 Intel Corporation System and method for gesture recognition in three dimensions using stereo imaging and color vision
US7227526B2 (en) 2000-07-24 2007-06-05 Gesturetek, Inc. Video-based image control system
US7058204B2 (en) 2000-10-03 2006-06-06 Gesturetek, Inc. Multiple camera control system
US7039676B1 (en) 2000-10-31 2006-05-02 International Business Machines Corporation Using video image analysis to automatically transmit gestures over a network in a chat or instant messaging session
JP2002152900A (ja) 2000-11-09 2002-05-24 Pioneer Electronic Corp 音量制御装置
JP2004514359A (ja) 2000-11-16 2004-05-13 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 自動調整音響システム
US20040104935A1 (en) 2001-01-26 2004-06-03 Todd Williamson Virtual reality immersion system
RU2206174C2 (ru) * 2001-03-05 2003-06-10 Журин Дмитрий Вячеславович Способ регулирования громкости звуковоспроизведения и устройства для его реализации
US6539931B2 (en) 2001-04-16 2003-04-01 Koninklijke Philips Electronics N.V. Ball throwing assistant
US7259747B2 (en) 2001-06-05 2007-08-21 Reactrix Systems, Inc. Interactive video display system
US8035612B2 (en) 2002-05-28 2011-10-11 Intellectual Ventures Holding 67 Llc Self-contained interactive video display system
JP3420221B2 (ja) 2001-06-29 2003-06-23 株式会社コナミコンピュータエンタテインメント東京 ゲーム装置及びプログラム
JP2003032799A (ja) 2001-07-12 2003-01-31 Kenwood Corp 音響システムおよび音場調整方法
US6937742B2 (en) 2001-09-28 2005-08-30 Bellsouth Intellectual Property Corporation Gesture activated home appliance
US7607509B2 (en) 2002-04-19 2009-10-27 Iee International Electronics & Engineering S.A. Safety device for a vehicle
US7170492B2 (en) 2002-05-28 2007-01-30 Reactrix Systems, Inc. Interactive video display system
US7710391B2 (en) 2002-05-28 2010-05-04 Matthew Bell Processing an image utilizing a spatially varying pattern
US7348963B2 (en) 2002-05-28 2008-03-25 Reactrix Systems, Inc. Interactive video display system
US7489812B2 (en) 2002-06-07 2009-02-10 Dynamic Digital Depth Research Pty Ltd. Conversion and encoding techniques
US8947347B2 (en) 2003-08-27 2015-02-03 Sony Computer Entertainment Inc. Controlling actions in a video game unit
US20040037450A1 (en) * 2002-08-22 2004-02-26 Bradski Gary R. Method, apparatus and system for using computer vision to identify facial characteristics
US7576727B2 (en) 2002-12-13 2009-08-18 Matthew Bell Interactive directed light/sound system
JP4235729B2 (ja) 2003-02-03 2009-03-11 国立大学法人静岡大学 距離画像センサ
DE602004006190T8 (de) 2003-03-31 2008-04-10 Honda Motor Co., Ltd. Vorrichtung, Verfahren und Programm zur Gestenerkennung
JP4355341B2 (ja) 2003-05-29 2009-10-28 本田技研工業株式会社 深度データを用いたビジュアルトラッキング
US8072470B2 (en) 2003-05-29 2011-12-06 Sony Computer Entertainment Inc. System and method for providing a real-time three-dimensional interactive environment
EP3190546A3 (en) * 2003-06-12 2017-10-04 Honda Motor Co., Ltd. Target orientation estimation using depth sensing
US20050063556A1 (en) * 2003-09-23 2005-03-24 Mceachen Peter C. Audio device
WO2005041579A2 (en) 2003-10-24 2005-05-06 Reactrix Systems, Inc. Method and system for processing captured image information in an interactive video display system
EP1542503B1 (en) 2003-12-11 2011-08-24 Sony Deutschland GmbH Dynamic sweet spot tracking
US7613313B2 (en) * 2004-01-09 2009-11-03 Hewlett-Packard Development Company, L.P. System and method for control of audio field based on position of user
RU2271605C2 (ru) * 2004-01-26 2006-03-10 Федеральное государственное унитарное предприятие Омский научно-исследовательский институт приборостроения Радиопередающее устройство с автоматической адаптацией к нагрузке
WO2005104010A2 (en) 2004-04-15 2005-11-03 Gesture Tek, Inc. Tracking bimanual movements
US7308112B2 (en) 2004-05-14 2007-12-11 Honda Motor Co., Ltd. Sign based human-machine interaction
US7704135B2 (en) 2004-08-23 2010-04-27 Harrison Jr Shelton E Integrated game system, method, and device
US7949139B2 (en) * 2004-09-23 2011-05-24 Cirrus Logic, Inc. Technique for subwoofer distance measurement
KR20060070280A (ko) 2004-12-20 2006-06-23 한국전자통신연구원 손 제스처 인식을 이용한 사용자 인터페이스 장치 및 그방법
CN101198964A (zh) 2005-01-07 2008-06-11 格斯图尔泰克股份有限公司 使用红外图案照射创建对象的三维图像
EP2487624B1 (en) 2005-01-07 2020-02-19 Qualcomm Incorporated(1/3) Detecting and tracking objects in images
EP1849123A2 (en) 2005-01-07 2007-10-31 GestureTek, Inc. Optical flow based tilt sensor
US7598942B2 (en) 2005-02-08 2009-10-06 Oblong Industries, Inc. System and method for gesture based control system
JP4686595B2 (ja) 2005-03-17 2011-05-25 本田技研工業株式会社 クリティカルポイント解析に基づくポーズ推定
BRPI0613165A2 (pt) 2005-05-17 2010-12-21 Gesturetek Inc saìda de sinal sensìvel à orientação
JP5091857B2 (ja) 2005-06-30 2012-12-05 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ システム制御方法
EP1752748B1 (en) 2005-08-12 2008-10-29 MESA Imaging AG Highly sensitive, fast pixel for use in an image sensor
US20080026838A1 (en) 2005-08-22 2008-01-31 Dunstan James E Multi-player non-role-playing virtual world games: method for two-way interaction between participants and multi-player virtual world games
ATE546202T1 (de) 2005-09-15 2012-03-15 Sony Computer Entertainment Inc Kabelloser videospielcontroller und verfahren zum betreiben des kabellosen videospielcontrollers
US7450736B2 (en) 2005-10-28 2008-11-11 Honda Motor Co., Ltd. Monocular tracking of 3D human motion with a coordinated mixture of factor analyzers
JP2007281789A (ja) 2006-04-05 2007-10-25 D & M Holdings Inc 音響解析装置
US7701439B2 (en) 2006-07-13 2010-04-20 Northrop Grumman Corporation Gesture recognition simulation system and method
JP2008061137A (ja) 2006-09-01 2008-03-13 Canon Inc 音響再生装置及びその制御方法
JP5395323B2 (ja) 2006-09-29 2014-01-22 ブレインビジョン株式会社 固体撮像素子
US7412077B2 (en) 2006-12-29 2008-08-12 Motorola, Inc. Apparatus and methods for head pose estimation and head gesture detection
US7903166B2 (en) 2007-02-21 2011-03-08 Sharp Laboratories Of America, Inc. Methods and systems for display viewer motion compensation based on user image data
US7729530B2 (en) 2007-03-03 2010-06-01 Sergey Antonov Method and apparatus for 3-D data input to a personal computer with a multimedia oriented operating system
US7852262B2 (en) 2007-08-16 2010-12-14 Cybernet Systems Corporation Wireless mobile indoor/outdoor tracking system
EP2263190A2 (en) 2008-02-13 2010-12-22 Ubisoft Entertainment S.A. Live-action image capture
EP2269383B1 (en) 2008-04-21 2015-12-16 Snap Networks, Inc. An electrical system for a speaker and its control
CN201254344Y (zh) 2008-08-20 2009-06-10 中国农业科学院草原研究所 植物标本及种子存贮器

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4027338A1 (de) * 1990-08-29 1992-03-12 Drescher Ruediger Balanceregelung fuer stereoanlagen u. dgl.
US6584201B1 (en) * 1998-07-07 2003-06-24 Lucent Technologies Inc. Remote automatic volume control apparatus
KR20000014636A (ko) * 1998-08-22 2000-03-15 윤종용 음량 및 밸런스레벨 자동조정장치 및 그 방법
US7110558B1 (en) * 2000-10-30 2006-09-19 Verizon Corporate Services Group Inc. Systems and methods for automatically adjusting the volume of an audio source
CN1627862A (zh) * 2003-12-10 2005-06-15 索尼株式会社 多个扬声器的音响系统以及自动控制方法
US20050179701A1 (en) * 2004-02-13 2005-08-18 Jahnke Steven R. Dynamic sound source and listener position based audio rendering

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102547533A (zh) * 2010-11-05 2012-07-04 索尼公司 声学控制设备和声学控制方法
CN105325014A (zh) * 2013-05-02 2016-02-10 微软技术许可有限责任公司 基于用户跟踪的声场调节
CN104144370A (zh) * 2013-05-06 2014-11-12 象水国际股份有限公司 可追踪目标的扬声装置及其声音输出方法
CN106465003A (zh) * 2014-05-05 2017-02-22 哈曼国际工业有限公司 扬声器
CN104540015A (zh) * 2014-12-18 2015-04-22 苏州阔地网络科技有限公司 一种应用于在线课堂系统中的自动音量调节方法及设备
WO2016127573A1 (zh) * 2015-02-13 2016-08-18 京东方科技集团股份有限公司 一种调节显示设备的音量的方法及显示设备
US9740279B2 (en) 2015-02-13 2017-08-22 Boe Technology Group Co., Ltd. Method for adjusting volume of a display device and a display device
CN106817657A (zh) * 2015-12-02 2017-06-09 瑞轩科技股份有限公司 自动调整发声方向的系统、音频信号输出装置及其方法
CN106817657B (zh) * 2015-12-02 2019-03-22 瑞轩科技股份有限公司 自动调整发声方向的系统、音频信号输出装置及其方法
CN108475180A (zh) * 2016-01-11 2018-08-31 微软技术许可有限责任公司 在多个显示区域之间分布视频
CN107046671B (zh) * 2016-02-08 2019-11-19 索尼公司 用于音频空间效果的装置、方法和设备
CN107046671A (zh) * 2016-02-08 2017-08-15 索尼公司 用于音频空间效果的超声波扬声器装配
CN106028226A (zh) * 2016-05-27 2016-10-12 北京奇虎科技有限公司 声音播放方法及设备
CN106817667A (zh) * 2016-11-30 2017-06-09 努比亚技术有限公司 一种实现立体声的方法、装置及移动终端
CN106878877A (zh) * 2017-03-23 2017-06-20 南京邮电大学 Vr体验场景下为用户提供环绕立体声的方法及系统
CN109151671A (zh) * 2017-06-15 2019-01-04 宏达国际电子股份有限公司 音频处理装置、音频处理方法和计算机程序产品
CN109151671B (zh) * 2017-06-15 2021-06-01 宏达国际电子股份有限公司 音频处理装置、音频处理方法和计算机程序产品
CN107885323A (zh) * 2017-09-21 2018-04-06 南京邮电大学 一种基于机器学习的vr场景沉浸控制方法
CN108055633A (zh) * 2017-12-06 2018-05-18 维沃移动通信有限公司 一种音频播放方法及移动终端
CN108810764B (zh) * 2018-07-09 2021-03-12 Oppo广东移动通信有限公司 发声控制方法、装置以及电子装置
CN108810764A (zh) * 2018-07-09 2018-11-13 Oppo广东移动通信有限公司 发声控制方法、装置以及电子装置
CN109361969A (zh) * 2018-10-29 2019-02-19 歌尔科技有限公司 一种音频设备及其音量调节方法、装置、设备、介质
CN109361969B (zh) * 2018-10-29 2020-04-28 歌尔科技有限公司 一种音频设备及其音量调节方法、装置、设备、介质
CN110367998A (zh) * 2019-03-27 2019-10-25 美律电子(深圳)有限公司 听力测试系统以及听力测试方法
CN112019929A (zh) * 2019-05-31 2020-12-01 腾讯科技(深圳)有限公司 一种音量调节方法和装置
CN111490840A (zh) * 2019-12-18 2020-08-04 蔡晓青 分散式播放设备管理平台
CN111490840B (zh) * 2019-12-18 2021-04-23 北京运动宝贝教育科技有限公司 分散式播放设备管理平台及其管理方法
CN114071315A (zh) * 2021-11-04 2022-02-18 深圳Tcl新技术有限公司 音频处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
WO2011034706A3 (en) 2011-07-28
BR112012002985A2 (pt) 2016-04-19
RU2012110603A (ru) 2013-09-27
JP2013505668A (ja) 2013-02-14
WO2011034706A2 (en) 2011-03-24
CN102577433B (zh) 2013-11-20
US8976986B2 (en) 2015-03-10
EP2481222A2 (en) 2012-08-01
KR101665156B1 (ko) 2016-10-11
RU2553432C2 (ru) 2015-06-10
KR20120068875A (ko) 2012-06-27
JP5677439B2 (ja) 2015-02-25
US20110069841A1 (en) 2011-03-24

Similar Documents

Publication Publication Date Title
CN102577433B (zh) 基于听众位置的音量调整
US9906885B2 (en) Methods and systems for inserting virtual sounds into an environment
US10911882B2 (en) Methods and systems for generating spatialized audio
US11528576B2 (en) Distributed audio capturing techniques for virtual reality (VR), augmented reality (AR), and mixed reality (MR) systems
CN111654785B (zh) 具有可配置区的音频系统
US9057943B2 (en) Directional sound capturing
US9402145B2 (en) Wireless speaker system with distributed low (bass) frequency
US9338577B2 (en) Game system, game process control method, game apparatus, and computer-readable non-transitory storage medium having stored therein game program
US11521591B2 (en) Apparatus and method for processing volumetric audio
US10542368B2 (en) Audio content modification for playback audio
CN103366756A (zh) 一种声音信号的接收方法及装置
US10564926B2 (en) Dual-vision display device and driving method thereof
CN112005556B (zh) 确定声源的位置的方法、声源定位系统以及存储介质
CN113632505A (zh) 装置、方法、声音系统
US10547961B2 (en) Signal processing apparatus, signal processing method, and storage medium
WO2020059447A1 (ja) 音声信号処理装置、音声信号処理方法、音声信号処理プログラム、音声信号処理システム及び撮影装置
US10448186B2 (en) Distributed audio mixing
KR101391942B1 (ko) 오디오 스티어링 동영상 시스템 및 그 제공방법
US20200169807A1 (en) Signal processing apparatus, method of controlling signal processing apparatus, and non-transitory computer-readable storage medium
JP2017028465A (ja) 情報処理装置、情報処理システム、情報処理装置の制御方法およびプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150505

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150505

Address after: Washington State

Patentee after: Micro soft technique license Co., Ltd

Address before: Washington State

Patentee before: Microsoft Corp.