CN1784177A - 用于生成独立于操作员的超声波图像的系统和方法 - Google Patents

用于生成独立于操作员的超声波图像的系统和方法 Download PDF

Info

Publication number
CN1784177A
CN1784177A CN200480012591.9A CN200480012591A CN1784177A CN 1784177 A CN1784177 A CN 1784177A CN 200480012591 A CN200480012591 A CN 200480012591A CN 1784177 A CN1784177 A CN 1784177A
Authority
CN
China
Prior art keywords
plane
computer program
organ
fetus
planar
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200480012591.9A
Other languages
English (en)
Inventor
艾尔弗雷德·Z·阿比哈马德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eastern Virginia Medical School
Original Assignee
Eastern Virginia Medical School
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eastern Virginia Medical School filed Critical Eastern Virginia Medical School
Publication of CN1784177A publication Critical patent/CN1784177A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0866Detecting organic movements or changes, e.g. tumours, cysts, swellings involving foetal diagnosis; pre-natal or peri-natal diagnosis of the baby
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/13Tomography
    • A61B8/14Echo-tomography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461Displaying means of special interest
    • A61B8/463Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/523Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for generating planar views from image data in a user selectable plane not corresponding to the acquisition plane

Abstract

在医学成像环境中使用的用于获取身体器官的至少一部分的超声波图像数据的系统(100)、方法和介质,该系统、方法和介质利用定义该身体器官的参考面的数据以相对于该参考面定义至少一个其它平面,并且在显示器(106)上显示超声波图像,其对应于参考面和定义至少一个其它平面的数据中的至少一项。

Description

用于生成独立于操作员的超声波图像的系统和方法
相关申请的交叉引用
本申请要求2003年4月16日递交的序号为No.60/463,045的临时申请的优先权,并通过参考引入于此。
技术领域
本发明一般涉及生成超声波静止和/或实时图像,更特别地,涉及生成胎儿、新生儿和/或成人器官的标准解剖面的超声波静止和/或实时图像的独立于操作员的显示。
背景技术
超声波检查法是依赖于操作员成像的理疗方法。亦即,不同于诸如计算机断层(CT)成像以及磁共振成像(MRI)之类的其它成像技术,利用超声波技术提供的图像质量直接取决于获取图像的超声波检查师和/或回声记录者(sonologist)的技能。此外,在产科超声波成像中,子宫内的胎儿的可变位置是增加难度级别的附加因素。
研究证明,超声波检查法的功效,特别是对于胎儿异常的检查,依赖于操作员的专门技能。参见Ewigman B.G.,Crane J.P.,Frigoletto F.D.,Leferve M.L.,Bain R.P.,McNellis D.的“Effectof Prenatal Ultrasound Screening on Perinatal Outcome”,TheRADIUS Study Group,New England Journal of Medicine,1993;171:821-827;Chitty L.S.的“Ultrasound Screening for FetalAbnormalities,Prenatal Diagnosis”,1995;15:1241-57;CraneJ.P.,LeFerve M.L.,Winbron R.C.,等人的“A Randomized Trialof Prenatal Ultrasonographic Screening:Impact on theDetection,Management,and Outcome of Anomalous Fetuses”,TheRADIUS Study Group,American Journal of Obstetrics andGynecology,1994;171:392-399;Grandjean H.,Larroque D.,LeviS.,and the Eurofetus Study Group,American Journal ofObstetrics and Gynecology,1999;181:446-454。
在美国和欧洲进行的研究指出,涉及产科超声波检查法的胎儿异常检查在三级和非三级中心之间存在显著差异。参见Ewigman等人以及Chitty。普遍认为,当今美国的许多妇女接受的产科超声波检查法低于各种专业社团当前推荐的标准。参见Filly R.A.和CraneJ.P.的“Routine Obstetric Sonography”,Journal of UltrasoundMedicine 2002;21:713-718。
在医学成像领域中,三维(3-D)和四维(4-D)超声波检查法的发展推进了成像技术的进步。借助3-D超声波检查法,可以获得目标容积(或目标容积内的)无穷多的二维(2-D)平面。在显示监视器上,可以利用代表该容积内的典型2-D平面的径向(前/后)、横向(左/右)和冠状线方向(上/下)平面的三个正交平面显示3-D超声波检查法获取的容积。利用3个正交平面显示获得的3-D容积称为多平面成像(或多平面显示)。
超声波容积的多平面显示使得操作员能够处理获取的目标容积。在多平面显示中,通过滚动通过三个视图的任意视图中的平行平面,并且通过旋转该容积获得感兴趣的结构的视图,可以探测该容积。因此,操作员可以在获得该容积并且患者离开后处理该容积数据以获得任何所需截面平面。这样,3-D超声波的一个优点在于,从一个存储的容积中获得不同视图的能力。当在多平面显示中对胎儿心脏进行成像时,常规3-D技术支持完整心动周期的回放(cineloop)显示。正如此处使用的那样,回放通常从许多心动周期(通常为10-60)中获得的图像,并且生成的时间系列图像在许多心动周期上进行均分。当循环播放时,该图像采用电影格式演示运动的心脏。可以增加彩色流量多普勒仪,从而可以显示通过胎儿的心脏瓣膜的血流量。对于4-D超声波检查法,添加时间作为第四维,以提供正在检查的3-D容积的表面的实时(或近似实时的)显示。即使对于受过训练的人员而言,也很难用多平面显示处理进行3-D容积处理,特别是当该容积涉及诸如中枢神经系统或心脏之类的相对复杂的解剖器官时。
迄今为止,与3-D超声波检查法有关的专业文献普遍认为3-D超声波检查法能够比2-D超声波检查法提供更好的诊断能力。同时,这些文献普遍认为3-D超声波检查法能够比2-D超声波检查法更好地提供了解剖结构的可视化。然而,对3-D超声波检查法的实际价值以及3-D超声波检查法是否能够提高诊断能力和现有2-D系统的效力存在某些怀疑论。
例如,已知的超声波成像系统能够使诸如超声波检查技师之类的成像人员选择一个或多个预先设置的解剖视图。例如,美国专利No.6,174,285(′285专利)的主要目的是提供利用常规2-D超声波检查法不能进行成像的成人心脏的特定平面(视图)。由于例如密集的骨结构和充满空气的肺组织包围成人的心脏,所以在2-D超声波成像中不能获得它的某些视图。
然而,′285专利不能与产科超声波结合利用,特别是因为′285专利指示要把超声波传感器放置到患者的标准位置和/或方位上。因此,′285专利依赖于必须放置在特定位置以率先获取3-D容积的超声波传感器,并且受其限制。此外,′285专利限于用户选择预先设置的解剖图,并没有考虑自动显示特定身体器官的两个或多个感兴趣的标准参考面。′285专利也没有提出提供诊断能力的意愿。
和成人心脏的超声波成像形成对比,在产科超声波成像中,母亲腹部上的标准超声波传感器成像位置是不可能存在的或不能利用的,因为,例如,子宫内胎儿位置是可变的。因此,获取胎儿心脏之图像的人员不能依靠标准传感器位置(例如,母亲腹部上的特定位置和/或方位)。相反,成像人员需要动态把传感器放置到不同位置和/或平面上直至获得所需图像。至少部分由于产科超声波检查法和其它超声波医疗方法之间的扫描技术差异使得前者更难以掌握。
发明内容
本发明的特征和优点在于,提供用于生成胎儿、新生儿和/或成人器官的独立于操作员的超声波显示的系统、方法和介质。
本发明的另一个特征和优点在于,提供能够利用对胎儿、新生儿和/或成人器官的标准解剖面的独立于操作员的超声波显示来检测该器官内的正常和/或异常成像关系的系统、方法和介质。
本发明的又一个特征和优点在于,提供能够对胎儿、新生儿和/或成人器官的现有超声波检查的效率和诊断能力进行改善的系统、方法和介质。
本发明的另一个特征在于,有助于与超声波检查法有关的教学和教育,有助于各种医务人员的培训。
本发明的至少一个实施方式可以利用例如计算机程序和例如通用计算机和/或标准超声波检查设备一起来获得并可选择地显示2-D、3-D和/或4-D超声波图像。另外,本发明的至少一个实施方式可以提供对胎儿、新生儿和成人器官(如胎儿心脏)的状况的医学评估或诊断。
在根据本发明的典型方法中,获得特定身体器官的参考面,该参考面可以作为用于获取其它感兴趣平面的基准,如胎儿心脏的四腔图平面。作为选择,参考面可以是2-D超声波检查法比较容易获得的标准典型平面,如胎儿心脏的四腔图平面。胎儿头部的示例性参考面为轴向双顶径、轴向后颅窝、轴向侧脑室以及冠状脑胼胝体。
接着,可以利用3-D超声波成像装置来获得例如从参考面的(或相对于该参考面的)层面开始的组织的容积。所获得的容积的多平面的显示在三个显示的正交平面的一个平面上,通常在A平面表示参考面(当前的标准3-D获取)。根据本发明的至少一个实施方式,为各种胎儿、新生儿和成人器官提供与参考面有关的标准化的平面的空间数学关系。通用计算机和/或标准超声波检查设备使用的软件和/或硬件然后可以利用一个或多个数学关系,可选地可以自动地利用一个或多个数学关系,来显示一个或多个标准化的平面。在本发明的至少一个实施方式中,可以显示特定身体器官的感兴趣的所有标准化的平面。此外,既可以提供多平面显示(其中三个平面的多平面显示的一个视图是标准化的平面),也可以提供仅表示一个或多个标准化的平面的显示(不显示可以作为多平面视图之一部分的任何非标准化的平面)。当传感器和/或处理能力允许时,本发明的至少一个实施方式能够自动以实时方式(或基本上以实时方式)显示身体器官的一个或多个标准化的平面,从而在获取身体部分的扫描容积时绕过多平面的显示。
有利地,这些标准化的平面彼此之间的固定解剖关系将允许对任何患者使用这些标准化的平面。对于胎儿器官的情况,可以利用关于胎儿孕龄进行轻微修改以方便显示。显示特定器官的所有标准化的平面的过程就是利用超声波评估该器官的独立于操作员的方法。在本发明的至少一个实施方式中,操作员也可以选择查看自动生成的标准化的平面的实时显示。
在本发明的至少一个实施方式中,可以利用计算机化的诊断能力来评估与一个或多个标准化的平面相关联的图像。例如,可以利用成像软件来识别图像内的特定结构(例如,代表胎儿心脏的一部分),比较该图像与参考图像,并且鉴别例如正常和异常解剖结构和/或其部分。例如,用于胎儿心脏的成像软件可以在一个或多个平面上识别该心脏的心室和/或流出道的大小,通过不同瓣膜的血流量,并且生成正常和异常关系的指示(如,报告)。另外,也可以利用成像软件来调整平面层面,以确保显示最佳或适宜平面,由此降低误差。
根据本发明的系统、方法和介质的实施方式可以提供图像分割能力以及定向工具,例如使图像更容易理解和/或2-D和3-D图像之间的点到点对照,后者能够例如容易地、清楚地向参考的医师和患者传达诊断信息。另外,根据本发明的系统、方法和介质的实施方式可以提供例如基于3-D容积(而不只是2-D平面)的胎儿的容积和重量估计。
因此,通过使图像标准化并且充分地降低或消除人为误差的可能性,本发明能够有利地、广泛地提高超声波成像的诊断敏锐度。同时,通过充分地降低或消除操作员的影响,通过减少完成超声波检查所需的时间,本发明能够提高超声波成像的效率,从而可以增加吞吐量并提高超声波实验室的效率。
附图说明
图1是可以与本发明一起使用的示例性超声波检查系统的框图;
图2是根据本发明的示例性方法的流程图;
图3表示可以生成的胎儿心脏的多种示例性标准平面;
图4表示孕期为20周的胎儿心脏的容积的示例性3-D多平面成像,其中平面A代表四腔图;
图5表示孕期为20周的胎儿心脏的容积的示例性3-D多平面成像,其中平面A代表右心室流出道;
图6表示孕期为20周的胎儿心脏的容积的示例性3-D多平面成像,其中平面A代表左心室流出道;
图7表示孕期为20周的胎儿心脏的容积的示例性3-D多平面成像,其中平面A代表导管弓;
图8表示孕期为20周的胎儿心脏的容积的示例性3-D多平面成像,其中平面A代表主动脉弓;
图9表示孕期为20周的胎儿心脏的容积的示例性3-D多平面成像,其中平面A代表静脉连接;
图10表示孕期为20周的胎儿心脏的容积的示例性3-D多平面成像,其中平面A代表三血管图;
图11表示通过使用胎儿腹部和胸部的标准横向视图的可选的扫描技术能够根据胎儿心脏的容积生成的各种视图。
具体实施方式
在详细解释本发明的至少一个实施方式之前,应该懂得,本发明在其应用中并不限于下述说明书阐述的或附图所示的其构造细节以及部件的各种排列。本发明能够采取其它实施方式,并且能够用不同方式实施和实现。同时,应该懂得,本文使用的措辞和术语是为了进行描述,不应认为是限制性的。
同样,本领域的熟练技术人员应该理解,作为本公开之基础的概念可以容易地作为用于设计用来实现本发明的几个目的的其它结构、方法和系统的基础。因此,本发明被认为是包括本文所描述的结构的等同结构,因为它们并不背离本发明的实质和范围,这一点是重要的。
3-D成像的两个概念与本发明有关。首先,诸如胎儿心脏的容积之类的利用3-D超声波检查获得的特定解剖结构的容积,包含正常和异常情况下对该结构进行全面评估的所有解剖2-D平面。其次,对于每个人类的器官而言,对特定器官进行全面解剖评估所需的解剖2-D平面是按照彼此之间的恒定解剖关系组织起来的。已经发现可以获得诸如胎儿心脏之类的特定器官的容积,并利用可选地自动化的软件程序显示来自该容积的便于该器官之评估的一个或多个2-D平面。本发明的上述方面称为自动多平面成像(AMI)。另外,已经发现在获得与特定身体器官相对应的图像数据之后,可以显示该特定身体器官的一个或多个标准化的平面。
图1,大体上在100处,是可以与本发明的一个或多个实施方式一起使用的示例性超声波检查系统的框图。利用传感器102来扫描患者身体的容积,以获得所扫描的容积的图像。正如本领域中所知的那样,传感器102通常包括许多传感器元件,后者响应于发射波束形成器104生成的信号生成聚焦声学信号。传感器102可以包括足够的电子元件和/或处理能力,以便在获得(例如,采用实时方式或近似以实施方式)特定身体器官的图像数据之后,提供或有助于一个或多个标准化的平面的显示。在发射波束形成器104的输出到达传感器102之前,放大器122可以对其进行放大。
可以利用例如多个二极管的发射/接收开关110阻止放大器124、A/D转换器116和接收波束形成器118接收发射波束形成器104的电压脉冲。因此,发射/接收开关110能够防止发射波束形成器104的发射脉冲损坏接收波束形成器118。运行时,当发射波束形成器104的发射脉冲出现时,发射/接收开关110的二极管接通,由此短路接收波束形成器118和地线,从而呈现到达发射波束形成器104的高阻抗通路。在本发明的至少一个可选实施方式中,如果独立的发射和接收传感器(未示出)分别与发射波束形成器104和接收波束形成器118相连,则无需使用发射/接收开关110。
传感器102通常在不同时刻接收来自患者身体内的不同点的超声波能量,并将接收的超声波能量转换成传感器信号,放大器124可以对其进行放大,A/D转换器116将其转换为数字信号,并由接收波束形成器118接收。在另一个实施方式中,如果不使用A/D转换器116的话,波束形成器118可以在模拟信号上运行。
信号处理器120可以用于按照至少三种原像获取模式中的一种或多种模式处理从接收波束形成器118那里接收的信号。第一种模式是2-D灰度成像,称为B模式。第二种模式是多普勒成像,用于血流量,称为F模式。第三种模式是光谱多普勒成像,可以显示血流速度及其频率,称为D模式。信号处理器120通常按照以下模式处理从接收波束形成器118那里接收的信号:充分地上对这些信号进行优化以便按照其选定的显示模式输出。信号处理器也可以对这些信号进行优化以便利用扬声器108进行音频输出,并将经过处理的信号存储在内存126和/或存储器128中。例如,内存126可以是随机存取存储器,而存储器128可以是诸如标准硬盘和/或CD-ROM之类的介质。
扫描转换器114是一台标准设备,可选择地,该设备结合中央处理单元(CPU)130一起,把从信号处理器120那里接收的信号的扫描频率变成用户接口/显示器106使用的扫描频率,如标准光栅扫描频率。可选择地,显示器106可以提供用户控制的和操作的选择器,如标准鼠标,其允许用户选择可以显示的一个或多个感兴趣的平面。可选择地,用户可以选择要显示的特定身体器官的任何(或所有)标准化的平面。在本发明的至少一个实施方式中,一旦系统100获得参考面,系统100的默认操作模式可以显示特定身体器官的所有感兴趣的标准化的平面。扫描转换器114也可以把从信号处理器120那里接收的信号处理成能够在扬声器108上音频输出的信号。
控制系统112协调例如发射波束形成器104、接收波束形成器118、信号处理器120以及系统100的有关元件的操作。内存126和存储器128可以用来存储例如根据本发明生成感兴趣的标准化的平面的软件,以及用于控制器112的控制指令。
现在参照图2,表示了根据本发明的示例性方法。在步骤1中,通常,例如超声波检查者或回声记录者通过使用常规2-D超声波检查法按常规方式获得参考面。该参考面通常为2-D超声波检查法可以轻易获得的平面(如,心脏的四腔图或头部的双顶径),其可以作为用来获得特定器官的感兴趣的其它平面的基准。可以使用诸如图1所示的超声波检查系统来获得参考面。如果传感器技术允许,也可以按照3-D/4-D超声波检查法提供的容积直接获得参考面。通常,一旦相对于已知参考面定义了感兴趣的标准化的平面的数学关系(如三角关系),任何一个平面都可以作为特定器官的参考面。因此,如果必要(或需要),则一旦建立任意参考面的坐标之后,通过使用任意参考面的标准数学方法和/或运算,可以调整或重新定义(如重新计算)已知参考面的数学关系。可以使用的胎儿心脏的示例性平面如下:
a.四腔图
b.右心室流出
c.左心室流出
d.导管弓
e.主动脉弓
f.静脉连接,以及
g.三血管图
上面提及的平面d、e和f是具体的胎儿心脏平面,由于成人的肺中有空气并且成人的心脏比胎儿的心脏更大,所以成人心脏的超声波检查不显示这些平面。
再次参照图2,在步骤2中,可以使用诸如图1所示的3-D超声波成像装置来获得从例如参考面层面开始的组织的容积。该获取的方向是标准化的(例如,在胎儿心脏的情况中,从腹部到颈部)。在获取容积时,例如可以利用作为传感器组件之一部分的集成定位系统或利用位于外部的定位系统获得位置数据获取。
图3表示胎儿心脏的标准4腔图302,该图可以作为生成静脉连接图304、导管弓图306、左心室流出道308、右心室流出道310以及主动脉弓312的参考面。在另一个实施方式中,一旦获得图像数据,可以自动显示图302、304、306、308、310和312中的一个或多个图像。也可以显示其它身体器官的其它标准视图。
正如上面指出的那样,任何平面均可以用作胎儿心脏以及其它器官的参考面。例如,横向双顶径(未示出)可以作为胎儿头部的参考面。
在图2的步骤3中,通过使用诸如图1所示的标准超声波检查设备将该参考面在容积内沿其方位进行固定并标准化,以便将该参考面旋转到容积内的预定方位。例如,通过利用沿标准坐标系内的Z轴的旋转(其中X轴定义水平方向,并且顺时针旋转)把脊柱放置在约270°的位置并且把心脏的顶点放置在约150°的位置,可以旋转胎儿心脏的四腔图平面302。
在图2的步骤4中,应用包含数学公式的计算机化的程序,以便从获得的3-D容积中自动获取一个或多个标准化的平面,其中数学公式将参考面和特定器官(如胎儿心脏)的所有标准化的平面联系起来。正如图3所示的那样,在胎儿心脏的情况中,一旦把该计算机化的程序应用于带有参考面(如4室图)的3-D容积,可以根据容积的单次获取显示上面鉴别的任何或所有平面b-g。
下面的表1描述了参考面为四腔图时用于生成孕期约为20周的胎儿心脏的标准平面的公式。在一个容积中,X、Y和Z轴代表用来定义容积内的空间位置的三个正交轴。X、Y和Z轴可以从空间上定义容积内的任何点。此外,3-D容积内的平面的旋转可以沿X、Y和Z轴进行。XYZ坐标系满足:如果标准X和Y轴定义例如划分身体(或器官)的前半部分和身体(或器官)的后半部分的XY平面,则Z轴的方向是从身体(或器官)的正面到身体(或器官)的后面。亦即,在此种情况中,使用左手坐标系。正旋转是围绕坐标轴的顺时针方向。
  定义   位移(mm)   旋转(坐标轴,度数)
  PA(臀部)   8.2   0
  PA(头部)   -8.2   0
  Ao(臀部)   3.9   Y,27
  Ao(头部)   -3.9   Y,27
  3血管(头部)   -10.9   0
  3血管(臀部)   10.9   0
  导管弓(头部)   0   Y,90
  主动脉弓(头部)   -6.5   Y,77
                    表1
在表1的情况中,参考面为四腔图。“定义”栏显示根据该四腔图确定的和可选择显示的视图。“位移”栏指示从(或相对于)该参考面的位移距离,单位为毫米。得到的平面平行于参考面,位于指定距离处。“旋转”栏指示旋转度数和具体旋转轴(X,Y,Z)。例如,对于主动脉流出道的标准平面而言,从约为20周孕期的四腔图参考面开始,朝胎儿头部方向的位移是3.9mm,然后当胎儿处于头位时沿Y轴顺时针旋转27度,当胎儿处于臀位时沿Y轴逆时针旋转27度。
下面的表2描述了参考面为四腔图时可以用于生成孕期约为20周的胎儿心脏的标准平面的附加公式。可以使用从胎儿腹部到颈部的横向视图以使医务人员能够提供胎儿心脏的评估。在此种情况中,当通过从胎儿胃部向颈部横向(轴平面)滑动传感器102获得容积时,可以评估胎儿心脏。
  定义   位移(mm)
  腹部周围   17.5
  左心室流出道(主动脉)   -3.9
  右心室流出道(PA)   -8.2
  三血管图   -10.9
                  表2
因此,通过把一个平面从四腔图(例如,从胃部开始)平行该四腔图位移-3.9mm,可以获得左心室流出道的视图。另外,通过从四腔图开始把该平面位移17.5mm,可以获得位于胃的层面上的腹部的轴向图。请注意,由于表2的三个平面均为横向平面(即,平行于四腔图),所以仅仅使用距离(单位为mm),并且不需要关于任何平面旋转。
在图5-10中,表示了胎儿心脏的3-D多平面显示,其中A(左上)、B(右上)和C(左下)平面分别代表正在研究的特殊标准化的平面(A,左上)的三个正交平面。在图5-10的每个图中,平面A代表标准化的胎儿心脏平面(上面所列出的b-g),并且图5-10所示的每个标准化的平面(A)均是由图4所示的容积通过使用表1描述的数学关系生成的平面。
图11表示根据表2描述的技术生成的示例性平面。特别地,图1102代表位于胎儿胃部的层面(从四腔图开始位移17.5mm)处的腹部的轴平面,并且图1104表示四腔图。图1106表示左心室流出道(从四腔图开始位移-3.9mm),图1108表示右心室流出道(PA)(从四腔图开始位移-8.2mm),并且图1110表示三血管图(从四腔图开始位移-10.9mm)。在图2的步骤5中,也可以采用实时方式(或近似以实时方式)自动显示图像,或者借助适当设备从心动周期按回放形式进行显示。
在本发明的至少一个实施方式中,在获得容积内的参考面之后,可以自动显示每个标准化的平面。一旦建立了特定器官的标准化容积的数学和空间关系之后,任何标准化的平面均可以充当参考面(例如,胎儿心脏的主动脉弓)。这在产科超声波检查法中是有用的,假如胎儿在子宫内的方位可能只能在2-D超声波成像上对主动脉弓进行成像。然后,本发明的一个或多个实施方式可以自动显示其它标准化的平面,如四腔图。也可以显示不同于心脏的胎儿器官以及新生儿和成人器官的标准化的平面。
在本发明的至少一个实施方式中,利用先进的传感器可以获得图像容积,并且在获取时可以以实时方式自动显示特定器官的一个或多个感兴趣平面。亦即,在显示一个或多个感兴趣的标准参考面之前,不需要显示标准A、B和C平面。因此,可以直接在容积获取时,和在容积获取后,显示特定器官的一个或多个感兴趣的参考面。
由于胎儿相对较小,所以3-D和4-D超声波产科成像便于获取单一3-D容积内的多个器官。例如,胎儿胸部的单一3-D容积通常包括心脏,大脉管以及到达心脏和两肺脏的静脉连接。因此,本发明的至少一个实施方式试图根据单一3-D容积对胎儿的心血管系统进行全面或相当全面的诊断或评估。在获得包含整个胎儿的容积后,可以按照所获得的容积内的标准化的参考位置重新确定胎儿的方位。接着,可以显示,可选地自动显示任何或全部超声波检查法的标准化的平面,以使例如医师能够评估胎儿的解剖组织构造(例如,头部、胸部、腹部和/或四肢)。也可以照此方式诊断成人和新生儿的器官。
在步骤6中,本发明的一个或多个实施方式可以利用例如标准的(例如,不用定制的)图像识别软件来评估该标准化的平面的层面,并对所成像器官进行诊断或有助于其诊断。例如,可以使用灰度模式识别,以确保自动生成的标准化的平面的正确方位,并且对具体图像(例如,胎儿心脏和/或胎儿心脏内的具体图像)和一个或多个各自的参考图像进行比较。可以使用灰度模式识别比较来鉴别例如正常和异常解剖结构和/或其各个部分。在胎儿心脏的情况中,可以把心室和/或流出道的大小与心室和/或流出道的一个或多个对应的参考图像进行比较。可以生成一份报告,该报告提供例如正常和异常关系的指示。因此,本发明的一个或多个实施方式可以确定诸如心室和/或大脉管之类的胎儿心脏结构的位置,并且可选择地提供与例如结构的大小和/或形状以及相对关系有关的数据。也可以照此方式诊断成人和新生儿的器官。
根据该详细说明书,本发明的许多特征和优点都是明显的,因此,其目的是包含属于本发明之实质和范围的本发明的所有此类特征和优点。此外,由于本领域的熟练技术人员易于想到多种修改和变形,所以不应将本发明限制在上面举例说明和描述的精确构造和操作内,因此可以采取属于本发明之范围内的所有适合改进和等同物。尽管利用优选实施方式的说明和例子详细描述了本发明,但是多种修改、替换和变形都是可能的。

Claims (17)

1.一种在医学成像环境中使用的驻留在计算机可读介质上的计算机程序产品,该计算机程序产品包括使计算机执行以下处理的指令:
获取身体器官的至少一部分的超声波图像数据;
利用定义该身体器官的参考面的数据相对于该参考面定义至少一个其它平面;以及
自动并且基本上同时显示至少两个超声波图像,其对应于该参考面和定义该至少一个其它平面的数据中的至少一项。
2.根据权利要求1的计算机程序产品,其中该身体器官为胎儿心脏。
3.根据权利要求2的计算机程序产品,其中该参考面为四腔图。
4.根据权利要求2的计算机程序产品,其中该定义该至少一个其它平面的数据包括定义以下至少一项的数据:右心室流出道图像,左心室流出道图像,导管弓图像,主动脉弓图像,静脉连接图像以及三血管图像。
5.根据权利要求1的计算机程序产品,其中该器官为胎儿头部。
6.根据权利要求5的计算机程序产品,其中该参考面为该胎儿头部的双顶径。
7.根据权利要求1的计算机程序产品,其中把该计算机进行的处理和超声波检查设备联系起来。
8.根据权利要求1的计算机程序产品,其中该指令是由通用计算机执行的。
9.根据权利要求1的计算机程序产品,进一步包括使该计算机提供所成像器官的医学评估的指令。
10.根据权利要求9的计算机程序产品,其中使用图像识别软件以便于标准化的平面的定位和该医学评估中的至少一项。
11.根据权利要求9的计算机程序产品,其中该医学评估包括以下步骤:
识别图像内的具体结构;
比较该结构和参考图像;以及
鉴别该结构的至少一个正常和异常解剖特征。
12.根据权利要求1的计算机程序产品,其中该至少两个超声波图像的显示包括每个图像的径向面、横向面和冠状线方向面。
13.根据权利要求12的计算机程序产品,其中该显示为实时显示。
14.根据权利要求1的计算机程序产品,其中该至少两个超声波图像的显示包括与该至少一个其它平面的每个平面相关联的单个平面的显示。
15.根据权利要求1的计算机程序产品,其中该至少两个超声波图像的显示包括直接来自在参考层面上获得的实时容积的一个或多个标准化的平面的实时显示。
16.一种方法,包括:
获取身体器官的至少一部分的超声波图像数据;
利用定义该身体器官的参考面的数据相对于该参考面定义至少一个其它平面;以及
自动并且基本上同时显示至少两个超声波图像,其对应于该参考面和定义该至少一个其它平面的数据中的至少一项。
17.一种系统,包括:
一个传感器,用于获取身体器官的至少一部分的超声波图像数据;
一个处理器,用于处理该超声波图像数据以定义该身体器官的参考面并且相对于该参考面定义至少一个其它平面;以及
一个显示器,其中所述处理器有助于基本上同时显示至少两个超声波图像,其对应于该参考面和定义该至少一个其它平面的数据中的至少一项。
CN200480012591.9A 2003-04-16 2004-04-14 用于生成独立于操作员的超声波图像的系统和方法 Pending CN1784177A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US46304503P 2003-04-16 2003-04-16
US60/463,045 2003-04-16

Publications (1)

Publication Number Publication Date
CN1784177A true CN1784177A (zh) 2006-06-07

Family

ID=33310745

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200480012591.9A Pending CN1784177A (zh) 2003-04-16 2004-04-14 用于生成独立于操作员的超声波图像的系统和方法

Country Status (8)

Country Link
US (1) US20050004465A1 (zh)
EP (1) EP1620014A4 (zh)
JP (1) JP5208415B2 (zh)
CN (1) CN1784177A (zh)
AU (1) AU2004231713A1 (zh)
CA (1) CA2521719A1 (zh)
MX (1) MXPA05011120A (zh)
WO (1) WO2004093687A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101061962B (zh) * 2006-04-27 2012-01-18 通用电气公司 用于自动多平面成像超声系统的用户接口
CN103622722A (zh) * 2012-08-20 2014-03-12 三星麦迪森株式会社 用于管理和显示超声图像的方法和设备
CN104797199A (zh) * 2012-11-20 2015-07-22 皇家飞利浦有限公司 用于实时胎儿心脏评估的标准平面的自动定位
CN109788932A (zh) * 2016-07-20 2019-05-21 富士胶片索诺声有限公司 一种具有图像选择器的超声成像设备
CN110072468A (zh) * 2016-12-19 2019-07-30 皇家飞利浦有限公司 胎儿超声成像

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8083678B2 (en) * 2003-04-16 2011-12-27 Eastern Virginia Medical School System, method and medium for acquiring and generating standardized operator independent ultrasound images of fetal, neonatal and adult organs
US20060034513A1 (en) * 2004-07-23 2006-02-16 Siemens Medical Solutions Usa, Inc. View assistance in three-dimensional ultrasound imaging
US20070249935A1 (en) * 2006-04-20 2007-10-25 General Electric Company System and method for automatically obtaining ultrasound image planes based on patient specific information
US20070255138A1 (en) * 2006-04-27 2007-11-01 General Electric Company Method and apparatus for 3D visualization of flow jets
US9612142B2 (en) * 2006-04-27 2017-04-04 General Electric Company Method and system for measuring flow through a heart valve
JP2008136860A (ja) * 2006-11-10 2008-06-19 Toshiba Corp 超音波診断装置およびその画像処理プログラム
JP5366385B2 (ja) * 2007-09-26 2013-12-11 株式会社東芝 超音波診断装置及び超音波走査プログラム
US8275182B2 (en) 2007-09-27 2012-09-25 The University Of British Columbia University-Industry Liaison Office Method for automated delineation of contours of tissue in medical images
RU2514112C2 (ru) * 2008-09-24 2014-04-27 Конинклейке Филипс Электроникс, Н.В. Создание стандартизованных протоколов для анализа данных трехмерной эхограммы
KR101717695B1 (ko) 2008-09-25 2017-03-17 씨에이이 헬스케어 캐나다 인코포레이티드 의료 영상의 시뮬레이션
US8882671B2 (en) * 2008-10-16 2014-11-11 Kabushiki Kaisha Toshiba Ultrasonic diagnostic device, ultrasonic image processing apparatus, ultrasonic image acquiring method and ultrasonic diagnosis display method
US20110201935A1 (en) * 2008-10-22 2011-08-18 Koninklijke Philips Electronics N.V. 3-d ultrasound imaging
US20100217123A1 (en) * 2009-02-23 2010-08-26 Aharon Eran Methods and systems of managing ultrasonographic diagnosis
JP4810583B2 (ja) * 2009-03-26 2011-11-09 株式会社東芝 超音波診断装置、超音波診断方法及び超音波診断プログラム
KR101117916B1 (ko) 2009-07-30 2012-02-24 삼성메디슨 주식회사 새지털 뷰를 검출하는 초음파 시스템 및 방법
JP5498185B2 (ja) * 2010-02-03 2014-05-21 株式会社東芝 超音波診断装置及び超音波画像表示プログラム
KR101194282B1 (ko) * 2010-05-17 2012-10-24 삼성메디슨 주식회사 3차원 초음파 검사기의 디스플레이 시스템 및 방법
US8845539B2 (en) 2010-12-22 2014-09-30 General Electric Company Methods and systems for estimating gestation age of a fetus
EP2948044A4 (en) 2013-01-24 2016-03-09 Tylerton Internat Holdings Inc IMAGING OF BODY STRUCTURE
WO2014156269A1 (ja) * 2013-03-25 2014-10-02 日立アロカメディカル株式会社 超音波撮像装置及び超音波画像表示方法
WO2015033317A2 (en) 2013-09-08 2015-03-12 Shlomo Ben-Haim Detection of reduced-control cardiac zones
CN106102583A (zh) 2014-01-10 2016-11-09 泰勒顿国际公司 瘢痕和纤维心脏区的检测
CN107106143B (zh) * 2015-05-07 2020-10-20 深圳迈瑞生物医疗电子股份有限公司 三维超声成像方法和装置
KR102446343B1 (ko) 2015-06-15 2022-09-22 삼성메디슨 주식회사 초음파 장치 및 그 제어방법
KR102475822B1 (ko) * 2015-07-10 2022-12-09 삼성메디슨 주식회사 초음파 진단 장치 및 초음파 진단 장치의 동작 방법
US20180189992A1 (en) * 2017-01-04 2018-07-05 Clarius Mobile Health Corp. Systems and methods for generating an ultrasound multimedia product
WO2018195874A1 (zh) * 2017-04-27 2018-11-01 深圳迈瑞生物医疗电子股份有限公司 一种胎心超声检测方法及超声成像系统
EP3435324A1 (en) * 2017-07-27 2019-01-30 Koninklijke Philips N.V. Fetal ultrasound image processing
EP3590436A1 (en) * 2018-07-06 2020-01-08 Koninklijke Philips N.V. Identifying an optimal image from a number of ultrasound images
US11869188B1 (en) * 2023-02-22 2024-01-09 BrightHeart SAS Systems and methods for improving detection of fetal congenital heart defects
US11875507B1 (en) 2023-02-22 2024-01-16 BrightHeart SAS Systems and methods for detecting cardiovascular anomalies using spatiotemporal neural networks
US11861838B1 (en) 2023-06-07 2024-01-02 BrightHeart SAS Systems and methods for system agnostic automated detection of cardiovascular anomalies and/or other features

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5046499A (en) * 1988-06-13 1991-09-10 Centocor, Inc. Method for myocardial infarct risk assessment
US5159931A (en) * 1988-11-25 1992-11-03 Riccardo Pini Apparatus for obtaining a three-dimensional reconstruction of anatomic structures through the acquisition of echographic images
US5842473A (en) * 1993-11-29 1998-12-01 Life Imaging Systems Three-dimensional imaging system
US5454371A (en) * 1993-11-29 1995-10-03 London Health Association Method and system for constructing and displaying three-dimensional images
US5538003A (en) * 1995-05-18 1996-07-23 Hewlett-Packard Company Quick method and apparatus for identifying a region of interest in an ultrasound display
WO1997000482A1 (en) * 1995-06-15 1997-01-03 The Regents Of The University Of Michigan Method and apparatus for composition and display of three-dimensional image from two-dimensional ultrasound
US5709206A (en) * 1995-11-27 1998-01-20 Teboul; Michel Imaging system for breast sonography
JP3691895B2 (ja) * 1996-01-19 2005-09-07 株式会社日立メディコ 超音波診断装置
US5605155A (en) * 1996-03-29 1997-02-25 University Of Washington Ultrasound system for automatically measuring fetal head size
US5872571A (en) * 1996-05-14 1999-02-16 Hewlett-Packard Company Method and apparatus for display of multi-planar ultrasound images employing image projection techniques
US5776062A (en) * 1996-10-15 1998-07-07 Fischer Imaging Corporation Enhanced breast imaging/biopsy system employing targeted ultrasound
US5810008A (en) * 1996-12-03 1998-09-22 Isg Technologies Inc. Apparatus and method for visualizing ultrasonic images
US5787889A (en) * 1996-12-18 1998-08-04 University Of Washington Ultrasound imaging with real time 3D image reconstruction and visualization
JP2002511781A (ja) * 1997-04-24 2002-04-16 ウィルク パテント ディベロプメント コーポレイション 医療映像化装置と方法
US5906578A (en) * 1997-06-18 1999-05-25 Rajan; Govinda N. Method and system for probe positioning in transesophageal echocardiography
US6148095A (en) * 1997-09-08 2000-11-14 University Of Iowa Research Foundation Apparatus and method for determining three-dimensional representations of tortuous vessels
JP4179661B2 (ja) * 1998-04-24 2008-11-12 東芝医用システムエンジニアリング株式会社 医用画像処理装置
US6004270A (en) * 1998-06-24 1999-12-21 Ecton, Inc. Ultrasound system for contrast agent imaging and quantification in echocardiography using template image for image alignment
US6585647B1 (en) * 1998-07-21 2003-07-01 Alan A. Winder Method and means for synthetic structural imaging and volume estimation of biological tissue organs
JP4068234B2 (ja) * 1998-10-05 2008-03-26 株式会社東芝 超音波診断装置
US6174285B1 (en) * 1999-02-02 2001-01-16 Agilent Technologies, Inc. 3-D ultrasound imaging system with pre-set, user-selectable anatomical images
US6413219B1 (en) * 1999-03-31 2002-07-02 General Electric Company Three-dimensional ultrasound data display using multiple cut planes
US6306089B1 (en) * 1999-09-24 2001-10-23 Atl Ultrasound, Inc. Ultrasonic diagnostic imaging system with customized measurements and calculations
US6544178B1 (en) * 1999-11-05 2003-04-08 Volumetrics Medical Imaging Methods and systems for volume rendering using ultrasound data
US6443896B1 (en) * 2000-08-17 2002-09-03 Koninklijke Philips Electronics N.V. Method for creating multiplanar ultrasonic images of a three dimensional object
US6669641B2 (en) * 2000-08-17 2003-12-30 Koninklijke Philips Electronics N.V. Method of and system for ultrasound imaging
US6709394B2 (en) * 2000-08-17 2004-03-23 Koninklijke Philips Electronics N.V. Biplane ultrasonic imaging
US6602194B2 (en) * 2000-09-15 2003-08-05 Koninklijke Philips Electronics N.V. Dual beamformer ultrasound system for 2D and 3D imaging
US6375616B1 (en) * 2000-11-10 2002-04-23 Biomedicom Ltd. Automatic fetal weight determination
US7024024B1 (en) * 2000-11-14 2006-04-04 Axle International System for contrast echo analysis
US6470092B1 (en) * 2000-11-21 2002-10-22 Arch Development Corporation Process, system and computer readable medium for pulmonary nodule detection using multiple-templates matching
US6730032B2 (en) * 2001-03-05 2004-05-04 Matsushita Electric Industrial Co. Ultrasonic diagnostic device and image processing device
US6939301B2 (en) * 2001-03-16 2005-09-06 Yaakov Abdelhak Automatic volume measurements: an application for 3D ultrasound
US6537220B1 (en) * 2001-08-31 2003-03-25 Siemens Medical Solutions Usa, Inc. Ultrasound imaging with acquisition of imaging data in perpendicular scan planes
US20030160786A1 (en) * 2002-02-28 2003-08-28 Johnson Richard K. Automatic determination of borders of body structures
JP2003325513A (ja) * 2002-05-16 2003-11-18 Aloka Co Ltd 超音波診断装置
US6673017B1 (en) * 2002-08-28 2004-01-06 Acuson Corporation Temporal resolution method and systems for ultrasound imaging
JP3905470B2 (ja) * 2002-12-26 2007-04-18 アロカ株式会社 超音波診断装置
US8083678B2 (en) * 2003-04-16 2011-12-27 Eastern Virginia Medical School System, method and medium for acquiring and generating standardized operator independent ultrasound images of fetal, neonatal and adult organs
US7244233B2 (en) * 2003-07-29 2007-07-17 Ntd Laboratories, Inc. System and method for utilizing shape analysis to assess fetal abnormality
US6980844B2 (en) * 2003-08-28 2005-12-27 Ge Medical Systems Global Technology Company Method and apparatus for correcting a volumetric scan of an object moving at an uneven period
US20050101864A1 (en) * 2003-10-23 2005-05-12 Chuan Zheng Ultrasound diagnostic imaging system and method for 3D qualitative display of 2D border tracings
US7261695B2 (en) * 2004-03-09 2007-08-28 General Electric Company Trigger extraction from ultrasound doppler signals
DE102004043058A1 (de) * 2004-09-06 2006-04-06 Siemens Ag Verfahren zur Bestimmung ausgezeichneter coronaler und sagittaler Ebenen für die nachfolgende Aufnahme neuer Magnetresonanz-Schichtbilder oder die Darstellung von Magnetresonanz-Schichtbildern aus einem bereits vorhandenen Bilddatensatz eines Schultergelenks

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101061962B (zh) * 2006-04-27 2012-01-18 通用电气公司 用于自动多平面成像超声系统的用户接口
CN103622722A (zh) * 2012-08-20 2014-03-12 三星麦迪森株式会社 用于管理和显示超声图像的方法和设备
CN104797199A (zh) * 2012-11-20 2015-07-22 皇家飞利浦有限公司 用于实时胎儿心脏评估的标准平面的自动定位
CN104797199B (zh) * 2012-11-20 2018-02-23 皇家飞利浦有限公司 用于实时胎儿心脏评估的标准平面的自动定位
CN109788932A (zh) * 2016-07-20 2019-05-21 富士胶片索诺声有限公司 一种具有图像选择器的超声成像设备
US11559284B2 (en) 2016-07-20 2023-01-24 Fujifilm Sonosite, Inc. Ultrasound imaging apparatus with image selector
CN110072468A (zh) * 2016-12-19 2019-07-30 皇家飞利浦有限公司 胎儿超声成像

Also Published As

Publication number Publication date
AU2004231713A1 (en) 2004-11-04
EP1620014A4 (en) 2009-06-17
JP2006523510A (ja) 2006-10-19
CA2521719A1 (en) 2004-11-04
JP5208415B2 (ja) 2013-06-12
US20050004465A1 (en) 2005-01-06
EP1620014A1 (en) 2006-02-01
WO2004093687A1 (en) 2004-11-04
MXPA05011120A (es) 2005-12-15

Similar Documents

Publication Publication Date Title
CN1784177A (zh) 用于生成独立于操作员的超声波图像的系统和方法
EP1861016B1 (en) Method for acquiring and generating standardized operator independent ultrasound images of fetal organs
JP6180539B2 (ja) リアルタイム胎児心臓評価に対する標準面に自動配置
CN100591280C (zh) 带有身体标记注释的超声波成像系统
Zosmer et al. Selection and identification of standard cardiac views from three‐dimensional volume scans of the fetal thorax.
EP2918233B1 (en) Ultrasound diagnosis apparatus and method of displaying ultrasound image
US10368841B2 (en) Ultrasound diagnostic apparatus
US20070249935A1 (en) System and method for automatically obtaining ultrasound image planes based on patient specific information
US9846936B2 (en) Imaging apparatus and controlling method thereof the same
JP7204106B2 (ja) 超音波プローブ用ナビゲートシステム、および、そのナビゲート表示装置
Scharf et al. Evaluation of two-dimensional versus three-dimensional ultrasound in obstetric diagnostics: a prospective study
BR112020014733A2 (pt) Método implementado por computador para a obtenção de medições anatômicas em uma imagem de ultrassom, meios de programa de computador, dispositivo de análise de imagem e método de imageamento por ultrassom
CN113116387A (zh) 用于通过一系列超声图像采集提供指导工作流的方法和系统
JP5390149B2 (ja) 超音波診断装置、超音波診断支援プログラム及び画像処理装置
US11896434B2 (en) Systems and methods for frame indexing and image review
Byers et al. Parapagus dicephalus dibrachius dipus conjoined twin case
AL-Najjar Three-dimensional ultrasound in evaluation of fetal brain anomalies
Douglas et al. History of the Ultrasound Machine in Obstetrics and Gynecology
Tanaka et al. A Parallel Processor Specialized in Three-Dimensional Display and Real-Time Synthesis of New Tomograms Based on Serial Tomograms
RAJENDRAN et al. ICRI GUIDELINES ON FIRST TRIMESTER ANOMALY SCAN/ANEUPLOIDY RISK ASSESSMENT/PRE-ECLAMPSIA SCREENING (11-13 WEEKS OBSTETRIC SCAN)
Surakusumah et al. Cervix Position Recognition by Template Method using Linear Robot Ultrasound
Sioudi et al. Two-Dimensional and Three-Dimensional Ultrasonography In assessment of Fetal Malformations: Routine versus Selective Use
CN113081030A (zh) 用于基于m模式分析进行辅助超声扫描平面识别的方法和系统
CN117814840A (zh) 早孕胎儿的超声成像方法和超声成像系统
McNay et al. “forthee.... towhom% nosoundisdissonantwhichtellsoflife”%—coleridge

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication