CN101799740A - 在控件中操作墨水的方法 - Google Patents

在控件中操作墨水的方法 Download PDF

Info

Publication number
CN101799740A
CN101799740A CN201010120410A CN201010120410A CN101799740A CN 101799740 A CN101799740 A CN 101799740A CN 201010120410 A CN201010120410 A CN 201010120410A CN 201010120410 A CN201010120410 A CN 201010120410A CN 101799740 A CN101799740 A CN 101799740A
Authority
CN
China
Prior art keywords
ink
control
inkedit
text
editor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201010120410A
Other languages
English (en)
Inventor
A·古纳里斯
S·道奇
T·A·杰林斯基
A·J·戈尔德贝格
K·费尔德曼
T·A·托塞特
R·L·钱伯斯
R·K·塞勒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN101799740A publication Critical patent/CN101799740A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/171—Editing, e.g. inserting or deleting by use of digital ink
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/142—Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423—Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04804—Transparency, e.g. transparent or translucent windows

Abstract

一种控件和它的相关联的编程接口，用于允许电子墨水的输入，电子墨水的编辑和其它操作和/或墨水的识别。可以把墨水存储在诸如墨水对象之类的数据结构中，允许稍后通过应用程序获取。在文本可能要加粗、下划线、倾斜等的情况下，所述控件和它的编程接口可以允许墨水信息象文本那样便于操作，同时提供手写墨水的浓厚度。

Description

在控件中操作墨水的方法
本申请是申请日为2003年5月14日、申请号为03123838.6、发明名称为“电子墨水的输入和编辑”的发明专利申请的分案申请。
技术领域
本发明一般涉及软件应用程序和/或数据结构之间的接口。尤其，本发明的尤其涉及用电子墨水交换信息的接口和/或允许输入和/或编辑电子墨水的接口。
背景技术
典型的计算机系统，尤其是使用诸如微软视窗之类的图形用户接口(GUI)系统的计算机系统，对于接收从一个或多个分立输入设备(诸如用于输入文本的键盘、诸如用一个或多个按钮的鼠标来驱动用户接口的指针设备)的用户输入是最佳的。普遍存在的键盘和鼠标接口提供文档、电子数据表、数据库字段、附图、照片等等的快速创建和修改。然而，与非-计算机(即，标准的)式的笔和纸相比，键盘和鼠标接口提供的灵活性还有相当的差距。用户用标准的笔和纸编辑文档，在页边距内写附注，以及画图画和其它形状等等。在某些情况中，因为可不受键盘和鼠标接口的限制而自由地作出附注，用户宁可使用笔在文档上作标记而不是在屏幕上审查文档。
某些计算机系统允许用户在屏幕上画图。例如，微软READER应用程序允许把电子墨水(这里也称之为“墨水”)添加到文档中。系统存储墨水，并当请求时把它提供给用户。其它应用程序(例如，与Palm 3.x和4.x和PocketPC操作系统相关联的本技术领域中众知的画图应用程序)允许捕获和存储图画。还有，可以基于输入笔的输入产品诸如Wacom图形输入产品，使用诸如CoralDraw之类的各种画图应用程序和诸如Photoshop之类的照相和编辑应用程序。这些附图包括与用于构成附图的墨水笔划相关联的其它特性。例如，可以与墨水一起存储的线宽度和颜色。这些系统的一个目标是再现应用于一片纸上的实际墨水的外观和感觉。然而，在纸上的实际墨水可以具有未被坐标和连接线段的电子收集器捕获的大量的信息。这些信息中的某一些可能包括所使用笔尖的厚度(如通过实际墨水的宽度所看到)、或笔对于纸的角度、笔尖的形状、墨水的沉积速度以及等等。
用电子墨水还发生其它问题。已经考虑了用它书写的一部分应用程序。这导致基本上无能力向其它应用程序或环境提供电子墨水的丰厚度。当可以在多个应用程序之间输入文本时(例如，通过使用剪贴板)，墨水就不具备能够与墨水交互作用的这个能力。例如，不能够创建图8的图象，通过剪贴板把所创建的图象复制和粘贴到文档中，然后使墨水变粗。一个困难是图象在应用程序之间的不可移动性。
发明内容
通常，软件开发者熟悉传统的Win32 RichEdit控件，它允许用户输入和编辑格式化的文本。本发明通常涉及扩展RichEdit控件的功能而进一步提供接收电子墨水手写的能力。手写可在一时间延迟后自动地，也可在以后根据请求，被进一步识别和转换成文本。在墨水没被转换成文本时，原始的电子墨水可以被存储，诸如存储在对象型数据结构中。因此，本发明的目的是使用电子墨水对现有的和将来的应用程序提供支持。
本发明另一目的是提供一种灵活的和有效的接口，用于与各种特性交互作用，引用方法和/或接收与电子墨水有关的事件，从而解决传统设备和系统所发现的一个或多个问题。本发明的再一个目的涉及改进所存储墨水的内容。其它目的涉及修改所存储的墨水。再有的目的涉及提供墨水和文本间的可操作性。
结合下列较佳实施例的详细说明，将会更好地理解本发明的这些和其它特性。
附图说明
当和只是作为例子而不是作为对所申请发明专利限制的附图一起阅读时，会更好地理解上述发明概要和下列较佳实施例的详细说明。
图1是可以用于实施本发明的作为例子的通用数字计算环境的功能性方框图。
图2是根据本发明可以使用的示例图形输入板计算机和输入笔的平面图。
图3-6是根据本发明的图形用户接口的各种示例屏幕照相。
图7是根据本发明可使用的各种示例手势。
图8是根据本发明表示一系统环境的功能性方框图。
图9是根据本发明的示例应用程序编程接口的功能性方框图。
具体实施方式
下面描述捕获、识别、与之接口、编辑或操作、和/或显示电子墨水的一种方法。
一般计算平台
图1是可以用来实施本发明的传统通用数字计算环境的一个例子的功能性方框图。在图1中，计算机100包括处理单元110、系统存储器120以及把包括系统存储器之类的各种系统部件耦合到处理单元110的系统总线130。系统总线130可以是数种总线结构类型中的任何一种，包括存储器总线或存储器控制器、外围总线、以及使用多种总线结构中的任何一种的本地总线。系统存储器120包括只读存储器(ROM)140和随机存取存储器(RAM)150。
在ROM 140中存储基本输入/输出系统160(BIOS)，它包含在计算机100中的单元之间帮助传递信息的基本例行程序，诸如在启动期间。计算机100还包括在硬盘(未示出)进行读出和写入硬盘驱动器170；，在可拆卸磁盘190进行读出或写入的磁盘驱动器180；以及在诸如CD ROM或其它光媒体之类的可拆卸光盘192中进行读出和写入的光盘驱动器191。分别通过硬盘驱动器接口192、磁盘驱动器接口193以及光盘驱动器接口194把硬盘驱动器170、磁盘驱动器180和光盘驱动器191连接到系统总线130。驱动器和与它们相关联的计算机可读出媒体提供计算机可读出指令、数据结构、程序模块以及用于个人计算机100的其它数据的非易失性存储。熟悉本技术领域的人员可以理解，在示例操作环境中，也可以使用可以存储计算机可存取数据的其它类型的计算机可读出媒体，诸如盒式磁带、快速存储卡、数字视频盘、Bernoulli数据盒、随机存取存储器(RAM)、只读存储器(ROM)等。
可以把许多程序模块，包括操作系统195、一个或多个应用程序196、其它程序模块197以及程序数据198，存储在硬盘驱动器170、磁盘190、光盘192、ROM140或RAM 150中。用户可以通过诸如键盘101和指示设备102之类的输入设备，把命令和信息输入计算机100。其它输入设备(未示出)可以包括话筒、摇杆、游戏小键盘、卫星碟形天线、扫描器等。通常通过耦合到系统总线的串行端口接口106把这些和其它输入设备连接到处理单元110，但是可以通过其它接口连接，诸如并行接口、游戏接口或通用串行总线(USB)。再进一步，可以通过合适的接口(未示出)把这些设备直接耦合到系统总线130。还可通过视频适配器108之类的接口，把监视器170或其它类型的显示设备连接到系统总线130。除了监视器之外，个人计算机一般还包括其它外围输出设备(未示出)，诸如扬声器和打印机。在一个较佳实施例中，提供笔数字化器165和附带的笔或输入笔166，以便数字化地捕获徒手输入。虽然示出的笔数字化器165和处理单元110之间是直接连接的，实际上，如本领域中众知，可以通过串行端口、并行端口或其它接口和总线把笔数字化器165耦合到处理单元110。此外，虽然示出笔数字化器165是和监视器107分开的，但是最好是使数字化器165的可使用输入区和监视器107的显示区共同延伸。再进一步，可以把数字化器165集成到监视器107中，或可以作为分立的设备相重叠而存在，或附加到监视器107中。
计算机100可以在网络化环境中操作，所述网络化环境使用到一台或多台远程算机(诸如远程计算机109)的逻辑连接。远程计算机109可以是服务器、路由器、网络PC、同等设备或其它公共网络节点，一般包括上面介绍的与计算机100有关的许多单元或全部单元，虽然在图1中只有示出一个存储器存储设备111。在图1中描绘的逻辑连接包括局域网(LAN)112和广域网(WAN)113。这种网络环境在办公室、全企业的计算机网、内部网、互联网中是常见的。
当在局域网网络环境中使用时，通过网络接口或适配器114把计算机100连接到局域网112。当在广域网网络环境中使用时，个人计算机一般包括调制解调器115或用于在广域网113上建立通信的其它手段，诸如互联网。通过串行端口接口106把可以是内接的或外接的调制解调器115连接到系统总线130。在网络化的环境中，可以把与个人计算机100或其部分有关的程序模块，存储在远程存储器存储设备中。
可以理解，所示的网络连接是示例性的，可以使用在计算机之间建立通信链路的其它技术。假定存在诸如TCP/IP，以太网、FTP、HTTP等各种众所周知的协议中的任何一种，并且系统可以在用户一服务器配置中操作以允许用户从基于网的服务器取得网页。可以使用各种传统的网浏览器中的任何一种来显示和操作网页上的数据。
图2示出可以根据本发明而使用的基于输入笔的计算机处理系统(又称为图形输入板PC(个人计算机))201。在图1中的系统的任何或所有特征、子系统以及功能都可以包括在图2的计算机中。图形输入板PC 201包括一个大显示表面202，例如，数字化平面显示器，最好是液晶显示器(LCD)屏幕，在其上显示多个窗口203。可以使用的其它显示技术可以包括，但是不限于，OLED显示器、等离子显示器等。用户可以使用输入笔204的笔尖(这里还把笔尖称为“光标”)在数字化显示区上选择、突出显示和写入。数字化显示板的合适的例子包括电磁笔数字化器，诸如Mutoh和Wacom笔数字化器。还可以使用其它类型的笔数字化器，例如，光数字化器。图形输入板PC 201解译使用输入笔204作出的标记，以便操作数据、输入文本以及执行传统计算机应用程序任务，诸如电子数据表、处理程序等。
可以使输入笔配备按钮或其它特征以扩大它的选择能力。在一个实施例中，可以实施输入笔作为“铅笔”或“钢笔”，其中，一端构成写入部分，另一端构成“擦除”端，当“擦除”端在显示器上移动时，指示出要擦除的显示部分。可以使用诸如鼠标、跟踪球等其它类型的输入设备。此外，在触摸-敏感或接近-敏感的显示器上，用户可以使用自己的手指来选择或指示所显示图象部分。因此，这里所使用的“用户输入设备”具有宽广的定义，并包括许多已知输入设备的变型。
电子墨水和墨水对象的概念
这里所使用的墨水称为电子墨水。电子墨水被设计成一个序列的笔或一组笔划，其中，每一笔划包括一序列的点或一组点。通过所捕获的时间和/或通过在页面上笔划和/或点出现的地方可以使笔划和/或点的序列排序。笔划组可以包括笔划和/或点的序列、和/或未排序的笔划和/或点。点可以使用本技术领域中已知的多种技术来表示，包括笛卡尔坐标(X，Y)、极坐标(r，θ)以及其它技术。另一方面，可以用一个点和下一个点的方向上的矢量来表示笔划。打算使笔划包括与墨水有关的任何点或分段的显示，不考虑点下面的显示和/或点与什么连接。一般在数字化器(诸如显示表面202的数字化器)处开始墨水收集。用户可以把输入笔放在数字化器上，并开始写入或画图。那时，可以产生新墨水包(即，与墨水有关的数据包)。用户还可以在与数字化器足够近的空中移动输入笔以致使数字化器检测到。当发生这种情况时，根据所检测的输入笔在空中的运动，可以产生数据包(这里称为“空中包“)。包不但可以包括位置信息，还可以包括输入笔压力和/或角度信息。
为了存储墨水，可以创建表示输入笔204在显示表面202和/或其它输入上划出的墨水原始笔划的墨水对象。可以从显示表面202上任何地方或只从其上确定部分(诸如特定的窗口)收集墨水的收集笔划。墨水对象实质上是墨水数据的容器。墨水如何存储在墨水对象中的特定格式对于本发明是不重要的。然而，最好把原始划出的笔划存储在墨水对象中。
可以定义墨水对象的两种示例类型。可以实施t墨水(tInk)对象(“t”的意思是“text(文本)”)作为OLE对象，它表示期望形成字母或字的墨水。t墨水(tInk)对象允许通过诸如文本识别器把手写墨水转换成文本。t墨水(tInk)对象是指涉及墨水并具有原文上下文的墨水对象。原文墨水的颜色和/或字体的字号以及原文墨水是否应该下划线、加粗、倾斜和/或等等可以编程设置，并且可以基于围绕t墨水(tInk)对象的文本的属性。换言之，可以把在t墨水(tInk)对象指定插入点处的环境特性施加于t墨水(tInk)对象。在一个实施例中，t墨水(tInk)对象只包括用于提交给文本识别器的一个单字，致使一句句子可以包括多个t墨水(tInk)对象。另一方面，还可以定义s墨水(sInk)对象(“s”的意思是“草图(sketch)”)，表示不期望形成字的墨水。s墨水(sInk)对象也可以是OLE对象。因此，可以把s墨水(sInk)对象解译为画图或任何其它非原文上下文。s墨水(sInk)对象对于显示多个字也是有用的。墨水兼容的应用程序(和/或用户)可以对某些墨水对象作出t墨水(tInk)对象的标记，并对其它墨水对象作出s墨水(sInk)对象的标记。为了说明的目的，这里把两种类型的墨水描述为“tInk(t墨水)”和“sInk(s墨水)”。然而可以理解，可以使用其它名称来表示可以采用的各种类型的墨水对象。还有，可以使用另外类型的对象来存储任何要求格式的电子墨水。
可以定义一个对象(这里称为“InkCollector(墨水收集器)”对象)以及用来从墨水输入设备捕获墨水和/或向应用程序提供墨水。在某种意义上，墨水收集器(InkCollector)对象的作用是水龙头，它通过收集作为一划或多划墨水笔划的墨水并把墨水存储在一个或多个相关联的墨水对象中，使墨水“倾注”到一个或多个不同的和/或有区别的墨水对象中。墨水收集器(InkCollector)对象可以把它自己附加到已知的应用程序窗口中。然后，它可以通过使用任何或所有可得到的图形输入设备(可以包括输入笔204和/或鼠标)而提供在该窗口上的实时涂墨。为了使用墨水收集器(InkCollector)对象，开发者可以创建它，分配哪个窗口把墨水收集进来，以及启动对象。在启动墨水收集器(InkCollector)对象之后，可以进行设置，用多种墨水收集模式(在其中收集墨水笔划和/或手势)收集墨水。手势是输入笔204的一种运动或其它动作，解译成不是作为涂抹的墨水，而是解译成为执行某种动作或功能的请求或命令。例如，为了选择墨水的目的，可以执行特定的手势，而另外的手势可以是为了使墨水倾斜的目的。每一时刻当输入笔在数字化器输入上时或与之接近时，墨水收集器(InkCollector)对象会收集笔划和/或手势。
墨水编辑控件(InkEdit Control)
可以定义控件，这里称为“InkEdit(墨水编辑)”控件，它为捕获、识别和/或显示墨水(例如，以文本的形式)提供一种方便的方法。InkEdit(墨水编辑)控件可以进一步支持显示墨水为具有墨水-格式化和/或文本格式化能力的嵌入的对象(例如，作为嵌入的t墨水(tInk)对象，经过编程可通过墨水选择特性存取)，诸如加粗、下划线、倾斜、上标、下标、对齐等。这个对象的主要指定应用是允许输入墨水以及显示墨水或从墨水识别的文本。这个控件可以进一步允许对墨水和/或所识别的文本进行编辑和/或格式化。
众知的微软WINDOWS用户接口是编辑控件(即，RichEdit和RichTextBox)。InkEdit(墨水编辑)控件的实施例向开发者提供了这些控件的扩充墨水版本，它们已经是熟悉的和可能已经使用在它们的应用程序中，除了从键盘接收文本的现有能力之外，把各种特征添加到现有的RichEdit控件，以接收来自输入笔、鼠标和/或其它指针的文本。例如，在一个实施例中，InkEdit(墨水编辑)控件提供接收电子墨水手写和识别的能力，并把该墨水转换成文本。InkEdit(墨水编辑)控件可以进一步提供接收手写作为用于以后识别的墨水，致使手写本身是可编辑的能力。
为了使用InkEdit(墨水编辑)控件，开发者需要简单地用具体例子说明InkEdit(墨水编辑)控件。开发者和/或运行时用户可以进一步把一种或多种模式应用于InkEdit(墨水编辑)控件各种特征。例如，一种模式可以指示是否应该插入墨水作为墨水或文本。InkEdit(墨水编辑)控件可以管理许多内部世俗细节，用于建立图形输入上下文、收听数字化器事件、收集笔划、把笔划馈送到识别器和/或把识别的结果(例如，它可以是OLE嵌入对象)馈送到InkEdit(墨水编辑)控件进行显示以及以后的保留。
在一个示例实施例中，可以在ActiveX和Win32中实施InkEdit(墨水编辑)控件，并基于传统的微软Win32 Rich Edit控件。在另一个示例实施例中，可以在微软.NET实施InkEdit(墨水编辑)控件，并基于Win32 InkEdit、RichEdit控件以及微软.NET RichTextBox控件。如所众知，微软RichEdit和Rich TextBox控件允许用户输入、编辑、格式化、打印和存储文本，同时提供各种先进的格式化特征(诸如文本字体、颜色、格式化等)。因此，除了现在可应用于墨水和传统文本的那些特征之外，本发明的InkEdit(墨水编辑)控件可以具有许多由RichEdit和RichTextBox控件提供的特征。墨水可以成为它自己中的以及它自己的第一级公民。在可能对文本进行加粗、下划线、倾斜等的情况中，InkEdit(墨水编辑)控件和它的编程接口可以允许象文本那么方便地操作墨水信息，同时提供手写墨水的浓厚度。
在某些实施例中，设计InkEdit(墨水编辑)控件使之在单行和多行文本输入和编辑的形式情况中能很好地工作。InkEdit(墨水编辑)控件可以以原文手写的形式从一个用户得到墨水输入。可以识别墨水输入，可以把打印的文本插入到位。除了用户正在用墨水写时，用于InkEdit(墨水编辑)的缺省用户接口可以类似于传统Rich TextBox控件的缺省用户接口。InkEdit(墨水编辑)控件可以显示原始的墨水或经识别的文本(或两者)。可以把所显示的墨水定标到InkEdit(墨水编辑)控件的当前输入字体的字号，还可以与其它文本串联式地显示，和/或可以改变它的位置、字号和/或颜色。另一方面，所显示的墨水可以保持它的原始位置、字号和/或颜色。
在一个示例实施例中，InkEdit(墨水编辑)控件的缺省特性是识别墨水并在短的识别时间过去之后，把墨水转换成文本。这个识别时间可以是所要求的任何时间量，诸如约2000毫秒，或在约100毫秒到约5000毫秒的范围内，或在约200毫秒到约2000毫秒的范围内。在把识别时间设置成零时，可以禁止自动识别。因为InkEdit(墨水编辑)控件可以是超级的RichEdit，所以它又可能在InkEdit(墨水编辑)控件中嵌入和显示墨水。可以把每个墨水字插入控件作为墨水对象(例如，t墨水(tInk)对象)。墨水对象可以包括墨水以及与墨水相关联的一个或多个特性。
当施加插入时，可以使墨水定标为当前字体的字号和其它环境特性，诸如倾斜或加粗。如果用户选择编辑墨水对象的文本，则用户可以首先把墨水转换成文本。
参考图3，InkEdit(墨水编辑)控件可以出现在与图形用户接口301相关联的显示器上。图形用户接口301可以包括一个或多个显示空间302，用于接收汲取的墨水数据和/或用于显示墨水和/或文本。图形用户接口可以接收数据，诸如在显示空间302中通过输入笔204汲取的墨水数据，并且InkEdit(墨水编辑)可以把数据解译为墨水。InkEdit(墨水编辑)控件可以进一步使墨水与通过应用程序开发者、用户、和/或自动地选择的诸如加粗、下划线、倾斜上标、下标、对准、颜色、字号和/或等等之类的一个或多个特性相关联。如在图3和4中所示，可以选择某些墨水和提供一种特性，例如，选择手写墨水词“conceived in liberty”，然后使之倾斜，并选择手写墨水词“created equal”(如图3中的虚线框所示)，然后增加它的字号。InkEdit(墨水编辑)控件可以进一步使墨水和与它相关联的特性存储而作为墨水对象。因此，例如，可以把在显示空间302中的墨水存储在一个或多个墨水对象中，而可以把词“conceived in liberty”存储在墨水对象中并与倾斜特性相关联。InkEdit(墨水编辑)控件可以根据接收到的墨水数据使墨水得以显示。在一个实施例中，例如，在接收到墨水的显示空间302中的相同位置处的显示空间302中显示墨水。
墨水可以在显示空间302中保持显示(即，余晖)，或可以识别墨水和/或把它转换成文本。这种识别和转换可以立即发生，或在识别时间过去之后和/或根据命令(例如，来自用户或来自应用程序。在墨水被识别和/或根据时间过去之后条件对墨水转换情况下，这个识别时间可以是所要求的任何时间量，诸如约2000毫秒，或在约100毫秒到约5000毫秒的范围内，或在约200毫秒到约2000毫秒的范围内。可以根据提起输入笔204使之离开显示表面202的时间和/或根据笔划的结束来起动用于对识别时间进行计时的定时器，并且在时间条件发生之前可以根据输入笔204回到显示表面202而取消计时。可以使定时器起动的其它事件包括输入笔204停止在显示表面202上的运动，来自输入笔204的手势，诸如按钮和/或等等的其它输入。根据一个或多个模式开关的设置，决定可以或不可以识别和/或显示墨水作为打印的文本。可以使一个或多个模式开关与一个或多个显示单元(例如，显示单元303)相关联或可以使用户不知道(即，不显示在显示器上)。当开关是第一种设置时，将不作为文本而识别或显示墨水。在某些实施例中，根据特定的命令仍可以识别和/或显示墨水作为文本。当开关是第二种设置时，可以识别和/或显示墨水作为文本(如这里所述，立即、在时间过去之后、或根据命令)。当显示墨水作为文本时，可以显示从识别产生的文本来代替显示空间302中的墨水，致使被替代的墨水不再显示在显示空间302中。图5示出已经被识别和转换成文本的显示空间302中的一部分墨水，而图6示出已经被识别和转换成文本的显示空间302中的所有墨水。在这些示意图中，手写体不是原始手写墨水，而印刷字体表示经识别的文本。
可以通过单个识别器或诸如识别器的集合之类的多个识别器识别墨水。识别器可以包括一个或多个手势识别器和/或文本识别器。可以进一步使待识别墨水的选择与特定识别上下文相关联，所述特定识别上下文可以包括连同一个或多个工作识别特性的所谓的“阶乘识别符(factoid)”特性。可以认为阶乘识别符特性是提供给识别上下文的一组“线索”，有助于使墨水上下文的识别更为正确。可以定义表示执行墨水识别能力、获取识别结果和/或获取另外识别结果的识别器上下文对象。识别器上下文对象可以启动安装在系统中的各种识别器执行墨水识别而适当地处理输入。可以执行包括后台识别和前台识别的至少两类识别。在系统的后台处理中发生后台识别，并可能由于其它系统事件(由用户创建或其它情况)而停止。相反，前台识别一般由用户启动，并且直到完成识别才停止。识别器上下文对象可以接收待识别的墨水笔划，阶乘识别符特性可以定义输入墨水和所要求的识别输出上的限制和/或其它参数。例如，可能设置的限制包括在识别期间要使用的语言、字典和/或文法。当联系一种形式使用InkEdit(墨水编辑)控件时，对于该形式中的每个数据输入字段可以设置不同的识别器上下文和/或阶乘识别符。各种数据输入字段对于某些信息组可能是特定的，诸如具有数字、加号、虚线和括号的电话号码字段；只具有数字和虚线的邮政编码字段；只具有大写字母的州的缩写；通用资源定位器(URL)；以及等等。
具有不同的识别器上下文和/或阶乘识别符的一个潜在的优点在于：在某些实施例中，可以调整发生识别的时间帧或什么触发识别。例如，对于在一种形式中的名称或说明字段，有可能要求识别发生于每个字的结束处。然而，当使用州、街道/公寓号码或邮政编码字段(例如)时，有可能要求识别发生于写入每个字符之后。在某些情况中，可以使用一个字符到一个字符的识别，以提供比通过同时识别一个字符组可以得到的识别正确度更高的识别正确度。
InkEdit(墨水编辑)控件可以进一步提供手势支持，并可以根据手势产生事件。参考图7，可以支持各种手势，诸如所示的示例手势701-704。例如，手势701可以表示托架返回，手势702可以表示跳格命令，手势703可以表示空格字符，以及手势704可以表示退格命令。可能有许多其它手势。
InkEdit(墨水编辑)控件可以进一步提供校正用户接口，该接口允许用户按需要观看另外的识别结果，使用屏幕上键盘和/或使用字符、字母和/或块文本识别器。还有，InkEdit(墨水编辑)控件可以允许使用相同的存储和装载机构象传统Windows Form Rich Textbox控件那样来保持和装载它的数据。
InkEdit API(墨水编辑应用程序接口)
InkEdit(墨水编辑)控件通过它的应用程序接口(API)向用户揭示许多功能。根据主机应用程序，可以提供InkEdit API(墨水编辑应用程序接口)的各种风味。参考图8，示例系统可以包括下列一个或多个：ActiveX主机应用程序801、Win32主机应用程序802、和/或通用语言运行时(CLR)主机应用程序803。此外，可以定义InkEdit ActiveX控件804，并且可以与ActiveX主机应用程序801对接。可以进一步定义InkEdit Win32控件805，并可以与Win32主机应用程序802对接。可以定义InkEdit WinForms控件806，并可以与CLR主机应用程序803对接。最后，可以定义RichEdit 4.5 Win32控件807，它与InkEdit(墨水编辑)控件804、805、806的各种风味中的任何一种或所有的相对接。InkEdit Win32控件805可以是其它两种控件(ActiveX控件804和WinForms控件806)的基础。在一个实施例中，可以在Win32控件805中执行关键功能，诸如墨水的收集、具有识别器的迭代和/或进行RichEdit Win32控件807的子分类。ActiveX InkEdit控件804可以使用通过Win32 InkEdit控件805定义的C++分类，并可以基于该功能来创建ActiveX支持。可以从Winforms Rich TextBox 808得到Winforms InkEdit控件806，并可以用这里讨论的加墨水功能使它扩展。例如，首先通过在Rich TextBox 808提供的现有API单元的顶层上装载代替RichEdit控件的Win32 InkEdit控件和按需要添加新方法、特性和/或事件，可以扩展Winforms InkEdit控件806的功能。注意图8描绘在各种主机环境中控件之间关系的示例组，但绝不是把控件之间的箭头作为限制。
现在参考图9讨论InkEdit(墨水编辑)控件的API(应用程序接口)。在图9中，通过一个方框来表示InkEdit(墨水编辑)控件901，并示出API的各种单元(或功能上分组的单元)，标有射出和/或进入表示InkEdit(墨水编辑)控件901的方框的箭头940-960。一般，进入InkEdit(墨水编辑)控件901方框的箭头是指大部分修改InkEdit(墨水编辑)控件901(例如，通过改变它的特性中之一)和/或把信息提供给InkEdit(墨水编辑)控件901的其它单元的API单元(或功能上分组的单元)。从InkEdit(墨水编辑)控件901方框射出的箭头是指大部分表示标志或某些其它信息(通过InkEdit(墨水编辑)控件901提供给它的环境)的API单元(或功能上分组的单元)。然而，箭头的方向是示意性的，并不是作为限制，所以并不阻止用进入InkEdit(墨水编辑)控件901的箭头来表示InkEdit(墨水编辑)控件901把信息提供给它的环境。同样，并不阻止从InkEdit(墨水编辑)控件901射出的箭头修改或提供到InkEdit(墨水编辑)控件901的信息。图9进一步示出InkEdit(墨水编辑)控件901的多个特性902-921。可以按InkEdit型控件的任何风味(包括但是不限于，这里讨论的Win32、ActiveX和.NET风味)的任何组合或子组合来利用下面讨论的API单元。
在示例实施例中的InkEdit API(墨水编辑应用程序接口)具有按任何组合或子组合的下列细目和结构(未示出)中的某一些或全部。例如，外形细目定义一个或多个值，该值规定当显示时InkEdit(墨水编辑)控件901的外形是平的还是3-维的。边界格式细目定义一个或多个值，该值规定InkEdit(墨水编辑)控件901是否具有边界。墨水-模式细目定义一个或多个值，该值规定用于汲取墨水的收集模式设置——是否禁止墨水收集，是否只收集墨水，或是否收集墨水和手势两者。插入模式细目定义一个或多个值，该值规定墨水是如何插入到InkEdit(墨水编辑)控件901中的，是作为墨水还是作为经识别的文本。InkEdit状态细目定义一个或多个值，该值规定InkEdit(墨水编辑)控件901是否空闲、收集墨水或识别墨水。装载/存储细目定义一个或多个值，该值规定是否装载文件和/或作为Rich TextFormat(RTF)文件、文本文件或其它格式的文件而存储。鼠标-按钮细目定义一个或多个值，该值规定按下或正在按下哪个鼠标按钮。注意，除非另行规定，这里对于鼠标或鼠标按钮的所有参考都同样适用于输入笔或输入笔按钮。滚动条细目定义一个或多个值，该值规定InkEdit(墨水编辑)控件是否具有水平和/或垂直滚动条。对准细目定义一个或多个值，该值规定显示的段落是否对准InkEdit(墨水编辑)控件左或右页边线，或在左和右页边线之间。笔划-信息结构包括有关特定笔划的信息，诸如使用哪个光标来创建笔划以及把笔划存储在哪里(例如，作为特定笔划对象)。手势-信息结构包括有关特定手势的信息，诸如使用哪个光标来创建手势、构成手势的笔划，和/或把手势存储在哪里(例如，作为特定手势对象)。可以在InkEdit(墨水编辑)控件的Win32风味中使用特别成功的笔划-信息和手势-信息结构。识别-结果结构包括有关文本识别结构的信息，并且根据已准备的识别结果而发送。例如，通过分立的通知消息，可以提供有关这些本文讨论的结构的某一些或全部使用在哪里的通知。
在示例实施例中的InkEdit API还具有按任何组合或子组合的、可以设置的以及可以返回它们表示的信息的一个或多个下列特性。例如，外形特性902表示所显示的InkEdit(墨水编辑)控件901是平的还是3-维的。后台-颜色特性903表示InkEdit(墨水编辑)控件901的后台颜色。边界格式特性904表示InkEdit(墨水编辑)控件901是否具有边界。创建-参数特性905表示当创建InkEdit(墨水编辑)控件901时创建参数。光标特性906表示当鼠标指针在InkEdit(墨水编辑)控件901上时所显示的光标。画图-属性特性907表示当画图和在InkEdit(墨水编辑)控件901中显示墨水(尚未被识别为文本的墨水)时使用的缺省画图属性或当画墨水时施加到墨水的画图属性。滚动条禁止特性908表示是否启动或禁止InkEdit(墨水编辑)控件901中的滚动条。拖拉-图标特性909表示待显示作为拖拉-和-丢下操作中指针的图标。阶乘识别符910特性表示阶乘识别符(这里进一步讨论)，识别器用它来限制它对于识别结果的搜索。各种字体和文本特性911表示InkEdit(墨水编辑)控件901所显示文本的字体以及当前选择文本的或在插入点处的字体的名称和字号。其它字体和文本特性911表示当前选择的文本(或在插入点处)是否为加粗、倾斜或下划线。再其它字体和文本特性911表示当前选择的文本(或在插入点处)是否出现在基线上、作为上标、或作为下标，它们的对准，以及当前选择的文本或在插入点处的颜色。各种墨水-模式特性912表示当在控件上画图时如何收集墨水以及是否禁止收集墨水，是否只收集墨水，或是否收集墨水和手势两者。控件-锁定特性913表示是否可以编辑InkEdit(墨水编辑)控件901的内容。各种鼠标特性914表示要显示的当前定制鼠标图标以及当鼠标指针在InkEdit(墨水编辑)控件901的图形描绘上时所显示的鼠标指针类型。多线特性915表示InkEdit(墨水编辑)控件901是否为多线控件。各种识别器特性916表示使用哪个识别器来进行识别，以及在已经结束墨水笔划之后开始文本识别的时间量。滚动条特性917表示在InkEdit(墨水编辑)控件901中显示的滚动条的类型。墨水对象特性918表示在当前选择的文本中的墨水对象。设置这个墨水-对象特性可能导致从输入的墨水对象清单识别的识别结果替代当前的选择。各种选择-文本特性919表示在InkEdit(墨水编辑)控件901中的当前选择的文本、所选择的字符数、所选择的经Rich Text Format(RTF)格式化的文本以及所选择文本的开始点。各种受控件文本特性920表示在InkEdit(墨水编辑)控件901的文本方框中显示的当前文本以及在包括所有RTF格式化代码的InkEdit(墨水编辑)控件901中的文本。状态特性921表示InkEdit(墨水编辑)控件901是否空闲、收集墨水或识别墨水。
在示例实施例中的InkEdit API还具有按任何组合或子组合的多个相关联的消息、事件以及方法。由于InkEdit(墨水编辑)控件是超级的RichEdit控件，所以直接传递每个RichEdit消息(在大多数情况中)，具有如RichEdit中的相同效果。这也应用于事件通知消息，它把已经发生特定事件通知InkEdit(墨水编辑)控件的父亲窗口。
例如，根据光标尖端(例如，输入笔204的尖端)物理地接触数字化表面(例如，表面202)而发送光标-向下消息940。根据正完成的笔划发送笔划-完成消息941，并发生笔划-完成事件。根据笔划-完成事件的发生而发生笔划-完成方法。根据正完成的手势发送手势-完成消息942，这可以通过手势-完成事件来指示。
InkEdit API还可以具有与识别有关的事件、方法和消息943。根据已经发生的识别发送这种与识别有关的消息，或得到或设置所使用的识别器。其它与识别有关的消息，在识别时间过去将导致发生识别之前，具体地强迫进行识别。与识别有关的事件，根据待识别的应用-特定的手势以及根据一般的识别而发生。与识别有关的方法，根据正发生的识别事件或规定应识别笔划的收集以及要返回该识别结果而发生。
InkEdit API可以进一步具有根据经点击InkEdit(墨水编辑)控件901而发生的事件944，根据按下或放开一个键而发生的事件945，根据在InkEdit(墨水编辑)控件901上的鼠标指针和/或输入笔，以及按下、放开、或双击而发生的事件946以及根据在InkEdit(墨水编辑)控件901上移动的鼠标指针而发生的事件947。
InkEdit API可以进一步具有消息948，它用于根据在墨水编辑状态细目中定义的值而获取InkEdit(墨水编辑)控件901的状态；方法949，它把特定类型的文件装载到InkEdit(墨水编辑)控件901中或把InkEdit(墨水编辑)控件901的内容存储到特定类型的文件中；以及用于处理Windows消息的方法950。
InkEdit API可以进一步具有消息951，它根据在墨水模式细目中定义的值而获取或设置InkEdit(墨水编辑)控件901的加墨水模式；以及消息952，它根据在墨水模式细目中定义的值而获取或设置InkEdit(墨水编辑)控件901的墨水插入模。
InkEdit API可以进一步具有消息953，它获取当前画图属性或设置要在InkEdit(墨水编辑)控件901中使用的将来画图属性；以及消息954，它获取或设置InkEdit(墨水编辑)控件901的识别时间。例如，识别时间可以按毫秒来测量。
InkEdit API可以进一步具有与手势状态有关的消息和方法955。定义与手势状态有关的消息获取或设置用于InkEdit(墨水编辑)控件901的手势状态。与手势状态有关的方法使用手势状态的状态来限制可能被InkEdit(墨水编辑)控件901识别的手势的设置。
InkEdit API可以进一步具有消息956，它获取或设置InkEdit(墨水编辑)控件901待使用的识别器；消息957，它获取或设置用于识别的阶乘识别符；消息958，它获取或设置当前选择的墨水；消息959，它获取或设置所显示的鼠标图标；以及消息960，它获取或设置要显示的鼠标指针。
InkEdit API可以进一步具有构造者961，用于创建新InkEdit(墨水编辑)控件；以及当为InkEdit(墨水编辑)控件901创建句柄时发生的方法962。在InkEdit(墨水编辑)控件的.NET风味中，可以认为该方法是构造者。InkEdit API可以进一步具有根据在控件变化中的文本选择而发生的选择改变的事件。
这里所描述的实施本发明各方面的示例系统和方法只是作为例子而示出，可以理解，本发明当然不限于这些实施例。特别是在上述学说的指导下，熟悉本技术领域的人员可以进行各种修改。例如，可以单独利用上述实施例中的每个单元，或与其它实施例中的的单元组合。虽然已经使用所附的权利要求书来定义本发明，但是示出这些权利要求在于打算使本发明按任何组合或子组合来包括这里所描述的单元和步骤。因此，本发明可由任何数目的变化组合来定义，它按各种组合或子组合而结合包括说明书、权利要求书和附图的规格中的一个或多个单元。对于有关技术领域中的人员是显而易见的，在本规格的指导下，可以利用本发明的各方面的独立的或与这里定义的一个或多个单元或步骤组合的另外组合作为本发明的修改或变型或作为本发明的一部分。打算使这里包括的本发明的书面说明包含所有这种修改和变型。还有，应该认识到，虽然这里提供对象和其它API单元的各种名称，但是这种名称只是作为示意，可以使用任何名称而不偏离本发明的范围。

Claims (11)

1.一种在控件中操作墨水的方法，所述方法包括下列步骤：
接收数据；
将数据解释为墨水；
使墨水与至少一个特性相关联；以及
将所述墨水与所述至少一个特性一起存储为墨水对象。
2.如权利要求1所述的方法，其特征在于，所述墨水包括多个笔划，所述方法进一步包括将所述多个笔划存储为多个相应的笔划对象。
3.如权利要求2所述的方法，其特征在于，进一步包括响应于所述多个笔划中的一个笔划的结束而产生事件的步骤。
4.如权利要求1所述的方法，其特征在于，所述至少一个特性包括加粗、倾斜和颜色中的至少一个。
5.如权利要求1所述的方法，其特征在于，进一步包括接收命令以把所述至少一个特性施加给所述墨水的步骤。
6.如权利要求1所述的方法，其特征在于，进一步包括显示所述墨水的步骤。
7.如权利要求6所述的方法，其特征在于，所述显示所述墨水的步骤包括根据所述至少一个特性显示所述墨水。
8.一种在控件中操作墨水的方法，所述方法包括下列步骤：
在显示区中接收数据；
将所述数据解释为墨水；
在显示区中显示所述墨水；
将所述墨水识别为文本；以及
用所述文本替代所显示的墨水。
9.如权利要求8所述的方法，其特征在于，进一步包括使至少一个特性与所述文本相关联，以及根据所述至少一个特性显示所述文本。
10.如权利要求9所述的方法，其特征在于，所述至少一个特性是加粗、倾斜和颜色中的至少一个。
11.如权利要求9所述的方法，其特征在于，进行识别的步骤包括根据预定的识别上下文识别所述墨水。
CN201010120410A 2002-05-14 2003-05-14 在控件中操作墨水的方法 Pending CN101799740A (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US37978102P 2002-05-14 2002-05-14
US37974902P 2002-05-14 2002-05-14
US60/379,781 2002-05-14
US10/183,990 US7925987B2 (en) 2002-05-14 2002-06-28 Entry and editing of electronic ink
US10/183,990 2002-06-28
US60/379,749 2002-07-20

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN031238386A Division CN1501239B (zh) 2002-05-14 2003-05-14 图形用户接口及其方法

Publications (1)

Publication Number Publication Date
CN101799740A true CN101799740A (zh) 2010-08-11

Family

ID=29273575

Family Applications (2)

Application Number Title Priority Date Filing Date
CN031238386A Expired - Fee Related CN1501239B (zh) 2002-05-14 2003-05-14 图形用户接口及其方法
CN201010120410A Pending CN101799740A (zh) 2002-05-14 2003-05-14 在控件中操作墨水的方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN031238386A Expired - Fee Related CN1501239B (zh) 2002-05-14 2003-05-14 图形用户接口及其方法

Country Status (5)

Country Link
US (1) US7925987B2 (zh)
EP (1) EP1363232A3 (zh)
JP (1) JP2004005656A (zh)
CN (2) CN1501239B (zh)
TW (1) TWI269195B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104350459A (zh) * 2012-03-30 2015-02-11 诺基亚公司 用户接口、关联装置和方法
CN106716493A (zh) * 2014-09-18 2017-05-24 三星电子株式会社 对内容样式化的方法和对内容样式化的触摸屏设备
CN108351745A (zh) * 2015-08-25 2018-07-31 迈思慧公司 数字笔记记录的系统和方法

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6986106B2 (en) 2002-05-13 2006-01-10 Microsoft Corporation Correction widget
US7158675B2 (en) 2002-05-14 2007-01-02 Microsoft Corporation Interfacing with ink
US7925987B2 (en) 2002-05-14 2011-04-12 Microsoft Corporation Entry and editing of electronic ink
US7174042B1 (en) 2002-06-28 2007-02-06 Microsoft Corporation System and method for automatically recognizing electronic handwriting in an electronic document and converting to text
US7188309B2 (en) 2002-06-28 2007-03-06 Microsoft Corporation Resolving document object collisions
US7185278B1 (en) 2002-06-28 2007-02-27 Microsoft Corporation Separating and moving document objects using the movement of a wiper bar
US7079713B2 (en) 2002-06-28 2006-07-18 Microsoft Corporation Method and system for displaying and linking ink objects with recognized text and objects
US7751623B1 (en) 2002-06-28 2010-07-06 Microsoft Corporation Writing guide for a free-form document editor
US7259752B1 (en) 2002-06-28 2007-08-21 Microsoft Corporation Method and system for editing electronic ink
US7137076B2 (en) 2002-07-30 2006-11-14 Microsoft Corporation Correcting recognition results associated with user input
US7848573B2 (en) * 2003-12-03 2010-12-07 Microsoft Corporation Scaled text replacement of ink
US7506271B2 (en) 2003-12-15 2009-03-17 Microsoft Corporation Multi-modal handwriting recognition correction
US7721226B2 (en) * 2004-02-18 2010-05-18 Microsoft Corporation Glom widget
US7659890B2 (en) 2004-03-19 2010-02-09 Microsoft Corporation Automatic height adjustment for electronic highlighter pens and mousing devices
US8849034B2 (en) 2004-12-09 2014-09-30 Hewlett-Packard Development Company, L.P. System, method, and apparatus for triggering recognition of a handwritten shape
US7295206B2 (en) * 2005-01-31 2007-11-13 Microsoft Corporation Ink input region adjustments
US7697001B2 (en) * 2005-01-31 2010-04-13 Microsoft Corporation Personalized ink font
US7925088B2 (en) * 2005-02-23 2011-04-12 Hewlett-Packard Development Company, L.P. System, method and apparatus for automatic segmentation and analysis of ink stream
US7961943B1 (en) 2005-06-02 2011-06-14 Zeevi Eli I Integrated document editor
TWI282527B (en) * 2005-11-03 2007-06-11 Univ Tamkang A calligraphy practicing system
JP2007156219A (ja) * 2005-12-07 2007-06-21 Seiko Epson Corp 情報表示システム、情報表示装置および位置指示装置
US7774722B2 (en) * 2006-01-31 2010-08-10 Microsoft Corporation Creation and manipulation of canvases based on ink strokes
US8315482B2 (en) * 2007-06-26 2012-11-20 Microsoft Corporation Integrated platform for user input of digital ink
US8213719B2 (en) * 2008-09-24 2012-07-03 Microsoft Corporation Editing 2D structures using natural input
KR101593598B1 (ko) * 2009-04-03 2016-02-12 삼성전자주식회사 휴대단말에서 제스처를 이용한 기능 실행 방법
US20110060985A1 (en) * 2009-09-08 2011-03-10 ABJK Newco, Inc. System and Method for Collecting a Signature Using a Smart Device
US9189147B2 (en) * 2010-06-22 2015-11-17 Microsoft Technology Licensing, Llc Ink lag compensation techniques
US20120216113A1 (en) * 2011-02-18 2012-08-23 Google Inc. Touch gestures for text-entry operations
JP5567097B2 (ja) * 2012-10-26 2014-08-06 株式会社東芝 電子機器、手書き文書表示方法、及び表示プログラム
CN103870177A (zh) * 2012-12-13 2014-06-18 联想(北京)有限公司 一种信息处理方法及电子设备
US8943092B2 (en) 2013-03-04 2015-01-27 Microsoft Corporation Digital ink based contextual search
US9696810B2 (en) 2013-06-11 2017-07-04 Microsoft Technology Licensing, Llc Managing ink content in structured formats
US10270819B2 (en) 2014-05-14 2019-04-23 Microsoft Technology Licensing, Llc System and method providing collaborative interaction
US9552473B2 (en) 2014-05-14 2017-01-24 Microsoft Technology Licensing, Llc Claiming data from a virtual whiteboard
US10698597B2 (en) * 2014-12-23 2020-06-30 Lenovo (Singapore) Pte. Ltd. Reflow of handwriting content
US20160179364A1 (en) * 2014-12-23 2016-06-23 Lenovo (Singapore) Pte. Ltd. Disambiguating ink strokes and gesture inputs
US10437461B2 (en) * 2015-01-21 2019-10-08 Lenovo (Singapore) Pte. Ltd. Presentation of representation of handwriting input on display
US10089291B2 (en) * 2015-02-27 2018-10-02 Microsoft Technology Licensing, Llc Ink stroke editing and manipulation
US10613825B2 (en) * 2015-11-30 2020-04-07 Logmein, Inc. Providing electronic text recommendations to a user based on what is discussed during a meeting
US10635746B2 (en) 2016-04-29 2020-04-28 Microsoft Technology Licensing, Llc Web-based embeddable collaborative workspace
US10339372B2 (en) * 2017-04-18 2019-07-02 Microsoft Technology Licensing, Llc Analog strokes to digital ink strokes
CN107054805A (zh) * 2017-06-05 2017-08-18 山东大学 基于rfid卡定位的agv小车的rfid卡贴放位置的画线装置及其应用
US10783323B1 (en) * 2019-03-14 2020-09-22 Michael Garnet Hawkes Analysis system

Family Cites Families (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6002799A (en) * 1986-07-25 1999-12-14 Ast Research, Inc. Handwritten keyboardless entry computer system
US5125039A (en) * 1989-06-16 1992-06-23 Hawkins Jeffrey C Object recognition system
US5309555A (en) * 1990-05-15 1994-05-03 International Business Machines Corporation Realtime communication of hand drawn images in a multiprogramming window environment
US5347295A (en) 1990-10-31 1994-09-13 Go Corporation Control of a computer through a position-sensed stylus
US5220649A (en) 1991-03-20 1993-06-15 Forcier Mitchell D Script/binary-encoded-character processing method and system with moving space insertion mode
EP0566293B1 (en) 1992-04-15 2003-07-16 Xerox Corporation Graphical drawing and editing systems and methods therefor
US5463696A (en) * 1992-05-27 1995-10-31 Apple Computer, Inc. Recognition system and method for user inputs to a computer system
US5583543A (en) * 1992-11-05 1996-12-10 Sharp Kabushiki Kaisha Pen input processing apparatus
US5404442A (en) * 1992-11-30 1995-04-04 Apple Computer, Inc. Visible clipboard for graphical computer environments
US5513309A (en) * 1993-01-05 1996-04-30 Apple Computer, Inc. Graphic editor user interface for a pointer-based computer system
US5528743A (en) * 1993-05-27 1996-06-18 Apple Computer, Inc. Method and apparatus for inserting text on a pen-based computer system
US5710831A (en) * 1993-07-30 1998-01-20 Apple Computer, Inc. Method for correcting handwriting on a pen-based computer
US5367453A (en) 1993-08-02 1994-11-22 Apple Computer, Inc. Method and apparatus for correcting words
US5596350A (en) * 1993-08-02 1997-01-21 Apple Computer, Inc. System and method of reflowing ink objects
US5500937A (en) * 1993-09-08 1996-03-19 Apple Computer, Inc. Method and apparatus for editing an inked object while simultaneously displaying its recognized object
US5749070A (en) * 1993-09-09 1998-05-05 Apple Computer, Inc. Multi-representational data structure for recognition in computer systems
US5583946A (en) * 1993-09-30 1996-12-10 Apple Computer, Inc. Method and apparatus for recognizing gestures on a computer system
US5546538A (en) * 1993-12-14 1996-08-13 Intel Corporation System for processing handwriting written by user of portable computer by server or processing by the computer when the computer no longer communicate with server
US5534893A (en) * 1993-12-15 1996-07-09 Apple Computer, Inc. Method and apparatus for using stylus-tablet input in a computer system
US5561446A (en) 1994-01-28 1996-10-01 Montlick; Terry F. Method and apparatus for wireless remote information retrieval and pen-based data entry
JPH10510639A (ja) * 1994-07-01 1998-10-13 パーム コンピューティング，インコーポレーテッド マルチペンストローク文字セット及び手書文書認識システム
US6101280A (en) * 1994-07-04 2000-08-08 Hewlett-Packard Company Method and apparatus for compression of electronic ink
JPH0816313A (ja) * 1994-07-04 1996-01-19 Sanyo Electric Co Ltd 手書き入力方法及び装置
US5680480A (en) * 1994-07-29 1997-10-21 Apple Computer, Inc. Method and apparatus for training a recognizer
JPH0869351A (ja) 1994-08-26 1996-03-12 Toshiba Corp ペン入力装置及びペン入力方法
US5831615A (en) * 1994-09-30 1998-11-03 Intel Corporation Method and apparatus for redrawing transparent windows
EP0709801B1 (en) * 1994-10-28 1999-12-29 Hewlett-Packard Company Method for performing string matching
JPH08305821A (ja) * 1995-04-28 1996-11-22 Canon Inc データ処理方法とその装置
US5710573A (en) * 1995-05-04 1998-01-20 Winbond Electronics Corp. Scaled video output overlaid onto a computer graphics output
US5761328A (en) * 1995-05-22 1998-06-02 Solberg Creations, Inc. Computer automated system and method for converting source-documents bearing alphanumeric text relating to survey measurements
US5682439A (en) * 1995-08-07 1997-10-28 Apple Computer, Inc. Boxed input correction system and method for pen based computer systems
JPH09160914A (ja) 1995-12-08 1997-06-20 Matsushita Electric Ind Co Ltd ペン入力装置
US6055333A (en) * 1995-12-28 2000-04-25 Motorola, Inc. Handwriting recognition method and apparatus having multiple selectable dictionaries
US5917493A (en) * 1996-04-17 1999-06-29 Hewlett-Packard Company Method and apparatus for randomly generating information for subsequent correlating
US5850480A (en) * 1996-05-30 1998-12-15 Scan-Optics, Inc. OCR error correction methods and apparatus utilizing contextual comparison
US5862256A (en) * 1996-06-14 1999-01-19 International Business Machines Corporation Distinguishing gestures from handwriting in a pen based computer by size discrimination
JP3839877B2 (ja) * 1996-07-05 2006-11-01 キヤノン株式会社 手書きパターン処理装置及び手書きパターン処理方法
US6128007A (en) * 1996-07-29 2000-10-03 Motorola, Inc. Method and apparatus for multi-mode handwritten input and hand directed control of a computing device
US5798769A (en) * 1996-08-15 1998-08-25 Xerox Corporation Method and apparatus for maintaining links between graphic objects in a free-form graphics display system
JPH1069479A (ja) 1996-08-29 1998-03-10 Sharp Corp 文書作成方法および文書作成プログラムを記録した媒体
US5953523A (en) * 1996-10-28 1999-09-14 International Business Machines Corporation Method and apparatus for creating "smart forms "
US5889888A (en) * 1996-12-05 1999-03-30 3Com Corporation Method and apparatus for immediate response handwriting recognition system that handles multiple character sets
JPH10214267A (ja) * 1997-01-29 1998-08-11 Sharp Corp 手書き文字記号処理装置および手書き文字記号処理装置の制御プログラムを記録した媒体
JPH1186015A (ja) * 1997-09-09 1999-03-30 Canon Inc 情報処理方法及び装置及びその記憶媒体
JPH11143986A (ja) * 1997-10-17 1999-05-28 Internatl Business Mach Corp <Ibm> ビットマップイメージの処理方法及び処理装置、ビットマップイメージの処理を行うイメージ処理プログラムを格納した記憶媒体
US6000946A (en) * 1998-03-09 1999-12-14 Hewlett-Packard Company Collaborative drawing device
US6584479B2 (en) * 1998-06-17 2003-06-24 Xerox Corporation Overlay presentation of textual and graphical annotations
US6563494B1 (en) * 1998-10-08 2003-05-13 International Business Machines Corporation Cut and paste pen for pervasive computing devices
US6646573B1 (en) * 1998-12-04 2003-11-11 America Online, Inc. Reduced keyboard text input system for the Japanese language
US6687876B1 (en) * 1998-12-30 2004-02-03 Fuji Xerox Co., Ltd. Method and system for maintaining freeform ink annotations on changing views
US6389435B1 (en) * 1999-02-05 2002-05-14 Fuji Xerox, Co, Ltd. Method and system for copying a freeform digital ink mark on an object to a related object
US6565611B1 (en) * 1999-02-26 2003-05-20 Xerox Corporation Automatic index creation for handwritten digital ink notes
US20010040551A1 (en) * 1999-07-29 2001-11-15 Interlink Electronics, Inc. Hand-held remote computer input peripheral with touch pad used for cursor control and text entry on a separate display
US6909439B1 (en) * 1999-08-26 2005-06-21 International Business Machines Corporation Method and apparatus for maximizing efficiency of small display in a data processing system
US6813396B1 (en) * 2000-02-16 2004-11-02 Telefonatiebolaget L.M. Ericsson (Publ) Method for sharing information between electronic reading devices
US7564995B1 (en) * 2000-03-07 2009-07-21 Apple Inc. Method and apparatus for acquiring and organizing ink information in pen-aware computer systems
US6924791B1 (en) * 2000-03-09 2005-08-02 Palmone, Inc. Method and apparatus for automatic power-up and power-down of a computer system based on the positions of an associated stylus and/or hinge
US7249113B1 (en) * 2000-03-29 2007-07-24 American Express Travel Related Services Company, Inc. System and method for facilitating the handling of a dispute
US7006711B2 (en) * 2000-06-21 2006-02-28 Microsoft Corporation Transform table for ink sizing and compression
US6956970B2 (en) * 2000-06-21 2005-10-18 Microsoft Corporation Information storage using tables and scope indices
US6355889B1 (en) * 2000-06-28 2002-03-12 International Business Machines Corporation Method and apparatus for linking electronic ink to electronic personal information systems
US6681223B1 (en) * 2000-07-27 2004-01-20 International Business Machines Corporation System and method of performing profile matching with a structured document
US6961029B1 (en) * 2000-11-08 2005-11-01 Palm, Inc. Pixel border for improved viewability of a display device
GB2372339A (en) * 2001-01-17 2002-08-21 Priorlease Ltd An arrangement for applying handwriting to an HTML document
US6741749B2 (en) * 2001-01-24 2004-05-25 Advanced Digital Systems, Inc. System, device, computer program product, and method for representing a plurality of electronic ink data points
US6959416B2 (en) * 2001-01-30 2005-10-25 International Business Machines Corporation Method, system, program, and data structures for managing structured documents in a database
US7039234B2 (en) * 2001-07-19 2006-05-02 Microsoft Corporation Electronic ink as a software object
US6661409B2 (en) * 2001-08-22 2003-12-09 Motorola, Inc. Automatically scrolling handwritten input user interface for personal digital assistants and the like
US7283274B2 (en) * 2001-10-26 2007-10-16 Hewlett-Packard Development Company, L.P. Method and system for printing user data to form documents
US6903751B2 (en) * 2002-03-22 2005-06-07 Xerox Corporation System and method for editing electronic images
US7120872B2 (en) * 2002-03-25 2006-10-10 Microsoft Corporation Organizing, editing, and rendering digital ink
US7158675B2 (en) * 2002-05-14 2007-01-02 Microsoft Corporation Interfacing with ink
US7925987B2 (en) 2002-05-14 2011-04-12 Microsoft Corporation Entry and editing of electronic ink

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104350459A (zh) * 2012-03-30 2015-02-11 诺基亚公司 用户接口、关联装置和方法
CN104350459B (zh) * 2012-03-30 2017-08-04 诺基亚技术有限公司 用户接口、关联装置和方法
US9841893B2 (en) 2012-03-30 2017-12-12 Nokia Technologies Oy Detection of a jolt during character entry
CN106716493A (zh) * 2014-09-18 2017-05-24 三星电子株式会社 对内容样式化的方法和对内容样式化的触摸屏设备
CN106716493B (zh) * 2014-09-18 2021-05-28 三星电子株式会社 对内容样式化的方法和对内容样式化的触摸屏设备
US11460988B2 (en) 2014-09-18 2022-10-04 Samsung Electronics Co., Ltd. Method of styling content and touch screen device for styling content
CN108351745A (zh) * 2015-08-25 2018-07-31 迈思慧公司 数字笔记记录的系统和方法
CN108351745B (zh) * 2015-08-25 2021-09-10 迈思慧公司 数字笔记记录的系统和方法

Also Published As

Publication number Publication date
EP1363232A3 (en) 2004-06-30
CN1501239B (zh) 2010-07-28
JP2004005656A (ja) 2004-01-08
US20030215142A1 (en) 2003-11-20
CN1501239A (zh) 2004-06-02
US7925987B2 (en) 2011-04-12
TW200401987A (en) 2004-02-01
EP1363232A2 (en) 2003-11-19
TWI269195B (en) 2006-12-21

Similar Documents

Publication Publication Date Title
CN1501239B (zh) 图形用户接口及其方法
CN1318940C (zh) 在文档上覆盖电子墨迹的方法
US7715630B2 (en) Interfacing with ink
US20030214531A1 (en) Ink input mechanisms
US6940617B2 (en) Printing control interface system and method with handwriting discrimination capability
EP1376448B1 (en) Method and system for displaying and linking ink objects with recognized text and objects
CN100336053C (zh) 确定接收到的笔划是否是手势的方法
US5907835A (en) Electronic filing system using different application program for processing drawing commands for printing
JP3277014B2 (ja) データ処理資源を操作するための方法
JP5743443B2 (ja) 画像処理装置、画像処理方法、コンピュータプログラム
US20130297289A1 (en) Multiple input language selection
CN102222079A (zh) 图像处理设备及图像处理方法
CN103220443A (zh) 从网络外的装置进行的无线打印
JP2007503032A (ja) ドキュメントスキャナ
US20060031452A1 (en) Data communication system, and server and client computer constructing said system
US20150193387A1 (en) Cloud-based font service system
US20160259771A1 (en) Information processing system, information processing apparatus, control method, and storage medium
CN100481062C (zh) 墨水收集和再现
US7370288B1 (en) Method and system for selecting objects on a display device
EP3933678A1 (en) Information processing system, data output system, image processing method, and carrier means
JP4294456B2 (ja) 特定キャラクタ列検索装置、特定キャラクタ列検索方法、特定キャラクタ列検索プログラム、および記録媒体
JP7302175B2 (ja) 情報処理装置、及び情報処理プログラム
CN101582017A (zh) 用于对可变位置的数据进行数据提取的机制
JP3656832B2 (ja) 自筆体文字等の入力方法及び自筆体フォントの使用方法
JP5390880B2 (ja) 外字ビットマップデータ抽出方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20100811