便携终端的字符识别中的处理对象选择方法及便携终端

1.一种便携终端，是具有：
拍摄图像的图像拍摄部、
从图像内抽取字符识别对象字符行的字符行抽取部、
识别图像内的字符的字符识别部、
旋转所述图像以修正倾斜的图像处理部、
用于显示成为识别对象的图像的图像显示部、和
控制终端整体的控制部的便携信息终端，其特征在于，
所述图像处理部将字符行的倾斜定量化，将其值显示在角度指示器上，
所述控制部对被判定为适宜角度的拍摄图像进行字符识别的控制。
2.根据权利要求1所述的便携终端，其特征在于，
根据所述抽取的字符行的外接矩形的纵横尺寸比，自动判断是横写还是 竖写，并切换识别模式。
3.一种便携终端，是具有：
从拍摄完静止图像中抽取字符识别对象字符行的字符行抽取部、
识别该图像内的字符的字符识别部、
旋转该图像以修正倾斜的图像处理部、
用于显示成为识别对象的图像的图像显示部、和
控制终端整体的控制部的便携信息终端，其特征在于，
所述字符识别部具有识别竖写字符的模式和识别横写文字的模式，
所述控制部根据所述字符行抽取部抽取的字符行的外接矩形的纵横尺寸 比，自动判断是横写还是竖写，并切换所述字符识别部的识别模式。
4.根据权利要求3所述的便携终端，其特征在于，
跟踪所述拍摄的图像内的字符串的倾斜，自动地生成并显示识别对象候 选字符串的外接矩形。
5.一种便携终端中的字符识别方法，识别从拍摄的图像中抽取的字符识 别对象字符行的字符，其特征在于，包括以下步骤：
拍摄图像的步骤、
从所述图像内抽取字符识别对象字符行的步骤、
旋转所述拍摄的图像以修正倾斜的步骤、
显示成为识别对象的图像的步骤、
把对于字符识别处理来说适宜的拍摄角度定量地显示给便携信息终端使 用者的步骤、
根据所述显示的拍摄角度判定适宜角度的步骤、和
对于以所述判定的适宜角度拍摄的图像进行字符识别的步骤。
6.根据权利要求5所述的便携终端中的字符识别方法，其特征在于，
进行所述字符识别的步骤中进一步包括：
根据所抽取的字符行的外接矩形的纵横尺寸比，自动地判定是横写还是 竖写的步骤；
基于所述判定结果切换识别模式的步骤。
7.一种便携终端中的字符识别方法，识别从拍摄完的图像中抽取的字符 识别对象字符行的字符，其特征在于，包括以下步骤：
从所述图像内抽取字符识别对象字符行的步骤、
旋转所述图像以修正倾斜的步骤、
显示成为识别对象的图像的步骤、
进行所述拍摄完图像的旋转处理的步骤、
在进行所述旋转处理的同时抽取字符识别对象候选字符串的步骤、
从所述抽取的字符识别对象候选字符串中选择识别对象字符串的步骤、 和
对于所述被选择的识别对象字符串进行字符识别的步骤，其中
进行所述字符识别的步骤包括：根据所抽取的字符行的外接矩形的纵横 尺寸比，自动地判定是横写还是竖写的步骤；和基于所述判定结果切换识别 模式的步骤。
8.根据权利要求7所述的便携终端中的字符识别方法，其特征在于，
从所述字符识别对象候选字符串中选择识别对象字符串的步骤中进一步 包括：
跟踪拍摄完图像内的字符串的倾斜，自动地生成并显示识别对象候选字 符串的外接矩形的步骤。

技术领域\n本发明涉及在便携信息终端中进行光学式字符识别时的处理对象选择方 法。\n背景技术\n在安装了照相机等图像输入功能的便携信息终端，对拍摄的图像实施光 学式字符识别的技术已被开发。但是，用便携信息终端的照相机所拍摄的图 像，由于手摆动等原因，相对于画面，字符串倾斜着被拍摄的情况较多。因 此，当字符识别结果错误(误读)时，或是让使用者调整拍摄时的角度再次 拍摄，或是使用键盘等输入装置修正识别结果。\n作为在识别处理之前修正识别对象字符串的倾斜的技术，在专利文献1 中公开了检测在记入了识别对象字符串的用纸上预先记载好的2个以上的标 记，根据由此所得到的倾斜，自动进行旋转后进行识别的技术尝试。\n另外，在非专利文献1中公开了在便携信息终端识别英语单词并查找英 日辞典这样的结合了字符识别和辞典检索的使用方法。\n专利文献1：特开平11-250179号公报(4～7项，第3图)\n非专利文献1：H.Fujisawa，H.Sako，Y.Okada，and S-W.Lee，“Information Capturing Camera and Developmental Issues，”In Proc.Int.Conf.Document Analysis and Recognition，ICDAR，99，Bangalore，India，Sep.20-22，1999’pp. 205-208.\n为了高精度地实施字符识别处理，重要的是在图像内识别对象的字符串 未倾斜。但是，当使用数字照相机或带照相机的便携终端等的信息终端装置 拍摄数字图像时，用手来固定该信息终端装置的情况较多，为了使识别对象 的字符串在图像内不倾斜，在拍摄时需要特别的注意(第一课题)。\n对于使用带照相机功能的便携终端所拍摄的图像进行的光学式字符识别 的功能中，当字符串被倾斜着拍摄时，现有技术中存在不能进行字符识别， 或达不到足够的识别精度的问题。因此，存在为了得到正确的字符识别结果， 必须再次拍摄识别对象的字符的课题。\n在专利文献1中虽然记载有通过在用纸上记载的2个以上的标记来检测 倾斜的技术，但是该技术必须在识别对象的用纸上预先印上或记入标记，在 识别名片等时不实用。另外，当对已拍摄完的图像实施字符识别处理时，只 要不是付出上述那样特别的注意拍摄的，就存在识别对象字符串在图像内倾 斜的情况。这时，在实施字符识别处理前必须使用图像处理软件等进行图像 的角度修正(第二课题)。\n另外，当字符的记述方向有横写和竖写2种写法时，即使在调整图像的 角度后抽取了识别对象字符串，在字符识别时也必须设定识别对象字符串是 竖写还是横写。当取得名片等的图像并实施字符识别处理时，由于存在竖写 和横写的格式，所以存在每次都必须设定识别模式的问题。另外，在报纸、 杂志等竖写和横写字符串混合的文书中，切换字符的记述方向的负担也较大 (第三课题)。\n在利用带照相机的便携信息终端等的装置时，可以想见，经常会发生乘 坐着交通工具的路上等，在很难以图像稳定的位置进行拍摄的环境下的利用。 但是，现有技术中，如果识别对象字符串不是在相对于图像而言倾斜被抑制 在很小范围的状态下被选择，就得不到足够的字符识别精度。因此，使用者 在拍摄识别对象图像时，为了调整角度必须付出特别的注意(第四课题)。\n再者，在带照相机的便携信息终端，当要使用字符识别的结果进行辞典 检索或网络检索时，当是英语单词时，因为通过空格被分隔成了单词单位， 所以选择检索对象的单词较容易。但是，如果要将同样的处理适用于日语， 由于与英语的情况不同，不存在由单词间的空格这样的编排信息造成的分隔， 所以使用者必须把检索对象的字符串一个字符一个字符地进行选择，指定负 担较大(第五课题)。\n发明内容\n本发明的目的是：鉴于这些课题，提供减轻使用带照相机的便携信息终 端拍摄字符识别对象物时的拍摄者负担，或者减轻将拍摄后的图像修正为对 字符识别较佳的角度时的负担的系统或方法。\n另外，本发明的目的还在于，提供当字符识别日语并进行辞典或网络检 索时，可以减轻指定检索对象的字符串的使用者的负担的系统或方法。\n为了解决上述第一课题，在信息终端装置的画面上显示把在识别对象字 符串的图像内的倾斜程度实时地呈示给拍摄者的角度指示器。使用者一边看 着角度指示器所显示的信息一边移动信息终端装置或识别对象物，通过在适 当的位置进行拍摄，可以拍摄出适于字符识别处理的图像。\n为了解决上述第二课题，提供在把拍摄完的图像进行旋转的同时，实时 地实施可以成为识别对象的字符串的行抽取的功能。使用者通过简单的键操 作等，在信息终端装置的画面上旋转拍摄完的图像，实时确认被行抽取的识 别对象候选字符串。通过在所希望的识别对象字符串被抽取的时点，使用者 停止旋转处理，当若干行被抽取时选择想识别的字符串实行识别处理，实现 对已拍摄完的图像的字符识别处理的简便化。\n为了解决上述第三课题，提供自动判定该识别对象字符串是竖写还是横 写的功能。在该识别对象字符串方向的自动判定中，使用所抽取的识别对象 字符串的外接矩形的纵横尺寸比。具体是，识别对象字符串的外接矩形的高 和宽的比例与规定值进行比较后，判断是竖写字符串还是横写字符串并实施 识别处理。当使用的便携终端装置的画面的方向可变时，也可以根据画面的 方向，自动实施竖写/横写的切换。\n为了解决上述第四课题，提供跟踪识别对象字符串的倾斜角度，自动生 成用于选择识别对象字符的外接矩形的装置。具体是，使用例如特开平7- 141465“文件图像的倾斜检测方法”的方法计测识别对象字符串的倾斜角度， 制成旋转成使得识别对象字符串为横写时相对于图像是水平位置，为竖写时 相对于图像是垂直位置的图像。其后，生成识别对象字符串的外接矩形，制 成追加到该旋转后图像的旋转外接矩形图像。接着，旋转该旋转外接矩形图 像，返回到原来的字符串的倾斜角度，在信息终端装置的显示装置进行显示。\n为了解决上述第五课题，提供以下装置：即对字符识别日语后的结果进 行语态素分析，自动生成检索对象的候选字符串，使用者分别选择这些候选 或选择这些候选字符串的组合。\n通过以在视觉上容易理解的方式来显示识别对象的图像的倾斜状态，能 够让使用者明确认识到图像发生了倾斜，这样就容易以对字符识别处理来说 适宜的角度来拍摄图像。\n另外，关于过去所拍摄的图像，由于可以直接编辑倾斜的图像，并对其 结果实施字符识别处理，因此不必再次进行拍摄。\n另外，即使是在角度修正困难的情况下，因为可以在倾斜的状态下进行 字符串的选择，所以对带有某种程度的倾斜的图像，也能够实行字符识别处 理。\n附图说明\n图1是本发明实施例的便携信息终端的框图。\n图2是本发明实施例的流程图。\n图3是本发明实施例的流程图。\n图4是本发明实施例的角度修正的说明图。\n图5是本发明实施例的流程图。\n图6是表示本发明实施例的画面的图示。\n图7是本发明实施例的流程图。\n图8是本发明实施例的字符串外接矩形生成方式的说明图。\n图9是本发明实施例的便携信息终端的框图。\n图10是本发明实施例的流程图。\n图11是本发明实施例的矩形座标表的说明图。\n图12是本发明实施例的检索候选字的选择方式说明图。\n图13是本发明实施例的矩形座标表的说明图。\n图14是本发明实施例的选择区域表的说明图。\n图15是本发明实施例的矩形座标的说明图。\n图16是说明本发明实施例的图示。\n图17是本发明实施例的矩形座标表的说明图。\n图18是说明本发明实施例的图示。\n图19是说明本发明实施例的图示。\n图20是本发明实施例的矩形座标表的说明图。\n图21是说明本发明实施例的图示。\n具体实施方式\n使用图1～20说明本发明较佳的一种实施方式。本发明的字符识别方式 可以适用于读取并识别名片等的便携信息系统等，例如可以适用于在移动电 话上进行的字符识别功能。\n图1是适用本发明的便携信息终端的框图的一个例子。本例中具有：便 携信息终端主体100；把作为识别对象的名片以光学方式输入的照相机或扫描 器等的图像输入装置110；显示识别对象的图像或字符识别结果、光标121等 的CRT或液晶等的显示装置120；配置了使用者能够操作的按钮131等的输入 装置130；为了进行便携信息终端整体的控制而安装在终端主体内的控制部 140；以及进行字符行抽取151、字符识别处理152等的字符识别部150；具有 字符行倾斜的定量化功能161以及图像旋转处理功能162的图像处理部160。\n字符识别部150和图像处理部160可以是软件的功能，可以在与控制部 140相同的电路上操作。输入装置可为按钮等的一般的设备，为了提高操作 性能，显示装置120和输入装置130也可用触摸面板等显示装置兼输入装置 来实现。\n图2是实施适用了用于解决第一课题的装置的字符识别处理时的流程的 一个例子(第一实施方式)。使用者一开始OCR功能，从图像输入装置110 输入的动画图像就被显示在显示装置120(S201)上。字符识别部150立刻 对图像显示装置120上所显示的有十字型等光标121的区域实行字符行抽取 处理(S202)，显示包围所抽取的字符行的外接矩形(S203)。\n同时，通过图像处理部160定量化字符行的倾斜，并将该定量化的值用 柱状图等的形式在角度指示器123上进行可视化(S204)。定量化的值不受限 制，只要反映了字符行与图像的倾斜程度就可以，但是如果采用例如与字符 行和图像端边形成的角度θ的倒数成比例的值，则在倾斜度小的时候就在角 度指示器123上显示大的值，从而使用者可以凭直觉进行操作。\n处理返回到步骤(S201)，直到使用者按下(S205)拍摄按钮为止，重复 进行下面(S201～S204)的处理，并持续更新画面显示。\n使用者以角度指示器123为参考移动终端装置或识别对象物，在合适的 位置按下拍摄按钮(S205)后实行图像拍摄(S206)。如果接着按下识别按钮 (S207)，则对在步骤(S203)所显示的外接矩形内的字符串实行字符识别处 理210，并显示识别结果(S211)。\n当按下拍摄按钮(S205)后，删除按钮被按下时(S208)，就删除已拍摄 的图像并返回到步骤(S201)。当除此之外的按钮被按下时，分别转入到必要 的操作(S209)。\n图3是实施适用了用于解决第二课题的装置的字符识别处理时的流程的 一个例子(第二实施方式)。便携信息终端的使用者进行把以前所拍摄的静止 图像装入的操作(S301)后，该静止图像就被显示在显示装置120(S302)。 字符识别部150立即进行字符行抽取(S303)、外接矩形显示(S304)以及角 度指示器显示(S305)。在该时点处理转入到使用者的键输入等待(S306)。\n当使用者按下识别实行按钮(S307)时，立即对在步骤(S304)所显示 的外接矩形的内部的字符串实行字符识别处理(S310)，并显示字符识别结果 (S311)。当使用者按下箭头按钮(S308)时，根据按下的按钮，将图像向左 或向右方向旋转一定角度(S309)。这时，旋转的中心是字符行矩形的中心， 但是也可以把由使用者指定的图像上的一点作为中心进行旋转处理。\n当持续按住箭头按钮时，图像连续旋转，随之外接矩形显示也实时更新。 考虑到使用者的使用方便，可以用停止箭头按钮按下的操作(从按钮把手指 移开)来代行识别实行按钮按下的操作。\n图4是在第一实施方式以及第二实施方式中显示部120所显示的图像的 一个例子。在第一实施方式中是从图像输入装置110所输入的动画、在第二 实施方式中是以前所拍摄的静止图像，作为图像400显示在显示部120。\n图像400内的识别对象字符串401在该时点是倾斜的。在画面的中央显 示有作为旋转中心的十字光标402。字符识别部150生成包围识别对象字符 串401的外接矩形403，并显示在画面上。在角度指示器上显示有表示倾斜 了的识别对象字符串401的倾斜程度的柱状图(404)。\n通过在第一实施方式中旋转用手持的便携信息终端(照相机)(406)，或 通过在第二实施方式中操作箭头键(405)来旋转画面上所显示的图像。通过 图像的旋转，随着识别对象字符串401的倾斜变小，外接矩形的形状也同步 变化(407)。\n另外，在角度指示器，把表示识别对象字符串401的倾斜变小的大值作 为柱状图显示(408)。使用者通过反复进行图像的旋转操作，并在角度指示 器显示的值变大的位置实行字符识别处理，可以得到精度高的字符识别结果。\n图5是实施适用了用于解决第一课题的装置的字符识别处理时的流程的 一个例子(第三实施方式)。因为步骤(S501～S506)与步骤(S201～S209) 相同，所以省略说明。\n在识别按钮被按下(S504)的时点，计算识别对象字符串的外接矩形的 纵横尺寸比(高和宽的比率)，与预先规定的值α进行比较(S507)。如果纵 横尺寸比比规定值α大，则判断为竖写字符串，实施竖写字符串识别用的参 数设定等(S510)，并实施字符识别处理(S511)，显示结果(S512)。\n同样，如果纵横尺寸比与规定值α比较不比规定值α大，则继续将纵横 尺寸比与规定值β进行比较(S508)。如果纵横尺寸比比规定值β小，则判断 为横写字符串，实施横写字符串识别用的参数设定等(S509)，并实施字符识 别处理(S511)，显示结果(S512)。纵横尺寸比如果在α以下且β以上的范 围，则认为字符串未被充分修正角度，不转入识别处理。\n图6是在第三实施方式中显示部120所显示的图像的一个例子。当为横 写的字符串601时，外接矩形的高602比宽603小。如果将纵横尺寸比定义 为外接矩形的高除以外接矩形的宽，则纵横尺寸比比1小时外接矩形为横长。\n例如，当把与纵横尺寸比比较的规定值β设定为0.5时，如果在纵横尺 寸比低于0.5的状态下起动字符识别，则自动实施作为横写字符串所必要的 设定。同样，当为竖写字符串604时，外接矩形的高605宽606大。\n在与上述相同的纵横尺寸比的定义下，则当纵横尺寸比比1大时，外接 矩形为竖长。例如，当把与纵横尺寸比比较的规定值α设定为1.5时，如果 在纵横尺寸比高于1.5的状态下起动字符识别，则自动实施作为竖写字符串 所必要的设定。\n图7是实施适用用于解决第四课题的装置的字符识别处理时的流程的一 个例子(第四实施方式)。\n字符识别对象图像从图像输入装置110被输入(S701)后，图像处理部 160就立即计算对识别对象字符串的图像的角度(S702)，对所输入的字符识 别对象图像旋转修正该角度部分。关于修正方向，如果是横写字符串则相对 于画面旋转为水平方向，如果是竖写字符串则相对于画面旋转为垂直方向。\n接着，对该旋转后图像实施字符串抽取，在该旋转后图像上附加外接矩 形(S704)，将该图像保存到图像缓冲器。在图像缓冲器保存的图像可以是图 像整体，也可以仅为附加的外接矩形内部。\n接着，将该旋转后图像正好反转通过步骤(S702)检测出的角度部分， 制成与原输入图像倾斜相同程度的图像，显示在终端装置的显示部120。使 用者如果不进行任何操作，则返回步骤(S701)，对新的输入图像重复进行步 骤(S701～S707)的处理。\n如果按下识别按钮，则读取在步骤(S705)存储入图像缓冲器的图像 (S710)，对该图像实行字符识别处理(S711)，显示字符识别结果(S712)。\n图8是在第四实施方式中处理的图像的状态的一个例子。从图像输入装 置110所输入的识别对象图像801上的识别对象字符串802相对于画面是倾 斜的状态。图像处理部160检测出该识别对象字符802与画面的边缘所成角 度803，将图像正好旋转角度803，进行修正从而使得识别对象字符串相对于 画面成为水平，制成旋转修正图像804。\n对于旋转修正图像804上的识别对象字符串806，字符识别部150实施 字符行抽取，并附加外接矩形。图像处理部160将该旋转修正图像804正好 反转角度803，生成返回到与原识别对象图像801相同角度的图像807，显示 在显示装置120。\n上面的第一到第四实施方式可以分别个自实现，也可以用选择性地采用 全部或一部分的形式来实现。\n下面，使用图9至12对用于解决第五课题的第五实施方式进行说明。图 9是适用了第五实施方式的便携信息终端的框图的一个例子。与图1的差异 是追加了检索语抽取部170、电子辞典171。\n图10是在图9的装置实施适用了用于解决第五课题的装置的字符识别、 辞典检索处理时的流程的一个例子。字符识别对象图像从图像输入装置110 输入(S1001)后，当图像处理部160对原图像实施适当的图像处理之后，通 过字符识别部150的字符行抽取部151抽取字符行(S1002)。之后，对于所 抽取的字符行，字符行识别部152按每1个字符分离出字符，并输出识别的 结果(S1003)。在识别结果中包含有每1个字符的字符代码和与此对应的矩 形坐标。\n字符识别的结果被输入检索语候选抽取部170，通过语态素分析将连续 的字符串分解为单词等的词素(S1004)。例如，当图9的便携信息终端的显 示器显示的是“文法の知識を使ぅと”(“如果使用语法知识”)这样的字符串 的时候，生成如图11所示那样的表1100。存储有通过语态素分析所分解的字 符串和与此对应的矩形坐标。\n使用表1100的数据，在便携信息终端的显示器上显示检索对象的候选字 (S1005)。例如，比较光标的中心坐标与表1100的候选字矩形坐标，将包括 光标的中心坐标的候选字的矩形坐标以如图12所示的形式在显示器上显示。\n接着，通过按下光标移动键174或176，如1201那样移动检索对象字的 矩形显示，在显示了想要检索的矩形时按下选择按钮175，决定检索对象字 (S1006)。把所决定的检索对象字向电子辞典部171输出。在电子辞典部171， 将所输入的检索对象字作为关键词检索电子辞典(S1007)，并将检索结果显 示在显示器上(S1008)。\n虽然在本实施例中使用语态素分析生成了检索对象的候选字，但是，也 可以是以下方法：即在识别结果的字符串中从“汉字”变为“平假名”等字 符的类别变化的地方断开，来生成候选字的方法。或者可以结合字符类别与 空格或字符大小的变化的场所等几何学的信息一起判断。\n下面，使用图9、图10以及图13至15，对用于解决第五课题的第六实 施方式进行说明。在本实施例中，涉及像“の文法知識を使ぅ”(“使用语法 知识”)这样有由多个词素构成的汉字列的情形，假设光标位于“文法知識” (“语法知识”)字符串中的任意1个。\n由于存在使用者仅想把如“文法”(“语法”)或“知識”(“知识”)那样 的词素作为检索对象的情形和想检索“文法知識”(“语法知识”)这样的复合 词整体的情形，因此下面说明减轻这些选择负担的处理。在第六实施方式中， 因为与在图10的处理流程中不同的部分是候选字抽取(S1004)和候选字显 示(S1005)、候选字选择(S1006)，所以仅对该处理进行说明。\n在候选字抽取(S1004)中，通过与第五实施例所示相同的处理，由语态 素分析生成候选字，生成与此对应的如图13所示的矩形坐标表1300。接着， 由表1300生成用于分别选择“文法”、“文法知識”、“知識”(“语法”、“语法 知识”、“知识”)的区域坐标表1400。该表用于如果光标中心坐标进入该区 域，则显示与其对应的候选字的矩形。\n图15模式地表示出本表的矩形坐标的X坐标。与“文法”、“文法知識”、 “知識”(“语法”、“语法知识”、“知识”)分别对应的选择区域是1500、1501、 1502，根据光标的中心坐标被包含哪一个区域，从表1400中选择作为检索候 选字显示的矩形坐标。然后将所选择的矩形坐标显示在显示器上(S1005)。\n图16表示所显示的矩形的例子。(a)是光标位于“知識”(“知识”)的 选择区域时的显示例，(b)是光标位于“文法知識”(“语法知识”)的选择区 域时的显示例，(c)是光标位于“文法”(“语法”)的选择区域时的显示例。 使用者当想要检索的候选字被显示时，按下选择键选择检索对象字(S1006)。 本实施例对1个字符行内的字符串选择进行了说明，但是通过一并持有对最 大限度的字符行的区域坐标表，可以进行涉及多个字符行的选择。\n下面，使用图9、图10、图13、图17、图18，对用于解决第五课题的 第七实施方式进行说明。与第六实施方式一样，涉及像“の文法知識を使ぅ” (“使用语法知识”)这样有由多个词素构成的汉字列的情形，假设光标位于 “文法”(“语法”)部分的情形。另外，与第六实施方式一样，仅说明候选字 抽取(S1004)和候选字显示(S1005)、候选字选择(S1006)部分。\n在候选字抽取(S1004)中，通过与第五实施例所示相同的处理，由语态 素分析生成候选字，生成与此对应的如图13所示的矩形坐标表1300。接着， 从表1300生成分别与词素和其复合词对应的矩形坐标表1700(图17)。假 设表以左上点坐标排序。\n在候选字显示(S1005)中，如图18所示，最初显示光标的中心坐标被 包含在其矩形区域的词素的矩形(1800)。接着，每次按下光标键176，显示 出下面的被排序的表1700的矩形。使用者可以在想要检索的矩形被显示的时 点按下选择键175，检索电子辞典(S1006)。\n下面，使用图9、图10、图13、图19对用于解决第五课题的第八实施 方式进行说明。与第六实施方式一样，涉及像“の文法知識を使ぅ”(“使用 语法知识”)这样有由多个词素构成的汉字列的情形，假设光标位于“文法” (“语法”)部分的情形。另外，与第六实施方式一样，仅说明候选字抽取 (S1004)和候选字显示(S1005)、候选字选择(S1006)部分。\n在候选字抽取(S1004)中，通过与第五实施例所示相同的处理，由语态 素分析生成候选字，生成与其对应的如图13所示的矩形坐标表1300。然后 以如图19所示的1900的形式显示包含有光标中心坐标的候选字矩形(1005)。\n在此，当想选择“文法知識”(“语法知识”)这样的复合词时，按下被赋 予指定选择范围的起点的意思的“1”键后，按下光标移动键176，显示像1901 那样的矩形。如果再一次按下光标移动键176，则像1902那样，选择区域被 扩大。使用者在使用光标键显示出适当的检索对象字的时点，按下选择键175， 选择检索对象字(S1006)。\n下面，使用图9、图10、图20、图21对用于解决第五课题的第九实施 方式进行说明。涉及像“の文法知識処理を”(“语法知识处理”)这样有由3 个以上的词素构成的汉字列的情形，假设光标位于“知識”(“知识”)部分的 情形。\n当为由3个以上的词素构成的汉字列时，使用者通常或是考虑将汉字列 整体作为检索对象，或是想仅检索包含有光标中心坐标的词素，选择这两种 的频度较高。因此，下面说明减轻这些选择负担的处理。另外，与第六实施 方式一样，仅说明候选字抽取(S1004)和候选字显示(S1005)、候选字选择 (S1006)的部分。\n在候选字抽取(S1004)中，在通过与第五实施例所示相同的处理，由语 态素分析生成候选字的同时，生成存储与候选字对应的字符种类和矩形坐标 的、如图20所示的表2000。在此所说的字符种类是，如果属于“汉字”就 是“汉字”，如果属于“平假名”就是“平假名”这样的，意味着按字符种类 分类的结果。然后，合并具有与包含有光标的中心坐标的候选字(词素)相 同字符种类的候选字的矩形，并以如图21那样的形式显示(1005)。\n在此，当不想选择汉字列整体而想仅选择“知識”(“知识”)这个候选字 时，按下被赋予了切换选择模式的意思的“#”键，并显示像2101那样的矩 形。再者，当想选择“知識処理”(“知识处理”)字符串时，在按下被赋予指 定选择范围起点的意思的“1”键后，按下光标移动键176，显示2102那样 的矩形。使用者使用这样的键操作，在显示适当的检索对象字的矩形的时点 按下选择键175来选择检索对象字(S1006)。\n在上述实施例中，作为字符种类仅举出“汉字”“平假名”，但是，另外 也适用于“片假名”“英语”“数字”“符号”“外语”等分类字符种类的任意 类别。另外，除字符种类之外，也可以使用该词素所属的品词。\n另外，在上述实施例中，为了指定选择范围起点、或切换选择模式，而 分别按下“1”、“#”，但是，只要是分配了相同意思的键，则可以分配任意的 键。\n再者，在本实施例子中，将十字标记的光标的中心坐标作为选择信息使 用，但是，只要是给与同样效果的方法，则可以是别的信息。例如，可以将 双括弧显示在显示器上，使用该括弧的中心坐标或使用双括弧的矩形坐标。 另外，在日语的选择中，虽然对横写进行了说明，但是，同样也可以适用于 竖写。\n另外，上述实施例子可以分别各自实现，也可以用选择性地采用全部或 一部分的形式来实现。