索引建立方法、搜索方法和搜索结果排序方法及对应装置

暂无

索引建立方法、搜索方法和搜索结果排序方法及对应装置\n【技术领域】\n[0001] 本发明涉及计算机技术领域，特别涉及一种索引建立方法、搜索方法和搜索结果排序方法及对应装置。\n【背景技术】\n[0002] 随着计算机技术中搜索技术的迅速发展，搜索引擎已经成为人们获取信息的主要手段。当用户输入搜索请求(query)后，搜索引擎能够将与query匹配的搜索结果返回给用户，即将包含query中各词语的页面包含在搜索结果。\n[0003] 在现有的搜索技术中，召回的搜索结果中，可能有的页面与用户输入的query的相关度较低，因此，在对搜索结果进行排序时，主要基于搜索结果中页面的特征向量与query的相关度进行，将特征向量与query的相关度高的搜索结果排在前面。然而，现有的排序方式仍然会存在搜索准确性低的问题，例如，用户输入的query为“刘德华出生日期”，搜索引擎在召回页面时，可能存在一些页面中虽然包含“刘德华”和“出生日期”，但两者之间是毫无关系的，而显然用户需求的页面是“出生日期”作为“刘德华”的属性的，这在现有的搜索方法中并无法识别和满足，搜索准确性很低，搜索效果较差。\n【发明内容】\n[0004] 有鉴于此，本发明提供了一种索引建立方法、搜索方法和搜索结果排序方法及对应装置，以便于提高搜索准确性，改善搜索效果。\n[0005] 具体技术方案如下：\n[0006] 一种索引建立方法，该方法包括：\n[0007] A、对页面进行分词和词性标注；\n[0008] B、基于语义分析或页面中的视觉特征中的至少一种，从分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注；\n[0009] C、在建立所述页面的索引时，将建立索引所使用词语具有的实体词或属性词标注同时添加入索引中。\n[0010] 步骤B中基于语义分析，从分词处理后得到的各词语中确定实体词具体包括：\n[0011] 将页面词条中的名词、被识别为页面主题词的名词、作为句子中心词的名词、在页面的出现频次在预设范围内的名词或者页面中的命名实体确定为实体词。\n[0012] 步骤B中基于语义分析，从分词处理后得到的各词语中确定实体词对应的属性词具体包括：\n[0013] 依据上下文关系，将分词处理后得到的各词语中与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词；或者，\n[0014] 依据预设的语义模板，从分词处理后得到的各词语中确定实体词对应的属性词，所述语义模板中包含实体词与属性词构成的各种句式结构。\n[0015] 其中，所述页面中的视觉特征包括：逻辑块、逻辑块与逻辑块之间的距离、背景颜色、字体颜色和大小、边框、符号或者表格；\n[0016] 步骤B中基于页面中的视觉特征，从分词处理后得到的各词语中确定实体词以及实体词对应的属性词具体包括：将页面中具有预设视觉特征的词语确定为实体词或属性词。\n[0017] 更优地，添加入所述索引中的还包括以下标注中的至少一种：\n[0018] 实体词与属性词之间对应关系的标注；以及，\n[0019] 属性词的属性类型标注；\n[0020] 实体词具有突出的视觉特征标注；以及，\n[0021] 属性词具有突出的视觉特征标注。\n[0022] 一种搜索方法，该方法包括：\n[0023] A、对接收到的搜索请求query进行分词和词性标注；\n[0024] B、基于语义分析，从分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注；\n[0025] C、查找与分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面，其中各词语的标注为各词语的实体词或属性词标注，所述索引采用上述索引建立方法建立；\n[0026] D、将查找到的页面包含在所述query的搜索结果中。\n[0027] 较优地，在所述步骤A和步骤B之间还包括：\n[0028] 基于预设的停用词表对分词处理后得到的各词语进行过滤处理，过滤掉所述停用词表中包含的词语；\n[0029] 所述停用词表中包含以下所列的至少一种：副词、虚词、助词、疑问词、语气词、代词。\n[0030] 具体地，步骤B中基于语义分析，从分词处理后得到的各词语中确定实体词包括：\n[0031] 将作为query中心词的名词或者query中的命名实体确定为实体词。\n[0032] 步骤B中基于语义分析，从分词处理后得到的各词语中确定实体词对应的属性词具体包括：\n[0033] 依据上下文关系，将所述分词处理后得到的各词语中与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词；或者，\n[0034] 依据预设的语义模板，从所述分词处理后得到的各词语中确定实体词对应的属性词，所述语义模板中包含实体词与属性词构成的各种句式结构。\n[0035] 更优地，在所述步骤B和所述步骤C之间还包括：\n[0036] E、对所述query进行需求明确度分析，如果确定所述query需求明确，则继续执行所述步骤C；否则，执行步骤F；\n[0037] F、查找与分词处理后得到的各词语相匹配的索引对应的页面，转至所述步骤D。\n[0038] 步骤E中对所述query进行需求明确度分析具体包括：\n[0039] 如果所述query中含有动词，则确定所述query具有明确的需求；或者，[0040] 如果所述query中包含预设的需求词表中的词语，则确定所述query具有明确的需求，所述需求词表通过手工或数据挖掘的方式形成且包含具有明确需求的词语。\n[0041] 较优地，步骤C中所述各词语的标注中还包括：\n[0042] 实体词与属性词的对应关系，或者，属性词的属性类型。\n[0043] 一种搜索结果排序方法，该方法包括：\n[0044] A、对接收到的搜索请求query进行分词和词性标注；\n[0045] B、基于语义分析，从分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注；\n[0046] C、在对所述query对应的搜索结果进行排序时，提高与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在所述搜索结果中的排序权值；所述各词语的标注为各词语的实体词或属性词标注，所述索引采用上述索引建立方法建立。\n[0047] 较优地，在所述步骤A和步骤B之间还包括：\n[0048] 基于预设的停用词表对分词处理后的query进行过滤处理，过滤掉所述停用词表中包含的词语；\n[0049] 所述停用词表中包含以下所列的至少一种：副词、虚词、助词、疑问词、语气词、代词。\n[0050] 具体地，步骤B中基于语义分析，从分词处理后得到的各词语中确定实体词包括：\n[0051] 将作为query中心词的名词或者query中的命名实体确定为实体词。\n[0052] 步骤B中基于语义分析，从分词处理后得到的各词语中确定实体词对应的属性词具体包括：\n[0053] 依据上下文关系，将分词处理后得到的各词语中与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词；或者，\n[0054] 依据预设的语义模板，从分词处理后得到的各词语中确定实体词对应的属性词，所述语义模板中包含实体词与属性词构成的各种句式结构。\n[0055] 较优地，在所述步骤B和所述步骤C之间还包括：\n[0056] E、对所述query进行需求明确度分析，如果确定所述query需求明确，则在所述步骤C中提高与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在所述搜索结果中的排序权值；否则，在所述步骤C中不提高与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在所述搜索结果中的排序权值。\n[0057] 其中，步骤E中对所述query进行需求明确度分析具体包括：\n[0058] 如果所述query中含有动词，则确定所述query具有明确的需求；或者，[0059] 如果所述query中包含预设的需求词表中的词语，则确定所述query具有明确的需求，所述需求词表通过手工或数据挖掘的方式形成且包含具有明确需求的词语。\n[0060] 更优地，步骤C中所述各词语的标注中还包括：\n[0061] 实体词与属性词的对应关系，或者，属性词的属性类型。\n[0062] 另外，在确定所述query的需求明确后，进一步确定所述query的需求明确度等级；\n[0063] 在步骤C中提高与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在所述搜索结果中的排序权值时，针对需求明确度等级越高的query，对页面在搜索结果中排序权值的提高幅度越大。\n[0064] 其中，确定所述query的需求明确度等级具体包括：\n[0065] 根据预设的各需求明确度分级对应的词语位置，确定所述query中需求明确的词语在所述query中的位置所对应的需求明确度分级；或者，\n[0066] 如果所述query包含有预设的需求词表中的词语，则依据所述query中需求明确的词语在所述需求词表中的明确度确定所述query的需求明确度等级；所述需求词表中各词语的明确度由人工设定或者在数据挖掘过程中基于统计概率设定。\n[0067] 更优地，该方法还包括：将与所述分词处理后得到的各词语以及各词语的标注相匹配的索引中，包含实体词具体突出的视觉特征标识或者属性词具有突出的视觉特征标识的索引所对应的页面更进一步提高在所述搜索结果中的排序权值。\n[0068] 一种索引建立的装置，该装置包括：文本处理单元、属性标注单元以及索引建立单元；\n[0069] 所述文本处理单元，用于对页面进行分词和词性标注；\n[0070] 所述属性标注单元，用于基于语义分析或页面中的视觉特征中的至少一种，从所述文本处理单元分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注；\n[0071] 所述索引建立单元，用于在建立所述页面的索引时，将建立索引所使用词语具有的实体词或属性词标注同时添加入索引中。\n[0072] 具体地，所述属性标注单元将页面词条中的名词、被识别为页面主题词的名词、作为句子中心词的名词、在页面的出现频次在预设范围内的名词或者页面中的命名实体确定为实体词。\n[0073] 所述属性标注单元具体依据上下文关系，将分词处理后得到的各词语中与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词；或者，\n[0074] 依据预设的语义模板，从分词处理后得到的各词语中确定实体词对应的属性词，所述语义模板中包含实体词与属性词构成的各种句式结构。\n[0075] 在所述步骤C中，将对所述query进行分词处理后得到的各词语相匹配的页面作为所述query对应的搜索结果。\n[0076] 其中，所述页面中的视觉特征包括：逻辑块、逻辑块与逻辑块之间的距离、背景颜色、字体颜色和大小、边框、符号或者表格；\n[0077] 所述属性标注单元具体将页面中具有预设视觉特征的词语确定为实体词或属性词。\n[0078] 更优地，所述索引建立单元，还将实体词与属性词之间对应关系的标注、属性词的属性类型标注、实体词具有突出的视觉标注以及属性词具有突出的视觉特征标注中的至少一种添加入所述索引。\n[0079] 一种搜索装置，该装置包括：文本分析单元、属性标注单元和搜索处理单元；\n[0080] 所述文本分析单元，用于对接收到的搜索请求query进行分词和词性标注；\n[0081] 所述属性标注单元，用于基于语义分析，从所述文本分析单元分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注；\n[0082] 所述搜索处理单元，用于查找与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面，并将查找到的页面包含在所述query的搜索结果中；其中各词语的标注为各词语的实体词或属性词标注，所述索引由上述索引建立装置建立。\n[0083] 其中，所述文本分析单元具体包括：分词处理子单元、词性标注子单元和过滤处理子单元；\n[0084] 所述分词处理子单元，用于对接收到的query进行分词处理；\n[0085] 所述词性标注子单元，用于对所述分词处理后的词语进行词性标注；\n[0086] 所述过滤处理子单元，用于基于预设的停用词表对所述分词处理后得到的各词语进行过滤处理，过滤掉所述停用词表中包含的词语；\n[0087] 所述停用词表中包含以下所列的至少一种：副词、虚词、助词、疑问词、语气词、代词。\n[0088] 具体地，所述属性标注单元将作为query中心词的名词或者query中的命名实体确定为实体词。\n[0089] 所述属性标注单元具体依据上下文关系，将所述分词处理后得到的各词语中与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词；或者，[0090] 依据预设的语义模板，从所述分词处理后得到的各词语中确定实体词对应的属性词，所述语义模板中包含实体词与属性词构成的各种句式结构。\n[0091] 较优地，该装置还包括：需求分析单元，用于对所述query进行需求明确度分析，如果确定所述query需求明确，则触发所述搜索处理单元查找与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面，并将查找到的页面包含在所述query的搜索结果中；否则，触发所述搜索处理单元查找与分词处理后得到的各词语相匹配的索引对应的页面，并将查找到的页面包含在所述query的搜索结果中。\n[0092] 所述需求分析单元如果确定所述分词处理后得到的词语中含有动词，则确定所述query具有明确的需求；或者，如果确定所述分词处理后得到的词语中包含预设的需求词表中的词语，则确定所述query具有明确的需求，所述需求词表通过手工方式或数据挖掘方式形成且包含具有明确需求的词语。\n[0093] 更优地，所述属性标注单元进行的标注还包括：实体词与属性词的对应关系标注、属性词的属性类型标注、实体词具有突出的视觉特征标注或者属性词具有突出的视觉特征标注。\n[0094] 一种搜索结果排序装置，该装置包括：文本分析单元、属性标注单元、搜索处理单元和排序处理单元；\n[0095] 所述文本分析单元，用于对接收到的搜索请求query进行分词和词性标注；\n[0096] 所述属性标注单元，用于基于语义分析，从所述文本分析单元分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注；\n[0097] 所述搜索处理单元，用于搜索所述query对应的搜索结果；\n[0098] 所述排序处理单元，用于在对所述搜索结果进行排序时，提高与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在所述搜索结果中的排序权值；\n其中所述各词语的标注为各词语的实体词或属性词标注，所述索引由上述搜索装置建立的。\n[0099] 其中，所述文本分析单元具体包括：分词处理子单元、词性标注子单元和过滤处理子单元；\n[0100] 所述分词处理子单元，用于对接收到的query进行分词处理；\n[0101] 所述词性标注子单元，用于对所述分词处理后的词语进行词性标注；\n[0102] 所述过滤处理子单元，用于基于预设的停用词表对所述分词处理后得到的各词语进行过滤处理，过滤掉所述停用词表中包含的词语；\n[0103] 所述停用词表中包含以下所列的至少一种：副词、虚词、助词、疑问词、语气词、代词。\n[0104] 具体地，所述属性标注单元将作为query中心词的名词或者query中的命名实体确定为实体词。\n[0105] 所述属性标注单元具体依据上下文关系，将所述分词处理后得到的各词语中与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词；或者，[0106] 依据预设的语义模板，从所述分词处理后得到的各词语中确定实体词对应的属性词，所述语义模板中包含实体词与属性词构成的各种句式结构。\n[0107] 所述搜索处理单元将对所述query进行分词处理后得到的各词语相匹配的页面作为所述query对应的搜索结果。\n[0108] 更进一步地，该装置还包括：需求分析单元，用于对所述query进行需求明确度分析，如果确定所述query需求明确，则触发所述排序处理单元提高与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在所述搜索结果中的排序权值；否则，禁止所述排序处理单元提高与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在所述搜索结果中的排序权值。\n[0109] 其中，所述需求分析单元如果确定所述分词处理后得到的词语中含有动词，则确定所述query具有明确的需求；或者，如果确定所述分词处理后得到的词语中包含预设的需求词表中的词语，则确定所述query具有明确的需求，所述需求词表通过手工方式或数据挖掘方式形成且包含具有明确需求的词语。\n[0110] 更优地，所述属性标注单元进行的标注还包括：实体词与属性词的对应关系标注，或者，属性词的属性类型标注。\n[0111] 更优地，所述需求分析单元在确定所述query的需求明确后，还进一步确定所述query的需求明确度等级；\n[0112] 所述排序处理单元在提高与所述分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在所述搜索结果中的排序权值时，针对需求明确度等级越高的query，对页面在搜索结果中排序权值的提高幅度越大。\n[0113] 具体地，所述需求分析单元根据预设的各需求明确度分级对应的词语位置，确定所述query中需求明确的词语在所述query中的位置所对应的需求明确度分级；或者，[0114] 如果所述query包含有预设的需求词表中的词语，则依据所述query中需求明确的词语在所述需求词表中的明确度确定所述query的需求明确度等级；所述需求词表中各词语的明确度由人工设定或者在数据挖掘过程中基于统计概率设定。\n[0115] 更优地，所述排序处理单元，还用于将与所述分词处理后得到的各词语以及各词语的标注相匹配的索引中，包含实体词具有突出的视觉特征标识或者属性词具有突出的视觉特征标识的索引所对应的页面更进一步提高在搜索结果中的排序权值。\n[0116] 由以上技术方案可以看出，本发明在建立页面的索引时，引入词语的实体词和属性词标注，使得在对query进行搜索或排序时，在将query中各词语与索引进行匹配的同时也匹配各词语的实体词或属性词标注，从而使得召回的页面或页面排序能够体现出query中词语的实体和属性关系，从而提高了召回的页面或排序靠前的页面与query的相关度，提高了搜索准确性，改善了搜索效果。\n【附图说明】\n[0117] 图1为本发明实施例一提供的索引建立方法流程图；\n[0118] 图2为本发明实施例二提供的对query进行分析的方法流程图；\n[0119] 图3为本发明实施例五提供的索引建立装置的结构示意图；\n[0120] 图4为本发明实施例六提供的搜索装置的结构示意图；\n[0121] 图5为本发明实施例七提供的搜索结果排序装置的结构示意图。\n【具体实施方式】\n[0122] 为了使本发明的目的、技术方案和优点更加清楚，下面结合附图和具体实施例对本发明进行详细描述。\n[0123] 为了在搜索过程中达到更高的准确性，首先需要对搜索引擎抓取到的页面采用一种特殊的索引建立方式，下面通过实施例一对索引建立的方法进行详细描述。\n[0124] 实施例一、\n[0125] 图1为本发明实施例一提供的索引建立方法流程图，如图1所示，对抓取到的各页面分别执行以下步骤：\n[0126] 步骤101：对页面进行分词和词性标注。\n[0127] 另外，在对页面进行分词处理和词性标注后，可以基于停用词表对分词处理后的query进行过滤处理，停用词表中可以包括：副词、虚词、助词、疑问词、语气词等。将页面中那些出现频率很高但表意能力很低的词语过滤掉。\n[0128] 步骤102：基于语义分析，从分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注。\n[0129] 在本发明中可以将满足预设实体词条件的名词确定为实体词，其中预设实体词条件可以包括但不限于：页面词条中的名词、被识别为页面主题词的名词、作为句子中心词的名词、在页面中出现的频次在预设范围内的名词、或页面中的命名实体。\n[0130] 在确定属性词时，可以利用上下文关系或预设的语义模板中的一种或组合，确定实体词对应的属性词。\n[0131] 其中，可以依据上下文关系，将与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词，其中各词语之间的属性关系概率可以基于预先的统计得到。例如：“刘德华的出生日期”中，“出生日期”与作为人名的实体词“刘德华”之间的属性关系概率达到90％，如果预设属性概率阈值为60％，则可以确定“出生日期”为实体词“刘德华”的属性词。\n[0132] 也可以预先定义具有属性关系的语义模板，利用该预先定义的语义模板识别实体词对应的属性词，语义模板中包含实体词与属性词构成的各种句式结构。\n[0133] 例如，在语义模板中预先建立偏正结构的识别方式，将两个名词构成的偏正结构中的中心词识别为属性词，该中心词的修饰词识别为实体词。诸如“刘德华的出生日期”中“刘德华”首先被识别出为命名实体(人名)，利用语义模板识别出“出生日期”作为实体词“刘德华”的属性词；“中国的首都是北京”中“中国”被识别出命名实体(国家名)，“首都”作为实体词“中国”的属性词，“北京”是对应的属性值。\n[0134] 也可以在语义模板中预先建立基于距离的识别形式，将实体词之后距离最近的名词识别为该实体词的属性词，诸如在页面中存在这样一个句子“刘德华演唱了爱你一万年”，在进行分词和词性标注后，将实体词“刘德华”之后距离最近的名词“爱你一万年”作为该实体词的属性词。\n[0135] 步骤103：基于页面中的视觉特征，从分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注。\n[0136] 其中，页面中的视觉特征包括：逻辑块、逻辑块与逻辑块之间的距离、背景颜色、字体颜色和大小、边框、符号、表格等，在本步骤中可以将具有预设视觉特征的词语确定并标注为实体词或属性词。\n[0137] 例如：将处于标题中的中心词(例如主语、命名实体等)确定并标注为实体词，将页面中黑体的名词确定并标注为实体词，将页面中突出显示为大号字体的名词确定并标注为实体词，将页面中下划线标注的名词确定并标注为实体词，等等。\n[0138] 再例如：将冒号之前的名词确定并标注为属性词，诸如“国籍：中国”中冒号之前的“国籍”为属性词，“中国”为属性值；将某些特殊逻辑块中的名词确定并标注为属性词，诸如目录逻辑块中包含的名词“个人简介、影视作品、个人创作”为属性词；将距离实体词在一定范围内采用黑体的或下划线标注的词语确定并标注为该实体的属性词，诸如“刘德华，香港四大天王之一”中，“刘德华”被确定并标注为实体词后，离该实体词很近且用下划线标注的“四大天王”是“刘德华”的属性词。\n[0139] 需要说明的是，上述步骤102实际上是根据句法结构特征分析出实体词和实体词对应的属性词，步骤103是根据页面的视觉特征分析出实体词和实体词对应的属性词，步骤102和步骤103可以择一执行，也可以都执行。如果步骤102和步骤103都执行，则两步骤可以以任意的顺序先后执行或同时执行。\n[0140] 另外，在页面中通过上述步骤102和步骤103识别出的某些实体词可能同时作为其他实体词的属性词，某些属性词也可能同时作为其他属性词的实体词。例如“刘德华”和“爱你一万年”两个词，“刘德华”可以是属性词“爱你一万年”的实体词，“爱你一万年”是刘德华的作品属性；“刘德华”也可以是实体词“爱你一万年”的属性词，此时“刘德华”作为“爱你一万年”的作者属性。\n[0141] 步骤104：在建立页面的索引时，将词语具有的实体词或属性词标注同时添加入索引中。\n[0142] 在建立索引时，可以仅仅将被确定为实体词或属性词的词语连同标注都添加入索引中。更优地，还可以进一步采用以下三种索引方式中的一种或组合：\n[0143] 第一种索引方式，除了在索引中的词语中标注实体词或属性词之外，将实体词与属性词之间的关系在索引中标注，即标注出词语是哪个或哪些实体词的属性词，或者是哪个或哪些属性词的实体词。\n[0144] 第二种索引方式，除了在索引中的词语中标注实体词或属性词之外，进一步标注属性词的属性类型。当采用这种方式时需要在步骤102或步骤103中确定出词语为属性词时，进一步识别该词语的属性类型。例如，识别出“爱你一万年”的属性类型为歌名，属性类型的识别方式可以预先通过数据挖掘的方式统计得到。\n[0145] 第三种索引方式，除了在索引中的词语中标注实体词或属性词之外，如果页面中实体词或者属性词具有突出的视觉特征，则将实体词具有突出的视觉特征标注或者属性词具有突出的视觉特征标注也添加入该页面对应的索引中。该种标注可以用于后续对搜索结果排序时使用，将在实施例四中描述。\n[0146] 其中突出视觉特征可以包括但不限于：突出的字体颜色和大小、突出的背景颜色、突出的逻辑块等。\n[0147] 在利用图1所示方法建立了索引后，如果接收到用户输入的query，则首先对query进行分析，分析其中是否包含实体词及该实体词对应的属性词。如果含有实体词及该实体词对应的属性词，则可以在搜索时采用以下两种方式：\n[0148] 第一种方式：在将query中分析出的实体词和属性词与索引进行匹配时，除了保证词语匹配之外，还需要保证与索引中词语的标注匹配，利用匹配到的索引对应的页面产生搜索结果。该方式将在实施例三中具体描述。\n[0149] 第二种方式：在将query中分析出的实体词和属性词与索引进行匹配时，仅与索引中的词语进行匹配，利用匹配到的索引对应的页面产生搜索结果，并对索引中词语的标注也匹配的页面提高在搜索结果中的排序权值。该方式将在实施例四中具体描述。\n[0150] 下面通过实施例二对query的分析过程进行详细描述。\n[0151] 实施例二、\n[0152] 图2为本发明实施例二提供的对query进行分析的方法流程图，如图2所示，该方法包括以下步骤：\n[0153] 步骤201：对接收到的query进行分词。\n[0154] 步骤202：对分词处理后得到的各词语进行词性标注。\n[0155] 例如，接收到“刘德华出生日期”的query后，将该query进行分词处理后，得到“刘德华”和“出生日期”两个词语，并都标注为名词。以上两步骤为现有技术中的成熟技术，不再详细描述。\n[0156] 另外，在对query进行分词处理和词性标注后，可以基于预设的停用词表对分词处理后的query进行过滤处理，过滤掉停用词表中包含的词语，停用词表中可以包括：副词、虚词、助词、疑问词、语气词、代词等。将query中那些出现频率很高但表意能力很低的词语过滤掉。\n[0157] 步骤203：基于语义分析，从分词处理后得到的各词语中确定实体词以及该实体词对应的属性词。\n[0158] 在本步骤中，确定实体词具体可以包括但不限于：将作为query中心词的名词或者query中的命名实体。其中，query的中心词可以包括但不限于：句子的主语、偏正结构中作为修饰词的名词、首个出现的名词等。\n[0159] 例如，对于“刘德华有哪些歌曲”的query，可以将该句子中的主语“刘德华”作为实体词。对于“刘德华的出生日期”的query，可以将该偏正结构中作为修饰词的名词“刘德华”作为实体词。对于“手机价格”的query，可以将首个出现的名词“手机”作为实体词。\n对于“美国首都”的query，可以将其中的命名实体“美国”作为实体词。\n[0160] 确定实体词对应的属性词的方式可以包括但不限于以下两种：\n[0161] 第一种方式：依据上下文关系，将分词处理后得到的词语中与实体词的属性关系概率达到预设的属性概率阈值的词语作为该实体词的属性词。\n[0162] 例如，对于“刘德华的出生日期”中，“出生日期”与作为人名的实体词“刘德华”之间的属性关系概率达到90％超过预设的属性概率阈值，则可以确定“出生日期”为实体词“刘德华”的属性词。\n[0163] 第二种方式：依据预设的语义模板，从分词处理后得到的各词语中确定实体词对应的属性词，所述语义模板中包含实体词与属性词构成的各种句式结构。\n[0164] 例如，在语义模板中预先建立偏正结构的识别方式，将两个名词构成的偏正结构中的中心词识别为属性词，该中心词的修饰词识别为实体词。诸如“刘德华的出生日期”中“刘德华”首先被识别出为命名实体(人名)，利用语义模板识别出“出生日期”作为实体词“刘德华”的属性词。\n[0165] 也可以在语义模板中预先建立基于距离的识别形式，将实体词之后距离最近的名词识别为该实体词的属性词，诸如“刘德华爱你一万年下载”的query中，将实体词“刘德华”之后距离最近的名词“爱你一万年”作为该实体词的属性词。\n[0166] 还可以具有其他形式的语义模板，在此不再具体赘述。\n[0167] 步骤204：对query进行需求明确度分析。\n[0168] 在对query进行需求明确度分析时，可以分析该query是否具有明确的需求，例如“刘德华出生日期”中属性词“出生日期”就具有明确的需求，可以确定出用户需求的就是刘德华的出生日期信息，而“刘德华爱你一万年”中属性词“爱你一万年”的需求就不明确，不能确定用户需求的是对“爱你一万年”这首歌曲的下载、还是歌词、还是视频等。\n[0169] 在分析query是否具有明确的需求时，可以采用以下方式中的一种或组合的方式：\n[0170] 第一种方式：根据词性进行需求明确度分析，如果query中含有动词，可以认为该query具有明确的需求。例如：“刘德华爱你一万年下载”的query中包含动词“下载”，则认为该query具有明确的需求。\n[0171] 第二种方式：利用预设的需求词表进行需求明确度分析，预先通过手工或者数据挖掘的方式将具有明确需求的词语加入需求词表中，如果query中包含该需求词表中的词语，则可以认为该query具有明确的需求。例如：可以将“地址”、“出生日期”、“视频”、“歌词”等等具有明确需求的词语预先加入需求词表中，“刘德华出生日期”的query中包含需求词表中的“出生日期”，则认为该query具有明确的需求，“刘德华爱你一万年视频”的query中包含需求词表中的“视频”，则认为该query具有明确的需求。\n[0172] 如果query具有明确的需求，则针对该query执行实施例三或实施例四；否则不对该query执行特殊的搜索处理，采用现有方式进行搜索或排序。需要说明的是，步骤204为可选步骤，也可以不执行该步骤，直接针对该query执行实施例三或实施例四。\n[0173] 另外，还可以在确定出query具有明确的需求时，进一步对query的需求明确度进行分级，例如分成高级需求明确度和中级需求明确度。\n[0174] 对具有明确需求的query进行的进一步分级可以依据以下方式中的至少一种确定：\n[0175] 第一种方式：依据需求明确的词语在query中的位置对具有明确需求的query进一步分级。具体可以预先设定各分级对应的词语位置，依据需求明确的词语在query中的位置确定对应的分级。\n[0176] 例如，预先设定高级需求明确度对应的词语位置为query中的最后一个词，则对于“刘德华爱你一万年下载”中需求明确的词语“下载”在query中的最后一个词，可以确定该query具有高级需求明确度，对于“刘德华下载爱你一万年”中需求明确的词语“下载”不在query中的最后一个词，则可以确定该query具有中级需求明确度。\n[0177] 第二种方式：如果query中含有需求词表中的词语，则可以依据需求明确的词语在需求词表中的明确度确定。在预先建立需求词表时，可以在需求词表中记录具有明确需求的各词语对应的明确度，该明确度可以人工设定，也可以在数据挖掘过程中基于统计概率设定。\n[0178] 例如，如果query中需求明确的词语在需求词表中的明确度大于设定明确度阈值，则可以认为该query具有高级需求明确度。对于“刘德华出生日期”的query中需求明确的词语“出生日期”在需求词表中的明确度大于设定明确度阈值，则可以认为该query具有高级需求明确度；否则认为该query具有中级需求明确度。\n[0179] 实施例三、\n[0180] 在对query进行实施例二所示的分析后，可以在执行搜索召回页面时，仅召回与该query中词语以及词语的标注(实体词或属性词标注)相匹配的索引对应的页面。\n[0181] 即在搜索时，对分词处理后得到的各词语分别查找索引，查找与各词语以及该词语的标注匹配的索引对应的页面，再将利用各词语查找到的页面取交集。\n[0182] 例如，对于“刘德华出生日期”的query，针对分词处理后得到的词语“刘德华”和“出生日期”，由于已分析出“刘德华”为实体词，“出生日期”为属性词，在进行搜索时，查找“刘德华”具有实体词标注的索引对应的页面，以及“出生日期”具有属性词标注的索引对应的页面，将得到的页面取交集就是该query对应的搜索结果。\n[0183] 更优地，在进行上述搜索时可以进一步加入以下两种搜索方式中的一种或组合：\n[0184] 第一种：在对分词处理后得到的各词语分别查找索引时，匹配索引中各词语的标注时，需要进一步匹配实体词与属性词的对应关系，只有满足该对应关系的页面才作为搜索结果。\n[0185] 仍以“刘德华出生日期”的query为例，在利用“出生日期”进行搜索时，在查找“刘德华”作为实体词且“出生日期”作为属性词的页面时，需要进一步筛选出其中“出生日期”作为实体词“刘德华”的属性词的索引对应的页面，得到该query对应的搜索结果。具体可以是：将“刘德华”作为实体词的索引对应的页面和“出生日期”作为属性词的索引对应的页面求交集后，从求交集得到的页面中筛选出“出生日期”作为实体词“刘德华”的属性词的索引对应的页面。\n[0186] 第二种：在对分词处理后得到的各词语分别查找索引时，匹配索引中各词语的标注时，需要进一步匹配属性词的属性类型，只有同时满足属性词的属性类型的页面才作为搜索结果。\n[0187] 以“刘德华爱你一万年”的query为例，如果识别出“爱你一万年”为歌名的概率值满足预设的而搜索概率值要求，则在利用“爱你一万年”进行搜索时，需要查找“爱你一万年”具有属性词标注且属性词类型为歌名的索引对应的页面，然后将利用“刘德华”搜索到的页面和利用“爱你一万年”搜索到的页面取交集得到该query对应的搜索结果。\n[0188] 实施例四、\n[0189] 在对query进行实施例二所示的分析后，在执行搜索召回页面时，按照现有的搜索方式召回页面，具体地，召回所有与分词处理后得到的各词语匹配的页面，但在对搜索结果中的页面进行排序时，将索引中词语的标注也与query中各词语的标注相匹配的页面提高在搜索结果中的排序权值。\n[0190] 通常，在对搜索结果中的页面进行排序时，会结合多种特征，其中会包括：主题相关度(即页面主题与query的相关度)、距离匹配结果(即query中各词语在页面中的距离)或者其他特征。在本发明实施例中提高页面在搜索结果中的排序权值时，具体可以提高页面中主题相关度和距离匹配结果这两个特征中的一种或组合在排序中所占的排序权值。\n[0191] 提高排序权值的方式可以包括但不限于：将排序权值提高到一个预设的排序权值，或者，将排序权值提高预设的幅度。\n[0192] 仍以“刘德华出生日期”的query为例，在进行搜索时，分别查找具有“刘德华”的页面以及具有“出生日期”的页面，将各词语得到的页面取交集就是该query对应的搜索结果。在进行排序时，可以对“刘德华”作为实体词且“出生日期”作为属性词的索引对应的页面提高在搜索结果中的排序权值，使这些页面能够尽量排在搜索结果中靠前的位置。\n[0193] 另外，在进行提高排序权值的处理时，可以进一步考虑实体词与属性词的对应关系，即对满足该对应关系的页面提高在搜索结果中的排序权值。\n[0194] 仍以“刘德华出生日期”的query为例，将“出生日期”作为实体词“刘德华”的属性词的页面提高在搜索结果中的排序权值。\n[0195] 也可以在进行提高排序权值的处理时，进一步考虑属性词的属性类型，即提高与query中实体词以及属性词匹配且同时与属性词的属性类型匹配的索引对应的页面在搜索结果中的排序权值。\n[0196] 以“刘德华爱你一万年”的query为例，将“刘德华”作为实体词，“爱你一万年”作为属性词且属性类型为歌名的页面在搜索结果中提高排序权值。\n[0197] 更优地，在提高匹配到的页面在搜索结果中的排序权值时，可以进一步结合query的明确度等级，使得针对明确度等级越高的query，对页面在搜索结果中排序权值的提高幅度越大。其中，每个明确度等级对应的排序权值提高幅度可以预先设定。\n[0198] 更进一步地，在实施例一中建立索引的过程中，对于在页面中具有突出视觉特征的实体词或属性词也可以进行标注，在进行排序时，可以将与query中实体词和属性词匹配且具有突出视觉特征标注的索引所对应的页面更进一步提高在搜索结果中的排序权值。\n其中突出视觉特征可以包括但不限于：突出的字体颜色和大小、突出的背景颜色、突出的逻辑块等。\n[0199] 例如，对于“刘德华出生日期”的query，如果匹配到的以“出生日期”作为属性词、“刘德华”作为实体词的索引中，“出生日期”或“刘德华”具有突出视觉特征的标注，则将搜索结果中该索引对应的页面更进一步提高排序权值。\n[0200] 以上是对本发明所提供方法进行的详细描述，下面分别通过实施例五、实施例六和实施例七对本发明所提供的装置进行详细描述。\n[0201] 实施例五、\n[0202] 图3为本发明实施例五提供的索引建立装置的结构示意图，如图3所示，该装置可以包括：文本处理单元300、属性标注单元310以及索引建立单元320。\n[0203] 文本处理单元300，用于对页面进行分词和词性标注。\n[0204] 属性标注单元310，用于基于语义分析或页面中的视觉特征中的至少一种，从文本处理单元300分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注。\n[0205] 索引建立单元320，用于在建立页面的索引时，将建立索引所使用词语具有的实体词或属性词标注同时添加入索引中。\n[0206] 其中，属性标注单元310基于语义分析时确定实体词时，具体将页面词条中的名词、被识别为页面主题词的名词、作为句子中心词的名词、在页面的出现频次在预设范围内的名词或者页面中的命名实体等确定为实体词。\n[0207] 属性标注单元310在基于语义分析确定实体词对应的属性词时，可以基于上下文关系或语义模板，即：具体依据上下文关系，将分词处理后得到的各词语中与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词；或者，依据预设的语义模板，从分词处理后得到的各词语中确定实体词对应的属性词，语义模板中包含实体词与属性词构成的各种句式结构。\n[0208] 上述页面中的视觉特征可以包括但不限于：逻辑块、逻辑块与逻辑块之间的距离、背景颜色、字体颜色和大小、边框、符号或者表格。\n[0209] 属性标注单元310可以具体将页面中具有预设视觉特征的词语确定为实体词或属性词。\n[0210] 更进一步地，索引建立单元320还可以将实体词与属性词之间对应关系的标注、属性词的属性类型标注、实体词具有突出的视觉特征标注以及属性词具有突出的视觉特征标注中的至少一种添加入索引，以便在后续进行索引匹配时实现更精确的匹配，从而进一步提高页面召回的准确性或者排序的准确性。\n[0211] 实施例六、\n[0212] 图4为本发明实施例六提供的搜索装置的结构示意图，如图4所示，该装置可以包括：文本分析单元400、属性标注单元410和搜索处理单元420。\n[0213] 文本分析单元400，用于对接收到的query进行分词和词性标注。\n[0214] 属性标注单元410，用于基于语义分析，从文本分析单元400分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注。\n[0215] 搜索处理单元420，用于查找与分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面，并将查找到的页面包含在query的搜索结果中；其中各词语的标注为各词语的实体词或属性词标注，索引由实施例五所述的装置建立。\n[0216] 其中，上述的文本分析单元400可以具体包括：分词处理子单元401、词性标注子单元402和过滤处理子单元403。\n[0217] 分词处理子单元401，用于对接收到的query进行分词处理。\n[0218] 词性标注子单元402，用于对分词处理子单元401分词处理后的词语进行词性标注。\n[0219] 过滤处理子单元403，用于基于预设的停用词表对分词处理后得到的各词语进行过滤处理，过滤掉停用词表中包含的词语；停用词表中包含以下所列的至少一种：副词、虚词、助词、疑问词、语气词、代词。\n[0220] 过滤处理子单元403可以设置在分词处理子单元401和词性标注子单元402之间，即过滤处理子单元403对分词处理子单元401进行分词处理后得到的各词语进行过滤后，词性标注子单元402再对过滤处理后得到的各词语进行词性标注。或者，过滤处理子单元403也可以设置在词性标注子单元402之后，即词性标注子单元402对分词处理子单元\n401进行分词处理后得到的各词语进行词性标注后，再由过滤处理子单元403进行过滤。图\n4中所示为后一种结构。\n[0221] 在确定query的实体词和属性词时，属性标注单元410可以将作为query中心词的名词或者query中的命名实体确定为实体词。依据上下文关系，将分词处理后得到的各词语中与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词；或者，依据预设的语义模板，从分词处理后得到的各词语中确定实体词对应的属性词，语义模板中包含实体词与属性词构成的各种句式结构。\n[0222] 另外，该装置还可以包括：需求分析单元430，用于对query进行需求明确度分析，如果确定query需求明确，则触发搜索处理单元420查找与分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面，并将查找到的页面包含在query的搜索结果中；\n否则，触发搜索处理单元420仅查找与分词处理后得到的各词语相匹配的索引对应的页面，并将查找到的页面包含在query的搜索结果中。\n[0223] 具体地，需求分析单元430如果确定分词处理后得到的词语中含有动词，则确定query具有明确的需求；或者，如果确定分词处理后得到的词语中包含预设的需求词表中的词语，则确定query具有明确的需求，需求词表通过手工方式或数据挖掘方式形成且包含具有明确需求的词语。\n[0224] 为了更进一步提高页面召回的准确性，属性标注单元410进行的标注还包括：实体词与属性词的对应关系标注，或者，属性词的属性类型标注。\n[0225] 即当标注还包括实体词与属性词的对应关系标注时，就意味着搜索处理单元420在查找页面时，除了将词语及词语的实体词或属性词标注与索引进行匹配之外，还需要进一步匹配query中实体词与属性词之间的对应关系。\n[0226] 当标注还包括属性词的属性类型标注时，就意味着搜索处理单元420在查找页面时，除了将词语及词语的实体词或属性词标注与索引进行匹配之外，还需要进一步匹配索引与query中属性词的属性类型。\n[0227] 实施例七、\n[0228] 图5为本发明实施例七提供的搜索结果排序装置的结构示意图，如图5所示，该装置包括：文本分析单元500、属性标注单元510、搜索处理单元520和排序处理单元530。\n[0229] 文本分析单元500，用于对接收到的query进行分词和词性标注。\n[0230] 属性标注单元510，用于基于语义分析，从文本分析单元500分词处理后得到的各词语中确定实体词以及该实体词对应的属性词并分别进行标注。\n[0231] 搜索处理单元520，用于搜索query对应的搜索结果。具体地，可以对query进行分词处理后得到的各词语相匹配的页面作为query对应的搜索结果，即采用现有搜索方式进行页面召回。\n[0232] 排序处理单元530，用于在对搜索结果进行排序时，提高与分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在搜索结果中的排序权值；其中各词语的标注为各词语的实体词或属性词标注，上述索引由实施例五所述的装置建立。\n[0233] 提高排序权值的方式可以包括但不限于：将排序权值提高到一个预设的排序权值，或者，将排序权值提高预设的幅度。\n[0234] 具体地，文本分析单元500可以包括：分词处理子单元501、词性标注子单元502和过滤处理子单元503。\n[0235] 分词处理子单元501，用于对接收到的query进行分词处理。\n[0236] 词性标注子单元502，用于对分词处理后的词语进行词性标注。\n[0237] 过滤处理子单元503，用于基于预设的停用词表对分词处理后得到的各词语进行过滤处理，过滤掉停用词表中包含的词语。停用词表中可以包含但不限于：副词、虚词、助词、疑问词、语气词、代词。\n[0238] 过滤处理子单元503可以设置在分词处理子单元501和词性标注子单元502之间，即过滤处理子单元503对分词处理子单元501进行分词处理后得到的各词语进行过滤后，词性标注子单元502再对过滤处理后得到的各词语进行词性标注。或者，过滤处理子单元503也可以设置在词性标注子单元502之后，即词性标注子单元502对分词处理子单元\n501进行分词处理后得到的各词语进行词性标注后，再由过滤处理子单元503进行过滤。图\n5中所示为后一种结构。\n[0239] 在确定query的实体词和属性词时，属性标注单元510可以将作为query中心词的名词或者query中的命名实体确定为实体词。依据上下文关系，将分词处理后得到的各词语中与实体词的属性关系概率达到预设属性概率阈值的词语作为该实体词的属性词；或者，依据预设的语义模板，从分词处理后得到的各词语中确定实体词对应的属性词，语义模板中包含实体词与属性词构成的各种句式结构。\n[0240] 另外，该装置还可以包括：需求分析单元540，用于对query进行需求明确度分析，如果确定query需求明确，则触发排序处理单元530提高与分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在搜索结果中的排序权值；否则，禁止排序处理单元530提高与分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在搜索结果中的排序权值。\n[0241] 具体地，需求分析单元540如果确定分词处理后得到的词语中含有动词，则确定query具有明确的需求；或者，如果确定分词处理后得到的词语中包含预设的需求词表中的词语，则确定query具有明确的需求，需求词表通过手工方式或数据挖掘方式形成且包含具有明确需求的词语。\n[0242] 为了更进一步提高搜索结果排序的准确性，属性标注单元510进行的标注还包括：实体词与属性词的对应关系标注，或者，属性词的属性类型标注。\n[0243] 即当标注还包括实体词与属性词的对应关系标注时，就意味着排序处理单元530在进行页面排序时，除了将词语与词语的实体词或属性词标注与索引进行匹配之外，还需要进一步匹配query中实体词与属性词之间的对应关系。\n[0244] 当标注还包括属性词的属性类型标注时，就意味着排序处理单元530在进行页面排序时，除了将词语及词语的实体词或属性词标注与索引进行匹配之外，还需要进一步匹配索引与query中属性词的属性类型。\n[0245] 更优地，需求分析单元540在确定query的需求明确后，还可以进一步确定query的需求明确度等级。\n[0246] 排序处理单元530在提高与分词处理后得到的各词语以及各词语的标注相匹配的索引对应的页面在搜索结果中的排序权值时，针对需求明确度等级越高的query，对页面在搜索结果中排序权值的提高幅度越大。\n[0247] 确定需求明确度等级的方式可以为：需求分析单元540根据预设的各需求明确度分级对应的词语位置，确定query中需求明确的词语在query中的位置所对应的需求明确度分级；或者，如果query包含有预设的需求词表中的词语，则依据query中需求明确的词语在需求词表中的明确度确定query的需求明确度等级；需求词表中各词语的明确度由人工设定或者在数据挖掘过程中基于统计概率设定。\n[0248] 更优地，在实施例五所述的索引建立装置中，在针对页面建立索引时，还可以将页面中实体词具有突出的视觉特征标注或者属性词具有突出的视觉特征标注添加入该页面对应的索引中，那么在对搜索结果进行排序时，也可以将这些页面更进一步提高排序权值。\n即排序处理单元530还可以用于将与分词处理后得到的各词语以及各词语的标注相匹配的索引中，包含实体词具有突出的视觉特征标识或者属性词具有突出的视觉特征标识的索引所对应的页面更进一步提高在搜索结果中的排序权值。\n[0249] 以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。