lucene-语汇单元的位置分析

以下程序显示出了语汇单元的位置，

Token[] tokens=tokensFromAnalysis(analyzer,text);

int position =0;

for (int i=0;i<tokens.length;i++){

Token token=tokens[i];

 

intincrement=token.getPositionIncrement();//得到当前语汇单元增量位置，增量位置是指本单词与上一个单词的间隙，如果中间空有单词（如停用词），则间隙包括停用词。

 

if (increment>0){

position=position+increment;//由增量位置得到当前语汇单元的实际位置

System.out.println();

System.out.print(position+":");

}

 

System.out.print("["+token.termText()+":"+token.startoffset()

+"- >"+token.endoffset()+":"+token.type()+"]");

}

}

如"the quick brown"使用同义词分析器，则显示的结果是

1:[quick][speedy][fast]

2:[brown]