Token

Token()

构造一个Token将为null文本。

Token(char[] startTermBuffer, int termBufferOffset, int termBufferLength, int start, int end)

使用给定的术语缓冲区（偏移量和长度），开始和结束偏移构造一个令牌

Token(int start, int end)

构造具有空文本和开始和结束偏移的令牌。

Constructs a Token with null text and start & end offsets plus flags.

Constructs a Token with null text and start/ end offsets plus the Token type.

Token(String text, int start, int end)

使用给定的术语文本和开始/结束偏移构造一个令牌。

Token(String text, int start, int end, int flags)

使用给定文本，开始/结束偏移和类型构造令牌。

Token(String text, int start, int end, String typ)

使用给定文本，开始/结束偏移和类型构造令牌。

void clear()

将术语text，payload，flags和positionIncrement，startOffset，endOffset和token类型重置为默认值。

Object clone()

这是一个浅层克隆。

Token clone(char[] newTermBuffer, int newTermOffset, int newTermLength, int newStartOffset, int newEndOffset)

制作克隆，但替换过程中的术语缓冲区和开始/结束偏移。

void copyTo(AttributeImpl target)

将此Attribute中的值复制到传入的target属性中。

int endOffset()

返回令牌的结束偏移量; 一个大于源文本中与此标记对应的最后一个字符的位置。

boolean equals(Object obj)

int getFlags()

获取已设置的任何位的bitset。

Payload getPayload()

返回此Token的有效负载。

int getPositionIncrement()

返回此令牌的位置增量。

int getPositionLength()

获得位置长度。

int hashCode()

void reflectWith(AttributeReflector reflector)

此方法用于内省属性，它应该简单地将此属性保存的键/值添加到给定的AttributeReflector。

Token reinit(char[] newTermBuffer, int newTermOffset, int newTermLength, int newStartOffset, int newEndOffset)

在Token.DEFAULT_TYPE上调用clear（），CharTermAttributeImpl.copyBuffer（char []，int，int），setStartOffset（int），setEndOffset（int）setType（java.lang.String）的简写

Token reinit(char[] newTermBuffer, int newTermOffset, int newTermLength, int newStartOffset, int newEndOffset, String newType)

调用clear（），CharTermAttributeImpl.copyBuffer（char []，int，int），setStartOffset（int），setEndOffset（int），setType（java.lang.String）的简写

Token reinit(String newTerm, int newStartOffset, int newEndOffset)

在Token.DEFAULT_TYPE上调用clear（），CharTermAttributeImpl.append（CharSequence），setStartOffset（int），setEndOffset（int）setType（java.lang.String）的简写

Token reinit(String newTerm, int newTermOffset, int newTermLength, int newStartOffset, int newEndOffset)

在Token.DEFAULT_TYPE上调用clear（），CharTermAttributeImpl.append（CharSequence，int，int），setStartOffset（int），setEndOffset（int）setType（java.lang.String）的简写

Token reinit(String newTerm, int newTermOffset, int newTermLength, int newStartOffset, int newEndOffset, String newType)

调用clear（），CharTermAttributeImpl.append（CharSequence，int，int），setStartOffset（int），setEndOffset（int）setType（java.lang.String）的简写

Token reinit(String newTerm, int newStartOffset, int newEndOffset, String newType)

调用clear（），CharTermAttributeImpl.append（CharSequence），setStartOffset（int），setEndOffset（int）setType（java.lang.String）的简写

void reinit(Token prototype)

将原型令牌的字段复制到此字段中。

void reinit(Token prototype, char[] newTermBuffer, int offset, int length)

将原型令牌的字段复制到此字段中，并使用不同的术语。

void reinit(Token prototype, String newTerm)

将原型令牌的字段复制到此字段中，并使用不同的术语。

void setEndOffset(int offset)

设置结束偏移量。

void setFlags(int flags)

void setOffset(int startOffset, int endOffset)

设置起始和结束偏移量。

void setPayload(Payload payload)

设置此令牌的有效负载。

void setPositionIncrement(int positionIncrement)

设置位置增量。

void setPositionLength(int positionLength)

设置位置长度。

void setStartOffset(int offset)

设置起始偏移量。

void setType(String type)

设置词法类型。

int startOffset()

返回此标记的起始偏移量，即源文本中与此标记对应的第一个字符的位置。

String type()

返回此Token的词法类型。