本文整理汇总了C#中Token.SetOffset方法的典型用法代码示例。如果您正苦于以下问题:C# Token.SetOffset方法的具体用法?C# Token.SetOffset怎么用?C# Token.SetOffset使用的例子?那么恭喜您, 这里精选的方法代码示例或许可以为您提供帮助。您也可以进一步了解该方法所在类Token
的用法示例。
在下文中一共展示了Token.SetOffset方法的7个代码示例,这些例子默认根据受欢迎程度排序。您可以为喜欢或者感觉有用的代码点赞,您的评价将有助于系统推荐出更棒的C#代码示例。
示例1: MakeToken
private Token MakeToken(string text, int posIncr, int startOffset, int endOffset)
{
Token t = new Token();
t.Append(text);
t.PositionIncrement = posIncr;
t.SetOffset(startOffset, endOffset);
return t;
}
示例2: GetNextSuffixInputToken
private Token GetNextSuffixInputToken(Token token)
{
if (!Suffix.IncrementToken()) return null;
token.SetTermBuffer(_termAtt.TermBuffer(), 0, _termAtt.TermLength());
token.PositionIncrement = _posIncrAtt.PositionIncrement;
token.Flags = _flagsAtt.Flags;
token.SetOffset(_offsetAtt.StartOffset, _offsetAtt.EndOffset);
token.Type = _typeAtt.Type;
token.Payload = _payloadAtt.Payload;
return token;
}
示例3: UpdateSuffixToken
public virtual Token UpdateSuffixToken(Token suffixToken, Token lastInputToken)
{
suffixToken.SetOffset(lastInputToken.EndOffset() + suffixToken.StartOffset(), lastInputToken.EndOffset() + suffixToken.EndOffset());
return suffixToken;
}
示例4: UpdateInputToken
public virtual Token UpdateInputToken(Token inputToken, Token lastPrefixToken)
{
inputToken.SetOffset(lastPrefixToken.EndOffset() + inputToken.StartOffset(), lastPrefixToken.EndOffset() + inputToken.EndOffset());
return inputToken;
}
示例5: GetNextSuffixInputToken
private Token GetNextSuffixInputToken(Token token)
{
if (!suffix.IncrementToken())
{
return null;
}
token.CopyBuffer(termAtt.Buffer(), 0, termAtt.Length);
token.PositionIncrement = posIncrAtt.PositionIncrement;
token.Flags = flagsAtt.Flags;
token.SetOffset(offsetAtt.StartOffset(), offsetAtt.EndOffset());
token.Type = typeAtt.Type;
token.Payload = payloadAtt.Payload;
return token;
}
示例6: GetNextPrefixInputToken
private Token GetNextPrefixInputToken(Token token)
{
if (!prefix.IncrementToken())
{
return null;
}
token.CopyBuffer(p_termAtt.Buffer(), 0, p_termAtt.Length);
token.PositionIncrement = p_posIncrAtt.PositionIncrement;
token.Flags = p_flagsAtt.Flags;
token.SetOffset(p_offsetAtt.StartOffset(), p_offsetAtt.EndOffset());
token.Type = p_typeAtt.Type;
token.Payload = p_payloadAtt.Payload;
return token;
}
示例7: GetNextInputToken
private Token GetNextInputToken(Token token)
{
if (!_input.IncrementToken()) return null;
token.SetTermBuffer(_inTermAtt.TermBuffer(), 0, _inTermAtt.TermLength());
token.PositionIncrement = _inPosIncrAtt.PositionIncrement;
token.Flags = _inFlagsAtt.Flags;
token.SetOffset(_inOffsetAtt.StartOffset, _inOffsetAtt.EndOffset);
token.Type = _inTypeAtt.Type;
token.Payload = _inPayloadAtt.Payload;
return token;
}