本文整理匯總了C#中System.Buffer.EatWhitespace方法的典型用法代碼示例。如果您正苦於以下問題：C# Buffer.EatWhitespace方法的具體用法？C# Buffer.EatWhitespace怎麽用？C# Buffer.EatWhitespace使用的例子？那麽, 這裏精選的方法代碼示例或許可以為您提供幫助。您也可以進一步了解該方法所在類System.Buffer的用法示例。
在下文中一共展示了Buffer.EatWhitespace方法的1個代碼示例，這些例子默認根據受歡迎程度排序。您可以為喜歡或者感覺有用的代碼點讚，您的評價將有助於係統推薦出更棒的C#代碼示例。
示例1: Tokenize
/// <summary>
/// Lexical analysis on the input string
/// </summary>
/// <param name="str">The text representation of the term</param>
/// <returns>List of tokens contained</returns>
/// <exception cref="ReadException">Thrown if lexical error found</exception>
static LinkedList<Token> Tokenize(string str)
{
LinkedList<Token> result = new LinkedList<Token>();
Buffer b = new Buffer(str);
b.EatWhitespace();
while (!b.EndOfFile())
{
bool error;
Token/*?*/ token = Scan(b, out error);
if (error)
{
string msg = "At position " + (b.Position - 1).ToString() + ", "
+ (b.EndOfFile() ? "end reached while scanning string: " :
"lexical error in string: ");
throw new ReadException(msg + str);
}
// assert token != null;
result.AddLast(token);
b.EatWhitespace();
}
result.AddLast(new Token(Token.Kind.EOF, "eof", b.Position));
return result;
}