Ejemplos de Pytocs.Syntax Lexer.Get en C# (CSharp)

Get() public method

public Get ( ) : Token
return	Token

Ejemplo n.º 1

Archivo: Lexer.Tests.cs Proyecto: yuhan0/pytocs

        private Token Lex(string str)
        {
            StringReader rdr = new StringReader(str);

            lexer = new Lexer("foo.py", rdr);
            return(lexer.Get());
        }

Ejemplo n.º 2

Archivo: Lexer.Tests.cs Proyecto: yuhan0/pytocs

 private Token LexMore()
 {
     if (lexer == null)
     {
         throw new InvalidOperationException("Must call Lex() first.");
     }
     return(lexer.Get());
 }

Ejemplo n.º 3

Archivo: Lexer.Tests.cs Proyecto: yuhan0/pytocs

        private void Lex(string str, params TokenType[] tokens)
        {
            StringReader rdr = new StringReader(str);

            lexer = new Lexer("foo.py", rdr);
            Token tok = new Token();

            foreach (var exp in tokens)
            {
                tok = lexer.Get();
                Assert.AreEqual(exp, tok.Type);
            }
            Assert.AreEqual(TokenType.EOF, tok.Type);
        }

Ejemplo n.º 4

Archivo: Lexer.Tests.cs Proyecto: uxmal/pytocs

 private void Lex(string str, params TokenType[] tokens)
 {
     StringReader rdr = new StringReader(str);
     lexer = new Lexer("foo.py", rdr);
     Token tok = new Token();
     foreach (var exp in tokens)
     {
         tok = lexer.Get();
         Assert.AreEqual(exp, tok.Type);
     }
     Assert.AreEqual(TokenType.EOF, tok.Type);
 }

Ejemplo n.º 5

Archivo: Lexer.Tests.cs Proyecto: uxmal/pytocs

 private Token Lex(string str)
 {
     StringReader rdr = new StringReader(str);
     lexer = new Lexer("foo.py", rdr);
     return lexer.Get();
 }