/* Generated by re2c 1.1.1 on Mon Nov 19 23:46:47 2018 */
#line 1 "lexer.re"
#include <iostream>

#include "lexer.hpp"

#include "token.hpp"

namespace SpasmImpl
{
namespace ASM
{
//! Namespace for all lexical analisys classes
namespace Lexer
{
Lexer::Lexer(std::istream& _file, size_t _buffer_size)
    : file(&_file), buffer_size(_buffer_size), state(unsigned(-1)), lineno(0)
{
    buffer = new char[buffer_size];
    cursor = limit = marker = token_start = NULL;
}

Lexer::~Lexer()
{
    delete[] buffer;
}

bool Lexer::tokenize(TokenStream& ts)
{
#line 43 "lexer.re"

    while (1)
    {
#line 41 "lexer.cpp"
        {
            char yych;
            if ((limit - cursor) < 6)
                return true;
            yych = *cursor;
            switch (yych)
            {
                case 0x00:
                    goto yy2;
                case '\n':
                    goto yy6;
                case ' ':
                    goto yy8;
                case '-':
                    goto yy11;
                case '0':
                    goto yy12;
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                    goto yy14;
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'b':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'k':
                case 'n':
                case 'o':
                case 'q':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                case 'a':
                    goto yy19;
                case 'c':
                    goto yy20;
                case 'd':
                    goto yy21;
                case 'j':
                    goto yy22;
                case 'l':
                    goto yy23;
                case 'm':
                    goto yy24;
                case 'p':
                    goto yy25;
                case 'r':
                    goto yy26;
                case 's':
                    goto yy27;
                default:
                    goto yy4;
            }
        yy2:
            ++cursor;
#line 264 "lexer.re"
            {
                ts.push_token(Token(Token::EndInput, lineno));

                break;
            }
#line 124 "lexer.cpp"
        yy4:
            ++cursor;
        yy5:
#line 270 "lexer.re"
        {
            return false;
        }
#line 132 "lexer.cpp"
        yy6:
            ++cursor;
#line 257 "lexer.re"
            {
                ++lineno;
                token_start = cursor;

                continue;
            }
#line 142 "lexer.cpp"
        yy8:
            ++cursor;
            if (limit <= cursor)
                return true;
            yych = *cursor;
            switch (yych)
            {
                case ' ':
                    goto yy8;
                default:
                    goto yy10;
            }
        yy10:
#line 251 "lexer.re"
        {
            token_start = cursor;

            continue;
        }
#line 158 "lexer.cpp"
        yy11:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                    goto yy28;
                default:
                    goto yy5;
            }
        yy12:
            yych = *(marker = ++cursor);
            switch (yych)
            {
                case 'X':
                case 'x':
                    goto yy29;
                default:
                    goto yy13;
            }
        yy13:
#line 60 "lexer.re"
        {
            ts.push_token(Token(Token::Integer, lineno, token_start, cursor));
            token_start = cursor;

            continue;
        }
#line 181 "lexer.cpp"
        yy14:
            marker = ++cursor;
            if ((limit - cursor) < 2)
                return true;
            yych = *cursor;
            switch (yych)
            {
                case '.':
                    goto yy31;
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                    goto yy14;
                default:
                    goto yy13;
            }
        yy16:
            ++cursor;
            if (limit <= cursor)
                return true;
            yych = *cursor;
        yy17:
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy18;
            }
        yy18:
#line 243 "lexer.re"
        {
            ts.push_token(Token(Token::Ident, lineno, token_start, cursor));
            token_start = cursor;

            continue;
        }
#line 280 "lexer.cpp"
        yy19:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                    goto yy32;
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                    goto yy34;
                case 'd':
                    goto yy36;
                default:
                    goto yy17;
            }
        yy20:
            yych = *++cursor;
            switch (yych)
            {
                case 'a':
                    goto yy37;
                case 'o':
                    goto yy38;
                default:
                    goto yy17;
            }
        yy21:
            yych = *++cursor;
            switch (yych)
            {
                case 'i':
                    goto yy39;
                case 'u':
                    goto yy40;
                default:
                    goto yy17;
            }
        yy22:
            yych = *++cursor;
            switch (yych)
            {
                case 'm':
                    goto yy41;
                default:
                    goto yy17;
            }
        yy23:
            yych = *++cursor;
            switch (yych)
            {
                case 'a':
                    goto yy42;
                case 'e':
                    goto yy43;
                default:
                    goto yy17;
            }
        yy24:
            yych = *++cursor;
            switch (yych)
            {
                case 'o':
                    goto yy44;
                case 'u':
                    goto yy45;
                default:
                    goto yy17;
            }
        yy25:
            yych = *++cursor;
            switch (yych)
            {
                case 'o':
                    goto yy46;
                case 'r':
                    goto yy47;
                case 'u':
                    goto yy48;
                default:
                    goto yy17;
            }
        yy26:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                    goto yy49;
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                    goto yy51;
                case 'e':
                    goto yy53;
                default:
                    goto yy17;
            }
        yy27:
            yych = *++cursor;
            switch (yych)
            {
                case 'u':
                    goto yy54;
                default:
                    goto yy17;
            }
        yy28:
            ++cursor;
            goto yy13;
        yy29:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                    goto yy55;
                default:
                    goto yy30;
            }
        yy30:
            cursor = marker;
            goto yy13;
        yy31:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                    goto yy58;
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                    goto yy60;
                default:
                    goto yy30;
            }
        yy32:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy33;
            }
        yy33:
#line 84 "lexer.re"
        {
            Token t(Token::Integer, lineno, token_start + 1, cursor);
            t.set_int(-t.value_int());
            ts.push_token(t);
            token_start = cursor;
            continue;
        }
#line 487 "lexer.cpp"
        yy34:
            ++cursor;
            if (limit <= cursor)
                return true;
            yych = *cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                    goto yy34;
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy33;
            }
        yy36:
            yych = *++cursor;
            switch (yych)
            {
                case 'd':
                    goto yy62;
                default:
                    goto yy17;
            }
        yy37:
            yych = *++cursor;
            switch (yych)
            {
                case 'l':
                    goto yy64;
                default:
                    goto yy17;
            }
        yy38:
            yych = *++cursor;
            switch (yych)
            {
                case 'n':
                    goto yy65;
                default:
                    goto yy17;
            }
        yy39:
            yych = *++cursor;
            switch (yych)
            {
                case 'v':
                    goto yy66;
                default:
                    goto yy17;
            }
        yy40:
            yych = *++cursor;
            switch (yych)
            {
                case 'p':
                    goto yy68;
                default:
                    goto yy17;
            }
        yy41:
            yych = *++cursor;
            switch (yych)
            {
                case 'p':
                    goto yy70;
                default:
                    goto yy17;
            }
        yy42:
            yych = *++cursor;
            switch (yych)
            {
                case 'b':
                    goto yy72;
                default:
                    goto yy17;
            }
        yy43:
            yych = *++cursor;
            switch (yych)
            {
                case 'q':
                    goto yy73;
                case 's':
                    goto yy75;
                default:
                    goto yy17;
            }
        yy44:
            yych = *++cursor;
            switch (yych)
            {
                case 'd':
                    goto yy76;
                default:
                    goto yy17;
            }
        yy45:
            yych = *++cursor;
            switch (yych)
            {
                case 'l':
                    goto yy78;
                default:
                    goto yy17;
            }
        yy46:
            yych = *++cursor;
            switch (yych)
            {
                case 'p':
                    goto yy80;
                default:
                    goto yy17;
            }
        yy47:
            yych = *++cursor;
            switch (yych)
            {
                case 'i':
                    goto yy82;
                default:
                    goto yy17;
            }
        yy48:
            yych = *++cursor;
            switch (yych)
            {
                case 's':
                    goto yy83;
                default:
                    goto yy17;
            }
        yy49:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy50;
            }
        yy50:
#line 77 "lexer.re"
        {
            ts.push_token(
                Token(Token::Integer, lineno, token_start + 1, cursor));
            token_start = cursor;

            continue;
        }
#line 714 "lexer.cpp"
        yy51:
            ++cursor;
            if (limit <= cursor)
                return true;
            yych = *cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                    goto yy51;
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy50;
            }
        yy53:
            yych = *++cursor;
            switch (yych)
            {
                case 'a':
                    goto yy84;
                case 't':
                    goto yy85;
                default:
                    goto yy17;
            }
        yy54:
            yych = *++cursor;
            switch (yych)
            {
                case 'b':
                    goto yy87;
                default:
                    goto yy17;
            }
        yy55:
            ++cursor;
            if (limit <= cursor)
                return true;
            yych = *cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                    goto yy55;
                default:
                    goto yy57;
            }
        yy57:
#line 93 "lexer.re"
        {
            ts.push_token(Token(Token::XInteger, lineno, token_start, cursor));
            token_start = cursor;

            continue;
        }
#line 836 "lexer.cpp"
        yy58:
            ++cursor;
        yy59:
#line 68 "lexer.re"
        {
            ts.push_token(
                Token(Token::FloatingPoint, lineno, token_start, cursor));
            token_start = cursor;

            continue;
        }
#line 849 "lexer.cpp"
        yy60:
            ++cursor;
            if (limit <= cursor)
                return true;
            yych = *cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                    goto yy60;
                default:
                    goto yy59;
            }
        yy62:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy63;
            }
        yy63:
#line 147 "lexer.re"
        {
            ts.push_token(Token(Token::Add, lineno));
            token_start = cursor;

            continue;
        }
#line 943 "lexer.cpp"
        yy64:
            yych = *++cursor;
            switch (yych)
            {
                case 'l':
                    goto yy89;
                default:
                    goto yy17;
            }
        yy65:
            yych = *++cursor;
            switch (yych)
            {
                case 's':
                    goto yy91;
                default:
                    goto yy17;
            }
        yy66:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy67;
            }
        yy67:
#line 168 "lexer.re"
        {
            ts.push_token(Token(Token::Div, lineno));
            token_start = cursor;

            continue;
        }
#line 1032 "lexer.cpp"
        yy68:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy69;
            }
        yy69:
#line 126 "lexer.re"
        {
            ts.push_token(Token(Token::Dup, lineno));
            token_start = cursor;

            continue;
        }
#line 1109 "lexer.cpp"
        yy70:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                case 'f':
                    goto yy92;
                case 't':
                    goto yy94;
                default:
                    goto yy71;
            }
        yy71:
#line 196 "lexer.re"
        {
            ts.push_token(Token(Token::Jump, lineno));
            token_start = cursor;

            continue;
        }
#line 1186 "lexer.cpp"
        yy72:
            yych = *++cursor;
            switch (yych)
            {
                case 'e':
                    goto yy96;
                default:
                    goto yy17;
            }
        yy73:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy74;
            }
        yy74:
#line 223 "lexer.re"
        {
            ts.push_token(Token(Token::LessEq, lineno));
            token_start = cursor;

            continue;
        }
#line 1269 "lexer.cpp"
        yy75:
            yych = *++cursor;
            switch (yych)
            {
                case 's':
                    goto yy97;
                default:
                    goto yy17;
            }
        yy76:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy77;
            }
        yy77:
#line 175 "lexer.re"
        {
            ts.push_token(Token(Token::Mod, lineno));
            token_start = cursor;

            continue;
        }
#line 1352 "lexer.cpp"
        yy78:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy79;
            }
        yy79:
#line 161 "lexer.re"
        {
            ts.push_token(Token(Token::Mul, lineno));
            token_start = cursor;

            continue;
        }
#line 1429 "lexer.cpp"
        yy80:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                case 'r':
                    goto yy99;
                default:
                    goto yy81;
            }
        yy81:
#line 113 "lexer.re"
        {
            ts.push_token(Token(Token::Pop, lineno));
            token_start = cursor;

            continue;
        }
#line 1506 "lexer.cpp"
        yy82:
            yych = *++cursor;
            switch (yych)
            {
                case 'n':
                    goto yy101;
                default:
                    goto yy17;
            }
        yy83:
            yych = *++cursor;
            switch (yych)
            {
                case 'h':
                    goto yy102;
                default:
                    goto yy17;
            }
        yy84:
            yych = *++cursor;
            switch (yych)
            {
                case 'd':
                    goto yy104;
                default:
                    goto yy17;
            }
        yy85:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy86;
            }
        yy86:
#line 216 "lexer.re"
        {
            ts.push_token(Token(Token::Ret, lineno));
            token_start = cursor;

            continue;
        }
#line 1601 "lexer.cpp"
        yy87:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy88;
            }
        yy88:
#line 154 "lexer.re"
        {
            ts.push_token(Token(Token::Sub, lineno));
            token_start = cursor;

            continue;
        }
#line 1678 "lexer.cpp"
        yy89:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy90;
            }
        yy90:
#line 209 "lexer.re"
        {
            ts.push_token(Token(Token::Call, lineno));
            token_start = cursor;

            continue;
        }
#line 1755 "lexer.cpp"
        yy91:
            yych = *++cursor;
            switch (yych)
            {
                case 't':
                    goto yy106;
                default:
                    goto yy17;
            }
        yy92:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy93;
            }
        yy93:
#line 189 "lexer.re"
        {
            ts.push_token(Token(Token::JumpF, lineno));
            token_start = cursor;

            continue;
        }
#line 1838 "lexer.cpp"
        yy94:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy95;
            }
        yy95:
#line 182 "lexer.re"
        {
            ts.push_token(Token(Token::JumpT, lineno));
            token_start = cursor;

            continue;
        }
#line 1915 "lexer.cpp"
        yy96:
            yych = *++cursor;
            switch (yych)
            {
                case 'l':
                    goto yy108;
                default:
                    goto yy17;
            }
        yy97:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy98;
            }
        yy98:
#line 229 "lexer.re"
        {
            ts.push_token(Token(Token::Less, lineno));
            token_start = cursor;

            continue;
        }
#line 1998 "lexer.cpp"
        yy99:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy100;
            }
        yy100:
#line 119 "lexer.re"
        {
            ts.push_token(Token(Token::PopTo, lineno));
            token_start = cursor;

            continue;
        }
#line 2075 "lexer.cpp"
        yy101:
            yych = *++cursor;
            switch (yych)
            {
                case 't':
                    goto yy110;
                default:
                    goto yy17;
            }
        yy102:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                case 'r':
                    goto yy112;
                default:
                    goto yy103;
            }
        yy103:
#line 107 "lexer.re"
        {
            ts.push_token(Token(Token::Push, lineno));
            token_start = cursor;

            continue;
        }
#line 2158 "lexer.cpp"
        yy104:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy105;
            }
        yy105:
#line 133 "lexer.re"
        {
            ts.push_token(Token(Token::Read, lineno));
            token_start = cursor;

            continue;
        }
#line 2235 "lexer.cpp"
        yy106:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy107;
            }
        yy107:
#line 202 "lexer.re"
        {
            ts.push_token(Token(Token::Const, lineno));
            token_start = cursor;

            continue;
        }
#line 2312 "lexer.cpp"
        yy108:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy109;
            }
        yy109:
#line 236 "lexer.re"
        {
            ts.push_token(Token(Token::Label, lineno));
            token_start = cursor;

            continue;
        }
#line 2389 "lexer.cpp"
        yy110:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy111;
            }
        yy111:
#line 140 "lexer.re"
        {
            ts.push_token(Token(Token::Print, lineno));
            token_start = cursor;

            continue;
        }
#line 2466 "lexer.cpp"
        yy112:
            yych = *++cursor;
            switch (yych)
            {
                case '0':
                case '1':
                case '2':
                case '3':
                case '4':
                case '5':
                case '6':
                case '7':
                case '8':
                case '9':
                case 'A':
                case 'B':
                case 'C':
                case 'D':
                case 'E':
                case 'F':
                case 'G':
                case 'H':
                case 'I':
                case 'J':
                case 'K':
                case 'L':
                case 'M':
                case 'N':
                case 'O':
                case 'P':
                case 'Q':
                case 'R':
                case 'S':
                case 'T':
                case 'U':
                case 'V':
                case 'W':
                case 'X':
                case 'Y':
                case 'Z':
                case '_':
                case 'a':
                case 'b':
                case 'c':
                case 'd':
                case 'e':
                case 'f':
                case 'g':
                case 'h':
                case 'i':
                case 'j':
                case 'k':
                case 'l':
                case 'm':
                case 'n':
                case 'o':
                case 'p':
                case 'q':
                case 'r':
                case 's':
                case 't':
                case 'u':
                case 'v':
                case 'w':
                case 'x':
                case 'y':
                case 'z':
                    goto yy16;
                default:
                    goto yy113;
            }
        yy113:
#line 101 "lexer.re"
        {
            ts.push_token(Token(Token::PushFrom, lineno));
            token_start = cursor;

            continue;
        }
#line 2543 "lexer.cpp"
        }
#line 274 "lexer.re"
    }
    return true;
}

/*!
** Fills up the buffer when neccessary.
** Note the buffer is always filled to the maximum, not just the
** number of bytes neccessary for the lexer to continue.
**
** \param nbytes        - the number of bytes
*/

void Lexer::buffer_grow(size_t new_size)
{
    char* new_buffer = new char[new_size];

    std::copy(buffer, limit, new_buffer);

    token_start = new_buffer + (token_start - buffer);
    cursor = new_buffer + (cursor - buffer);
    limit = new_buffer + new_size;

    buffer_size = new_size;

    delete[] buffer;
    buffer = new_buffer;
}

void Lexer::read(size_t nbytes)
{
    if (token_start + nbytes > limit)
    {  // we need larger buffer
        buffer_grow(token_start - buffer + nbytes);
    }

    std::copy(token_start, limit, buffer);
    cursor -= token_start - buffer;
    char* old_limit = limit - (token_start - buffer);
    token_start = buffer;

    file->read(old_limit, limit - old_limit);
    if (file->eof())
    {
        size_t bytes = file->gcount();
        std::fill(old_limit + bytes, limit, '\0');
    }
}

void Lexer::buffer_init()
{
    file->read(buffer, buffer_size);
    if (file->eof())
    {
        size_t bytes = file->gcount();
        std::fill(buffer + bytes, buffer + buffer_size, '\0');
    }

    cursor = marker = token_start = buffer;
    limit = buffer + buffer_size;
}

}  // namespace Lexer

}  // namespace ASM
}  // namespace SpasmImpl