C++ (Cpp) top_level_consume_token Beispiele

Beispiel #1

Datei: token.cpp Projekt: andyfischer/circa

void tokenize(const char* input, int len, TokenList* results)
{
    TokenizeContext context(input, len, results);

    while (!context.finished()) {
        top_level_consume_token(context);
    }
}

Beispiel #2

Datei: token.cpp Projekt: levelplane/circa

void tokenize(std::string const &input, TokenList* results)
{
    TokenizeContext context(input, results);

    while (!context.finished()) {
        top_level_consume_token(context);
    }
}