1 #ifndef TokenLexer_HPP
 2 #define TokenLexer_HPP
 3 
 4 // this file has been automatically generated from 'D:/work/soulng-project/sngcm/cmlexer/TokenLexer.lexer' using soulng lexer generator slg version 3.0.0
 5 
 6 #include <sngcm/cmlexer/CmajorLexerApi.hpp>
 7 #include <soulng/lexer/Lexer.hpp>
 8 
 9 class TokenLexer : public soulng::lexer::Lexer
10 {
11 public:
12     TokenLexer(const std::u32string& content_, const std::string& fileName_, int fileIndex_);
13     TokenLexer(const char32_t* start_, const char32_t* end_, const std::string& fileName_, int fileIndex_);
14     int NextState(int state, char32_t c) override;
15     bool inBlockComment;
16 private:
17     int GetTokenId(int statementIndex);
18 };
19 #endif