AToken_traditional.h
上传用户:itx_2006
上传日期:2007-01-06
资源大小:493k
文件大小:6k
源码类别:

编译器/解释器

开发平台:

Others

  1. /* ANTLRToken.h
  2.  *
  3.  * SOFTWARE RIGHTS
  4.  *
  5.  * We reserve no LEGAL rights to the Purdue Compiler Construction Tool
  6.  * Set (PCCTS) -- PCCTS is in the public domain.  An individual or
  7.  * company may do whatever they wish with source code distributed with
  8.  * PCCTS or the code generated by PCCTS, including the incorporation of
  9.  * PCCTS, or its output, into commerical software.
  10.  *
  11.  * We encourage users to develop software with PCCTS.  However, we do ask
  12.  * that credit is given to us for developing PCCTS.  By "credit",
  13.  * we mean that if you incorporate our source code into one of your
  14.  * programs (commercial product, research project, or otherwise) that you
  15.  * acknowledge this fact somewhere in the documentation, research report,
  16.  * etc...  If you like PCCTS and have developed a nice tool with the
  17.  * output, please mention that you developed it using PCCTS.  In
  18.  * addition, we ask that this header remain intact in our source code.
  19.  * As long as these guidelines are kept, we expect to continue enhancing
  20.  * this system and expect to make other tools available as they are
  21.  * completed.
  22.  *
  23.  * ANTLR 1.33
  24.  * Terence Parr
  25.  * Parr Research Corporation
  26.  * with Purdue University and AHPCRC, University of Minnesota
  27.  * 1989-1998
  28.  */
  29. #ifndef ATOKEN_H_GATE
  30. #define ATOKEN_H_GATE
  31. #include "pcctscfg.h"
  32. #include PCCTS_STRING_H
  33. #include PCCTS_STDIO_H
  34. #include PCCTS_STDLIB_H
  35. PCCTS_NAMESPACE_STD
  36. #ifndef ANTLRCommonTokenTEXTSIZE
  37. #define ANTLRCommonTokenTEXTSIZE         100
  38. #endif
  39. /* must define what a char looks like; can make this a class too */
  40. typedef char ANTLRChar;
  41. /* D E F I N E  S M A R T  P O I N T E R S */
  42. #include "pcctscfg.h"
  43. //#include ATOKPTR_H   not tested yet, leave out
  44. class ANTLRAbstractToken;
  45. typedef ANTLRAbstractToken *_ANTLRTokenPtr;
  46. class DllExportPCCTS ANTLRAbstractToken {
  47. public:
  48.     virtual ~ANTLRAbstractToken() {;}
  49.     virtual ANTLRTokenType getType() = 0;
  50.     virtual void setType(ANTLRTokenType t) = 0;
  51.     virtual int getLine() = 0;
  52.     virtual void setLine(int line) = 0;
  53.     virtual ANTLRChar *getText() = 0;
  54.     virtual void setText(ANTLRChar *) = 0;
  55.     /* This function will disappear when I can use templates */
  56. virtual ANTLRAbstractToken *makeToken(ANTLRTokenType tt,
  57.   ANTLRChar *text,
  58.   int line) = 0;
  59. /* define to satisfy ANTLRTokenBuffer's need to determine whether or
  60.    not a token object can be destroyed.  If nref()==0, no one has
  61.    a reference, and the object may be destroyed.  This function defaults
  62.    to 1, hence, if you use deleteTokens() message with a token object
  63.    not derived from ANTLRCommonRefCountToken, the parser will compile
  64.    but will not delete objects after they leave the token buffer.
  65.     */
  66. virtual unsigned nref() { return 1; }
  67. virtual void ref() {;}
  68. virtual void deref() {;}
  69. virtual void panic(char *msg)
  70. {
  71. fprintf(stderr, "ANTLRAbstractToken panic: %sn", msg);
  72. exit(PCCTS_EXIT_FAILURE);
  73. }
  74. };
  75. /* This class should be subclassed.  It cannot store token type or text */
  76. class DllExportPCCTS ANTLRRefCountToken : public ANTLRAbstractToken {
  77. public:
  78. #ifdef DBG_REFCOUNTTOKEN
  79. static int ctor;
  80. static int dtor;
  81. #endif
  82. protected:
  83.     unsigned refcnt_;
  84. #ifdef DBG_REFCOUNTTOKEN
  85. char object[200];
  86. #endif
  87. public:
  88. ANTLRRefCountToken(ANTLRTokenType t, ANTLRChar *s)
  89. #ifndef DBG_REFCOUNTTOKEN
  90. {
  91. refcnt_ = 0;
  92. }
  93. #else
  94. {
  95. ctor++;
  96. refcnt_ = 0;
  97. if ( t==1 ) sprintf(object,"tok_EOF");
  98. else sprintf(object,"tok_%s",s);
  99. fprintf(stderr, "ctor %s #%dn",object,ctor);
  100. }
  101. #endif
  102. ANTLRRefCountToken()
  103. #ifndef DBG_REFCOUNTTOKEN
  104. { refcnt_ = 0; }
  105. #else
  106. {
  107. ctor++;
  108. refcnt_ = 0;
  109. sprintf(object,"tok_blank");
  110. fprintf(stderr, "ctor %s #%dn",object,ctor);
  111. }
  112. virtual ~ANTLRRefCountToken()
  113. {
  114. dtor++;
  115. if ( dtor>ctor ) fprintf(stderr, "WARNING: dtor>ctorn");
  116. fprintf(stderr, "dtor %s #%dn", object, dtor);
  117. object[0]='';
  118. }
  119. #endif
  120. // reference counting stuff needed by ANTLRTokenPtr.
  121. // User should not access these; for C++ language reasons, we had
  122. // to make these public.  Yuck.
  123. void ref() { refcnt_++; }
  124. void deref() { refcnt_--; }
  125. unsigned nref() { return refcnt_; }
  126. virtual ANTLRAbstractToken *makeToken(ANTLRTokenType tt,
  127.   ANTLRChar *txt,
  128.   int line)
  129. {
  130. panic("call to ANTLRRefCountToken::makeToken()n");
  131. return NULL;
  132. }
  133. };
  134. class DllExportPCCTS ANTLRCommonNoRefCountToken : public ANTLRAbstractToken {
  135. protected:
  136. ANTLRTokenType _type;
  137. int _line;
  138. ANTLRChar _text[ANTLRCommonTokenTEXTSIZE+1];
  139. public:
  140. ANTLRCommonNoRefCountToken(ANTLRTokenType t, ANTLRChar *s)
  141. { setType(t); _line = 0; setText(s); }
  142. ANTLRCommonNoRefCountToken()
  143. { setType((ANTLRTokenType)0); _line = 0; setText(""); }
  144. ANTLRTokenType getType()  { return _type; }
  145. void setType(ANTLRTokenType t) { _type = t; }
  146. virtual int getLine()  { return _line; }
  147. void setLine(int line) { _line = line; }
  148. ANTLRChar *getText()  { return _text; }
  149. void setText(ANTLRChar *s)
  150. { strncpy((char *)_text, (char *)s, ANTLRCommonTokenTEXTSIZE); }
  151. virtual ANTLRAbstractToken *makeToken(ANTLRTokenType tt,
  152.   ANTLRChar *txt,
  153.   int line)
  154. {
  155. ANTLRAbstractToken *t = new ANTLRCommonNoRefCountToken;
  156. t->setType(tt); t->setText(txt); t->setLine(line);
  157. return t;
  158. }
  159. };
  160. class DllExportPCCTS ANTLRCommonToken : public ANTLRRefCountToken {
  161. protected:
  162. ANTLRTokenType _type;
  163. int _line;
  164. ANTLRChar _text[ANTLRCommonTokenTEXTSIZE+1];
  165. public:
  166. ANTLRCommonToken(ANTLRTokenType t, ANTLRChar *s) : ANTLRRefCountToken(t,s)
  167. { setType(t); _line = 0; setText(s); }
  168. ANTLRCommonToken()
  169. { setType((ANTLRTokenType)0); _line = 0; setText(""); }
  170. virtual ~ANTLRCommonToken() {;}
  171. ANTLRTokenType getType()  { return _type; }
  172. void setType(ANTLRTokenType t) { _type = t; }
  173. virtual int getLine()  { return _line; }
  174. void setLine(int line) { _line = line; }
  175. ANTLRChar *getText()  { return _text; }
  176. void setText(ANTLRChar *s)
  177. { strncpy((char *)_text, (char *)s, ANTLRCommonTokenTEXTSIZE); }
  178. virtual ANTLRAbstractToken *makeToken(ANTLRTokenType tt,
  179.   ANTLRChar *txt,
  180.   int line)
  181. {
  182. ANTLRAbstractToken *t = new ANTLRCommonToken(tt,txt);
  183. t->setLine(line);
  184. return t;
  185. }
  186. };
  187. // used for backward compatibility
  188. typedef ANTLRCommonToken ANTLRCommonBacktrackingToken;
  189. #endif