Line data Source code
1 : /* -*- Mode: C++; tab-width: 4; indent-tabs-mode: nil; c-basic-offset: 4 -*- */
2 : /*
3 : * This file is part of the LibreOffice project.
4 : *
5 : * This Source Code Form is subject to the terms of the Mozilla Public
6 : * License, v. 2.0. If a copy of the MPL was not distributed with this
7 : * file, You can obtain one at http://mozilla.org/MPL/2.0/.
8 : *
9 : * This file incorporates work covered by the following license notice:
10 : *
11 : * Licensed to the Apache Software Foundation (ASF) under one or more
12 : * contributor license agreements. See the NOTICE file distributed
13 : * with this work for additional information regarding copyright
14 : * ownership. The ASF licenses this file to you under the Apache
15 : * License, Version 2.0 (the "License"); you may not use this file
16 : * except in compliance with the License. You may obtain a copy of
17 : * the License at http://www.apache.org/licenses/LICENSE-2.0 .
18 : */
19 :
20 : #ifndef INCLUDED_IDL_INC_LEX_HXX
21 : #define INCLUDED_IDL_INC_LEX_HXX
22 :
23 : #include <boost/ptr_container/ptr_vector.hpp>
24 :
25 : #include <sal/types.h>
26 : #include <hash.hxx>
27 : #include <tools/stream.hxx>
28 :
29 : enum SVTOKEN_ENUM { SVTOKEN_EMPTY, SVTOKEN_COMMENT,
30 : SVTOKEN_INTEGER, SVTOKEN_STRING,
31 : SVTOKEN_BOOL, SVTOKEN_IDENTIFIER,
32 : SVTOKEN_CHAR, SVTOKEN_RTTIBASE,
33 : SVTOKEN_EOF, SVTOKEN_HASHID };
34 :
35 804402 : class SvToken
36 : {
37 : friend class SvTokenStream;
38 : sal_uLong nLine, nColumn;
39 : SVTOKEN_ENUM nType;
40 : OString aString;
41 : union
42 : {
43 : sal_uLong nLong;
44 : bool bBool;
45 : char cChar;
46 : SvStringHashEntry * pHash;
47 : };
48 : public:
49 : SvToken();
50 : SvToken( const SvToken & rObj );
51 : SvToken( sal_uLong n );
52 : SvToken( SVTOKEN_ENUM nTypeP, bool b );
53 : SvToken( char c );
54 : SvToken( SVTOKEN_ENUM nTypeP, const OString& rStr );
55 : SvToken( SVTOKEN_ENUM nTypeP );
56 :
57 : SvToken & operator = ( const SvToken & rObj );
58 :
59 : OString GetTokenAsString() const;
60 : SVTOKEN_ENUM GetType() const { return nType; }
61 :
62 804402 : void SetLine( sal_uLong nLineP ) { nLine = nLineP; }
63 15135 : sal_uLong GetLine() const { return nLine; }
64 :
65 804402 : void SetColumn( sal_uLong nColumnP ) { nColumn = nColumnP; }
66 5045 : sal_uLong GetColumn() const { return nColumn; }
67 :
68 8 : bool IsEmpty() const { return nType == SVTOKEN_EMPTY; }
69 804402 : bool IsComment() const { return nType == SVTOKEN_COMMENT; }
70 19845 : bool IsInteger() const { return nType == SVTOKEN_INTEGER; }
71 1173 : bool IsString() const { return nType == SVTOKEN_STRING; }
72 109556 : bool IsBool() const { return nType == SVTOKEN_BOOL; }
73 10386320 : bool IsIdentifierHash() const
74 10386320 : { return nType == SVTOKEN_HASHID; }
75 237107 : bool IsIdentifier() const
76 : {
77 237107 : return nType == SVTOKEN_IDENTIFIER
78 237107 : || nType == SVTOKEN_HASHID;
79 : }
80 702557 : bool IsChar() const { return nType == SVTOKEN_CHAR; }
81 : bool IsRttiBase() const { return nType == SVTOKEN_RTTIBASE; }
82 1609180 : bool IsEof() const { return nType == SVTOKEN_EOF; }
83 :
84 3054081 : const OString& GetString() const
85 : {
86 3054081 : return IsIdentifierHash()
87 2077 : ? pHash->GetName()
88 3056158 : : aString;
89 : }
90 18842 : sal_uLong GetNumber() const { return nLong; }
91 101427 : bool GetBool() const { return bBool; }
92 1324990 : char GetChar() const { return cChar; }
93 :
94 176134 : void SetHash( SvStringHashEntry * pHashP )
95 176134 : { pHash = pHashP; nType = SVTOKEN_HASHID; }
96 36854 : bool HasHash() const
97 36854 : { return nType == SVTOKEN_HASHID; }
98 : SvStringHashEntry * GetHash() const { return pHash; }
99 7332239 : bool Is( SvStringHashEntry * pEntry ) const
100 7332239 : { return IsIdentifierHash() && pHash == pEntry; }
101 : };
102 :
103 804402 : inline SvToken::SvToken()
104 : : nLine(0)
105 : , nColumn(0)
106 804402 : , nType( SVTOKEN_EMPTY )
107 : {
108 804402 : }
109 :
110 : inline SvToken::SvToken( sal_uLong n )
111 : : nType( SVTOKEN_INTEGER ), nLong( n ) {}
112 :
113 : inline SvToken::SvToken( SVTOKEN_ENUM nTypeP, bool b )
114 : : nType( nTypeP ), bBool( b ) {}
115 :
116 : inline SvToken::SvToken( char c )
117 : : nType( SVTOKEN_CHAR ), cChar( c ) {}
118 :
119 : inline SvToken::SvToken( SVTOKEN_ENUM nTypeP, const OString& rStr )
120 : : nType( nTypeP ), aString( rStr ) {}
121 :
122 : inline SvToken::SvToken( SVTOKEN_ENUM nTypeP )
123 : : nType( nTypeP ) {}
124 :
125 : class SvTokenStream
126 : {
127 : sal_uLong nLine, nColumn;
128 : int nBufPos;
129 : int c; // next character
130 : sal_uInt16 nTabSize; // length of tabulator
131 : OString aStrTrue;
132 : OString aStrFalse;
133 : sal_uLong nMaxPos;
134 :
135 : SvFileStream * pInStream;
136 : SvStream & rInStream;
137 : OUString aFileName;
138 : boost::ptr_vector<SvToken> aTokList;
139 : boost::ptr_vector<SvToken>::iterator pCurToken;
140 :
141 : OString aBufStr;
142 :
143 : void InitCtor();
144 :
145 : int GetNextChar();
146 6175623 : int GetFastNextChar()
147 : {
148 6175623 : return (nBufPos < aBufStr.getLength())
149 5960385 : ? aBufStr[nBufPos++]
150 12136008 : : '\0';
151 : }
152 :
153 : void FillTokenList();
154 : sal_uLong GetNumber();
155 : bool MakeToken( SvToken & );
156 457874 : bool IsEof() const { return rInStream.IsEof(); }
157 14983730 : void SetMax()
158 : {
159 14983730 : sal_uLong n = Tell();
160 14983730 : if( n > nMaxPos )
161 780807 : nMaxPos = n;
162 14983730 : }
163 17889 : void CalcColumn()
164 : {
165 : // if end of line spare calculation
166 17889 : if( 0 != c )
167 : {
168 17794 : sal_uInt16 n = 0;
169 17794 : nColumn = 0;
170 53382 : while( n < nBufPos )
171 17794 : nColumn += aBufStr[n++] == '\t' ? nTabSize : 1;
172 : }
173 17889 : }
174 : public:
175 : SvTokenStream( const OUString & rFileName );
176 : SvTokenStream( SvStream & rInStream, const OUString & rFileName );
177 : ~SvTokenStream();
178 :
179 8 : const OUString & GetFileName() const { return aFileName; }
180 226 : SvStream & GetStream() { return rInStream; }
181 :
182 : void SetTabSize( sal_uInt16 nTabSizeP )
183 : { nTabSize = nTabSizeP; }
184 : sal_uInt16 GetTabSize() const { return nTabSize; }
185 :
186 0 : SvToken* GetToken_PrevAll()
187 : {
188 0 : boost::ptr_vector<SvToken>::iterator pRetToken = pCurToken;
189 :
190 : // current iterator always valid
191 0 : if(pCurToken != aTokList.begin())
192 0 : --pCurToken;
193 :
194 0 : return &(*pRetToken);
195 : }
196 :
197 7879307 : SvToken* GetToken_NextAll()
198 : {
199 7879307 : boost::ptr_vector<SvToken>::iterator pRetToken = pCurToken++;
200 :
201 7879307 : if (pCurToken == aTokList.end())
202 492 : pCurToken = pRetToken;
203 :
204 7879307 : SetMax();
205 :
206 7879307 : return &(*pRetToken);
207 : }
208 :
209 7879307 : SvToken* GetToken_Next()
210 : {
211 : // comments get removed initially
212 7879307 : return GetToken_NextAll();
213 : }
214 :
215 257941 : SvToken* GetToken() const { return &(*pCurToken); }
216 :
217 364239 : bool Read( char cChar )
218 : {
219 728478 : if( pCurToken->IsChar()
220 364239 : && cChar == pCurToken->GetChar() )
221 : {
222 162168 : GetToken_Next();
223 162168 : return true;
224 : }
225 : else
226 202071 : return false;
227 : }
228 :
229 189740 : void ReadDelemiter()
230 : {
231 379480 : if( pCurToken->IsChar()
232 338595 : && (';' == pCurToken->GetChar()
233 131503 : || ',' == pCurToken->GetChar()) )
234 : {
235 148855 : GetToken_Next();
236 : }
237 189740 : }
238 :
239 22925468 : sal_uInt32 Tell() const { return pCurToken-aTokList.begin(); }
240 :
241 7104423 : void Seek( sal_uInt32 nPos )
242 : {
243 7104423 : pCurToken = aTokList.begin() + nPos;
244 7104423 : SetMax();
245 7104423 : }
246 :
247 : void SeekRel( sal_uInt32 nRelPos )
248 : {
249 : sal_uInt32 relIdx = Tell() + nRelPos;
250 :
251 : if ( relIdx < aTokList.size())
252 : {
253 : pCurToken = aTokList.begin()+ (Tell() + nRelPos );
254 : SetMax();
255 : }
256 : }
257 :
258 0 : void SeekEnd()
259 : {
260 0 : pCurToken = aTokList.begin()+nMaxPos;
261 0 : }
262 : };
263 :
264 :
265 :
266 : #endif // INCLUDED_IDL_INC_LEX_HXX
267 :
268 : /* vim:set shiftwidth=4 softtabstop=4 expandtab: */
|
