Line data Source code
1 : /* -*- Mode: C++; tab-width: 4; indent-tabs-mode: nil; c-basic-offset: 4 -*- */
2 : /*
3 : * This file is part of the LibreOffice project.
4 : *
5 : * This Source Code Form is subject to the terms of the Mozilla Public
6 : * License, v. 2.0. If a copy of the MPL was not distributed with this
7 : * file, You can obtain one at http://mozilla.org/MPL/2.0/.
8 : *
9 : * This file incorporates work covered by the following license notice:
10 : *
11 : * Licensed to the Apache Software Foundation (ASF) under one or more
12 : * contributor license agreements. See the NOTICE file distributed
13 : * with this work for additional information regarding copyright
14 : * ownership. The ASF licenses this file to you under the Apache
15 : * License, Version 2.0 (the "License"); you may not use this file
16 : * except in compliance with the License. You may obtain a copy of
17 : * the License at http://www.apache.org/licenses/LICENSE-2.0 .
18 : */
19 :
20 : #include <sal/config.h>
21 :
22 : #include <cstddef>
23 : #include <string.h>
24 : #include <vector>
25 : #include <algorithm>
26 :
27 : #include <rtl/ustring.hxx>
28 : #include <rtl/ustrbuf.hxx>
29 : #include <rtl/string.hxx>
30 : #include <rtl/strbuf.hxx>
31 : #include <sal/types.h>
32 :
33 : #include <comphelper/string.hxx>
34 : #include <comphelper/stl_types.hxx>
35 :
36 : #include <com/sun/star/i18n/BreakIterator.hpp>
37 : #include <com/sun/star/i18n/CharType.hpp>
38 : #include <com/sun/star/i18n/Collator.hpp>
39 :
40 :
41 : namespace comphelper { namespace string {
42 :
43 : namespace
44 : {
45 15040 : template <typename T, typename C> T tmpl_stripStart(const T &rIn,
46 : const C cRemove)
47 : {
48 15040 : if (rIn.isEmpty())
49 20 : return rIn;
50 :
51 15020 : sal_Int32 i = 0;
52 :
53 31487 : while (i < rIn.getLength())
54 : {
55 16463 : if (rIn[i] != cRemove)
56 15016 : break;
57 1447 : ++i;
58 : }
59 :
60 15020 : return rIn.copy(i);
61 : }
62 : }
63 :
64 1838 : OString stripStart(const OString &rIn, sal_Char c)
65 : {
66 1838 : return tmpl_stripStart<OString, sal_Char>(rIn, c);
67 : }
68 :
69 13202 : OUString stripStart(const OUString &rIn, sal_Unicode c)
70 : {
71 13202 : return tmpl_stripStart<OUString, sal_Unicode>(rIn, c);
72 : }
73 :
74 : namespace
75 : {
76 42430 : template <typename T, typename C> T tmpl_stripEnd(const T &rIn,
77 : const C cRemove)
78 : {
79 42430 : if (rIn.isEmpty())
80 71 : return rIn;
81 :
82 42359 : sal_Int32 i = rIn.getLength();
83 :
84 180497 : while (i > 0)
85 : {
86 137933 : if (rIn[i-1] != cRemove)
87 42154 : break;
88 95779 : --i;
89 : }
90 :
91 42359 : return rIn.copy(0, i);
92 : }
93 : }
94 :
95 428 : OString stripEnd(const OString &rIn, sal_Char c)
96 : {
97 428 : return tmpl_stripEnd<OString, sal_Char>(rIn, c);
98 : }
99 :
100 42002 : OUString stripEnd(const OUString &rIn, sal_Unicode c)
101 : {
102 42002 : return tmpl_stripEnd<OUString, sal_Unicode>(rIn, c);
103 : }
104 :
105 424 : OString strip(const OString &rIn, sal_Char c)
106 : {
107 424 : return stripEnd(stripStart(rIn, c), c);
108 : }
109 :
110 11059 : OUString strip(const OUString &rIn, sal_Unicode c)
111 : {
112 11059 : return stripEnd(stripStart(rIn, c), c);
113 : }
114 :
115 : namespace
116 : {
117 126071 : template <typename T, typename C> sal_Int32 tmpl_getTokenCount(const T &rIn,
118 : C cTok)
119 : {
120 : // Empty String: TokenCount by Definition is 0
121 126071 : if (rIn.isEmpty())
122 42 : return 0;
123 :
124 126029 : sal_Int32 nTokCount = 1;
125 1996411 : for (sal_Int32 i = 0; i < rIn.getLength(); ++i)
126 : {
127 1870382 : if (rIn[i] == cTok)
128 60168 : ++nTokCount;
129 : }
130 126029 : return nTokCount;
131 : }
132 : }
133 :
134 113600 : sal_Int32 getTokenCount(const OString &rIn, sal_Char cTok)
135 : {
136 113600 : return tmpl_getTokenCount<OString, sal_Char>(rIn, cTok);
137 : }
138 :
139 12471 : sal_Int32 getTokenCount(const OUString &rIn, sal_Unicode cTok)
140 : {
141 12471 : return tmpl_getTokenCount<OUString, sal_Unicode>(rIn, cTok);
142 : }
143 :
144 21 : sal_uInt32 decimalStringToNumber(
145 : OUString const & str )
146 : {
147 21 : sal_uInt32 result = 0;
148 79 : for( sal_Int32 i = 0 ; i < str.getLength() ; )
149 : {
150 37 : sal_uInt32 c = str.iterateCodePoints(&i);
151 37 : sal_uInt32 value = 0;
152 37 : if( c <= 0x0039) // ASCII decimal digits, most common
153 34 : value = c - 0x0030;
154 3 : else if( c >= 0x1D7F6 ) // mathematical monospace digits
155 2 : value = c - 0x1D7F6;
156 1 : else if( c >= 0x1D7EC ) // mathematical sans-serif bold digits
157 0 : value = c - 0x1D7EC;
158 1 : else if( c >= 0x1D7E2 ) // mathematical sans-serif digits
159 0 : value = c - 0x1D7E2;
160 1 : else if( c >= 0x1D7D8 ) // mathematical double-struck digits
161 0 : value = c - 0x1D7D8;
162 1 : else if( c >= 0x1D7CE ) // mathematical bold digits
163 0 : value = c - 0x1D7CE;
164 1 : else if( c >= 0x11066 ) // brahmi digits
165 0 : value = c - 0x11066;
166 1 : else if( c >= 0x104A0 ) // osmanya digits
167 0 : value = c - 0x104A0;
168 1 : else if( c >= 0xFF10 ) // fullwidth digits
169 0 : value = c - 0xFF10;
170 1 : else if( c >= 0xABF0 ) // meetei mayek digits
171 0 : value = c - 0xABF0;
172 1 : else if( c >= 0xAA50 ) // cham digits
173 0 : value = c - 0xAA50;
174 1 : else if( c >= 0xA9D0 ) // javanese digits
175 0 : value = c - 0xA9D0;
176 1 : else if( c >= 0xA900 ) // kayah li digits
177 0 : value = c - 0xA900;
178 1 : else if( c >= 0xA8D0 ) // saurashtra digits
179 0 : value = c - 0xA8D0;
180 1 : else if( c >= 0xA620 ) // vai digits
181 0 : value = c - 0xA620;
182 1 : else if( c >= 0x1C50 ) // ol chiki digits
183 0 : value = c - 0x1C50;
184 1 : else if( c >= 0x1C40 ) // lepcha digits
185 0 : value = c - 0x1C40;
186 1 : else if( c >= 0x1BB0 ) // sundanese digits
187 0 : value = c - 0x1BB0;
188 1 : else if( c >= 0x1B50 ) // balinese digits
189 0 : value = c - 0x1B50;
190 1 : else if( c >= 0x1A90 ) // tai tham tham digits
191 0 : value = c - 0x1A90;
192 1 : else if( c >= 0x1A80 ) // tai tham hora digits
193 0 : value = c - 0x1A80;
194 1 : else if( c >= 0x19D0 ) // new tai lue digits
195 0 : value = c - 0x19D0;
196 1 : else if( c >= 0x1946 ) // limbu digits
197 0 : value = c - 0x1946;
198 1 : else if( c >= 0x1810 ) // mongolian digits
199 0 : value = c - 0x1810;
200 1 : else if( c >= 0x17E0 ) // khmer digits
201 0 : value = c - 0x17E0;
202 1 : else if( c >= 0x1090 ) // myanmar shan digits
203 0 : value = c - 0x1090;
204 1 : else if( c >= 0x1040 ) // myanmar digits
205 0 : value = c - 0x1040;
206 1 : else if( c >= 0x0F20 ) // tibetan digits
207 0 : value = c - 0x0F20;
208 1 : else if( c >= 0x0ED0 ) // lao digits
209 0 : value = c - 0x0ED0;
210 1 : else if( c >= 0x0E50 ) // thai digits
211 0 : value = c - 0x0E50;
212 1 : else if( c >= 0x0D66 ) // malayalam digits
213 0 : value = c - 0x0D66;
214 1 : else if( c >= 0x0CE6 ) // kannada digits
215 0 : value = c - 0x0CE6;
216 1 : else if( c >= 0x0C66 ) // telugu digits
217 0 : value = c - 0x0C66;
218 1 : else if( c >= 0x0BE6 ) // tamil digits
219 0 : value = c - 0x0BE6;
220 1 : else if( c >= 0x0B66 ) // odia digits
221 0 : value = c - 0x0B66;
222 1 : else if( c >= 0x0AE6 ) // gujarati digits
223 0 : value = c - 0x0AE6;
224 1 : else if( c >= 0x0A66 ) // gurmukhi digits
225 0 : value = c - 0x0A66;
226 1 : else if( c >= 0x09E6 ) // bengali digits
227 0 : value = c - 0x09E6;
228 1 : else if( c >= 0x0966 ) // devanagari digit
229 0 : value = c - 0x0966;
230 1 : else if( c >= 0x07C0 ) // nko digits
231 1 : value = c - 0x07C0;
232 0 : else if( c >= 0x06F0 ) // extended arabic-indic digits
233 0 : value = c - 0x06F0;
234 0 : else if( c >= 0x0660 ) // arabic-indic digits
235 0 : value = c - 0x0660;
236 37 : result = result * 10 + value;
237 : }
238 21 : return result;
239 : }
240 :
241 : using namespace ::com::sun::star;
242 :
243 : // convert between sequence of string and comma separated string
244 :
245 164 : OUString convertCommaSeparated(
246 : uno::Sequence< OUString > const& i_rSeq)
247 : {
248 164 : OUStringBuffer buf;
249 : ::comphelper::intersperse(
250 164 : i_rSeq.begin(), i_rSeq.end(), ::comphelper::OUStringBufferAppender(buf), OUString( ", " ));
251 164 : return buf.makeStringAndClear();
252 : }
253 :
254 : uno::Sequence< OUString >
255 131 : convertCommaSeparated( OUString const& i_rString )
256 : {
257 131 : std::vector< OUString > vec;
258 131 : sal_Int32 idx = 0;
259 165 : do {
260 : OUString kw =
261 165 : i_rString.getToken(0, static_cast<sal_Unicode> (','), idx);
262 165 : kw = kw.trim();
263 165 : if (!kw.isEmpty()) {
264 50 : vec.push_back(kw);
265 165 : }
266 165 : } while (idx >= 0);
267 131 : uno::Sequence< OUString > kws(vec.size());
268 131 : std::copy(vec.begin(), vec.end(), kws.begin());
269 131 : return kws;
270 : }
271 :
272 :
273 474 : sal_Int32 compareNatural( const OUString & rLHS, const OUString & rRHS,
274 : const uno::Reference< i18n::XCollator > &rCollator,
275 : const uno::Reference< i18n::XBreakIterator > &rBI,
276 : const lang::Locale &rLocale )
277 : {
278 474 : sal_Int32 nRet = 0;
279 :
280 474 : sal_Int32 nLHSLastNonDigitPos = 0;
281 474 : sal_Int32 nRHSLastNonDigitPos = 0;
282 474 : sal_Int32 nLHSFirstDigitPos = 0;
283 474 : sal_Int32 nRHSFirstDigitPos = 0;
284 :
285 951 : while (nLHSFirstDigitPos < rLHS.getLength() || nRHSFirstDigitPos < rRHS.getLength())
286 : {
287 : sal_Int32 nLHSChunkLen;
288 : sal_Int32 nRHSChunkLen;
289 :
290 : //Compare non digit block as normal strings
291 475 : nLHSFirstDigitPos = rBI->nextCharBlock(rLHS, nLHSLastNonDigitPos,
292 475 : rLocale, i18n::CharType::DECIMAL_DIGIT_NUMBER);
293 475 : nRHSFirstDigitPos = rBI->nextCharBlock(rRHS, nRHSLastNonDigitPos,
294 475 : rLocale, i18n::CharType::DECIMAL_DIGIT_NUMBER);
295 475 : if (nLHSFirstDigitPos == -1)
296 416 : nLHSFirstDigitPos = rLHS.getLength();
297 475 : if (nRHSFirstDigitPos == -1)
298 455 : nRHSFirstDigitPos = rRHS.getLength();
299 475 : nLHSChunkLen = nLHSFirstDigitPos - nLHSLastNonDigitPos;
300 475 : nRHSChunkLen = nRHSFirstDigitPos - nRHSLastNonDigitPos;
301 :
302 475 : nRet = rCollator->compareSubstring(rLHS, nLHSLastNonDigitPos,
303 475 : nLHSChunkLen, rRHS, nRHSLastNonDigitPos, nRHSChunkLen);
304 475 : if (nRet != 0)
305 466 : break;
306 :
307 : //Compare digit block as one number vs another
308 9 : nLHSLastNonDigitPos = rBI->endOfCharBlock(rLHS, nLHSFirstDigitPos,
309 9 : rLocale, i18n::CharType::DECIMAL_DIGIT_NUMBER);
310 9 : nRHSLastNonDigitPos = rBI->endOfCharBlock(rRHS, nRHSFirstDigitPos,
311 9 : rLocale, i18n::CharType::DECIMAL_DIGIT_NUMBER);
312 9 : if (nLHSLastNonDigitPos == -1)
313 6 : nLHSLastNonDigitPos = rLHS.getLength();
314 9 : if (nRHSLastNonDigitPos == -1)
315 6 : nRHSLastNonDigitPos = rRHS.getLength();
316 9 : nLHSChunkLen = nLHSLastNonDigitPos - nLHSFirstDigitPos;
317 9 : nRHSChunkLen = nRHSLastNonDigitPos - nRHSFirstDigitPos;
318 :
319 : //To-Do: Possibly scale down those unicode codepoints that relate to
320 : //numbers outside of the normal 0-9 range, e.g. see GetLocalizedChar in
321 : //vcl
322 :
323 9 : sal_uInt32 nLHS = comphelper::string::decimalStringToNumber(rLHS.copy(nLHSFirstDigitPos, nLHSChunkLen));
324 9 : sal_uInt32 nRHS = comphelper::string::decimalStringToNumber(rRHS.copy(nRHSFirstDigitPos, nRHSChunkLen));
325 :
326 9 : if (nLHS != nRHS)
327 : {
328 6 : nRet = (nLHS < nRHS) ? -1 : 1;
329 6 : break;
330 : }
331 : }
332 :
333 474 : return nRet;
334 : }
335 :
336 7 : NaturalStringSorter::NaturalStringSorter(
337 : const uno::Reference< uno::XComponentContext > &rContext,
338 7 : const lang::Locale &rLocale) : m_aLocale(rLocale)
339 : {
340 7 : m_xCollator = i18n::Collator::create( rContext );
341 7 : m_xCollator->loadDefaultCollator(m_aLocale, 0);
342 7 : m_xBI = i18n::BreakIterator::create( rContext );
343 7 : }
344 :
345 : namespace
346 : {
347 : //do OPER on each element of the string, return false
348 : //if any OPER is false, true otherwise
349 : template <bool (*OPER)(sal_Unicode), typename T>
350 784 : bool tmpl_is_OPER_AsciiString(const T &rString)
351 : {
352 3201 : for (sal_Int32 i = 0; i < rString.getLength(); ++i)
353 : {
354 2544 : if (!OPER(rString[i]))
355 127 : return false;
356 : }
357 657 : return true;
358 : }
359 : }
360 :
361 708 : bool isdigitAsciiString(const OString &rString)
362 : {
363 708 : return tmpl_is_OPER_AsciiString<isdigitAscii>(rString);
364 : }
365 :
366 76 : bool isdigitAsciiString(const OUString &rString)
367 : {
368 76 : return tmpl_is_OPER_AsciiString<isdigitAscii>(rString);
369 : }
370 :
371 : namespace
372 : {
373 1 : template <typename T, typename O> T tmpl_reverseString(const T &rIn)
374 : {
375 1 : if (rIn.isEmpty())
376 0 : return rIn;
377 :
378 1 : sal_Int32 i = rIn.getLength();
379 1 : O sBuf(i);
380 5 : while (i)
381 3 : sBuf.append(rIn[--i]);
382 1 : return sBuf.makeStringAndClear();
383 : }
384 : }
385 :
386 0 : OUString reverseString(const OUString &rStr)
387 : {
388 0 : return tmpl_reverseString<OUString, OUStringBuffer>(rStr);
389 : }
390 :
391 1 : OString reverseString(const OString &rStr)
392 : {
393 1 : return tmpl_reverseString<OString, OStringBuffer>(rStr);
394 : }
395 :
396 1967 : sal_Int32 indexOfAny(OUString const& rIn,
397 : sal_Unicode const*const pChars, sal_Int32 const nPos)
398 : {
399 51411 : for (sal_Int32 i = nPos; i < rIn.getLength(); ++i)
400 : {
401 49462 : sal_Unicode const c = rIn[i];
402 197722 : for (sal_Unicode const* pChar = pChars; *pChar; ++pChar)
403 : {
404 148278 : if (c == *pChar)
405 : {
406 18 : return i;
407 : }
408 : }
409 : }
410 1949 : return -1;
411 : }
412 :
413 674 : OUString setToken(const OUString& rIn, sal_Int32 nToken, sal_Unicode cTok,
414 : const OUString& rNewToken)
415 : {
416 674 : const sal_Unicode* pStr = rIn.getStr();
417 674 : sal_Int32 nLen = rIn.getLength();
418 674 : sal_Int32 nTok = 0;
419 674 : sal_Int32 nFirstChar = 0;
420 674 : sal_Int32 i = 0;
421 :
422 : // Determine token position and length
423 29499 : while ( i < nLen )
424 : {
425 : // Increase token count if match
426 28802 : if (*pStr == cTok)
427 : {
428 10420 : ++nTok;
429 :
430 10420 : if (nTok == nToken)
431 632 : nFirstChar = i+1;
432 9788 : else if (nTok > nToken)
433 651 : break;
434 : }
435 :
436 : ++pStr,
437 28151 : ++i;
438 : }
439 :
440 674 : if (nTok >= nToken)
441 674 : return rIn.replaceAt(nFirstChar, i-nFirstChar, rNewToken);
442 0 : return rIn;
443 : }
444 :
445 : } }
446 :
447 : /* vim:set shiftwidth=4 softtabstop=4 expandtab: */
|
