loop.c (load_mems): Avoid using next_label to find end_label.
[platform/upstream/gcc.git] / gcc / c-lex.c
1 /* Lexical analyzer for C and Objective C.
2    Copyright (C) 1987, 1988, 1989, 1992, 1994, 1995, 1996, 1997
3    1998, 1999, 2000 Free Software Foundation, Inc.
4
5 This file is part of GNU CC.
6
7 GNU CC is free software; you can redistribute it and/or modify
8 it under the terms of the GNU General Public License as published by
9 the Free Software Foundation; either version 2, or (at your option)
10 any later version.
11
12 GNU CC is distributed in the hope that it will be useful,
13 but WITHOUT ANY WARRANTY; without even the implied warranty of
14 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
15 GNU General Public License for more details.
16
17 You should have received a copy of the GNU General Public License
18 along with GNU CC; see the file COPYING.  If not, write to
19 the Free Software Foundation, 59 Temple Place - Suite 330,
20 Boston, MA 02111-1307, USA.  */
21
22 #include "config.h"
23 #include "system.h"
24
25 #include "rtl.h"
26 #include "expr.h"
27 #include "tree.h"
28 #include "input.h"
29 #include "output.h"
30 #include "c-lex.h"
31 #include "c-tree.h"
32 #include "flags.h"
33 #include "timevar.h"
34 #include "cpplib.h"
35 #include "c-pragma.h"
36 #include "toplev.h"
37 #include "intl.h"
38 #include "tm_p.h"
39 #include "splay-tree.h"
40
41 /* MULTIBYTE_CHARS support only works for native compilers.
42    ??? Ideally what we want is to model widechar support after
43    the current floating point support.  */
44 #ifdef CROSS_COMPILE
45 #undef MULTIBYTE_CHARS
46 #endif
47
48 #ifdef MULTIBYTE_CHARS
49 #include "mbchar.h"
50 #include <locale.h>
51 #endif /* MULTIBYTE_CHARS */
52 #ifndef GET_ENVIRONMENT
53 #define GET_ENVIRONMENT(ENV_VALUE,ENV_NAME) ((ENV_VALUE) = getenv (ENV_NAME))
54 #endif
55
56 /* The original file name, before changing "-" to "stdin".  */
57 static const char *orig_filename;
58
59 /* Private idea of the line number.  See discussion in c_lex().  */
60 static int lex_lineno;
61
62 /* We may keep statistics about how long which files took to compile.  */
63 static int header_time, body_time;
64 static splay_tree file_info_tree;
65
66 /* Cause the `yydebug' variable to be defined.  */
67 #define YYDEBUG 1
68
69 /* File used for outputting assembler code.  */
70 extern FILE *asm_out_file;
71
72 #undef WCHAR_TYPE_SIZE
73 #define WCHAR_TYPE_SIZE TYPE_PRECISION (wchar_type_node)
74
75 /* Number of bytes in a wide character.  */
76 #define WCHAR_BYTES (WCHAR_TYPE_SIZE / BITS_PER_UNIT)
77
78 int indent_level;        /* Number of { minus number of }. */
79 int pending_lang_change; /* If we need to switch languages - C++ only */
80 int c_header_level;      /* depth in C headers - C++ only */
81
82 /* Nonzero tells yylex to ignore \ in string constants.  */
83 static int ignore_escape_flag;
84
85 static const char *readescape   PARAMS ((const char *, const char *,
86                                          unsigned int *));
87 static const char *read_ucs     PARAMS ((const char *, const char *,
88                                          unsigned int *, int));
89 static void parse_float         PARAMS ((PTR));
90 static tree lex_number          PARAMS ((const char *, unsigned int));
91 static tree lex_string          PARAMS ((const char *, unsigned int, int));
92 static tree lex_charconst       PARAMS ((const char *, unsigned int, int));
93 static void update_header_times PARAMS ((const char *));
94 static int dump_one_header      PARAMS ((splay_tree_node, void *));
95 static void cb_ident            PARAMS ((cpp_reader *, const cpp_string *));
96 static void cb_change_file    PARAMS ((cpp_reader *, const cpp_file_change *));
97 static void cb_def_pragma       PARAMS ((cpp_reader *));
98 \f
99 const char *
100 init_c_lex (filename)
101      const char *filename;
102 {
103   struct c_fileinfo *toplevel;
104
105   orig_filename = filename;
106
107   /* Set up filename timing.  Must happen before cpp_start_read.  */
108   file_info_tree = splay_tree_new ((splay_tree_compare_fn)strcmp,
109                                    0,
110                                    (splay_tree_delete_value_fn)free);
111   toplevel = get_fileinfo ("<top level>");
112   if (flag_detailed_statistics)
113     {
114       header_time = 0;
115       body_time = get_run_time ();
116       toplevel->time = body_time;
117     }
118   
119 #ifdef MULTIBYTE_CHARS
120   /* Change to the native locale for multibyte conversions.  */
121   setlocale (LC_CTYPE, "");
122   GET_ENVIRONMENT (literal_codeset, "LANG");
123 #endif
124
125   parse_in.cb.ident = cb_ident;
126   parse_in.cb.change_file = cb_change_file;
127   parse_in.cb.def_pragma = cb_def_pragma;
128
129   /* Make sure parse_in.digraphs matches flag_digraphs.  */
130   CPP_OPTION (&parse_in, digraphs) = flag_digraphs;
131
132   if (filename == 0 || !strcmp (filename, "-"))
133     filename = "stdin";
134
135   /* Start it at 0, because check_newline is called at the very beginning
136      and will increment it to 1.  */
137   lineno = lex_lineno = 0;
138
139   return filename;
140 }
141
142 /* A thin wrapper around the real parser that initializes the 
143    integrated preprocessor after debug output has been initialized.  */
144
145 int
146 yyparse()
147 {
148   if (! cpp_start_read (&parse_in, orig_filename))
149     return 1;                   /* cpplib has emitted an error.  */
150
151   return yyparse_1();
152 }
153
154 struct c_fileinfo *
155 get_fileinfo (name)
156      const char *name;
157 {
158   splay_tree_node n;
159   struct c_fileinfo *fi;
160
161   n = splay_tree_lookup (file_info_tree, (splay_tree_key) name);
162   if (n)
163     return (struct c_fileinfo *) n->value;
164
165   fi = (struct c_fileinfo *) xmalloc (sizeof (struct c_fileinfo));
166   fi->time = 0;
167   fi->interface_only = 0;
168   fi->interface_unknown = 1;
169   splay_tree_insert (file_info_tree, (splay_tree_key) name,
170                      (splay_tree_value) fi);
171   return fi;
172 }
173
174 static void
175 update_header_times (name)
176      const char *name;
177 {
178   /* Changing files again.  This means currently collected time
179      is charged against header time, and body time starts back at 0.  */
180   if (flag_detailed_statistics)
181     {
182       int this_time = get_run_time ();
183       struct c_fileinfo *file = get_fileinfo (name);
184       header_time += this_time - body_time;
185       file->time += this_time - body_time;
186       body_time = this_time;
187     }
188 }
189
190 static int
191 dump_one_header (n, dummy)
192      splay_tree_node n;
193      void *dummy ATTRIBUTE_UNUSED;
194 {
195   print_time ((const char *) n->key,
196               ((struct c_fileinfo *) n->value)->time);
197   return 0;
198 }
199
200 void
201 dump_time_statistics ()
202 {
203   struct c_fileinfo *file = get_fileinfo (input_filename);
204   int this_time = get_run_time ();
205   file->time += this_time - body_time;
206
207   fprintf (stderr, "\n******\n");
208   print_time ("header files (total)", header_time);
209   print_time ("main file (total)", this_time - body_time);
210   fprintf (stderr, "ratio = %g : 1\n",
211            (double)header_time / (double)(this_time - body_time));
212   fprintf (stderr, "\n******\n");
213
214   splay_tree_foreach (file_info_tree, dump_one_header, 0);
215 }
216
217 /* Not yet handled: #pragma, #define, #undef.
218    No need to deal with linemarkers under normal conditions.  */
219
220 static void
221 cb_ident (pfile, str)
222      cpp_reader *pfile ATTRIBUTE_UNUSED;
223      const cpp_string *str;
224 {
225 #ifdef ASM_OUTPUT_IDENT
226   if (! flag_no_ident)
227     {
228       /* Convert escapes in the string.  */
229       tree value = lex_string ((const char *)str->text, str->len, 0);
230       ASM_OUTPUT_IDENT (asm_out_file, TREE_STRING_POINTER (value));
231     }
232 #endif
233 }
234
235 static void
236 cb_change_file (pfile, fc)
237      cpp_reader *pfile ATTRIBUTE_UNUSED;
238      const cpp_file_change *fc;
239 {
240   if (fc->from.filename == 0)
241     main_input_filename = fc->to.filename;
242   in_system_header = fc->sysp;
243
244   /* Do the actions implied by the preceding numbers.  */
245   if (fc->reason == FC_ENTER)
246     {
247       /* FIXME.  Don't stack the main buffer on the input stack.  */
248       if (fc->from.filename)
249         {
250           lineno = lex_lineno;
251           push_srcloc (fc->to.filename, 1);
252           input_file_stack->indent_level = indent_level;
253           debug_start_source_file (fc->to.filename);
254 #ifndef NO_IMPLICIT_EXTERN_C
255           if (c_header_level)
256             ++c_header_level;
257           else if (fc->externc)
258             {
259               c_header_level = 1;
260               ++pending_lang_change;
261             }
262 #endif
263         }
264     }
265   else if (fc->reason == FC_LEAVE)
266     {
267       /* Popping out of a file.  */
268       if (input_file_stack->next)
269         {
270 #ifndef NO_IMPLICIT_EXTERN_C
271           if (c_header_level && --c_header_level == 0)
272             {
273               if (fc->externc)
274                 warning ("badly nested C headers from preprocessor");
275               --pending_lang_change;
276             }
277 #endif
278 #if 0
279           if (indent_level != input_file_stack->indent_level)
280             {
281               warning_with_file_and_line
282                 (input_filename, lex_lineno,
283                  "This file contains more '%c's than '%c's.",
284                  indent_level > input_file_stack->indent_level ? '{' : '}',
285                  indent_level > input_file_stack->indent_level ? '}' : '{');
286             }
287 #endif
288           pop_srcloc ();
289           debug_end_source_file (input_file_stack->line);
290         }
291       else
292         error ("leaving more files than we entered");
293     }
294   else if (fc->reason == FC_RENAME)
295     input_filename = fc->to.filename;
296
297   update_header_times (fc->to.filename);
298
299   input_filename = fc->to.filename;
300   lex_lineno = fc->to.lineno;
301
302   /* Hook for C++.  */
303   extract_interface_info ();
304 }
305
306 static void
307 cb_def_pragma (pfile)
308      cpp_reader *pfile;
309 {
310   /* Issue a warning message if we have been asked to do so.  Ignore
311      unknown pragmas in system headers unless an explicit
312      -Wunknown-pragmas has been given. */
313   if (warn_unknown_pragmas > in_system_header)
314     {
315       const unsigned char *space, *name = 0;
316       cpp_token s;
317
318       cpp_get_token (pfile, &s);
319       space = cpp_token_as_text (pfile, &s);
320       cpp_get_token (pfile, &s);
321       if (s.type == CPP_NAME)
322         name = cpp_token_as_text (pfile, &s);
323
324       if (name)
325         warning ("ignoring #pragma %s %s", space, name);
326       else
327         warning ("ignoring #pragma %s", space);
328     }
329 }
330
331 /* Parse a '\uNNNN' or '\UNNNNNNNN' sequence.
332
333    [lex.charset]: The character designated by the universal-character-name 
334    \UNNNNNNNN is that character whose character short name in ISO/IEC 10646
335    is NNNNNNNN; the character designated by the universal-character-name
336    \uNNNN is that character whose character short name in ISO/IEC 10646 is
337    0000NNNN. If the hexadecimal value for a universal character name is
338    less than 0x20 or in the range 0x7F-0x9F (inclusive), or if the
339    universal character name designates a character in the basic source
340    character set, then the program is ill-formed.
341
342    We assume that wchar_t is Unicode, so we don't need to do any
343    mapping.  Is this ever wrong?  */
344
345 static const char *
346 read_ucs (p, limit, cptr, length)
347      const char *p;
348      const char *limit;
349      unsigned int *cptr;
350      int length;
351 {
352   unsigned int code = 0;
353   int c;
354
355   for (; length; --length)
356     {
357       if (p >= limit)
358         {
359           error ("incomplete universal-character-name");
360           break;
361         }
362
363       c = *p++;
364       if (! ISXDIGIT (c))
365         {
366           error ("non hex digit '%c' in universal-character-name", c);
367           p--;
368           break;
369         }
370
371       code <<= 4;
372       if (c >= 'a' && c <= 'f')
373         code += c - 'a' + 10;
374       if (c >= 'A' && c <= 'F')
375         code += c - 'A' + 10;
376       if (c >= '0' && c <= '9')
377         code += c - '0';
378     }
379
380 #ifdef TARGET_EBCDIC
381   sorry ("universal-character-name on EBCDIC target");
382   *cptr = 0x3f;  /* EBCDIC invalid character */
383   return p;
384 #endif
385
386   if (code > 0x9f && !(code & 0x80000000))
387     /* True extended character, OK.  */;
388   else if (code >= 0x20 && code < 0x7f)
389     {
390       /* ASCII printable character.  The C character set consists of all of
391          these except $, @ and `.  We use hex escapes so that this also
392          works with EBCDIC hosts.  */
393       if (code != 0x24 && code != 0x40 && code != 0x60)
394         error ("universal-character-name used for '%c'", code);
395     }
396   else
397     error ("invalid universal-character-name");
398
399   *cptr = code;
400   return p;
401 }
402
403 /* Read an escape sequence and write its character equivalent into *CPTR.
404    P is the input pointer, which is just after the backslash.  LIMIT
405    is how much text we have.
406    Returns the updated input pointer.  */
407
408 static const char *
409 readescape (p, limit, cptr)
410      const char *p;
411      const char *limit;
412      unsigned int *cptr;
413 {
414   unsigned int c, code, count;
415   unsigned firstdig = 0;
416   int nonnull;
417
418   if (p == limit)
419     {
420       /* cpp has already issued an error for this.  */
421       *cptr = 0;
422       return p;
423     }
424
425   c = *p++;
426
427   switch (c)
428     {
429     case 'x':
430       if (warn_traditional && !in_system_header)
431         warning ("the meaning of `\\x' varies with -traditional");
432
433       if (flag_traditional)
434         {
435           *cptr = 'x';
436           return p;
437         }
438
439       code = 0;
440       count = 0;
441       nonnull = 0;
442       while (p < limit)
443         {
444           c = *p++;
445           if (! ISXDIGIT (c))
446             {
447               p--;
448               break;
449             }
450           code *= 16;
451           if (c >= 'a' && c <= 'f')
452             code += c - 'a' + 10;
453           if (c >= 'A' && c <= 'F')
454             code += c - 'A' + 10;
455           if (c >= '0' && c <= '9')
456             code += c - '0';
457           if (code != 0 || count != 0)
458             {
459               if (count == 0)
460                 firstdig = code;
461               count++;
462             }
463           nonnull = 1;
464         }
465       if (! nonnull)
466         {
467           warning ("\\x used with no following hex digits");
468           *cptr = 'x';
469           return p;
470         }
471       else if (count == 0)
472         /* Digits are all 0's.  Ok.  */
473         ;
474       else if ((count - 1) * 4 >= TYPE_PRECISION (integer_type_node)
475                || (count > 1
476                    && (((unsigned)1
477                         << (TYPE_PRECISION (integer_type_node)
478                             - (count - 1) * 4))
479                        <= firstdig)))
480         pedwarn ("hex escape out of range");
481       *cptr = code;
482       return p;
483
484     case '0':  case '1':  case '2':  case '3':  case '4':
485     case '5':  case '6':  case '7':
486       code = 0;
487       for (count = 0; count < 3; count++)
488         {
489           if (c < '0' || c > '7')
490             {
491               p--;
492               break;
493             }
494           code = (code * 8) + (c - '0');
495           if (p == limit)
496             break;
497           c = *p++;
498         }
499
500       if (count == 3)
501         p--;
502
503       *cptr = code;
504       return p;
505
506     case '\\': case '\'': case '"': case '?':
507       *cptr = c;
508       return p;
509
510     case 'n': *cptr = TARGET_NEWLINE;   return p;
511     case 't': *cptr = TARGET_TAB;       return p;
512     case 'r': *cptr = TARGET_CR;        return p;
513     case 'f': *cptr = TARGET_FF;        return p;
514     case 'b': *cptr = TARGET_BS;        return p;
515     case 'v': *cptr = TARGET_VT;        return p;
516     case 'a':
517       if (warn_traditional && !in_system_header)
518         warning ("the meaning of '\\a' varies with -traditional");
519       *cptr = flag_traditional ? c : TARGET_BELL;
520       return p;
521
522       /* Warnings and support checks handled by read_ucs().  */
523     case 'u': case 'U':
524       if (c_language != clk_cplusplus && !flag_isoc99)
525         break;
526
527       if (warn_traditional && !in_system_header)
528         warning ("the meaning of '\\%c' varies with -traditional", c);
529
530       return read_ucs (p, limit, cptr, c == 'u' ? 4 : 8);
531       
532     case 'e': case 'E':
533       if (pedantic)
534         pedwarn ("non-ISO-standard escape sequence, '\\%c'", c);
535       *cptr = TARGET_ESC; return p;
536
537       /* '\(', etc, are used at beginning of line to avoid confusing Emacs.
538          '\%' is used to prevent SCCS from getting confused.  */
539     case '(': case '{': case '[': case '%':
540       if (pedantic)
541         pedwarn ("unknown escape sequence '\\%c'", c);
542       *cptr = c;
543       return p;
544     }
545
546   if (ISGRAPH (c))
547     pedwarn ("unknown escape sequence '\\%c'", c);
548   else
549     pedwarn ("unknown escape sequence: '\\' followed by char 0x%x", c);
550
551   *cptr = c;
552   return p;
553 }
554
555 #if 0 /* not yet */
556 /* Returns nonzero if C is a universal-character-name.  Give an error if it
557    is not one which may appear in an identifier, as per [extendid].
558
559    Note that extended character support in identifiers has not yet been
560    implemented.  It is my personal opinion that this is not a desirable
561    feature.  Portable code cannot count on support for more than the basic
562    identifier character set.  */
563
564 static inline int
565 is_extended_char (c)
566      int c;
567 {
568 #ifdef TARGET_EBCDIC
569   return 0;
570 #else
571   /* ASCII.  */
572   if (c < 0x7f)
573     return 0;
574
575   /* None of the valid chars are outside the Basic Multilingual Plane (the
576      low 16 bits).  */
577   if (c > 0xffff)
578     {
579       error ("universal-character-name '\\U%08x' not valid in identifier", c);
580       return 1;
581     }
582   
583   /* Latin */
584   if ((c >= 0x00c0 && c <= 0x00d6)
585       || (c >= 0x00d8 && c <= 0x00f6)
586       || (c >= 0x00f8 && c <= 0x01f5)
587       || (c >= 0x01fa && c <= 0x0217)
588       || (c >= 0x0250 && c <= 0x02a8)
589       || (c >= 0x1e00 && c <= 0x1e9a)
590       || (c >= 0x1ea0 && c <= 0x1ef9))
591     return 1;
592
593   /* Greek */
594   if ((c == 0x0384)
595       || (c >= 0x0388 && c <= 0x038a)
596       || (c == 0x038c)
597       || (c >= 0x038e && c <= 0x03a1)
598       || (c >= 0x03a3 && c <= 0x03ce)
599       || (c >= 0x03d0 && c <= 0x03d6)
600       || (c == 0x03da)
601       || (c == 0x03dc)
602       || (c == 0x03de)
603       || (c == 0x03e0)
604       || (c >= 0x03e2 && c <= 0x03f3)
605       || (c >= 0x1f00 && c <= 0x1f15)
606       || (c >= 0x1f18 && c <= 0x1f1d)
607       || (c >= 0x1f20 && c <= 0x1f45)
608       || (c >= 0x1f48 && c <= 0x1f4d)
609       || (c >= 0x1f50 && c <= 0x1f57)
610       || (c == 0x1f59)
611       || (c == 0x1f5b)
612       || (c == 0x1f5d)
613       || (c >= 0x1f5f && c <= 0x1f7d)
614       || (c >= 0x1f80 && c <= 0x1fb4)
615       || (c >= 0x1fb6 && c <= 0x1fbc)
616       || (c >= 0x1fc2 && c <= 0x1fc4)
617       || (c >= 0x1fc6 && c <= 0x1fcc)
618       || (c >= 0x1fd0 && c <= 0x1fd3)
619       || (c >= 0x1fd6 && c <= 0x1fdb)
620       || (c >= 0x1fe0 && c <= 0x1fec)
621       || (c >= 0x1ff2 && c <= 0x1ff4)
622       || (c >= 0x1ff6 && c <= 0x1ffc))
623     return 1;
624
625   /* Cyrillic */
626   if ((c >= 0x0401 && c <= 0x040d)
627       || (c >= 0x040f && c <= 0x044f)
628       || (c >= 0x0451 && c <= 0x045c)
629       || (c >= 0x045e && c <= 0x0481)
630       || (c >= 0x0490 && c <= 0x04c4)
631       || (c >= 0x04c7 && c <= 0x04c8)
632       || (c >= 0x04cb && c <= 0x04cc)
633       || (c >= 0x04d0 && c <= 0x04eb)
634       || (c >= 0x04ee && c <= 0x04f5)
635       || (c >= 0x04f8 && c <= 0x04f9))
636     return 1;
637
638   /* Armenian */
639   if ((c >= 0x0531 && c <= 0x0556)
640       || (c >= 0x0561 && c <= 0x0587))
641     return 1;
642
643   /* Hebrew */
644   if ((c >= 0x05d0 && c <= 0x05ea)
645       || (c >= 0x05f0 && c <= 0x05f4))
646     return 1;
647
648   /* Arabic */
649   if ((c >= 0x0621 && c <= 0x063a)
650       || (c >= 0x0640 && c <= 0x0652)
651       || (c >= 0x0670 && c <= 0x06b7)
652       || (c >= 0x06ba && c <= 0x06be)
653       || (c >= 0x06c0 && c <= 0x06ce)
654       || (c >= 0x06e5 && c <= 0x06e7))
655     return 1;
656
657   /* Devanagari */
658   if ((c >= 0x0905 && c <= 0x0939)
659       || (c >= 0x0958 && c <= 0x0962))
660     return 1;
661
662   /* Bengali */
663   if ((c >= 0x0985 && c <= 0x098c)
664       || (c >= 0x098f && c <= 0x0990)
665       || (c >= 0x0993 && c <= 0x09a8)
666       || (c >= 0x09aa && c <= 0x09b0)
667       || (c == 0x09b2)
668       || (c >= 0x09b6 && c <= 0x09b9)
669       || (c >= 0x09dc && c <= 0x09dd)
670       || (c >= 0x09df && c <= 0x09e1)
671       || (c >= 0x09f0 && c <= 0x09f1))
672     return 1;
673
674   /* Gurmukhi */
675   if ((c >= 0x0a05 && c <= 0x0a0a)
676       || (c >= 0x0a0f && c <= 0x0a10)
677       || (c >= 0x0a13 && c <= 0x0a28)
678       || (c >= 0x0a2a && c <= 0x0a30)
679       || (c >= 0x0a32 && c <= 0x0a33)
680       || (c >= 0x0a35 && c <= 0x0a36)
681       || (c >= 0x0a38 && c <= 0x0a39)
682       || (c >= 0x0a59 && c <= 0x0a5c)
683       || (c == 0x0a5e))
684     return 1;
685
686   /* Gujarati */
687   if ((c >= 0x0a85 && c <= 0x0a8b)
688       || (c == 0x0a8d)
689       || (c >= 0x0a8f && c <= 0x0a91)
690       || (c >= 0x0a93 && c <= 0x0aa8)
691       || (c >= 0x0aaa && c <= 0x0ab0)
692       || (c >= 0x0ab2 && c <= 0x0ab3)
693       || (c >= 0x0ab5 && c <= 0x0ab9)
694       || (c == 0x0ae0))
695     return 1;
696
697   /* Oriya */
698   if ((c >= 0x0b05 && c <= 0x0b0c)
699       || (c >= 0x0b0f && c <= 0x0b10)
700       || (c >= 0x0b13 && c <= 0x0b28)
701       || (c >= 0x0b2a && c <= 0x0b30)
702       || (c >= 0x0b32 && c <= 0x0b33)
703       || (c >= 0x0b36 && c <= 0x0b39)
704       || (c >= 0x0b5c && c <= 0x0b5d)
705       || (c >= 0x0b5f && c <= 0x0b61))
706     return 1;
707
708   /* Tamil */
709   if ((c >= 0x0b85 && c <= 0x0b8a)
710       || (c >= 0x0b8e && c <= 0x0b90)
711       || (c >= 0x0b92 && c <= 0x0b95)
712       || (c >= 0x0b99 && c <= 0x0b9a)
713       || (c == 0x0b9c)
714       || (c >= 0x0b9e && c <= 0x0b9f)
715       || (c >= 0x0ba3 && c <= 0x0ba4)
716       || (c >= 0x0ba8 && c <= 0x0baa)
717       || (c >= 0x0bae && c <= 0x0bb5)
718       || (c >= 0x0bb7 && c <= 0x0bb9))
719     return 1;
720
721   /* Telugu */
722   if ((c >= 0x0c05 && c <= 0x0c0c)
723       || (c >= 0x0c0e && c <= 0x0c10)
724       || (c >= 0x0c12 && c <= 0x0c28)
725       || (c >= 0x0c2a && c <= 0x0c33)
726       || (c >= 0x0c35 && c <= 0x0c39)
727       || (c >= 0x0c60 && c <= 0x0c61))
728     return 1;
729
730   /* Kannada */
731   if ((c >= 0x0c85 && c <= 0x0c8c)
732       || (c >= 0x0c8e && c <= 0x0c90)
733       || (c >= 0x0c92 && c <= 0x0ca8)
734       || (c >= 0x0caa && c <= 0x0cb3)
735       || (c >= 0x0cb5 && c <= 0x0cb9)
736       || (c >= 0x0ce0 && c <= 0x0ce1))
737     return 1;
738
739   /* Malayalam */
740   if ((c >= 0x0d05 && c <= 0x0d0c)
741       || (c >= 0x0d0e && c <= 0x0d10)
742       || (c >= 0x0d12 && c <= 0x0d28)
743       || (c >= 0x0d2a && c <= 0x0d39)
744       || (c >= 0x0d60 && c <= 0x0d61))
745     return 1;
746
747   /* Thai */
748   if ((c >= 0x0e01 && c <= 0x0e30)
749       || (c >= 0x0e32 && c <= 0x0e33)
750       || (c >= 0x0e40 && c <= 0x0e46)
751       || (c >= 0x0e4f && c <= 0x0e5b))
752     return 1;
753
754   /* Lao */
755   if ((c >= 0x0e81 && c <= 0x0e82)
756       || (c == 0x0e84)
757       || (c == 0x0e87)
758       || (c == 0x0e88)
759       || (c == 0x0e8a)
760       || (c == 0x0e0d)
761       || (c >= 0x0e94 && c <= 0x0e97)
762       || (c >= 0x0e99 && c <= 0x0e9f)
763       || (c >= 0x0ea1 && c <= 0x0ea3)
764       || (c == 0x0ea5)
765       || (c == 0x0ea7)
766       || (c == 0x0eaa)
767       || (c == 0x0eab)
768       || (c >= 0x0ead && c <= 0x0eb0)
769       || (c == 0x0eb2)
770       || (c == 0x0eb3)
771       || (c == 0x0ebd)
772       || (c >= 0x0ec0 && c <= 0x0ec4)
773       || (c == 0x0ec6))
774     return 1;
775
776   /* Georgian */
777   if ((c >= 0x10a0 && c <= 0x10c5)
778       || (c >= 0x10d0 && c <= 0x10f6))
779     return 1;
780
781   /* Hiragana */
782   if ((c >= 0x3041 && c <= 0x3094)
783       || (c >= 0x309b && c <= 0x309e))
784     return 1;
785
786   /* Katakana */
787   if ((c >= 0x30a1 && c <= 0x30fe))
788     return 1;
789
790   /* Bopmofo */
791   if ((c >= 0x3105 && c <= 0x312c))
792     return 1;
793
794   /* Hangul */
795   if ((c >= 0x1100 && c <= 0x1159)
796       || (c >= 0x1161 && c <= 0x11a2)
797       || (c >= 0x11a8 && c <= 0x11f9))
798     return 1;
799
800   /* CJK Unified Ideographs */
801   if ((c >= 0xf900 && c <= 0xfa2d)
802       || (c >= 0xfb1f && c <= 0xfb36)
803       || (c >= 0xfb38 && c <= 0xfb3c)
804       || (c == 0xfb3e)
805       || (c >= 0xfb40 && c <= 0xfb41)
806       || (c >= 0xfb42 && c <= 0xfb44)
807       || (c >= 0xfb46 && c <= 0xfbb1)
808       || (c >= 0xfbd3 && c <= 0xfd3f)
809       || (c >= 0xfd50 && c <= 0xfd8f)
810       || (c >= 0xfd92 && c <= 0xfdc7)
811       || (c >= 0xfdf0 && c <= 0xfdfb)
812       || (c >= 0xfe70 && c <= 0xfe72)
813       || (c == 0xfe74)
814       || (c >= 0xfe76 && c <= 0xfefc)
815       || (c >= 0xff21 && c <= 0xff3a)
816       || (c >= 0xff41 && c <= 0xff5a)
817       || (c >= 0xff66 && c <= 0xffbe)
818       || (c >= 0xffc2 && c <= 0xffc7)
819       || (c >= 0xffca && c <= 0xffcf)
820       || (c >= 0xffd2 && c <= 0xffd7)
821       || (c >= 0xffda && c <= 0xffdc)
822       || (c >= 0x4e00 && c <= 0x9fa5))
823     return 1;
824
825   error ("universal-character-name '\\u%04x' not valid in identifier", c);
826   return 1;
827 #endif
828 }
829
830 /* Add the UTF-8 representation of C to the token_buffer.  */
831
832 static void
833 utf8_extend_token (c)
834      int c;
835 {
836   int shift, mask;
837
838   if      (c <= 0x0000007f)
839     {
840       extend_token (c);
841       return;
842     }
843   else if (c <= 0x000007ff)
844     shift = 6, mask = 0xc0;
845   else if (c <= 0x0000ffff)
846     shift = 12, mask = 0xe0;
847   else if (c <= 0x001fffff)
848     shift = 18, mask = 0xf0;
849   else if (c <= 0x03ffffff)
850     shift = 24, mask = 0xf8;
851   else
852     shift = 30, mask = 0xfc;
853
854   extend_token (mask | (c >> shift));
855   do
856     {
857       shift -= 6;
858       extend_token ((unsigned char) (0x80 | (c >> shift)));
859     }
860   while (shift);
861 }
862 #endif
863
864 #if 0
865 struct try_type
866 {
867   tree *node_var;
868   char unsigned_flag;
869   char long_flag;
870   char long_long_flag;
871 };
872
873 struct try_type type_sequence[] =
874 {
875   { &integer_type_node, 0, 0, 0},
876   { &unsigned_type_node, 1, 0, 0},
877   { &long_integer_type_node, 0, 1, 0},
878   { &long_unsigned_type_node, 1, 1, 0},
879   { &long_long_integer_type_node, 0, 1, 1},
880   { &long_long_unsigned_type_node, 1, 1, 1}
881 };
882 #endif /* 0 */
883 \f
884 struct pf_args
885 {
886   /* Input */
887   const char *str;
888   int fflag;
889   int lflag;
890   int base;
891   /* Output */
892   int conversion_errno;
893   REAL_VALUE_TYPE value;
894   tree type;
895 };
896  
897 static void
898 parse_float (data)
899   PTR data;
900 {
901   struct pf_args * args = (struct pf_args *) data;
902   const char *typename;
903
904   args->conversion_errno = 0;
905   args->type = double_type_node;
906   typename = "double";
907
908   /* The second argument, machine_mode, of REAL_VALUE_ATOF
909      tells the desired precision of the binary result
910      of decimal-to-binary conversion.  */
911
912   if (args->fflag)
913     {
914       if (args->lflag)
915         error ("both 'f' and 'l' suffixes on floating constant");
916
917       args->type = float_type_node;
918       typename = "float";
919     }
920   else if (args->lflag)
921     {
922       args->type = long_double_type_node;
923       typename = "long double";
924     }
925   else if (flag_single_precision_constant)
926     {
927       args->type = float_type_node;
928       typename = "float";
929     }
930
931   errno = 0;
932   if (args->base == 16)
933     args->value = REAL_VALUE_HTOF (args->str, TYPE_MODE (args->type));
934   else
935     args->value = REAL_VALUE_ATOF (args->str, TYPE_MODE (args->type));
936
937   args->conversion_errno = errno;
938   /* A diagnostic is required here by some ISO C testsuites.
939      This is not pedwarn, because some people don't want
940      an error for this.  */
941   if (REAL_VALUE_ISINF (args->value) && pedantic)
942     warning ("floating point number exceeds range of '%s'", typename);
943 }
944  
945 int
946 c_lex (value)
947      tree *value;
948 {
949   cpp_token tok;
950   enum cpp_ttype type;
951
952   retry:
953   timevar_push (TV_CPP);
954   cpp_get_token (&parse_in, &tok);
955   timevar_pop (TV_CPP);
956
957   /* The C++ front end does horrible things with the current line
958      number.  To ensure an accurate line number, we must reset it
959      every time we return a token.  */
960   lex_lineno = cpp_get_line (&parse_in)->line;
961
962   *value = NULL_TREE;
963   lineno = lex_lineno;
964   type = tok.type;
965   switch (type)
966     {
967     case CPP_OPEN_BRACE:  indent_level++;  break;
968     case CPP_CLOSE_BRACE: indent_level--;  break;
969
970     /* Issue this error here, where we can get at tok.val.c.  */
971     case CPP_OTHER:
972       if (ISGRAPH (tok.val.c))
973         error ("stray '%c' in program", tok.val.c);
974       else
975         error ("stray '\\%#o' in program", tok.val.c);
976       goto retry;
977       
978     case CPP_NAME:
979       *value = get_identifier ((const char *)tok.val.node->name);
980       break;
981
982     case CPP_INT:
983     case CPP_FLOAT:
984     case CPP_NUMBER:
985       *value = lex_number ((const char *)tok.val.str.text, tok.val.str.len);
986       break;
987
988     case CPP_CHAR:
989     case CPP_WCHAR:
990       *value = lex_charconst ((const char *)tok.val.str.text,
991                               tok.val.str.len, tok.type == CPP_WCHAR);
992       break;
993
994     case CPP_STRING:
995     case CPP_WSTRING:
996     case CPP_OSTRING:
997       *value = lex_string ((const char *)tok.val.str.text,
998                            tok.val.str.len, tok.type == CPP_WSTRING);
999       break;
1000
1001       /* These tokens should not be visible outside cpplib.  */
1002     case CPP_HEADER_NAME:
1003     case CPP_COMMENT:
1004     case CPP_MACRO_ARG:
1005       abort ();
1006
1007     default: break;
1008     }
1009
1010   return type;
1011 }
1012
1013 #define ERROR(msgid) do { error(msgid); goto syntax_error; } while(0)
1014
1015 static tree
1016 lex_number (str, len)
1017      const char *str;
1018      unsigned int len;
1019 {
1020   int base = 10;
1021   int count = 0;
1022   int largest_digit = 0;
1023   int numdigits = 0;
1024   int overflow = 0;
1025   int c;
1026   tree value;
1027   const char *p;
1028   enum anon1 { NOT_FLOAT = 0, AFTER_POINT, AFTER_EXPON } floatflag = NOT_FLOAT;
1029   
1030   /* We actually store only HOST_BITS_PER_CHAR bits in each part.
1031      The code below which fills the parts array assumes that a host
1032      int is at least twice as wide as a host char, and that 
1033      HOST_BITS_PER_WIDE_INT is an even multiple of HOST_BITS_PER_CHAR.
1034      Two HOST_WIDE_INTs is the largest int literal we can store.
1035      In order to detect overflow below, the number of parts (TOTAL_PARTS)
1036      must be exactly the number of parts needed to hold the bits
1037      of two HOST_WIDE_INTs. */
1038 #define TOTAL_PARTS ((HOST_BITS_PER_WIDE_INT / HOST_BITS_PER_CHAR) * 2)
1039   unsigned int parts[TOTAL_PARTS];
1040   
1041   /* Optimize for most frequent case.  */
1042   if (len == 1)
1043     {
1044       if (*str == '0')
1045         return integer_zero_node;
1046       else if (*str == '1')
1047         return integer_one_node;
1048       else
1049         return build_int_2 (*str - '0', 0);
1050     }
1051
1052   for (count = 0; count < TOTAL_PARTS; count++)
1053     parts[count] = 0;
1054
1055   /* len is known to be >1 at this point.  */
1056   p = str;
1057
1058   if (len > 2 && str[0] == '0' && (str[1] == 'x' || str[1] == 'X'))
1059     {
1060       base = 16;
1061       p = str + 2;
1062     }
1063   /* The ISDIGIT check is so we are not confused by a suffix on 0.  */
1064   else if (str[0] == '0' && ISDIGIT (str[1]))
1065     {
1066       base = 8;
1067       p = str + 1;
1068     }
1069
1070   do
1071     {
1072       c = *p++;
1073
1074       if (c == '.')
1075         {
1076           if (base == 16 && pedantic && !flag_isoc99)
1077             pedwarn ("floating constant may not be in radix 16");
1078           else if (floatflag == AFTER_POINT)
1079             ERROR ("too many decimal points in floating constant");
1080           else if (floatflag == AFTER_EXPON)
1081             ERROR ("decimal point in exponent - impossible!");
1082           else
1083             floatflag = AFTER_POINT;
1084
1085           if (base == 8)
1086             base = 10;
1087         }
1088       else if (c == '_')
1089         /* Possible future extension: silently ignore _ in numbers,
1090            permitting cosmetic grouping - e.g. 0x8000_0000 == 0x80000000
1091            but somewhat easier to read.  Ada has this?  */
1092         ERROR ("underscore in number");
1093       else
1094         {
1095           int n;
1096           /* It is not a decimal point.
1097              It should be a digit (perhaps a hex digit).  */
1098
1099           if (ISDIGIT (c))
1100             {
1101               n = c - '0';
1102             }
1103           else if (base <= 10 && (c == 'e' || c == 'E'))
1104             {
1105               base = 10;
1106               floatflag = AFTER_EXPON;
1107               break;
1108             }
1109           else if (base == 16 && (c == 'p' || c == 'P'))
1110             {
1111               floatflag = AFTER_EXPON;
1112               break;   /* start of exponent */
1113             }
1114           else if (base == 16 && c >= 'a' && c <= 'f')
1115             {
1116               n = c - 'a' + 10;
1117             }
1118           else if (base == 16 && c >= 'A' && c <= 'F')
1119             {
1120               n = c - 'A' + 10;
1121             }
1122           else
1123             {
1124               p--;
1125               break;  /* start of suffix */
1126             }
1127
1128           if (n >= largest_digit)
1129             largest_digit = n;
1130           numdigits++;
1131
1132           for (count = 0; count < TOTAL_PARTS; count++)
1133             {
1134               parts[count] *= base;
1135               if (count)
1136                 {
1137                   parts[count]
1138                     += (parts[count-1] >> HOST_BITS_PER_CHAR);
1139                   parts[count-1]
1140                     &= (1 << HOST_BITS_PER_CHAR) - 1;
1141                 }
1142               else
1143                 parts[0] += n;
1144             }
1145
1146           /* If the highest-order part overflows (gets larger than
1147              a host char will hold) then the whole number has 
1148              overflowed.  Record this and truncate the highest-order
1149              part. */
1150           if (parts[TOTAL_PARTS - 1] >> HOST_BITS_PER_CHAR)
1151             {
1152               overflow = 1;
1153               parts[TOTAL_PARTS - 1] &= (1 << HOST_BITS_PER_CHAR) - 1;
1154             }
1155         }
1156     }
1157   while (p < str + len);
1158
1159   /* This can happen on input like `int i = 0x;' */
1160   if (numdigits == 0)
1161     ERROR ("numeric constant with no digits");
1162
1163   if (largest_digit >= base)
1164     ERROR ("numeric constant contains digits beyond the radix");
1165
1166   if (floatflag != NOT_FLOAT)
1167     {
1168       tree type;
1169       int imag, fflag, lflag, conversion_errno;
1170       REAL_VALUE_TYPE real;
1171       struct pf_args args;
1172       char *copy;
1173
1174       if (base == 16 && floatflag != AFTER_EXPON)
1175         ERROR ("hexadecimal floating constant has no exponent");
1176
1177       /* Read explicit exponent if any, and put it in tokenbuf.  */
1178       if ((base == 10 && ((c == 'e') || (c == 'E')))
1179           || (base == 16 && (c == 'p' || c == 'P')))
1180         {
1181           if (p < str + len)
1182             c = *p++;
1183           if (p < str + len && (c == '+' || c == '-'))
1184             c = *p++;
1185           /* Exponent is decimal, even if string is a hex float.  */
1186           if (! ISDIGIT (c))
1187             ERROR ("floating constant exponent has no digits");
1188           while (p < str + len && ISDIGIT (c))
1189             c = *p++;
1190           if (! ISDIGIT (c))
1191             p--;
1192         }
1193
1194       /* Copy the float constant now; we don't want any suffixes in the
1195          string passed to parse_float.  */
1196       copy = alloca (p - str + 1);
1197       memcpy (copy, str, p - str);
1198       copy[p - str] = '\0';
1199
1200       /* Now parse suffixes.  */
1201       fflag = lflag = imag = 0;
1202       while (p < str + len)
1203         switch (*p++)
1204           {
1205           case 'f': case 'F':
1206             if (fflag)
1207               ERROR ("more than one 'f' suffix on floating constant");
1208             else if (warn_traditional && !in_system_header)
1209               warning ("traditional C rejects the 'f' suffix");
1210
1211             fflag = 1;
1212             break;
1213
1214           case 'l': case 'L':
1215             if (lflag)
1216               ERROR ("more than one 'l' suffix on floating constant");
1217             else if (warn_traditional && !in_system_header)
1218               warning ("traditional C rejects the 'l' suffix");
1219
1220             lflag = 1;
1221             break;
1222
1223           case 'i': case 'I':
1224           case 'j': case 'J':
1225             if (imag)
1226               ERROR ("more than one 'i' or 'j' suffix on floating constant");
1227             else if (pedantic)
1228               pedwarn ("ISO C forbids imaginary numeric constants");
1229             imag = 1;
1230             break;
1231
1232           default:
1233             ERROR ("invalid suffix on floating constant");
1234           }
1235
1236       /* Setup input for parse_float() */
1237       args.str = copy;
1238       args.fflag = fflag;
1239       args.lflag = lflag;
1240       args.base = base;
1241
1242       /* Convert string to a double, checking for overflow.  */
1243       if (do_float_handler (parse_float, (PTR) &args))
1244         {
1245           /* Receive output from parse_float() */
1246           real = args.value;
1247         }
1248       else
1249           /* We got an exception from parse_float() */
1250           ERROR ("floating constant out of range");
1251
1252       /* Receive output from parse_float() */
1253       conversion_errno = args.conversion_errno;
1254       type = args.type;
1255             
1256 #ifdef ERANGE
1257       /* ERANGE is also reported for underflow,
1258          so test the value to distinguish overflow from that.  */
1259       if (conversion_errno == ERANGE && !flag_traditional && pedantic
1260           && (REAL_VALUES_LESS (dconst1, real)
1261               || REAL_VALUES_LESS (real, dconstm1)))
1262         warning ("floating point number exceeds range of 'double'");
1263 #endif
1264
1265       /* Create a node with determined type and value.  */
1266       if (imag)
1267         value = build_complex (NULL_TREE, convert (type, integer_zero_node),
1268                                build_real (type, real));
1269       else
1270         value = build_real (type, real);
1271     }
1272   else
1273     {
1274       tree trad_type, ansi_type, type;
1275       HOST_WIDE_INT high, low;
1276       int spec_unsigned = 0;
1277       int spec_long = 0;
1278       int spec_long_long = 0;
1279       int spec_imag = 0;
1280       int suffix_lu = 0;
1281       int warn = 0, i;
1282
1283       trad_type = ansi_type = type = NULL_TREE;
1284       while (p < str + len)
1285         {
1286           c = *p++;
1287           switch (c)
1288             {
1289             case 'u': case 'U':
1290               if (spec_unsigned)
1291                 error ("two 'u' suffixes on integer constant");
1292               else if (warn_traditional && !in_system_header)
1293                 warning ("traditional C rejects the 'u' suffix");
1294
1295               spec_unsigned = 1;
1296               if (spec_long)
1297                 suffix_lu = 1;
1298               break;
1299
1300             case 'l': case 'L':
1301               if (spec_long)
1302                 {
1303                   if (spec_long_long)
1304                     error ("three 'l' suffixes on integer constant");
1305                   else if (suffix_lu)
1306                     error ("'lul' is not a valid integer suffix");
1307                   else if (c != spec_long)
1308                     error ("'Ll' and 'lL' are not valid integer suffixes");
1309                   else if (pedantic && ! flag_isoc99
1310                            && ! in_system_header && warn_long_long)
1311                     pedwarn ("ISO C89 forbids long long integer constants");
1312                   spec_long_long = 1;
1313                 }
1314               spec_long = c;
1315               break;
1316
1317             case 'i': case 'I': case 'j': case 'J':
1318               if (spec_imag)
1319                 error ("more than one 'i' or 'j' suffix on integer constant");
1320               else if (pedantic)
1321                 pedwarn ("ISO C forbids imaginary numeric constants");
1322               spec_imag = 1;
1323               break;
1324
1325             default:
1326               ERROR ("invalid suffix on integer constant");
1327             }
1328         }
1329
1330       /* If the literal overflowed, pedwarn about it now. */
1331       if (overflow)
1332         {
1333           warn = 1;
1334           pedwarn ("integer constant is too large for this configuration of the compiler - truncated to %d bits", HOST_BITS_PER_WIDE_INT * 2);
1335         }
1336
1337       /* This is simplified by the fact that our constant
1338          is always positive.  */
1339
1340       high = low = 0;
1341
1342       for (i = 0; i < HOST_BITS_PER_WIDE_INT / HOST_BITS_PER_CHAR; i++)
1343         {
1344           high |= ((HOST_WIDE_INT) parts[i + (HOST_BITS_PER_WIDE_INT
1345                                               / HOST_BITS_PER_CHAR)]
1346                    << (i * HOST_BITS_PER_CHAR));
1347           low |= (HOST_WIDE_INT) parts[i] << (i * HOST_BITS_PER_CHAR);
1348         }
1349
1350       value = build_int_2 (low, high);
1351       TREE_TYPE (value) = long_long_unsigned_type_node;
1352
1353       /* If warn_traditional, calculate both the ISO type and the
1354          traditional type, then see if they disagree.
1355          Otherwise, calculate only the type for the dialect in use.  */
1356       if (warn_traditional || flag_traditional)
1357         {
1358           /* Calculate the traditional type.  */
1359           /* Traditionally, any constant is signed; but if unsigned is
1360              specified explicitly, obey that.  Use the smallest size
1361              with the right number of bits, except for one special
1362              case with decimal constants.  */
1363           if (! spec_long && base != 10
1364               && int_fits_type_p (value, unsigned_type_node))
1365             trad_type = spec_unsigned ? unsigned_type_node : integer_type_node;
1366           /* A decimal constant must be long if it does not fit in
1367              type int.  I think this is independent of whether the
1368              constant is signed.  */
1369           else if (! spec_long && base == 10
1370                    && int_fits_type_p (value, integer_type_node))
1371             trad_type = spec_unsigned ? unsigned_type_node : integer_type_node;
1372           else if (! spec_long_long)
1373             trad_type = (spec_unsigned
1374                          ? long_unsigned_type_node
1375                          : long_integer_type_node);
1376           else if (int_fits_type_p (value,
1377                                     spec_unsigned 
1378                                     ? long_long_unsigned_type_node
1379                                     : long_long_integer_type_node)) 
1380             trad_type = (spec_unsigned
1381                          ? long_long_unsigned_type_node
1382                          : long_long_integer_type_node);
1383           else
1384             trad_type = (spec_unsigned
1385                          ? widest_unsigned_literal_type_node
1386                          : widest_integer_literal_type_node);
1387         }
1388       if (warn_traditional || ! flag_traditional)
1389         {
1390           /* Calculate the ISO type.  */
1391           if (! spec_long && ! spec_unsigned
1392               && int_fits_type_p (value, integer_type_node))
1393             ansi_type = integer_type_node;
1394           else if (! spec_long && (base != 10 || spec_unsigned)
1395                    && int_fits_type_p (value, unsigned_type_node))
1396             ansi_type = unsigned_type_node;
1397           else if (! spec_unsigned && !spec_long_long
1398                    && int_fits_type_p (value, long_integer_type_node))
1399             ansi_type = long_integer_type_node;
1400           else if (! spec_long_long
1401                    && int_fits_type_p (value, long_unsigned_type_node))
1402             ansi_type = long_unsigned_type_node;
1403           else if (! spec_unsigned
1404                    && int_fits_type_p (value, long_long_integer_type_node))
1405             ansi_type = long_long_integer_type_node;
1406           else if (int_fits_type_p (value, long_long_unsigned_type_node))
1407             ansi_type = long_long_unsigned_type_node;
1408           else if (! spec_unsigned
1409                    && int_fits_type_p (value, widest_integer_literal_type_node))
1410             ansi_type = widest_integer_literal_type_node;
1411           else
1412             ansi_type = widest_unsigned_literal_type_node;
1413         }
1414
1415       type = flag_traditional ? trad_type : ansi_type;
1416
1417       /* We assume that constants specified in a non-decimal
1418          base are bit patterns, and that the programmer really
1419          meant what they wrote.  */
1420       if (warn_traditional && !in_system_header
1421           && base == 10 && trad_type != ansi_type)
1422         {
1423           if (TYPE_PRECISION (trad_type) != TYPE_PRECISION (ansi_type))
1424             warning ("width of integer constant changes with -traditional");
1425           else if (TREE_UNSIGNED (trad_type) != TREE_UNSIGNED (ansi_type))
1426             warning ("integer constant is unsigned in ISO C, signed with -traditional");
1427           else
1428             warning ("width of integer constant may change on other systems with -traditional");
1429         }
1430
1431       if (pedantic && !flag_traditional && (flag_isoc99 || !spec_long_long)
1432           && !warn
1433           && ((flag_isoc99
1434                ? TYPE_PRECISION (long_long_integer_type_node)
1435                : TYPE_PRECISION (long_integer_type_node)) < TYPE_PRECISION (type)))
1436         {
1437           warn = 1;
1438           pedwarn ("integer constant larger than the maximum value of %s",
1439                    (flag_isoc99
1440                     ? (TREE_UNSIGNED (type)
1441                        ? "an unsigned long long int"
1442                        : "a long long int")
1443                     : "an unsigned long int"));
1444         }
1445
1446       if (base == 10 && ! spec_unsigned && TREE_UNSIGNED (type))
1447         warning ("decimal constant is so large that it is unsigned");
1448
1449       if (spec_imag)
1450         {
1451           if (TYPE_PRECISION (type)
1452               <= TYPE_PRECISION (integer_type_node))
1453             value = build_complex (NULL_TREE, integer_zero_node,
1454                                    convert (integer_type_node, value));
1455           else
1456             ERROR ("complex integer constant is too wide for 'complex int'");
1457         }
1458       else if (flag_traditional && !int_fits_type_p (value, type))
1459         /* The traditional constant 0x80000000 is signed
1460            but doesn't fit in the range of int.
1461            This will change it to -0x80000000, which does fit.  */
1462         {
1463           TREE_TYPE (value) = unsigned_type (type);
1464           value = convert (type, value);
1465           TREE_OVERFLOW (value) = TREE_CONSTANT_OVERFLOW (value) = 0;
1466         }
1467       else
1468         TREE_TYPE (value) = type;
1469
1470       /* If it's still an integer (not a complex), and it doesn't
1471          fit in the type we choose for it, then pedwarn. */
1472
1473       if (! warn
1474           && TREE_CODE (TREE_TYPE (value)) == INTEGER_TYPE
1475           && ! int_fits_type_p (value, TREE_TYPE (value)))
1476         pedwarn ("integer constant is larger than the maximum value for its type");
1477     }
1478
1479   if (p < str + len)
1480     error ("missing white space after number '%.*s'", (int) (p - str), str);
1481
1482   return value;
1483
1484  syntax_error:
1485   return integer_zero_node;
1486 }
1487
1488 static tree
1489 lex_string (str, len, wide)
1490      const char *str;
1491      unsigned int len;
1492      int wide;
1493 {
1494   tree value;
1495   char *buf = alloca ((len + 1) * (wide ? WCHAR_BYTES : 1));
1496   char *q = buf;
1497   const char *p = str, *limit = str + len;
1498   unsigned int c;
1499   unsigned width = wide ? WCHAR_TYPE_SIZE
1500                         : TYPE_PRECISION (char_type_node);
1501
1502 #ifdef MULTIBYTE_CHARS
1503   /* Reset multibyte conversion state.  */
1504   (void) local_mbtowc (NULL_PTR, NULL_PTR, 0);
1505 #endif
1506
1507   while (p < limit)
1508     {
1509 #ifdef MULTIBYTE_CHARS
1510       wchar_t wc;
1511       int char_len;
1512
1513       char_len = local_mbtowc (&wc, p, limit - p);
1514       if (char_len == -1)
1515         {
1516           warning ("Ignoring invalid multibyte character");
1517           char_len = 1;
1518           c = *p++;
1519         }
1520       else
1521         {
1522           p += char_len;
1523           c = wc;
1524         }
1525 #else
1526       c = *p++;
1527 #endif
1528
1529       if (c == '\\' && !ignore_escape_flag)
1530         {
1531           p = readescape (p, limit, &c);
1532           if (width < HOST_BITS_PER_INT
1533               && (unsigned) c >= ((unsigned)1 << width))
1534             pedwarn ("escape sequence out of range for character");
1535         }
1536         
1537       /* Add this single character into the buffer either as a wchar_t
1538          or as a single byte.  */
1539       if (wide)
1540         {
1541           unsigned charwidth = TYPE_PRECISION (char_type_node);
1542           unsigned bytemask = (1 << charwidth) - 1;
1543           int byte;
1544
1545           for (byte = 0; byte < WCHAR_BYTES; ++byte)
1546             {
1547               int n;
1548               if (byte >= (int) sizeof (c))
1549                 n = 0;
1550               else
1551                 n = (c >> (byte * charwidth)) & bytemask;
1552               if (BYTES_BIG_ENDIAN)
1553                 q[WCHAR_BYTES - byte - 1] = n;
1554               else
1555                 q[byte] = n;
1556             }
1557           q += WCHAR_BYTES;
1558         }
1559       else
1560         {
1561           *q++ = c;
1562         }
1563     }
1564
1565   /* Terminate the string value, either with a single byte zero
1566      or with a wide zero.  */
1567
1568   if (wide)
1569     {
1570       memset (q, 0, WCHAR_BYTES);
1571       q += WCHAR_BYTES;
1572     }
1573   else
1574     {
1575       *q++ = '\0';
1576     }
1577
1578   value = build_string (q - buf, buf);
1579
1580   if (wide)
1581     TREE_TYPE (value) = wchar_array_type_node;
1582   else
1583     TREE_TYPE (value) = char_array_type_node;
1584   return value;
1585 }
1586
1587 static tree
1588 lex_charconst (str, len, wide)
1589      const char *str;
1590      unsigned int len;
1591      int wide;
1592 {
1593   const char *limit = str + len;
1594   int result = 0;
1595   int num_chars = 0;
1596   int chars_seen = 0;
1597   unsigned width = TYPE_PRECISION (char_type_node);
1598   int max_chars;
1599   unsigned int c;
1600   tree value;
1601
1602 #ifdef MULTIBYTE_CHARS
1603   int longest_char = local_mb_cur_max ();
1604   (void) local_mbtowc (NULL_PTR, NULL_PTR, 0);
1605 #endif
1606
1607   max_chars = TYPE_PRECISION (integer_type_node) / width;
1608   if (wide)
1609     width = WCHAR_TYPE_SIZE;
1610
1611   while (str < limit)
1612     {
1613 #ifdef MULTIBYTE_CHARS
1614       wchar_t wc;
1615       int char_len;
1616
1617       char_len = local_mbtowc (&wc, str, limit - str);
1618       if (char_len == -1)
1619         {
1620           warning ("Ignoring invalid multibyte character");
1621           char_len = 1;
1622           c = *str++;
1623         }
1624       else
1625         {
1626           p += char_len;
1627           c = wc;
1628         }
1629 #else
1630       c = *str++;
1631 #endif
1632
1633       ++chars_seen;
1634       if (c == '\\')
1635         {
1636           str = readescape (str, limit, &c);
1637           if (width < HOST_BITS_PER_INT
1638               && (unsigned) c >= ((unsigned)1 << width))
1639             pedwarn ("escape sequence out of range for character");
1640         }
1641 #ifdef MAP_CHARACTER
1642       if (ISPRINT (c))
1643         c = MAP_CHARACTER (c);
1644 #endif
1645       
1646       /* Merge character into result; ignore excess chars.  */
1647       num_chars += (width / TYPE_PRECISION (char_type_node));
1648       if (num_chars < max_chars + 1)
1649         {
1650           if (width < HOST_BITS_PER_INT)
1651             result = (result << width) | (c & ((1 << width) - 1));
1652           else
1653             result = c;
1654         }
1655     }
1656
1657   if (chars_seen == 0)
1658     error ("empty character constant");
1659   else if (num_chars > max_chars)
1660     {
1661       num_chars = max_chars;
1662       error ("character constant too long");
1663     }
1664   else if (chars_seen != 1 && ! flag_traditional && warn_multichar)
1665     warning ("multi-character character constant");
1666
1667   /* If char type is signed, sign-extend the constant.  */
1668   if (! wide)
1669     {
1670       int num_bits = num_chars * width;
1671       if (num_bits == 0)
1672         /* We already got an error; avoid invalid shift.  */
1673         value = build_int_2 (0, 0);
1674       else if (TREE_UNSIGNED (char_type_node)
1675                || ((result >> (num_bits - 1)) & 1) == 0)
1676         value = build_int_2 (result & (~(unsigned HOST_WIDE_INT) 0
1677                                        >> (HOST_BITS_PER_WIDE_INT - num_bits)),
1678                              0);
1679       else
1680         value = build_int_2 (result | ~(~(unsigned HOST_WIDE_INT) 0
1681                                         >> (HOST_BITS_PER_WIDE_INT - num_bits)),
1682                              -1);
1683       /* In C, a character constant has type 'int'; in C++, 'char'.  */
1684       if (chars_seen <= 1 && c_language == clk_cplusplus)
1685         TREE_TYPE (value) = char_type_node;
1686       else
1687         TREE_TYPE (value) = integer_type_node;
1688     }
1689   else
1690     {
1691       value = build_int_2 (result, 0);
1692       TREE_TYPE (value) = wchar_type_node;
1693     }
1694
1695   return value;
1696 }