xref: /minix/usr.bin/m4/tokenizer.l (revision 71c7dcb9)
12e8d1edaSArun Thomas %{
2*71c7dcb9SLionel Sambuc /* $NetBSD: tokenizer.l,v 1.6 2012/03/20 20:34:58 matt Exp $ */
32e8d1edaSArun Thomas /* $OpenBSD: tokenizer.l,v 1.6 2008/08/21 21:00:14 espie Exp $ */
42e8d1edaSArun Thomas /*
52e8d1edaSArun Thomas  * Copyright (c) 2004 Marc Espie <espie@cvs.openbsd.org>
62e8d1edaSArun Thomas  *
72e8d1edaSArun Thomas  * Permission to use, copy, modify, and distribute this software for any
82e8d1edaSArun Thomas  * purpose with or without fee is hereby granted, provided that the above
92e8d1edaSArun Thomas  * copyright notice and this permission notice appear in all copies.
102e8d1edaSArun Thomas  *
112e8d1edaSArun Thomas  * THE SOFTWARE IS PROVIDED "AS IS" AND THE AUTHOR DISCLAIMS ALL WARRANTIES
122e8d1edaSArun Thomas  * WITH REGARD TO THIS SOFTWARE INCLUDING ALL IMPLIED WARRANTIES OF
132e8d1edaSArun Thomas  * MERCHANTABILITY AND FITNESS. IN NO EVENT SHALL THE AUTHOR BE LIABLE FOR
142e8d1edaSArun Thomas  * ANY SPECIAL, DIRECT, INDIRECT, OR CONSEQUENTIAL DAMAGES OR ANY DAMAGES
152e8d1edaSArun Thomas  * WHATSOEVER RESULTING FROM LOSS OF USE, DATA OR PROFITS, WHETHER IN AN
162e8d1edaSArun Thomas  * ACTION OF CONTRACT, NEGLIGENCE OR OTHER TORTIOUS ACTION, ARISING OUT OF
172e8d1edaSArun Thomas  * OR IN CONNECTION WITH THE USE OR PERFORMANCE OF THIS SOFTWARE.
182e8d1edaSArun Thomas  */
192e8d1edaSArun Thomas #if HAVE_NBTOOL_CONFIG_H
202e8d1edaSArun Thomas #include "nbtool_config.h"
212e8d1edaSArun Thomas #endif
222e8d1edaSArun Thomas #include "parser.h"
23*71c7dcb9SLionel Sambuc __RCSID("$NetBSD: tokenizer.l,v 1.6 2012/03/20 20:34:58 matt Exp $");
242e8d1edaSArun Thomas #include <stdlib.h>
252e8d1edaSArun Thomas #include <errno.h>
262e8d1edaSArun Thomas #include <stdint.h>
272e8d1edaSArun Thomas #include <limits.h>
282e8d1edaSArun Thomas 
292e8d1edaSArun Thomas extern int mimic_gnu;
302e8d1edaSArun Thomas extern int32_t yylval;
312e8d1edaSArun Thomas extern int yylex(void);
322e8d1edaSArun Thomas extern int yywrap(void);
332e8d1edaSArun Thomas 
342e8d1edaSArun Thomas int32_t number(void);
352e8d1edaSArun Thomas int32_t parse_radix(void);
362e8d1edaSArun Thomas 
372e8d1edaSArun Thomas %}
382e8d1edaSArun Thomas 
392e8d1edaSArun Thomas %option nounput
40*71c7dcb9SLionel Sambuc %option noinput
412e8d1edaSArun Thomas 
422e8d1edaSArun Thomas delim 	[ \t\n]
432e8d1edaSArun Thomas ws	{delim}+
442e8d1edaSArun Thomas hex	0[xX][0-9a-fA-F]+
452e8d1edaSArun Thomas oct	0[0-7]*
462e8d1edaSArun Thomas dec	[1-9][0-9]*
472e8d1edaSArun Thomas radix	0[rR][0-9]+:[0-9a-zA-Z]+
482e8d1edaSArun Thomas 
492e8d1edaSArun Thomas %%
502e8d1edaSArun Thomas {ws}			{/* just skip it */}
512e8d1edaSArun Thomas {hex}|{oct}|{dec}	{ yylval = number(); return(NUMBER); }
522e8d1edaSArun Thomas {radix}			{ if (mimic_gnu) {
532e8d1edaSArun Thomas 				yylval = parse_radix(); return(NUMBER);
542e8d1edaSArun Thomas 			  } else {
552e8d1edaSArun Thomas 			  	return(ERROR);
562e8d1edaSArun Thomas 			  }
572e8d1edaSArun Thomas 			}
582e8d1edaSArun Thomas "<="			{ return(LE); }
592e8d1edaSArun Thomas ">="			{ return(GE); }
602e8d1edaSArun Thomas "<<"			{ return(LSHIFT); }
612e8d1edaSArun Thomas ">>"			{ return(RSHIFT); }
622e8d1edaSArun Thomas "=="			{ return(EQ); }
632e8d1edaSArun Thomas "!="			{ return(NE); }
642e8d1edaSArun Thomas "&&"			{ return(LAND); }
652e8d1edaSArun Thomas "||"			{ return(LOR); }
662e8d1edaSArun Thomas .			{ return yytext[0]; }
672e8d1edaSArun Thomas %%
682e8d1edaSArun Thomas 
692e8d1edaSArun Thomas int32_t
70*71c7dcb9SLionel Sambuc number(void)
712e8d1edaSArun Thomas {
722e8d1edaSArun Thomas 	long l;
732e8d1edaSArun Thomas 
742e8d1edaSArun Thomas 	errno = 0;
752e8d1edaSArun Thomas 	l = strtol(yytext, NULL, 0);
762e8d1edaSArun Thomas 	if (((l == LONG_MAX || l == LONG_MIN) && errno == ERANGE) ||
772e8d1edaSArun Thomas 	    l > INT32_MAX || l < INT32_MIN) {
782e8d1edaSArun Thomas 		fprintf(stderr, "m4: numeric overflow in expr: %s\n", yytext);
792e8d1edaSArun Thomas 	}
802e8d1edaSArun Thomas 	return l;
812e8d1edaSArun Thomas }
822e8d1edaSArun Thomas 
832e8d1edaSArun Thomas int32_t
parse_radix(void)84*71c7dcb9SLionel Sambuc parse_radix(void)
852e8d1edaSArun Thomas {
862e8d1edaSArun Thomas 	long base;
872e8d1edaSArun Thomas 	char *next;
882e8d1edaSArun Thomas 	long l;
892e8d1edaSArun Thomas 
902e8d1edaSArun Thomas 	l = 0;
912e8d1edaSArun Thomas 	base = strtol(yytext+2, &next, 0);
922e8d1edaSArun Thomas 	if (base > 36 || next == NULL) {
932e8d1edaSArun Thomas 		fprintf(stderr, "m4: error in number %s\n", yytext);
942e8d1edaSArun Thomas 	} else {
952e8d1edaSArun Thomas 		next++;
962e8d1edaSArun Thomas 		while (*next != 0) {
972e8d1edaSArun Thomas 			if (*next >= '0' && *next <= '9')
982e8d1edaSArun Thomas 				l = base * l + *next - '0';
992e8d1edaSArun Thomas 			else if (*next >= 'a' && *next <= 'z')
1002e8d1edaSArun Thomas 				l = base * l + *next - 'a' + 10;
1012e8d1edaSArun Thomas 			else if (*next >= 'A' && *next <= 'Z')
1022e8d1edaSArun Thomas 				l = base * l + *next - 'A' + 10;
1032e8d1edaSArun Thomas 			next++;
1042e8d1edaSArun Thomas 		}
1052e8d1edaSArun Thomas 	}
1062e8d1edaSArun Thomas 	return l;
1072e8d1edaSArun Thomas }
1082e8d1edaSArun Thomas 
109