ParseModifier() and modifier_M()
[dragonfly.git] / usr.bin / make / var.c
1 /*-
2  * Copyright (c) 1988, 1989, 1990, 1993
3  *      The Regents of the University of California.  All rights reserved.
4  * Copyright (c) 1989 by Berkeley Softworks
5  * All rights reserved.
6  *
7  * This code is derived from software contributed to Berkeley by
8  * Adam de Boor.
9  *
10  * Redistribution and use in source and binary forms, with or without
11  * modification, are permitted provided that the following conditions
12  * are met:
13  * 1. Redistributions of source code must retain the above copyright
14  *    notice, this list of conditions and the following disclaimer.
15  * 2. Redistributions in binary form must reproduce the above copyright
16  *    notice, this list of conditions and the following disclaimer in the
17  *    documentation and/or other materials provided with the distribution.
18  * 3. All advertising materials mentioning features or use of this software
19  *    must display the following acknowledgement:
20  *      This product includes software developed by the University of
21  *      California, Berkeley and its contributors.
22  * 4. Neither the name of the University nor the names of its contributors
23  *    may be used to endorse or promote products derived from this software
24  *    without specific prior written permission.
25  *
26  * THIS SOFTWARE IS PROVIDED BY THE REGENTS AND CONTRIBUTORS ``AS IS'' AND
27  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
28  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
29  * ARE DISCLAIMED.  IN NO EVENT SHALL THE REGENTS OR CONTRIBUTORS BE LIABLE
30  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
31  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
32  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
33  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
34  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
35  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
36  * SUCH DAMAGE.
37  *
38  * @(#)var.c    8.3 (Berkeley) 3/19/94
39  * $FreeBSD: src/usr.bin/make/var.c,v 1.83 2005/02/11 10:49:01 harti Exp $
40  * $DragonFly: src/usr.bin/make/var.c,v 1.125 2005/03/04 23:43:33 okumoto Exp $
41  */
42
43 /*-
44  * var.c --
45  *      Variable-handling functions
46  *
47  * Interface:
48  *      Var_Set             Set the value of a variable in the given
49  *                          context. The variable is created if it doesn't
50  *                          yet exist. The value and variable name need not
51  *                          be preserved.
52  *
53  *      Var_Append          Append more characters to an existing variable
54  *                          in the given context. The variable needn't
55  *                          exist already -- it will be created if it doesn't.
56  *                          A space is placed between the old value and the
57  *                          new one.
58  *
59  *      Var_Exists          See if a variable exists.
60  *
61  *      Var_Value           Return the value of a variable in a context or
62  *                          NULL if the variable is undefined.
63  *
64  *      Var_Subst           Substitute named variable, or all variables if
65  *                          NULL in a string using
66  *                          the given context as the top-most one. If the
67  *                          third argument is non-zero, Parse_Error is
68  *                          called if any variables are undefined.
69  *
70  *      Var_Parse           Parse a variable expansion from a string and
71  *                          return the result and the number of characters
72  *                          consumed.
73  *
74  *      Var_Delete          Delete a variable in a context.
75  *
76  *      Var_Init            Initialize this module.
77  *
78  * Debugging:
79  *      Var_Dump            Print out all variables defined in the given
80  *                          context.
81  *
82  * XXX: There's a lot of duplication in these functions.
83  */
84
85 #include <assert.h>
86 #include <ctype.h>
87 #include <stdlib.h>
88 #include <string.h>
89
90 #include "buf.h"
91 #include "config.h"
92 #include "globals.h"
93 #include "GNode.h"
94 #include "make.h"
95 #include "nonints.h"
96 #include "parse.h"
97 #include "str.h"
98 #include "targ.h"
99 #include "util.h"
100 #include "var.h"
101
102 /*
103  * This is a harmless return value for Var_Parse that can be used by Var_Subst
104  * to determine if there was an error in parsing -- easier than returning
105  * a flag, as things outside this module don't give a hoot.
106  */
107 char    var_Error[] = "";
108
109 /*
110  * Similar to var_Error, but returned when the 'err' flag for Var_Parse is
111  * set false. Why not just use a constant? Well, gcc likes to condense
112  * identical string instances...
113  */
114 static char     varNoError[] = "";
115
116 /*
117  * Internally, variables are contained in four different contexts.
118  *      1) the environment. They may not be changed. If an environment
119  *          variable is appended-to, the result is placed in the global
120  *          context.
121  *      2) the global context. Variables set in the Makefile are located in
122  *          the global context. It is the penultimate context searched when
123  *          substituting.
124  *      3) the command-line context. All variables set on the command line
125  *         are placed in this context. They are UNALTERABLE once placed here.
126  *      4) the local context. Each target has associated with it a context
127  *         list. On this list are located the structures describing such
128  *         local variables as $(@) and $(*)
129  * The four contexts are searched in the reverse order from which they are
130  * listed.
131  */
132 GNode          *VAR_GLOBAL;   /* variables from the makefile */
133 GNode          *VAR_CMD;      /* variables defined on the command-line */
134
135 #define FIND_CMD        0x1   /* look in VAR_CMD when searching */
136 #define FIND_GLOBAL     0x2   /* look in VAR_GLOBAL as well */
137 #define FIND_ENV        0x4   /* look in the environment also */
138
139 #define OPEN_PAREN              '('
140 #define CLOSE_PAREN             ')'
141 #define OPEN_BRACE              '{'
142 #define CLOSE_BRACE             '}'
143
144 static char *VarGetPattern(GNode *, int, char **, int, int *, size_t *,
145                            VarPattern *);
146 static int VarPrintVar(void *, void *);
147
148 /*
149  * Create a Var object.
150  *
151  * @param name          Name of variable.
152  * @param value         Value of variable.
153  * @param flags         Flags set on variable.
154  */
155 static Var *
156 VarCreate(const char name[], const char value[], int flags)
157 {
158         Var *v;
159
160         v = emalloc(sizeof(Var));
161         v->name = estrdup(name);
162         v->val  = Buf_Init(0);
163         v->flags        = flags;
164
165         if (value != NULL) {
166                 Buf_Append(v->val, value);
167         }
168         return (v);
169 }
170
171 /*
172  * Destroy a Var object.
173  *
174  * @param v     Object to destroy.
175  * @param f     true if internal buffer in Buffer object is to be
176  *              removed.
177  */
178 static void
179 VarDestroy(Var *v, Boolean f)
180 {
181
182         Buf_Destroy(v->val, f);
183         free(v->name);
184         free(v);
185 }
186
187 /*-
188  *-----------------------------------------------------------------------
189  * VarCmp  --
190  *      See if the given variable matches the named one. Called from
191  *      Lst_Find when searching for a variable of a given name.
192  *
193  * Results:
194  *      0 if they match. non-zero otherwise.
195  *
196  * Side Effects:
197  *      none
198  *-----------------------------------------------------------------------
199  */
200 static int
201 VarCmp(const void *v, const void *name)
202 {
203
204     return (strcmp(name, ((const Var *)v)->name));
205 }
206
207 /*-
208  *-----------------------------------------------------------------------
209  * VarPossiblyExpand --
210  *      Expand a variable name's embedded variables in the given context.
211  *
212  * Results:
213  *      The contents of name, possibly expanded.
214  *-----------------------------------------------------------------------
215  */
216 static char *
217 VarPossiblyExpand(const char *name, GNode *ctxt)
218 {
219         Buffer  *buf;
220         char    *str;
221         char    *tmp;
222
223         /*
224          * XXX make a temporary copy of the name because Var_Subst insists
225          * on writing into the string.
226          */
227         tmp = estrdup(name);
228         if (strchr(name, '$') != NULL) {
229                 buf = Var_Subst(NULL, tmp, ctxt, 0);
230                 str = Buf_GetAll(buf, NULL);
231                 Buf_Destroy(buf, FALSE);
232
233                 free(tmp);
234                 return (str);
235         } else {
236                 return (tmp);
237         }
238 }
239
240 /*-
241  *-----------------------------------------------------------------------
242  * VarFind --
243  *      Find the given variable in the given context and any other contexts
244  *      indicated.
245  *
246  *      Flags:
247  *              FIND_GLOBAL     set means look in the VAR_GLOBAL context too
248  *              FIND_CMD        set means to look in the VAR_CMD context too
249  *              FIND_ENV        set means to look in the environment
250  *
251  * Results:
252  *      A pointer to the structure describing the desired variable or
253  *      NULL if the variable does not exist.
254  *
255  * Side Effects:
256  *      None
257  *-----------------------------------------------------------------------
258  */
259 static Var *
260 VarFind(const char *name, GNode *ctxt, int flags)
261 {
262         Boolean localCheckEnvFirst;
263         LstNode *var;
264         char    *env;
265
266         /*
267          * If the variable name begins with a '.', it could very well be one of
268          * the local ones.  We check the name against all the local variables
269          * and substitute the short version in for 'name' if it matches one of
270          * them.
271          */
272         if (name[0] == '.') {
273                 switch (name[1]) {
274                 case 'A':
275                         if (!strcmp(name, ".ALLSRC"))
276                                 name = ALLSRC;
277                         if (!strcmp(name, ".ARCHIVE"))
278                                 name = ARCHIVE;
279                         break;
280                 case 'I':
281                         if (!strcmp(name, ".IMPSRC"))
282                                 name = IMPSRC;
283                         break;
284                 case 'M':
285                         if (!strcmp(name, ".MEMBER"))
286                                 name = MEMBER;
287                         break;
288                 case 'O':
289                         if (!strcmp(name, ".OODATE"))
290                                 name = OODATE;
291                         break;
292                 case 'P':
293                         if (!strcmp(name, ".PREFIX"))
294                                 name = PREFIX;
295                         break;
296                 case 'T':
297                         if (!strcmp(name, ".TARGET"))
298                                 name = TARGET;
299                         break;
300                 default:
301                         break;
302                 }
303         }
304
305         /*
306          * Note whether this is one of the specific variables we were told
307          * through the -E flag to use environment-variable-override for.
308          */
309         if (Lst_Find(&envFirstVars, name, (CompareProc *)strcmp) != NULL) {
310                 localCheckEnvFirst = TRUE;
311         } else {
312                 localCheckEnvFirst = FALSE;
313         }
314
315         /*
316          * First look for the variable in the given context. If it's not there,
317          * look for it in VAR_CMD, VAR_GLOBAL and the environment,
318          * in that order, depending on the FIND_* flags in 'flags'
319          */
320         var = Lst_Find(&ctxt->context, name, VarCmp);
321         if (var != NULL) {
322                 /* got it */
323                 return (Lst_Datum(var));
324         }
325
326         /* not there - try command line context */
327         if ((flags & FIND_CMD) && (ctxt != VAR_CMD)) {
328                 var = Lst_Find(&VAR_CMD->context, name, VarCmp);
329                 if (var != NULL)
330                         return (Lst_Datum(var));
331         }
332
333         /* not there - try global context, but only if not -e/-E */
334         if ((flags & FIND_GLOBAL) && (ctxt != VAR_GLOBAL) &&
335             !checkEnvFirst && !localCheckEnvFirst) {
336                 var = Lst_Find(&VAR_GLOBAL->context, name, VarCmp);
337                 if (var != NULL)
338                         return (Lst_Datum(var));
339         }
340
341         if (!(flags & FIND_ENV))
342                 /* we were not told to look into the environment */
343                 return (NULL);
344
345         /* look in the environment */
346         if ((env = getenv(name)) != NULL) {
347                 /* craft this variable from the environment value */
348                 return (VarCreate(name, env, VAR_FROM_ENV));
349         }
350
351         /* deferred check for the environment (in case of -e/-E) */
352         if ((checkEnvFirst || localCheckEnvFirst) &&
353             (flags & FIND_GLOBAL) && (ctxt != VAR_GLOBAL)) {
354                 var = Lst_Find(&VAR_GLOBAL->context, name, VarCmp);
355                 if (var != NULL)
356                         return (Lst_Datum(var));
357         }
358         return (NULL);
359 }
360
361 /*-
362  *-----------------------------------------------------------------------
363  * VarAdd  --
364  *      Add a new variable of name name and value val to the given context.
365  *
366  * Results:
367  *      None
368  *
369  * Side Effects:
370  *      The new variable is placed at the front of the given context
371  *      The name and val arguments are duplicated so they may
372  *      safely be freed.
373  *-----------------------------------------------------------------------
374  */
375 static void
376 VarAdd(const char *name, const char *val, GNode *ctxt)
377 {
378
379     Lst_AtFront(&ctxt->context, VarCreate(name, val, 0));
380
381     DEBUGF(VAR, ("%s:%s = %s\n", ctxt->name, name, val));
382 }
383
384 /*-
385  *-----------------------------------------------------------------------
386  * Var_Delete --
387  *      Remove a variable from a context.
388  *
389  * Results:
390  *      None.
391  *
392  * Side Effects:
393  *      The Var structure is removed and freed.
394  *
395  *-----------------------------------------------------------------------
396  */
397 void
398 Var_Delete(const char *name, GNode *ctxt)
399 {
400     LstNode *ln;
401
402     DEBUGF(VAR, ("%s:delete %s\n", ctxt->name, name));
403     ln = Lst_Find(&ctxt->context, name, VarCmp);
404     if (ln != NULL) {
405         VarDestroy(Lst_Datum(ln), TRUE);
406         Lst_Remove(&ctxt->context, ln);
407     }
408 }
409
410 /*-
411  *-----------------------------------------------------------------------
412  * Var_Set --
413  *      Set the variable name to the value val in the given context.
414  *
415  * Results:
416  *      None.
417  *
418  * Side Effects:
419  *      If the variable doesn't yet exist, a new record is created for it.
420  *      Else the old value is freed and the new one stuck in its place
421  *
422  * Notes:
423  *      The variable is searched for only in its context before being
424  *      created in that context. I.e. if the context is VAR_GLOBAL,
425  *      only VAR_GLOBAL->context is searched. Likewise if it is VAR_CMD, only
426  *      VAR_CMD->context is searched. This is done to avoid the literally
427  *      thousands of unnecessary strcmp's that used to be done to
428  *      set, say, $(@) or $(<).
429  *-----------------------------------------------------------------------
430  */
431 void
432 Var_Set(const char *name, const char *val, GNode *ctxt)
433 {
434     Var         *v;
435     char        *n;
436
437     /*
438      * We only look for a variable in the given context since anything set
439      * here will override anything in a lower context, so there's not much
440      * point in searching them all just to save a bit of memory...
441      */
442     n = VarPossiblyExpand(name, ctxt);
443     v = VarFind(n, ctxt, 0);
444     if (v == NULL) {
445         VarAdd(n, val, ctxt);
446     } else {
447         Buf_Clear(v->val);
448         Buf_Append(v->val, val);
449
450         DEBUGF(VAR, ("%s:%s = %s\n", ctxt->name, n, val));
451     }
452     /*
453      * Any variables given on the command line are automatically exported
454      * to the environment (as per POSIX standard)
455      */
456     if (ctxt == VAR_CMD || (v != (Var *)NULL && (v->flags & VAR_TO_ENV))) {
457         setenv(n, val, 1);
458     }
459     free(n);
460 }
461
462 /*
463  * Var_SetEnv --
464  *      Set the VAR_TO_ENV flag on a variable
465  */
466 void
467 Var_SetEnv(const char *name, GNode *ctxt)
468 {
469     Var *v;
470
471     v = VarFind(name, ctxt, FIND_CMD|FIND_GLOBAL|FIND_ENV);
472     if (v) {
473         if ((v->flags & VAR_TO_ENV) == 0) {
474             v->flags |= VAR_TO_ENV;
475             setenv(v->name, Buf_GetAll(v->val, NULL), 1);
476         }
477     } else {
478         Error("Cannot set environment flag on non-existant variable %s", name);
479     }
480 }
481
482 /*-
483  *-----------------------------------------------------------------------
484  * Var_Append --
485  *      The variable of the given name has the given value appended to it in
486  *      the given context.
487  *
488  * Results:
489  *      None
490  *
491  * Side Effects:
492  *      If the variable doesn't exist, it is created. Else the strings
493  *      are concatenated (with a space in between).
494  *
495  * Notes:
496  *      Only if the variable is being sought in the global context is the
497  *      environment searched.
498  *      XXX: Knows its calling circumstances in that if called with ctxt
499  *      an actual target, it will only search that context since only
500  *      a local variable could be being appended to. This is actually
501  *      a big win and must be tolerated.
502  *-----------------------------------------------------------------------
503  */
504 void
505 Var_Append(const char *name, const char *val, GNode *ctxt)
506 {
507     Var         *v;
508     char        *n;
509
510     n = VarPossiblyExpand(name, ctxt);
511     v = VarFind(n, ctxt, (ctxt == VAR_GLOBAL) ? FIND_ENV : 0);
512
513     if (v == NULL) {
514         VarAdd(n, val, ctxt);
515     } else {
516         Buf_AddByte(v->val, (Byte)' ');
517         Buf_Append(v->val, val);
518
519         DEBUGF(VAR, ("%s:%s = %s\n", ctxt->name, n,
520                (char *)Buf_GetAll(v->val, (size_t *)NULL)));
521
522         if (v->flags & VAR_FROM_ENV) {
523             /*
524              * If the original variable came from the environment, we
525              * have to install it in the global context (we could place
526              * it in the environment, but then we should provide a way to
527              * export other variables...)
528              */
529             v->flags &= ~VAR_FROM_ENV;
530             Lst_AtFront(&ctxt->context, v);
531         }
532     }
533     free(n);
534 }
535
536 /*-
537  *-----------------------------------------------------------------------
538  * Var_Exists --
539  *      See if the given variable exists.
540  *
541  * Results:
542  *      TRUE if it does, FALSE if it doesn't
543  *
544  * Side Effects:
545  *      None.
546  *
547  *-----------------------------------------------------------------------
548  */
549 Boolean
550 Var_Exists(const char *name, GNode *ctxt)
551 {
552     Var         *v;
553     char        *n;
554
555     n = VarPossiblyExpand(name, ctxt);
556     v = VarFind(n, ctxt, FIND_CMD|FIND_GLOBAL|FIND_ENV);
557     free(n);
558
559     if (v == NULL) {
560         return (FALSE);
561     } else if (v->flags & VAR_FROM_ENV) {
562         VarDestroy(v, TRUE);
563     }
564     return (TRUE);
565 }
566
567 /*-
568  *-----------------------------------------------------------------------
569  * Var_Value --
570  *      Return the value of the named variable in the given context
571  *
572  * Results:
573  *      The value if the variable exists, NULL if it doesn't
574  *
575  * Side Effects:
576  *      None
577  *-----------------------------------------------------------------------
578  */
579 char *
580 Var_Value(const char *name, GNode *ctxt, char **frp)
581 {
582     Var         *v;
583     char        *n;
584
585     n = VarPossiblyExpand(name, ctxt);
586     v = VarFind(n, ctxt, FIND_ENV | FIND_GLOBAL | FIND_CMD);
587     free(n);
588     *frp = NULL;
589     if (v != NULL) {
590         char *p = (char *)Buf_GetAll(v->val, (size_t *)NULL);
591
592         if (v->flags & VAR_FROM_ENV) {
593             VarDestroy(v, FALSE);
594             *frp = p;
595         }
596         return (p);
597     } else {
598         return (NULL);
599     }
600 }
601
602 /*-
603  *-----------------------------------------------------------------------
604  * VarModify --
605  *      Modify each of the words of the passed string using the given
606  *      function. Used to implement all modifiers.
607  *
608  * Results:
609  *      A string of all the words modified appropriately.
610  *
611  * Side Effects:
612  *      None.
613  *
614  *-----------------------------------------------------------------------
615  */
616 static char *
617 VarModify(char *str, VarModifyProc *modProc, void *datum)
618 {
619     Buffer        *buf;             /* Buffer for the new string */
620     Boolean       addSpace;         /* TRUE if need to add a space to the
621                                      * buffer before adding the trimmed
622                                      * word */
623     char **av;                      /* word list [first word does not count] */
624     int ac, i;
625
626     buf = Buf_Init(0);
627     addSpace = FALSE;
628
629     av = brk_string(str, &ac, FALSE);
630
631     for (i = 1; i < ac; i++)
632         addSpace = (*modProc)(av[i], addSpace, buf, datum);
633
634     Buf_AddByte(buf, '\0');
635     str = (char *)Buf_GetAll(buf, (size_t *)NULL);
636     Buf_Destroy(buf, FALSE);
637     return (str);
638 }
639
640 /*-
641  *-----------------------------------------------------------------------
642  * VarSortWords --
643  *      Sort the words in the string.
644  *
645  * Input:
646  *      str             String whose words should be sorted
647  *      cmp             A comparison function to control the ordering
648  *
649  * Results:
650  *      A string containing the words sorted
651  *
652  * Side Effects:
653  *      None.
654  *
655  *-----------------------------------------------------------------------
656  */
657 static char *
658 VarSortWords(char *str, int (*cmp)(const void *, const void *))
659 {
660         Buffer *buf;
661         char **av;
662         int ac, i;
663
664         buf = Buf_Init(0);
665         av = brk_string(str, &ac, FALSE);
666         qsort(av + 1, ac - 1, sizeof(char *), cmp);
667         for (i = 1; i < ac; i++) {
668                 Buf_Append(buf, av[i]);
669                 Buf_AddByte(buf, (Byte)((i < ac - 1) ? ' ' : '\0'));
670         }
671         str = (char *)Buf_GetAll(buf, (size_t *)NULL);
672         Buf_Destroy(buf, FALSE);
673         return (str);
674 }
675
676 static int
677 SortIncreasing(const void *l, const void *r)
678 {
679
680         return (strcmp(*(const char* const*)l, *(const char* const*)r));
681 }
682
683 /*-
684  *-----------------------------------------------------------------------
685  * VarGetPattern --
686  *      Pass through the tstr looking for 1) escaped delimiters,
687  *      '$'s and backslashes (place the escaped character in
688  *      uninterpreted) and 2) unescaped $'s that aren't before
689  *      the delimiter (expand the variable substitution unless flags
690  *      has VAR_NOSUBST set).
691  *      Return the expanded string or NULL if the delimiter was missing
692  *      If pattern is specified, handle escaped ampersands, and replace
693  *      unescaped ampersands with the lhs of the pattern.
694  *
695  * Results:
696  *      A string of all the words modified appropriately.
697  *      If length is specified, return the string length of the buffer
698  *      If flags is specified and the last character of the pattern is a
699  *      $ set the VAR_MATCH_END bit of flags.
700  *
701  * Side Effects:
702  *      None.
703  *-----------------------------------------------------------------------
704  */
705 static char *
706 VarGetPattern(GNode *ctxt, int err, char **tstr, int delim, int *flags,
707     size_t *length, VarPattern *pattern)
708 {
709     char *cp;
710     Buffer *buf = Buf_Init(0);
711     size_t junk;
712
713     if (length == NULL)
714         length = &junk;
715
716 #define IS_A_MATCH(cp, delim) \
717     ((cp[0] == '\\') && ((cp[1] == delim) ||  \
718      (cp[1] == '\\') || (cp[1] == '$') || (pattern && (cp[1] == '&'))))
719
720     /*
721      * Skim through until the matching delimiter is found;
722      * pick up variable substitutions on the way. Also allow
723      * backslashes to quote the delimiter, $, and \, but don't
724      * touch other backslashes.
725      */
726     for (cp = *tstr; *cp && (*cp != delim); cp++) {
727         if (IS_A_MATCH(cp, delim)) {
728             Buf_AddByte(buf, (Byte)cp[1]);
729             cp++;
730         } else if (*cp == '$') {
731             if (cp[1] == delim) {
732                 if (flags == NULL)
733                     Buf_AddByte(buf, (Byte)*cp);
734                 else
735                     /*
736                      * Unescaped $ at end of pattern => anchor
737                      * pattern at end.
738                      */
739                     *flags |= VAR_MATCH_END;
740             } else {
741                 if (flags == NULL || (*flags & VAR_NOSUBST) == 0) {
742                     char   *cp2;
743                     size_t len;
744                     Boolean freeIt;
745
746                     /*
747                      * If unescaped dollar sign not before the
748                      * delimiter, assume it's a variable
749                      * substitution and recurse.
750                      */
751                     len = 0;
752                     cp2 = Var_Parse(cp, ctxt, err, &len, &freeIt);
753                     Buf_Append(buf, cp2);
754                     if (freeIt)
755                         free(cp2);
756                     cp += len - 1;
757                 } else {
758                     char *cp2 = &cp[1];
759
760                     if (*cp2 == OPEN_PAREN || *cp2 == OPEN_BRACE) {
761                         /*
762                          * Find the end of this variable reference
763                          * and suck it in without further ado.
764                          * It will be interperated later.
765                          */
766                         int have = *cp2;
767                         int want = (*cp2 == OPEN_PAREN) ? CLOSE_PAREN : CLOSE_BRACE;
768                         int depth = 1;
769
770                         for (++cp2; *cp2 != '\0' && depth > 0; ++cp2) {
771                             if (cp2[-1] != '\\') {
772                                 if (*cp2 == have)
773                                     ++depth;
774                                 if (*cp2 == want)
775                                     --depth;
776                             }
777                         }
778                         Buf_AppendRange(buf, cp, cp2);
779                         cp = --cp2;
780                     } else
781                         Buf_AddByte(buf, (Byte)*cp);
782                 }
783             }
784         }
785         else if (pattern && *cp == '&')
786             Buf_AddBytes(buf, pattern->leftLen, (Byte *)pattern->lhs);
787         else
788             Buf_AddByte(buf, (Byte)*cp);
789     }
790
791     Buf_AddByte(buf, (Byte)'\0');
792
793     if (*cp != delim) {
794         *tstr = cp;
795         *length = 0;
796         return (NULL);
797     } else {
798         *tstr = ++cp;
799         cp = (char *)Buf_GetAll(buf, length);
800         *length -= 1;   /* Don't count the NULL */
801         Buf_Destroy(buf, FALSE);
802         return (cp);
803     }
804 }
805
806 /*-
807  *-----------------------------------------------------------------------
808  * Var_Quote --
809  *      Quote shell meta-characters in the string
810  *
811  * Results:
812  *      The quoted string
813  *
814  * Side Effects:
815  *      None.
816  *
817  *-----------------------------------------------------------------------
818  */
819 char *
820 Var_Quote(const char *str)
821 {
822     Buffer       *buf;
823     /* This should cover most shells :-( */
824     static char meta[] = "\n \t'`\";&<>()|*?{}[]\\$!#^~";
825     char          *ret;
826
827     buf = Buf_Init(MAKE_BSIZE);
828     for (; *str; str++) {
829         if (strchr(meta, *str) != NULL)
830             Buf_AddByte(buf, (Byte)'\\');
831         Buf_AddByte(buf, (Byte)*str);
832     }
833     Buf_AddByte(buf, (Byte)'\0');
834     ret = Buf_GetAll(buf, NULL);
835     Buf_Destroy(buf, FALSE);
836     return (ret);
837 }
838
839 /*-
840  *-----------------------------------------------------------------------
841  * VarREError --
842  *      Print the error caused by a regcomp or regexec call.
843  *
844  * Results:
845  *      None.
846  *
847  * Side Effects:
848  *      An error gets printed.
849  *
850  *-----------------------------------------------------------------------
851  */
852 void
853 VarREError(int err, regex_t *pat, const char *str)
854 {
855     char *errbuf;
856     int errlen;
857
858     errlen = regerror(err, pat, 0, 0);
859     errbuf = emalloc(errlen);
860     regerror(err, pat, errbuf, errlen);
861     Error("%s: %s", str, errbuf);
862     free(errbuf);
863 }
864
865 /*
866  * Make sure this variable is fully expanded.
867  */
868 static char *
869 VarExpand(Var *v, GNode *ctxt, Boolean err)
870 {
871         char    *value;
872         char    *result;
873
874         if (v->flags & VAR_IN_USE) {
875                 Fatal("Variable %s is recursive.", v->name);
876                 /* NOTREACHED */
877         }
878
879         v->flags |= VAR_IN_USE;
880
881         /*
882          * Before doing any modification, we have to make sure the
883          * value has been fully expanded. If it looks like recursion
884          * might be necessary (there's a dollar sign somewhere in the
885          * variable's value) we just call Var_Subst to do any other
886          * substitutions that are necessary. Note that the value
887          * returned by Var_Subst will have been
888          * dynamically-allocated, so it will need freeing when we
889          * return.
890          */
891         value = (char *)Buf_GetAll(v->val, (size_t *)NULL);
892         if (strchr(value, '$') == NULL) {
893                 result = strdup(value);
894         } else {
895                 Buffer  *buf;
896
897                 buf = Var_Subst(NULL, value, ctxt, err);
898                 result = Buf_GetAll(buf, NULL);
899                 Buf_Destroy(buf, FALSE);
900         }
901
902         v->flags &= ~VAR_IN_USE;
903
904         return (result);
905 }
906
907 /**
908  * Select only those words that match the modifier.
909  */
910 static char *
911 modifier_M(const char mod[], const char value[], char endc, size_t *consumed)
912 {
913         const char      *cur;
914         const char      *end;
915         char            *patt;
916         char            *ptr;
917         char            *newValue;
918
919         for (cur = mod + 1; *cur != '\0'; cur++) {
920                 if (cur[0] == endc) {
921                         break;
922                 } else if (cur[0] == ':') {
923                         break;
924                 } else if ((cur[0] == '\\') &&
925                            (cur[1] == ':' || cur[1] == endc)) {
926                         cur++;
927                 }
928         }
929         end = cur;
930
931         /*
932          * Compress the \:'s out of the pattern, so allocate enough
933          * room to hold the uncompressed pattern and compress the
934          * pattern into the space. (note that cur started at mod+1
935          * so cur-mod takes the null byte into account)
936          */
937         patt = emalloc(cur - mod);
938         ptr = patt;
939         for (cur = mod + 1; cur != end; cur++) {
940                 if ((cur[0] == '\\') &&
941                     (cur[1] == ':' || cur[1] == endc)) {
942                         cur++;
943                 }
944                 *ptr = *cur;
945                 ptr++;
946         }
947         *ptr = '\0';
948
949         if (*mod == 'M' || *mod == 'm') {
950                 newValue = VarModify(value, VarMatch, patt);
951         } else {
952                 newValue = VarModify(value, VarNoMatch, patt);
953         }
954         free(patt);
955
956         *consumed += (end - mod);
957
958         if (*end == ':') {
959                 *consumed += 1; /* include colin as part of modifier */
960         }
961
962         return (newValue);
963 }
964
965
966 /*
967  * Now we need to apply any modifiers the user wants applied.
968  * These are:
969  *      :M<pattern>
970  *              words which match the given <pattern>.
971  *              <pattern> is of the standard file
972  *              wildcarding form.
973  *      :S<d><pat1><d><pat2><d>[g]
974  *              Substitute <pat2> for <pat1> in the value
975  *      :C<d><pat1><d><pat2><d>[g]
976  *              Substitute <pat2> for regex <pat1> in the value
977  *      :H      Substitute the head of each word
978  *      :T      Substitute the tail of each word
979  *      :E      Substitute the extension (minus '.') of
980  *              each word
981  *      :R      Substitute the root of each word
982  *              (pathname minus the suffix).
983  *      :lhs=rhs
984  *              Like :S, but the rhs goes to the end of
985  *              the invocation.
986  *      :U      Converts variable to upper-case.
987  *      :L      Converts variable to lower-case.
988  *
989  * XXXHB update this comment or remove it and point to the man page.
990  */
991 static char *
992 ParseModifier(const char input[], char tstr[],
993         char startc, char endc, Boolean dynamic, Var *v,
994         GNode *ctxt, Boolean err, size_t *lengthPtr, Boolean *freePtr)
995 {
996         char    *rw_str;
997         char    *cp;
998
999         rw_str = VarExpand(v, ctxt, err);
1000         *freePtr = TRUE;
1001
1002         tstr++;
1003         while (*tstr != endc) {
1004             char        *newStr;    /* New value to return */
1005             char        termc;      /* Character which terminated scan */
1006             Boolean     readonly = FALSE;
1007
1008             DEBUGF(VAR, ("Applying :%c to \"%s\"\n", *tstr, rw_str));
1009             switch (*tstr) {
1010                 case 'N':
1011                 case 'M':
1012                 {
1013                         size_t  consumed = 0;
1014
1015                         readonly = TRUE; /* tstr isn't modified here */
1016
1017                         newStr = modifier_M(tstr, rw_str, endc, &consumed);
1018                         tstr += consumed;
1019                         break;
1020                 }
1021                 case 'S':
1022                 {
1023                     VarPattern      pattern;
1024                     char            del;
1025                     Buffer          *buf;       /* Buffer for patterns */
1026
1027                     pattern.flags = 0;
1028                     del = tstr[1];
1029                     tstr += 2;
1030
1031                     /*
1032                      * If pattern begins with '^', it is anchored to the
1033                      * start of the word -- skip over it and flag pattern.
1034                      */
1035                     if (*tstr == '^') {
1036                         pattern.flags |= VAR_MATCH_START;
1037                         tstr += 1;
1038                     }
1039
1040                     buf = Buf_Init(0);
1041
1042                     /*
1043                      * Pass through the lhs looking for 1) escaped delimiters,
1044                      * '$'s and backslashes (place the escaped character in
1045                      * uninterpreted) and 2) unescaped $'s that aren't before
1046                      * the delimiter (expand the variable substitution).
1047                      * The result is left in the Buffer buf.
1048                      */
1049                     for (cp = tstr; *cp != '\0' && *cp != del; cp++) {
1050                         if ((*cp == '\\') &&
1051                             ((cp[1] == del) ||
1052                              (cp[1] == '$') ||
1053                              (cp[1] == '\\')))
1054                         {
1055                             Buf_AddByte(buf, (Byte)cp[1]);
1056                             cp++;
1057                         } else if (*cp == '$') {
1058                             if (cp[1] != del) {
1059                                 /*
1060                                  * If unescaped dollar sign not before the
1061                                  * delimiter, assume it's a variable
1062                                  * substitution and recurse.
1063                                  */
1064                                 char    *cp2;
1065                                 size_t  len;
1066                                 Boolean freeIt;
1067
1068                                 len = 0;
1069                                 cp2 = Var_Parse(cp, ctxt, err, &len, &freeIt);
1070                                 Buf_Append(buf, cp2);
1071                                 if (freeIt) {
1072                                     free(cp2);
1073                                 }
1074                                 cp += len - 1;
1075                             } else {
1076                                 /*
1077                                  * Unescaped $ at end of pattern => anchor
1078                                  * pattern at end.
1079                                  */
1080                                 pattern.flags |= VAR_MATCH_END;
1081                             }
1082                         } else {
1083                             Buf_AddByte(buf, (Byte)*cp);
1084                         }
1085                     }
1086
1087                     Buf_AddByte(buf, (Byte)'\0');
1088
1089                     /*
1090                      * If lhs didn't end with the delimiter, complain and
1091                      * exit.
1092                      */
1093                     if (*cp != del) {
1094                         Fatal("Unclosed substitution for %s (%c missing)",
1095                               v->name, del);
1096                     }
1097
1098                     /*
1099                      * Fetch pattern and destroy buffer, but preserve the data
1100                      * in it, since that's our lhs. Note that Buf_GetAll
1101                      * will return the actual number of bytes, which includes
1102                      * the null byte, so we have to decrement the length by
1103                      * one.
1104                      */
1105                     pattern.lhs = (char *)Buf_GetAll(buf, &pattern.leftLen);
1106                     pattern.leftLen--;
1107                     Buf_Destroy(buf, FALSE);
1108
1109                     /*
1110                      * Now comes the replacement string. Three things need to
1111                      * be done here: 1) need to compress escaped delimiters and
1112                      * ampersands and 2) need to replace unescaped ampersands
1113                      * with the l.h.s. (since this isn't regexp, we can do
1114                      * it right here) and 3) expand any variable substitutions.
1115                      */
1116                     buf = Buf_Init(0);
1117
1118                     tstr = cp + 1;
1119                     for (cp = tstr; *cp != '\0' && *cp != del; cp++) {
1120                         if ((*cp == '\\') &&
1121                             ((cp[1] == del) ||
1122                              (cp[1] == '&') ||
1123                              (cp[1] == '\\') ||
1124                              (cp[1] == '$')))
1125                         {
1126                             Buf_AddByte(buf, (Byte)cp[1]);
1127                             cp++;
1128                         } else if ((*cp == '$') && (cp[1] != del)) {
1129                             char        *cp2;
1130                             size_t      len;
1131                             Boolean     freeIt;
1132
1133                             len = 0;
1134                             cp2 = Var_Parse(cp, ctxt, err, &len, &freeIt);
1135                             Buf_Append(buf, cp2);
1136                             cp += len - 1;
1137                             if (freeIt) {
1138                                 free(cp2);
1139                             }
1140                         } else if (*cp == '&') {
1141                             Buf_AddBytes(buf, pattern.leftLen,
1142                                          (Byte *)pattern.lhs);
1143                         } else {
1144                             Buf_AddByte(buf, (Byte)*cp);
1145                         }
1146                     }
1147
1148                     Buf_AddByte(buf, (Byte)'\0');
1149
1150                     /*
1151                      * If didn't end in delimiter character, complain
1152                      */
1153                     if (*cp != del) {
1154                         Fatal("Unclosed substitution for %s (%c missing)",
1155                               v->name, del);
1156                     }
1157
1158                     pattern.rhs = (char *)Buf_GetAll(buf, &pattern.rightLen);
1159                     pattern.rightLen--;
1160                     Buf_Destroy(buf, FALSE);
1161
1162                     /*
1163                      * Check for global substitution. If 'g' after the final
1164                      * delimiter, substitution is global and is marked that
1165                      * way.
1166                      */
1167                     cp++;
1168                     if (*cp == 'g') {
1169                         pattern.flags |= VAR_SUB_GLOBAL;
1170                         cp++;
1171                     }
1172
1173                     /*
1174                      * Global substitution of the empty string causes an
1175                      * infinite number of matches, unless anchored by '^'
1176                      * (start of string) or '$' (end of string). Catch the
1177                      * infinite substitution here.
1178                      * Note that flags can only contain the 3 bits we're
1179                      * interested in so we don't have to mask unrelated
1180                      * bits. We can test for equality.
1181                      */
1182                     if (!pattern.leftLen && pattern.flags == VAR_SUB_GLOBAL)
1183                         Fatal("Global substitution of the empty string");
1184
1185                     termc = *cp;
1186                     newStr = VarModify(rw_str, VarSubstitute, &pattern);
1187                     /*
1188                      * Free the two strings.
1189                      */
1190                     free(pattern.lhs);
1191                     free(pattern.rhs);
1192                     break;
1193                 }
1194                 case 'C':
1195                 {
1196                     int         delim;
1197                     VarREPattern    pattern;
1198                     char           *re;
1199                     int             error;
1200
1201                     pattern.flags = 0;
1202                     delim = tstr[1];
1203                     tstr += 2;
1204
1205                     cp = tstr;
1206
1207                     if ((re = VarGetPattern(ctxt, err, &cp, delim, NULL,
1208                         NULL, NULL)) == NULL) {
1209                         /* was: goto cleanup */
1210                         *lengthPtr = cp - input + 1;
1211                         if (*freePtr)
1212                             free(rw_str);
1213                         if (delim != '\0')
1214                             Fatal("Unclosed substitution for %s (%c missing)",
1215                                   v->name, delim);
1216                         return (var_Error);
1217                     }
1218
1219                     if ((pattern.replace = VarGetPattern(ctxt, err, &cp,
1220                         delim, NULL, NULL, NULL)) == NULL){
1221                         free(re);
1222
1223                         /* was: goto cleanup */
1224                         *lengthPtr = cp - input + 1;
1225                         if (*freePtr)
1226                             free(rw_str);
1227                         if (delim != '\0')
1228                             Fatal("Unclosed substitution for %s (%c missing)",
1229                                   v->name, delim);
1230                         return (var_Error);
1231                     }
1232
1233                     for (;; cp++) {
1234                         switch (*cp) {
1235                         case 'g':
1236                             pattern.flags |= VAR_SUB_GLOBAL;
1237                             continue;
1238                         case '1':
1239                             pattern.flags |= VAR_SUB_ONE;
1240                             continue;
1241                         default:
1242                             break;
1243                         }
1244                         break;
1245                     }
1246
1247                     termc = *cp;
1248
1249                     error = regcomp(&pattern.re, re, REG_EXTENDED);
1250                     free(re);
1251                     if (error)  {
1252                         *lengthPtr = cp - input + 1;
1253                         VarREError(error, &pattern.re, "RE substitution error");
1254                         free(pattern.replace);
1255                         return (var_Error);
1256                     }
1257
1258                     pattern.nsub = pattern.re.re_nsub + 1;
1259                     if (pattern.nsub < 1)
1260                         pattern.nsub = 1;
1261                     if (pattern.nsub > 10)
1262                         pattern.nsub = 10;
1263                     pattern.matches = emalloc(pattern.nsub *
1264                                               sizeof(regmatch_t));
1265                     newStr = VarModify(rw_str, VarRESubstitute, &pattern);
1266                     regfree(&pattern.re);
1267                     free(pattern.replace);
1268                     free(pattern.matches);
1269                     break;
1270                 }
1271                 case 'L':
1272                     if (tstr[1] == endc || tstr[1] == ':') {
1273                         Buffer *buf;
1274                         buf = Buf_Init(MAKE_BSIZE);
1275                         for (cp = rw_str; *cp ; cp++)
1276                             Buf_AddByte(buf, (Byte)tolower(*cp));
1277
1278                         Buf_AddByte(buf, (Byte)'\0');
1279                         newStr = (char *)Buf_GetAll(buf, (size_t *)NULL);
1280                         Buf_Destroy(buf, FALSE);
1281
1282                         cp = tstr + 1;
1283                         termc = *cp;
1284                         break;
1285                     }
1286                     /* FALLTHROUGH */
1287                 case 'O':
1288                     if (tstr[1] == endc || tstr[1] == ':') {
1289                         newStr = VarSortWords(rw_str, SortIncreasing);
1290                         cp = tstr + 1;
1291                         termc = *cp;
1292                         break;
1293                     }
1294                     /* FALLTHROUGH */
1295                 case 'Q':
1296                     if (tstr[1] == endc || tstr[1] == ':') {
1297                         newStr = Var_Quote(rw_str);
1298                         cp = tstr + 1;
1299                         termc = *cp;
1300                         break;
1301                     }
1302                     /*FALLTHRU*/
1303                 case 'T':
1304                     if (tstr[1] == endc || tstr[1] == ':') {
1305                         newStr = VarModify(rw_str, VarTail, (void *)NULL);
1306                         cp = tstr + 1;
1307                         termc = *cp;
1308                         break;
1309                     }
1310                     /*FALLTHRU*/
1311                 case 'U':
1312                     if (tstr[1] == endc || tstr[1] == ':') {
1313                         Buffer *buf;
1314                         buf = Buf_Init(MAKE_BSIZE);
1315                         for (cp = rw_str; *cp ; cp++)
1316                             Buf_AddByte(buf, (Byte)toupper(*cp));
1317
1318                         Buf_AddByte(buf, (Byte)'\0');
1319                         newStr = (char *)Buf_GetAll(buf, (size_t *)NULL);
1320                         Buf_Destroy(buf, FALSE);
1321
1322                         cp = tstr + 1;
1323                         termc = *cp;
1324                         break;
1325                     }
1326                     /* FALLTHROUGH */
1327                 case 'H':
1328                     if (tstr[1] == endc || tstr[1] == ':') {
1329                         newStr = VarModify(rw_str, VarHead, (void *)NULL);
1330                         cp = tstr + 1;
1331                         termc = *cp;
1332                         break;
1333                     }
1334                     /*FALLTHRU*/
1335                 case 'E':
1336                     if (tstr[1] == endc || tstr[1] == ':') {
1337                         newStr = VarModify(rw_str, VarSuffix, (void *)NULL);
1338                         cp = tstr + 1;
1339                         termc = *cp;
1340                         break;
1341                     }
1342                     /*FALLTHRU*/
1343                 case 'R':
1344                     if (tstr[1] == endc || tstr[1] == ':') {
1345                         newStr = VarModify(rw_str, VarRoot, (void *)NULL);
1346                         cp = tstr + 1;
1347                         termc = *cp;
1348                         break;
1349                     }
1350                     /*FALLTHRU*/
1351 #ifdef SUNSHCMD
1352                 case 's':
1353                     if (tstr[1] == 'h' && (tstr[2] == endc || tstr[2] == ':')) {
1354                         const char *error;
1355                         Buffer *buf;
1356
1357                         buf = Cmd_Exec(rw_str, &error);
1358                         newStr = Buf_GetAll(buf, NULL);
1359                         Buf_Destroy(buf, FALSE);
1360
1361                         if (error)
1362                             Error(error, rw_str);
1363                         cp = tstr + 2;
1364                         termc = *cp;
1365                         break;
1366                     }
1367                     /*FALLTHRU*/
1368 #endif
1369                 default:
1370                 {
1371 #ifdef SYSVVARSUB
1372                     /*
1373                      * This can either be a bogus modifier or a System-V
1374                      * substitution command.
1375                      */
1376                     VarPattern  pattern;
1377                     Boolean     eqFound;
1378                     int         cnt;
1379
1380                     pattern.flags = 0;
1381                     eqFound = FALSE;
1382                     /*
1383                      * First we make a pass through the string trying
1384                      * to verify it is a SYSV-make-style translation:
1385                      * it must be: <string1>=<string2>)
1386                      */
1387                     cp = tstr;
1388                     cnt = 1;
1389                     while (*cp != '\0' && cnt) {
1390                         if (*cp == '=') {
1391                             eqFound = TRUE;
1392                             /* continue looking for endc */
1393                         }
1394                         else if (*cp == endc)
1395                             cnt--;
1396                         else if (*cp == startc)
1397                             cnt++;
1398                         if (cnt)
1399                             cp++;
1400                     }
1401                     if (*cp == endc && eqFound) {
1402                         int delim;
1403
1404                         /*
1405                          * Now we break this sucker into the lhs and
1406                          * rhs. We must null terminate them of course.
1407                          */
1408                         cp = tstr;
1409
1410                         delim = '=';
1411                         if ((pattern.lhs = VarGetPattern(ctxt,
1412                             err, &cp, delim, &pattern.flags, &pattern.leftLen,
1413                             NULL)) == NULL) {
1414                                 /* was: goto cleanup */
1415                                 *lengthPtr = cp - input + 1;
1416                                 if (*freePtr)
1417                                     free(rw_str);
1418                                 if (delim != '\0')
1419                                     Fatal("Unclosed substitution for %s (%c missing)",
1420                                           v->name, delim);
1421                                 return (var_Error);
1422                         }
1423
1424                         delim = endc;
1425                         if ((pattern.rhs = VarGetPattern(ctxt,
1426                             err, &cp, delim, NULL, &pattern.rightLen,
1427                             &pattern)) == NULL) {
1428                                 /* was: goto cleanup */
1429                                 *lengthPtr = cp - input + 1;
1430                                 if (*freePtr)
1431                                     free(rw_str);
1432                                 if (delim != '\0')
1433                                     Fatal("Unclosed substitution for %s (%c missing)",
1434                                           v->name, delim);
1435                                 return (var_Error);
1436                         }
1437
1438                         /*
1439                          * SYSV modifications happen through the whole
1440                          * string. Note the pattern is anchored at the end.
1441                          */
1442                         termc = *--cp;
1443                         delim = '\0';
1444                         newStr = VarModify(rw_str, VarSYSVMatch, &pattern);
1445
1446                         free(pattern.lhs);
1447                         free(pattern.rhs);
1448
1449                         termc = endc;
1450                     } else
1451 #endif
1452                     {
1453                         Error("Unknown modifier '%c'\n", *tstr);
1454                         for (cp = tstr+1;
1455                              *cp != ':' && *cp != endc && *cp != '\0';
1456                              cp++)
1457                                  continue;
1458                         termc = *cp;
1459                         newStr = var_Error;
1460                     }
1461                 }
1462             }
1463
1464             DEBUGF(VAR, ("Result is \"%s\"\n", newStr));
1465             if (*freePtr) {
1466                     free(rw_str);
1467             }
1468             rw_str = newStr;
1469             if (rw_str != var_Error) {
1470                     *freePtr = TRUE;
1471             } else {
1472                     *freePtr = FALSE;
1473             }
1474
1475             if (readonly == FALSE) {
1476                     if (termc == '\0') {
1477                             Error("Unclosed variable specification for %s",
1478                                   v->name);
1479                     } else if (termc == ':') {
1480                             *cp = termc;
1481                             cp++;
1482                     } else {
1483                             *cp = termc;
1484                     }
1485                     tstr = cp;
1486             }
1487         }
1488
1489         if (v->flags & VAR_FROM_ENV) {
1490             if (rw_str == (char *)Buf_GetAll(v->val, (size_t *)NULL)) {
1491                 /*
1492                  * Returning the value unmodified, so tell the caller to free
1493                  * the thing.
1494                  */
1495                 *freePtr = TRUE;
1496                 *lengthPtr = tstr - input + 1;
1497                 VarDestroy(v, FALSE);
1498                 return (rw_str);
1499             } else {
1500                 *lengthPtr = tstr - input + 1;
1501                 VarDestroy(v, TRUE);
1502                 return (rw_str);
1503             }
1504         } else if (v->flags & VAR_JUNK) {
1505             /*
1506              * Perform any free'ing needed and set *freePtr to FALSE so the caller
1507              * doesn't try to free a static pointer.
1508              */
1509             if (*freePtr) {
1510                 free(rw_str);
1511             }
1512             if (dynamic) {
1513                 *freePtr = FALSE;
1514                 *lengthPtr = tstr - input + 1;
1515                 VarDestroy(v, TRUE);
1516                 rw_str = emalloc(*lengthPtr + 1);
1517                 strncpy(rw_str, input, *lengthPtr);
1518                 rw_str[*lengthPtr] = '\0';
1519                 *freePtr = TRUE;
1520                 return (rw_str);
1521             } else {
1522                 *freePtr = FALSE;
1523                 *lengthPtr = tstr - input + 1;
1524                 VarDestroy(v, TRUE);
1525                 return (err ? var_Error : varNoError);
1526             }
1527         } else {
1528             *lengthPtr = tstr - input + 1;
1529             return (rw_str);
1530         }
1531 }
1532
1533 /*
1534  * Check if brackets contain a variable name.
1535  */
1536 static char *
1537 VarParseLong(char foo[], GNode *ctxt, Boolean err, size_t *lengthPtr,
1538         Boolean *freePtr)
1539 {
1540         const char      *input = foo;
1541         char            *rw_str = foo;
1542         char            *ptr;
1543         char            endc;   /* Ending character when variable in parens
1544                                  * or braces */
1545         char            startc; /* Starting character when variable in parens
1546                                  * or braces */
1547         const char      *vname;
1548         size_t          vlen;   /* length of variable name, after embedded
1549                                  * variable expansion */
1550
1551         /* build up expanded variable name in this buffer */
1552         Buffer  *buf = Buf_Init(MAKE_BSIZE);
1553
1554         /*
1555          * Skip to the end character or a colon, whichever comes first,
1556          * replacing embedded variables as we go.
1557          */
1558         startc = input[1];
1559         endc = (startc == OPEN_PAREN) ? CLOSE_PAREN : CLOSE_BRACE;
1560         ptr = rw_str + 2;
1561
1562         while (*ptr != endc && *ptr != ':') {
1563                 if (*ptr == '\0') {
1564                         /*
1565                          * If we did not find the end character,
1566                          * return var_Error right now, setting the
1567                          * length to be the distance to the end of
1568                          * the string, since that's what make does.
1569                          */
1570                         *freePtr = FALSE;
1571                         *lengthPtr = ptr - input;
1572                         Buf_Destroy(buf, TRUE);
1573                         return (var_Error);
1574
1575                 } else if (*ptr == '$') {
1576                         size_t  rlen;
1577                         Boolean rfree;
1578                         char    *rval;
1579
1580                         rlen = 0;
1581                         rval = Var_Parse(ptr, ctxt, err, &rlen, &rfree);
1582                         if (rval == var_Error) {
1583                                 Fatal("Error expanding embedded variable.");
1584                         }
1585                         Buf_Append(buf, rval);
1586                         if (rfree)
1587                                 free(rval);
1588                         ptr += rlen - 1;
1589                 } else {
1590                         Buf_AddByte(buf, (Byte)*ptr);
1591                 }
1592                 ptr++;
1593         }
1594
1595         vname = Buf_GetAll(buf, (size_t *)NULL);        /* REPLACE str */
1596         vlen = strlen(vname);
1597
1598     {
1599         char    *const tstr = ptr;
1600         size_t  consumed = tstr - input + 1;
1601
1602         Var     *v;             /* Variable in invocation */
1603         Boolean haveModifier;   /* TRUE if have modifiers for the variable */
1604         Boolean dynamic;        /* TRUE if the variable is local and we're
1605                                  * expanding it in a non-local context. This
1606                                  * is done to support dynamic sources. The
1607                                  * result is just the invocation, unaltered */
1608
1609         haveModifier = (*tstr == ':');
1610         dynamic = FALSE;
1611
1612         v = VarFind(vname, ctxt, FIND_ENV | FIND_GLOBAL | FIND_CMD);
1613         if (v != NULL) {
1614                 Buf_Destroy(buf, TRUE);
1615
1616                 if (haveModifier) {
1617                         return (ParseModifier(input, tstr,
1618                                         startc, endc, dynamic, v,
1619                                         ctxt, err, lengthPtr, freePtr));
1620                 } else {
1621                         char    *result;
1622
1623                         result = VarExpand(v, ctxt, err);
1624
1625                         if (v->flags & VAR_FROM_ENV) {
1626                                 VarDestroy(v, TRUE);
1627                         }
1628
1629                         *freePtr = TRUE;
1630                         *lengthPtr = consumed;
1631                         return (result);
1632                 }
1633         }
1634
1635         if ((ctxt != VAR_CMD) && (ctxt != VAR_GLOBAL)) {
1636                 /*
1637                  * Check for D and F forms of local variables since we're in
1638                  * a local context and the name is the right length.
1639                  */
1640                 if ((vlen == 2) &&
1641                     (vname[1] == 'F' || vname[1] == 'D') &&
1642                     (strchr("!%*<>@", vname[0]) != NULL)) {
1643                         char    name[2];
1644                         char    *val;
1645
1646                         /*
1647                          * Well, it's local -- go look for it.
1648                          */
1649                         name[0] = vname[0];
1650                         name[1] = '\0';
1651
1652                         v = VarFind(name, ctxt, 0);
1653                         if (v != NULL) {
1654                                 if (haveModifier) {
1655                                         Buf_Destroy(buf, TRUE);
1656                                         return (ParseModifier(input, tstr,
1657                                                         startc, endc, dynamic, v,
1658                                                         ctxt, err, lengthPtr, freePtr));
1659                                 } else {
1660                                         /*
1661                                          * No need for nested expansion or
1662                                          * anything, as we're the only one
1663                                          * who sets these things and we sure
1664                                          * don't put nested invocations in
1665                                          * them...
1666                                          */
1667                                         val = (char *)Buf_GetAll(v->val, (size_t *) NULL);
1668
1669                                         if (vname[1] == 'D') {
1670                                                 val = VarModify(val, VarHead, (void *)NULL);
1671                                         } else {
1672                                                 val = VarModify(val, VarTail, (void *)NULL);
1673                                         }
1674                                         /*
1675                                          * Resulting string is dynamically
1676                                          * allocated, so tell caller to free
1677                                          * it.
1678                                          */
1679                                         *freePtr = TRUE;
1680                                         *lengthPtr = consumed;
1681                                         Buf_Destroy(buf, TRUE);
1682                                         return (val);
1683                                 }
1684                         }
1685                 }
1686         } else {
1687                 if (((vlen == 1)) ||
1688                     ((vlen == 2) && (vname[1] == 'F' || vname[1] == 'D'))) {
1689                         /*
1690                          * If substituting a local variable in a non-local
1691                          * context, assume it's for dynamic source stuff. We
1692                          * have to handle this specially and return the
1693                          * longhand for the variable with the dollar sign
1694                          * escaped so it makes it back to the caller. Only
1695                          * four of the local variables are treated specially
1696                          * as they are the only four that will be set when
1697                          * dynamic sources are expanded.
1698                          */
1699                         if (strchr("!%*@", vname[0]) != NULL) {
1700                                 dynamic = TRUE;
1701                         }
1702                 }
1703                 if ((vlen > 2) &&
1704                     (vname[0] == '.') &&
1705                     isupper((unsigned char)vname[1])) {
1706                         if ((strncmp(vname, ".TARGET", vlen - 1) == 0) ||
1707                             (strncmp(vname, ".ARCHIVE", vlen - 1) == 0) ||
1708                             (strncmp(vname, ".PREFIX", vlen - 1) == 0) ||
1709                             (strncmp(vname, ".MEMBER", vlen - 1) == 0)) {
1710                                 dynamic = TRUE;
1711                         }
1712                 }
1713         }
1714
1715         if (haveModifier) {
1716                 /*
1717                  * Still need to get to the end of the variable
1718                  * specification, so kludge up a Var structure for
1719                  * the modifications
1720                  */
1721                 v = VarCreate(vname, NULL, VAR_JUNK);
1722
1723                 Buf_Destroy(buf, TRUE);
1724                 return (ParseModifier(input, tstr,
1725                                       startc, endc, dynamic, v,
1726                                     ctxt, err, lengthPtr, freePtr));
1727         } else {
1728                 /*
1729                  * No modifiers -- have specification length so we
1730                  * can return now.
1731                  */
1732                 if (dynamic) {
1733                         char   *result;
1734
1735                         result = emalloc(consumed + 1);
1736                         strncpy(result, input, consumed);
1737                         result[consumed] = '\0';
1738
1739                         *freePtr = TRUE;
1740                         *lengthPtr = consumed;
1741
1742                         Buf_Destroy(buf, TRUE);
1743                         return (result);
1744                 } else {
1745                         *freePtr = FALSE;
1746                         *lengthPtr = consumed;
1747
1748                         Buf_Destroy(buf, TRUE);
1749                         return (err ? var_Error : varNoError);
1750                 }
1751         }
1752     }
1753 }
1754
1755 /**
1756  * If it's not bounded by braces of some sort, life is much simpler.
1757  * We just need to check for the first character and return the value
1758  * if it exists.
1759  */
1760 static char *
1761 VarParseShort(const char input[], GNode *ctxt, Boolean err,
1762         size_t *lengthPtr, Boolean *freePtr)
1763 {
1764         char    name[2];
1765         Var     *v;
1766
1767         name[0] = input[0];
1768         name[1] = '\0';
1769
1770         /* consume character */
1771         *lengthPtr += 1;
1772
1773         v = VarFind(name, ctxt, FIND_ENV | FIND_GLOBAL | FIND_CMD);
1774         if (v != NULL) {
1775                 char   *result;
1776
1777                 result = VarExpand(v, ctxt, err);
1778
1779                 if (v->flags & VAR_FROM_ENV) {
1780                         VarDestroy(v, TRUE);
1781                 }
1782
1783                 *freePtr = TRUE;
1784                 return (result);
1785         }
1786
1787         /*
1788          * If substituting a local variable in a non-local context, assume
1789          * it's for dynamic source stuff. We have to handle this specially
1790          * and return the longhand for the variable with the dollar sign
1791          * escaped so it makes it back to the caller. Only four of the local
1792          * variables are treated specially as they are the only four that
1793          * will be set when dynamic sources are expanded.
1794          */
1795         if ((ctxt == VAR_CMD) || (ctxt == VAR_GLOBAL)) {
1796
1797                 /* XXX: It looks like $% and $! are reversed here */
1798                 switch (name[0]) {
1799                 case '@':
1800                         *freePtr = TRUE;
1801                         return (estrdup("$(.TARGET)"));
1802                 case '%':
1803                         *freePtr = TRUE;
1804                         return (estrdup("$(.ARCHIVE)"));
1805                 case '*':
1806                         *freePtr = TRUE;
1807                         return (estrdup("$(.PREFIX)"));
1808                 case '!':
1809                         *freePtr = TRUE;
1810                         return (estrdup("$(.MEMBER)"));
1811                 default:
1812                         *freePtr = FALSE;
1813                         return (err ? var_Error : varNoError);
1814                 }
1815         }
1816
1817         *freePtr = FALSE;
1818         return (err ? var_Error : varNoError);
1819 }
1820
1821 /*-
1822  *-----------------------------------------------------------------------
1823  * Var_Parse --
1824  *      Given the start of a variable invocation, extract the variable
1825  *      name and find its value, then modify it according to the
1826  *      specification.
1827  *
1828  * Results:
1829  *      The (possibly-modified) value of the variable or var_Error if the
1830  *      specification is invalid. The length of the specification is
1831  *      placed in *lengthPtr (for invalid specifications, this is just
1832  *      2 to skip the '$' and the following letter, or 1 if '$' was the
1833  *      last character in the string).
1834  *      A Boolean in *freePtr telling whether the returned string should
1835  *      be freed by the caller.
1836  *
1837  * Side Effects:
1838  *      None.
1839  *
1840  * Assumption:
1841  *      It is assumed that Var_Parse() is called with str[0] == '$'.
1842  *
1843  *-----------------------------------------------------------------------
1844  */
1845 char *
1846 Var_Parse(char *foo, GNode *ctxt, Boolean err,
1847         size_t *lengthPtr, Boolean *freePtr)
1848 {
1849         const char *input = foo;
1850
1851         /* assert(input[0] == '$'); */
1852
1853         /* consume '$' */
1854         input += 1;
1855         *lengthPtr += 1;
1856
1857         if (input[0] == '\0') {
1858                 /* Error, there is only a dollar sign in the input string. */
1859                 *freePtr = FALSE;
1860                 return (err ? var_Error : varNoError);
1861
1862         } else if (input[0] == OPEN_PAREN || input[0] == OPEN_BRACE) {
1863                 /* multi letter variable name */
1864                 return (VarParseLong(foo, ctxt, err, lengthPtr, freePtr));
1865
1866         } else {
1867                 /* single letter variable name */
1868                 return (VarParseShort(input, ctxt, err, lengthPtr, freePtr));
1869         }
1870 }
1871
1872 /*-
1873  *-----------------------------------------------------------------------
1874  * Var_Subst  --
1875  *      Substitute for all variables in the given string in the given context
1876  *      If undefErr is TRUE, Parse_Error will be called when an undefined
1877  *      variable is encountered.
1878  *
1879  * Results:
1880  *      The resulting string.
1881  *
1882  * Side Effects:
1883  *      None. The old string must be freed by the caller
1884  *-----------------------------------------------------------------------
1885  */
1886 Buffer *
1887 Var_Subst(const char *var, const char *str, GNode *ctxt, Boolean undefErr)
1888 {
1889     Boolean     errorReported;
1890     Buffer      *buf;           /* Buffer for forming things */
1891
1892     /*
1893      * Set TRUE if an error has already been reported to prevent a
1894      * plethora of messages when recursing.
1895      * XXXHB this comment sounds wrong.
1896      */
1897     errorReported = FALSE;
1898
1899     buf = Buf_Init(0);
1900     while (*str) {
1901         if (var == NULL && (str[0] == '$') && (str[1] == '$')) {
1902             /*
1903              * A dollar sign may be escaped either with another dollar sign.
1904              * In such a case, we skip over the escape character and store the
1905              * dollar sign into the buffer directly.
1906              */
1907             Buf_AddByte(buf, (Byte)str[0]);
1908             str += 2;
1909
1910         } else if (str[0] == '$') {
1911             char        *val;   /* Value to substitute for a variable */
1912             size_t      length; /* Length of the variable invocation */
1913             Boolean     doFree; /* Set true if val should be freed */
1914
1915             /*
1916              * Variable invocation.
1917              */
1918             if (var != NULL) {
1919                 int expand;
1920                 for (;;) {
1921                     if (str[1] == OPEN_PAREN || str[1] == OPEN_BRACE) {
1922                         size_t          ln;
1923                         const char      *p = str + 2;
1924
1925                         /*
1926                          * Scan up to the end of the variable name.
1927                          */
1928                         while (*p != '\0' &&
1929                                *p != ':' &&
1930                                *p != CLOSE_PAREN &&
1931                                *p != CLOSE_BRACE &&
1932                                *p != '$') {
1933                             ++p;
1934                         }
1935
1936                         /*
1937                          * A variable inside the variable. We cannot expand
1938                          * the external variable yet, so we try again with
1939                          * the nested one
1940                          */
1941                         if (*p == '$') {
1942                             Buf_AppendRange(buf, str, p);
1943                             str = p;
1944                             continue;
1945                         }
1946
1947                         ln = p - (str + 2);
1948                         if (var[ln] == '\0' && strncmp(var, str + 2, ln) == 0) {
1949                             expand = TRUE;
1950                         } else {
1951                             /*
1952                              * Not the variable we want to expand, scan
1953                              * until the next variable
1954                              */
1955                             while (*p != '$' && *p != '\0')
1956                                 p++;
1957
1958                             Buf_AppendRange(buf, str, p);
1959                             str = p;
1960                             expand = FALSE;
1961                         }
1962                     } else {
1963                         /*
1964                          * Single letter variable name
1965                          */
1966                         if (var[1] == '\0' && var[0] == str[1]) {
1967                             expand = TRUE;
1968                         } else {
1969                             Buf_AddBytes(buf, 2, (const Byte *)str);
1970                             str += 2;
1971                             expand = FALSE;
1972                         }
1973                     }
1974                     break;
1975                 }
1976                 if (!expand)
1977                     continue;
1978             }
1979
1980             length = 0;
1981             val = Var_Parse(str, ctxt, undefErr, &length, &doFree);
1982
1983             /*
1984              * When we come down here, val should either point to the
1985              * value of this variable, suitably modified, or be NULL.
1986              * Length should be the total length of the potential
1987              * variable invocation (from $ to end character...)
1988              */
1989             if (val == var_Error || val == varNoError) {
1990                 /*
1991                  * If performing old-time variable substitution, skip over
1992                  * the variable and continue with the substitution. Otherwise,
1993                  * store the dollar sign and advance str so we continue with
1994                  * the string...
1995                  */
1996                 if (oldVars) {
1997                     str += length;
1998                 } else if (undefErr) {
1999                     /*
2000                      * If variable is undefined, complain and skip the
2001                      * variable. The complaint will stop us from doing anything
2002                      * when the file is parsed.
2003                      */
2004                     if (!errorReported) {
2005                         Parse_Error(PARSE_FATAL,
2006                                      "Undefined variable \"%.*s\"",length,str);
2007                     }
2008                     str += length;
2009                     errorReported = TRUE;
2010                 } else {
2011                     Buf_AddByte(buf, (Byte)*str);
2012                     str += 1;
2013                 }
2014             } else {
2015                 /*
2016                  * We've now got a variable structure to store in. But first,
2017                  * advance the string pointer.
2018                  */
2019                 str += length;
2020
2021                 /*
2022                  * Copy all the characters from the variable value straight
2023                  * into the new string.
2024                  */
2025                 Buf_Append(buf, val);
2026                 if (doFree) {
2027                     free(val);
2028                 }
2029             }
2030         } else {
2031             /*
2032              * Skip as many characters as possible -- either to the end of
2033              * the string or to the next dollar sign (variable invocation).
2034              */
2035             const char *cp = str;
2036
2037             do {
2038                 str++;
2039             } while (str[0] != '$' && str[0] != '\0');
2040
2041             Buf_AppendRange(buf, cp, str);
2042         }
2043     }
2044
2045     return (buf);
2046 }
2047
2048 /*-
2049  *-----------------------------------------------------------------------
2050  * Var_GetTail --
2051  *      Return the tail from each of a list of words. Used to set the
2052  *      System V local variables.
2053  *
2054  * Results:
2055  *      The resulting string.
2056  *
2057  * Side Effects:
2058  *      None.
2059  *
2060  *-----------------------------------------------------------------------
2061  */
2062 char *
2063 Var_GetTail(char *file)
2064 {
2065
2066     return (VarModify(file, VarTail, (void *)NULL));
2067 }
2068
2069 /*-
2070  *-----------------------------------------------------------------------
2071  * Var_GetHead --
2072  *      Find the leading components of a (list of) filename(s).
2073  *      XXX: VarHead does not replace foo by ., as (sun) System V make
2074  *      does.
2075  *
2076  * Results:
2077  *      The leading components.
2078  *
2079  * Side Effects:
2080  *      None.
2081  *
2082  *-----------------------------------------------------------------------
2083  */
2084 char *
2085 Var_GetHead(char *file)
2086 {
2087
2088     return (VarModify(file, VarHead, (void *)NULL));
2089 }
2090
2091 /*-
2092  *-----------------------------------------------------------------------
2093  * Var_Init --
2094  *      Initialize the module
2095  *
2096  * Results:
2097  *      None
2098  *
2099  * Side Effects:
2100  *      The VAR_CMD and VAR_GLOBAL contexts are created
2101  *-----------------------------------------------------------------------
2102  */
2103 void
2104 Var_Init(void)
2105 {
2106
2107     VAR_GLOBAL = Targ_NewGN("Global");
2108     VAR_CMD = Targ_NewGN("Command");
2109 }
2110
2111 /****************** PRINT DEBUGGING INFO *****************/
2112 static int
2113 VarPrintVar(void *vp, void *dummy __unused)
2114 {
2115     Var    *v = (Var *) vp;
2116
2117     printf("%-16s = %s\n", v->name, (char *)Buf_GetAll(v->val, (size_t *)NULL));
2118     return (0);
2119 }
2120
2121 /*-
2122  *-----------------------------------------------------------------------
2123  * Var_Dump --
2124  *      print all variables in a context
2125  *-----------------------------------------------------------------------
2126  */
2127 void
2128 Var_Dump(GNode *ctxt)
2129 {
2130
2131     Lst_ForEach(&ctxt->context, VarPrintVar, (void *)NULL);
2132 }