Removed period from end of sentence, to reduce diffs between FreeBSD us from
[dragonfly.git] / usr.bin / make / var.c
1 /*-
2  * Copyright (c) 1988, 1989, 1990, 1993
3  *      The Regents of the University of California.  All rights reserved.
4  * Copyright (c) 1989 by Berkeley Softworks
5  * All rights reserved.
6  *
7  * This code is derived from software contributed to Berkeley by
8  * Adam de Boor.
9  *
10  * Redistribution and use in source and binary forms, with or without
11  * modification, are permitted provided that the following conditions
12  * are met:
13  * 1. Redistributions of source code must retain the above copyright
14  *    notice, this list of conditions and the following disclaimer.
15  * 2. Redistributions in binary form must reproduce the above copyright
16  *    notice, this list of conditions and the following disclaimer in the
17  *    documentation and/or other materials provided with the distribution.
18  * 3. All advertising materials mentioning features or use of this software
19  *    must display the following acknowledgement:
20  *      This product includes software developed by the University of
21  *      California, Berkeley and its contributors.
22  * 4. Neither the name of the University nor the names of its contributors
23  *    may be used to endorse or promote products derived from this software
24  *    without specific prior written permission.
25  *
26  * THIS SOFTWARE IS PROVIDED BY THE REGENTS AND CONTRIBUTORS ``AS IS'' AND
27  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
28  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
29  * ARE DISCLAIMED.  IN NO EVENT SHALL THE REGENTS OR CONTRIBUTORS BE LIABLE
30  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
31  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
32  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
33  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
34  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
35  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
36  * SUCH DAMAGE.
37  *
38  * @(#)var.c    8.3 (Berkeley) 3/19/94
39  * $FreeBSD: src/usr.bin/make/var.c,v 1.16.2.3 2002/02/27 14:18:57 cjc Exp $
40  * $DragonFly: src/usr.bin/make/var.c,v 1.82 2005/02/11 22:34:02 okumoto Exp $
41  */
42
43 /*-
44  * var.c --
45  *      Variable-handling functions
46  *
47  * Interface:
48  *      Var_Set             Set the value of a variable in the given
49  *                          context. The variable is created if it doesn't
50  *                          yet exist. The value and variable name need not
51  *                          be preserved.
52  *
53  *      Var_Append          Append more characters to an existing variable
54  *                          in the given context. The variable needn't
55  *                          exist already -- it will be created if it doesn't.
56  *                          A space is placed between the old value and the
57  *                          new one.
58  *
59  *      Var_Exists          See if a variable exists.
60  *
61  *      Var_Value           Return the value of a variable in a context or
62  *                          NULL if the variable is undefined.
63  *
64  *      Var_Subst           Substitute named variable, or all variables if
65  *                          NULL in a string using
66  *                          the given context as the top-most one. If the
67  *                          third argument is non-zero, Parse_Error is
68  *                          called if any variables are undefined.
69  *
70  *      Var_Parse           Parse a variable expansion from a string and
71  *                          return the result and the number of characters
72  *                          consumed.
73  *
74  *      Var_Delete          Delete a variable in a context.
75  *
76  *      Var_Init            Initialize this module.
77  *
78  * Debugging:
79  *      Var_Dump            Print out all variables defined in the given
80  *                          context.
81  *
82  * XXX: There's a lot of duplication in these functions.
83  */
84
85 #include <ctype.h>
86 #include <stdlib.h>
87 #include <string.h>
88
89 #include "buf.h"
90 #include "config.h"
91 #include "globals.h"
92 #include "GNode.h"
93 #include "make.h"
94 #include "nonints.h"
95 #include "parse.h"
96 #include "str.h"
97 #include "targ.h"
98 #include "util.h"
99 #include "var.h"
100
101 /*
102  * This is a harmless return value for Var_Parse that can be used by Var_Subst
103  * to determine if there was an error in parsing -- easier than returning
104  * a flag, as things outside this module don't give a hoot.
105  */
106 char    var_Error[] = "";
107
108 /*
109  * Similar to var_Error, but returned when the 'err' flag for Var_Parse is
110  * set false. Why not just use a constant? Well, gcc likes to condense
111  * identical string instances...
112  */
113 static char     varNoError[] = "";
114
115 /*
116  * Internally, variables are contained in four different contexts.
117  *      1) the environment. They may not be changed. If an environment
118  *          variable is appended-to, the result is placed in the global
119  *          context.
120  *      2) the global context. Variables set in the Makefile are located in
121  *          the global context. It is the penultimate context searched when
122  *          substituting.
123  *      3) the command-line context. All variables set on the command line
124  *         are placed in this context. They are UNALTERABLE once placed here.
125  *      4) the local context. Each target has associated with it a context
126  *         list. On this list are located the structures describing such
127  *         local variables as $(@) and $(*)
128  * The four contexts are searched in the reverse order from which they are
129  * listed.
130  */
131 GNode          *VAR_GLOBAL;   /* variables from the makefile */
132 GNode          *VAR_CMD;      /* variables defined on the command-line */
133
134 #define FIND_CMD        0x1   /* look in VAR_CMD when searching */
135 #define FIND_GLOBAL     0x2   /* look in VAR_GLOBAL as well */
136 #define FIND_ENV        0x4   /* look in the environment also */
137
138 #define OPEN_PAREN              '('
139 #define CLOSE_PAREN             ')'
140 #define OPEN_BRACE              '{'
141 #define CLOSE_BRACE             '}'
142
143 static char *VarGetPattern(GNode *, int, char **, int, int *, size_t *,
144                            VarPattern *);
145 static int VarPrintVar(void *, void *);
146
147 /*
148  * Create a Var object.
149  *
150  * @param name          Name of variable.
151  * @param value         Value of variable.
152  * @param flags         Flags set on variable.
153  */
154 static Var *
155 VarCreate(const char name[], const char value[], int flags)
156 {
157         Var *v;
158
159         v = emalloc(sizeof(Var));
160         v->name = estrdup(name);
161         v->val  = Buf_Init(0);
162         v->flags        = flags;
163
164         if (value != NULL) {
165                 Buf_Append(v->val, value);
166         }
167         return (v);
168 }
169
170 /*
171  * Destroy a Var object.
172  *
173  * @param v     Object to destroy.
174  * @param f     true if internal buffer in Buffer object is to be
175  *              removed.
176  */
177 static void
178 VarDestroy(Var *v, Boolean f)
179 {
180
181         Buf_Destroy(v->val, f);
182         free(v->name);
183         free(v);
184 }
185
186 /*-
187  *-----------------------------------------------------------------------
188  * VarCmp  --
189  *      See if the given variable matches the named one. Called from
190  *      Lst_Find when searching for a variable of a given name.
191  *
192  * Results:
193  *      0 if they match. non-zero otherwise.
194  *
195  * Side Effects:
196  *      none
197  *-----------------------------------------------------------------------
198  */
199 static int
200 VarCmp(const void *v, const void *name)
201 {
202
203     return (strcmp(name, ((const Var *)v)->name));
204 }
205
206 /*-
207  *-----------------------------------------------------------------------
208  * VarPossiblyExpand --
209  *      Expand a variable name's embedded variables in the given context.
210  *
211  * Results:
212  *      The contents of name, possibly expanded.
213  *-----------------------------------------------------------------------
214  */
215 static char *
216 VarPossiblyExpand(const char *name, GNode *ctxt)
217 {
218         char   *tmp;
219
220         /*
221          * XXX make a temporary copy of the name because Var_Subst insists
222          * on writing into the string.
223          */
224         tmp = estrdup(name);
225         if (strchr(name, '$') != NULL) {
226                 Buffer  *buf;
227                 char    *str;
228
229                 buf = Var_Subst(NULL, tmp, ctxt, 0);
230                 str = Buf_GetAll(buf, NULL);
231                 Buf_Destroy(buf, FALSE);
232
233                 return(str);
234         } else {
235                 return(tmp);
236         }
237 }
238
239 /*-
240  *-----------------------------------------------------------------------
241  * VarFind --
242  *      Find the given variable in the given context and any other contexts
243  *      indicated.
244  *
245  *      Flags:
246  *              FIND_GLOBAL     set means look in the VAR_GLOBAL context too
247  *              FIND_CMD        set means to look in the VAR_CMD context too
248  *              FIND_ENV        set means to look in the environment
249  *
250  * Results:
251  *      A pointer to the structure describing the desired variable or
252  *      NULL if the variable does not exist.
253  *
254  * Side Effects:
255  *      None
256  *-----------------------------------------------------------------------
257  */
258 static Var *
259 VarFind(const char *name, GNode *ctxt, int flags)
260 {
261         Boolean localCheckEnvFirst;
262         LstNode *var;
263         char    *env;
264
265         /*
266          * If the variable name begins with a '.', it could very well be one of
267          * the local ones.  We check the name against all the local variables
268          * and substitute the short version in for 'name' if it matches one of
269          * them.
270          */
271         if (name[0] == '.') {
272                 switch (name[1]) {
273                 case 'A':
274                         if (!strcmp(name, ".ALLSRC"))
275                                 name = ALLSRC;
276                         if (!strcmp(name, ".ARCHIVE"))
277                                 name = ARCHIVE;
278                         break;
279                 case 'I':
280                         if (!strcmp(name, ".IMPSRC"))
281                                 name = IMPSRC;
282                         break;
283                 case 'M':
284                         if (!strcmp(name, ".MEMBER"))
285                                 name = MEMBER;
286                         break;
287                 case 'O':
288                         if (!strcmp(name, ".OODATE"))
289                                 name = OODATE;
290                         break;
291                 case 'P':
292                         if (!strcmp(name, ".PREFIX"))
293                                 name = PREFIX;
294                         break;
295                 case 'T':
296                         if (!strcmp(name, ".TARGET"))
297                                 name = TARGET;
298                         break;
299                 default:
300                         break;
301                 }
302         }
303
304         /*
305          * Note whether this is one of the specific variables we were told
306          * through the -E flag to use environment-variable-override for.
307          */
308         if (Lst_Find(&envFirstVars, name, (CompareProc *)strcmp) != NULL) {
309                 localCheckEnvFirst = TRUE;
310         } else {
311                 localCheckEnvFirst = FALSE;
312         }
313
314         /*
315          * First look for the variable in the given context. If it's not there,
316          * look for it in VAR_CMD, VAR_GLOBAL and the environment,
317          * in that order, depending on the FIND_* flags in 'flags'
318          */
319         var = Lst_Find(&ctxt->context, name, VarCmp);
320         if (var != NULL) {
321                 /* got it */
322                 return (Lst_Datum(var));
323         }
324
325         /* not there - try command line context */
326         if ((flags & FIND_CMD) && (ctxt != VAR_CMD)) {
327                 var = Lst_Find(&VAR_CMD->context, name, VarCmp);
328                 if (var != NULL)
329                         return (Lst_Datum(var));
330         }
331
332         /* not there - try global context, but only if not -e/-E */
333         if ((flags & FIND_GLOBAL) && (ctxt != VAR_GLOBAL) &&
334             !checkEnvFirst && !localCheckEnvFirst) {
335                 var = Lst_Find(&VAR_GLOBAL->context, name, VarCmp);
336                 if (var != NULL)
337                         return (Lst_Datum(var));
338         }
339
340         if (!(flags & FIND_ENV))
341                 /* we were not told to look into the environment */
342                 return (NULL);
343
344         /* look in the environment */
345         if ((env = getenv(name)) != NULL) {
346                 /* craft this variable from the environment value */
347                 return (VarCreate(name, env, VAR_FROM_ENV));
348         }
349
350         /* deferred check for the environment (in case of -e/-E) */
351         if ((checkEnvFirst || localCheckEnvFirst) &&
352             (flags & FIND_GLOBAL) && (ctxt != VAR_GLOBAL)) {
353                 var = Lst_Find(&VAR_GLOBAL->context, name, VarCmp);
354                 if (var != NULL)
355                         return (Lst_Datum(var));
356         }
357         return (NULL);
358 }
359
360 /*-
361  *-----------------------------------------------------------------------
362  * VarAdd  --
363  *      Add a new variable of name name and value val to the given context.
364  *
365  * Results:
366  *      None
367  *
368  * Side Effects:
369  *      The new variable is placed at the front of the given context
370  *      The name and val arguments are duplicated so they may
371  *      safely be freed.
372  *-----------------------------------------------------------------------
373  */
374 static void
375 VarAdd(const char *name, const char *val, GNode *ctxt)
376 {
377
378     Lst_AtFront(&ctxt->context, VarCreate(name, val, 0));
379
380     DEBUGF(VAR, ("%s:%s = %s\n", ctxt->name, name, val));
381 }
382
383 /*-
384  *-----------------------------------------------------------------------
385  * Var_Delete --
386  *      Remove a variable from a context.
387  *
388  * Results:
389  *      None.
390  *
391  * Side Effects:
392  *      The Var structure is removed and freed.
393  *
394  *-----------------------------------------------------------------------
395  */
396 void
397 Var_Delete(const char *name, GNode *ctxt)
398 {
399     LstNode *ln;
400
401     DEBUGF(VAR, ("%s:delete %s\n", ctxt->name, name));
402     ln = Lst_Find(&ctxt->context, name, VarCmp);
403     if (ln != NULL) {
404         VarDestroy(Lst_Datum(ln), TRUE);
405         Lst_Remove(&ctxt->context, ln);
406     }
407 }
408
409 /*-
410  *-----------------------------------------------------------------------
411  * Var_Set --
412  *      Set the variable name to the value val in the given context.
413  *
414  * Results:
415  *      None.
416  *
417  * Side Effects:
418  *      If the variable doesn't yet exist, a new record is created for it.
419  *      Else the old value is freed and the new one stuck in its place
420  *
421  * Notes:
422  *      The variable is searched for only in its context before being
423  *      created in that context. I.e. if the context is VAR_GLOBAL,
424  *      only VAR_GLOBAL->context is searched. Likewise if it is VAR_CMD, only
425  *      VAR_CMD->context is searched. This is done to avoid the literally
426  *      thousands of unnecessary strcmp's that used to be done to
427  *      set, say, $(@) or $(<).
428  *-----------------------------------------------------------------------
429  */
430 void
431 Var_Set(const char *name, const char *val, GNode *ctxt)
432 {
433     Var         *v;
434     char        *n;
435
436     /*
437      * We only look for a variable in the given context since anything set
438      * here will override anything in a lower context, so there's not much
439      * point in searching them all just to save a bit of memory...
440      */
441     n = VarPossiblyExpand(name, ctxt);
442     v = VarFind(n, ctxt, 0);
443     if (v == NULL) {
444         VarAdd(n, val, ctxt);
445     } else {
446         Buf_Clear(v->val);
447         Buf_Append(v->val, val);
448
449         DEBUGF(VAR, ("%s:%s = %s\n", ctxt->name, n, val));
450     }
451     /*
452      * Any variables given on the command line are automatically exported
453      * to the environment (as per POSIX standard)
454      */
455     if (ctxt == VAR_CMD || (v != (Var *)NULL && (v->flags & VAR_TO_ENV))) {
456         setenv(n, val, 1);
457     }
458     free(n);
459 }
460
461 /*
462  * Var_SetEnv --
463  *      Set the VAR_TO_ENV flag on a variable
464  */
465 void
466 Var_SetEnv(const char *name, GNode *ctxt)
467 {
468     Var *v;
469
470     v = VarFind(name, ctxt, FIND_CMD|FIND_GLOBAL|FIND_ENV);
471     if (v) {
472         if ((v->flags & VAR_TO_ENV) == 0) {
473             v->flags |= VAR_TO_ENV;
474             setenv(v->name, Buf_GetAll(v->val, NULL), 1);
475         }
476     } else {
477         Error("Cannot set environment flag on non-existant variable %s", name);
478     }
479 }
480
481 /*-
482  *-----------------------------------------------------------------------
483  * Var_Append --
484  *      The variable of the given name has the given value appended to it in
485  *      the given context.
486  *
487  * Results:
488  *      None
489  *
490  * Side Effects:
491  *      If the variable doesn't exist, it is created. Else the strings
492  *      are concatenated (with a space in between).
493  *
494  * Notes:
495  *      Only if the variable is being sought in the global context is the
496  *      environment searched.
497  *      XXX: Knows its calling circumstances in that if called with ctxt
498  *      an actual target, it will only search that context since only
499  *      a local variable could be being appended to. This is actually
500  *      a big win and must be tolerated.
501  *-----------------------------------------------------------------------
502  */
503 void
504 Var_Append(const char *name, const char *val, GNode *ctxt)
505 {
506     Var         *v;
507     char        *n;
508
509     n = VarPossiblyExpand(name, ctxt);
510     v = VarFind(n, ctxt, (ctxt == VAR_GLOBAL) ? FIND_ENV : 0);
511
512     if (v == NULL) {
513         VarAdd(n, val, ctxt);
514     } else {
515         Buf_AddByte(v->val, (Byte)' ');
516         Buf_Append(v->val, val);
517
518         DEBUGF(VAR, ("%s:%s = %s\n", ctxt->name, n,
519                (char *)Buf_GetAll(v->val, (size_t *)NULL)));
520
521         if (v->flags & VAR_FROM_ENV) {
522             /*
523              * If the original variable came from the environment, we
524              * have to install it in the global context (we could place
525              * it in the environment, but then we should provide a way to
526              * export other variables...)
527              */
528             v->flags &= ~VAR_FROM_ENV;
529             Lst_AtFront(&ctxt->context, v);
530         }
531     }
532     free(n);
533 }
534
535 /*-
536  *-----------------------------------------------------------------------
537  * Var_Exists --
538  *      See if the given variable exists.
539  *
540  * Results:
541  *      TRUE if it does, FALSE if it doesn't
542  *
543  * Side Effects:
544  *      None.
545  *
546  *-----------------------------------------------------------------------
547  */
548 Boolean
549 Var_Exists(const char *name, GNode *ctxt)
550 {
551     Var         *v;
552     char        *n;
553
554     n = VarPossiblyExpand(name, ctxt);
555     v = VarFind(n, ctxt, FIND_CMD|FIND_GLOBAL|FIND_ENV);
556     free(n);
557
558     if (v == NULL) {
559         return (FALSE);
560     } else if (v->flags & VAR_FROM_ENV) {
561         VarDestroy(v, TRUE);
562     }
563     return (TRUE);
564 }
565
566 /*-
567  *-----------------------------------------------------------------------
568  * Var_Value --
569  *      Return the value of the named variable in the given context
570  *
571  * Results:
572  *      The value if the variable exists, NULL if it doesn't
573  *
574  * Side Effects:
575  *      None
576  *-----------------------------------------------------------------------
577  */
578 char *
579 Var_Value(const char *name, GNode *ctxt, char **frp)
580 {
581     Var         *v;
582     char        *n;
583
584     n = VarPossiblyExpand(name, ctxt);
585     v = VarFind(n, ctxt, FIND_ENV | FIND_GLOBAL | FIND_CMD);
586     free(n);
587     *frp = NULL;
588     if (v != NULL) {
589         char *p = (char *)Buf_GetAll(v->val, (size_t *)NULL);
590
591         if (v->flags & VAR_FROM_ENV) {
592             VarDestroy(v, FALSE);
593             *frp = p;
594         }
595         return (p);
596     } else {
597         return (NULL);
598     }
599 }
600
601 /*-
602  *-----------------------------------------------------------------------
603  * VarModify --
604  *      Modify each of the words of the passed string using the given
605  *      function. Used to implement all modifiers.
606  *
607  * Results:
608  *      A string of all the words modified appropriately.
609  *
610  * Side Effects:
611  *      None.
612  *
613  *-----------------------------------------------------------------------
614  */
615 static char *
616 VarModify(char *str, VarModifyProc *modProc, void *datum)
617 {
618     Buffer        *buf;             /* Buffer for the new string */
619     Boolean       addSpace;         /* TRUE if need to add a space to the
620                                      * buffer before adding the trimmed
621                                      * word */
622     char **av;                      /* word list [first word does not count] */
623     int ac, i;
624
625     buf = Buf_Init(0);
626     addSpace = FALSE;
627
628     av = brk_string(str, &ac, FALSE);
629
630     for (i = 1; i < ac; i++)
631         addSpace = (*modProc)(av[i], addSpace, buf, datum);
632
633     Buf_AddByte(buf, '\0');
634     str = (char *)Buf_GetAll(buf, (size_t *)NULL);
635     Buf_Destroy(buf, FALSE);
636     return (str);
637 }
638
639 /*-
640  *-----------------------------------------------------------------------
641  * VarSortWords --
642  *      Sort the words in the string.
643  *
644  * Input:
645  *      str             String whose words should be sorted
646  *      cmp             A comparison function to control the ordering
647  *
648  * Results:
649  *      A string containing the words sorted
650  *
651  * Side Effects:
652  *      None.
653  *
654  *-----------------------------------------------------------------------
655  */
656 static char *
657 VarSortWords(char *str, int (*cmp)(const void *, const void *))
658 {
659         Buffer *buf;
660         char **av;
661         int ac, i;
662
663         buf = Buf_Init(0);
664         av = brk_string(str, &ac, FALSE);
665         qsort(av + 1, ac - 1, sizeof(char *), cmp);
666         for (i = 1; i < ac; i++) {
667                 Buf_Append(buf, av[i]);
668                 Buf_AddByte(buf, (Byte)((i < ac - 1) ? ' ' : '\0'));
669         }
670         str = (char *)Buf_GetAll(buf, (size_t *)NULL);
671         Buf_Destroy(buf, FALSE);
672         return (str);
673 }
674
675 static int
676 SortIncreasing(const void *l, const void *r)
677 {
678
679         return (strcmp(*(const char* const*)l, *(const char* const*)r));
680 }
681
682 /*-
683  *-----------------------------------------------------------------------
684  * VarGetPattern --
685  *      Pass through the tstr looking for 1) escaped delimiters,
686  *      '$'s and backslashes (place the escaped character in
687  *      uninterpreted) and 2) unescaped $'s that aren't before
688  *      the delimiter (expand the variable substitution unless flags
689  *      has VAR_NOSUBST set).
690  *      Return the expanded string or NULL if the delimiter was missing
691  *      If pattern is specified, handle escaped ampersands, and replace
692  *      unescaped ampersands with the lhs of the pattern.
693  *
694  * Results:
695  *      A string of all the words modified appropriately.
696  *      If length is specified, return the string length of the buffer
697  *      If flags is specified and the last character of the pattern is a
698  *      $ set the VAR_MATCH_END bit of flags.
699  *
700  * Side Effects:
701  *      None.
702  *-----------------------------------------------------------------------
703  */
704 static char *
705 VarGetPattern(GNode *ctxt, int err, char **tstr, int delim, int *flags,
706     size_t *length, VarPattern *pattern)
707 {
708     char *cp;
709     Buffer *buf = Buf_Init(0);
710     size_t junk;
711
712     if (length == NULL)
713         length = &junk;
714
715 #define IS_A_MATCH(cp, delim) \
716     ((cp[0] == '\\') && ((cp[1] == delim) ||  \
717      (cp[1] == '\\') || (cp[1] == '$') || (pattern && (cp[1] == '&'))))
718
719     /*
720      * Skim through until the matching delimiter is found;
721      * pick up variable substitutions on the way. Also allow
722      * backslashes to quote the delimiter, $, and \, but don't
723      * touch other backslashes.
724      */
725     for (cp = *tstr; *cp && (*cp != delim); cp++) {
726         if (IS_A_MATCH(cp, delim)) {
727             Buf_AddByte(buf, (Byte)cp[1]);
728             cp++;
729         } else if (*cp == '$') {
730             if (cp[1] == delim) {
731                 if (flags == NULL)
732                     Buf_AddByte(buf, (Byte)*cp);
733                 else
734                     /*
735                      * Unescaped $ at end of pattern => anchor
736                      * pattern at end.
737                      */
738                     *flags |= VAR_MATCH_END;
739             } else {
740                 if (flags == NULL || (*flags & VAR_NOSUBST) == 0) {
741                     char   *cp2;
742                     size_t len;
743                     Boolean freeIt;
744
745                     /*
746                      * If unescaped dollar sign not before the
747                      * delimiter, assume it's a variable
748                      * substitution and recurse.
749                      */
750                     cp2 = Var_Parse(cp, ctxt, err, &len, &freeIt);
751                     Buf_Append(buf, cp2);
752                     if (freeIt)
753                         free(cp2);
754                     cp += len - 1;
755                 } else {
756                     char *cp2 = &cp[1];
757
758                     if (*cp2 == OPEN_PAREN || *cp2 == OPEN_BRACE) {
759                         /*
760                          * Find the end of this variable reference
761                          * and suck it in without further ado.
762                          * It will be interperated later.
763                          */
764                         int have = *cp2;
765                         int want = (*cp2 == OPEN_PAREN) ? CLOSE_PAREN : CLOSE_BRACE;
766                         int depth = 1;
767
768                         for (++cp2; *cp2 != '\0' && depth > 0; ++cp2) {
769                             if (cp2[-1] != '\\') {
770                                 if (*cp2 == have)
771                                     ++depth;
772                                 if (*cp2 == want)
773                                     --depth;
774                             }
775                         }
776                         Buf_AppendRange(buf, cp, cp2);
777                         cp = --cp2;
778                     } else
779                         Buf_AddByte(buf, (Byte)*cp);
780                 }
781             }
782         }
783         else if (pattern && *cp == '&')
784             Buf_AddBytes(buf, pattern->leftLen, (Byte *)pattern->lhs);
785         else
786             Buf_AddByte(buf, (Byte)*cp);
787     }
788
789     Buf_AddByte(buf, (Byte)'\0');
790
791     if (*cp != delim) {
792         *tstr = cp;
793         *length = 0;
794         return (NULL);
795     } else {
796         *tstr = ++cp;
797         cp = (char *)Buf_GetAll(buf, length);
798         *length -= 1;   /* Don't count the NULL */
799         Buf_Destroy(buf, FALSE);
800         return (cp);
801     }
802 }
803
804 /*-
805  *-----------------------------------------------------------------------
806  * Var_Quote --
807  *      Quote shell meta-characters in the string
808  *
809  * Results:
810  *      The quoted string
811  *
812  * Side Effects:
813  *      None.
814  *
815  *-----------------------------------------------------------------------
816  */
817 char *
818 Var_Quote(const char *str)
819 {
820     Buffer       *buf;
821     /* This should cover most shells :-( */
822     static char meta[] = "\n \t'`\";&<>()|*?{}[]\\$!#^~";
823     char          *ret;
824
825     buf = Buf_Init(MAKE_BSIZE);
826     for (; *str; str++) {
827         if (strchr(meta, *str) != NULL)
828             Buf_AddByte(buf, (Byte)'\\');
829         Buf_AddByte(buf, (Byte)*str);
830     }
831     Buf_AddByte(buf, (Byte)'\0');
832     ret = Buf_GetAll(buf, NULL);
833     Buf_Destroy(buf, FALSE);
834     return (ret);
835 }
836
837 /*-
838  *-----------------------------------------------------------------------
839  * VarREError --
840  *      Print the error caused by a regcomp or regexec call.
841  *
842  * Results:
843  *      None.
844  *
845  * Side Effects:
846  *      An error gets printed.
847  *
848  *-----------------------------------------------------------------------
849  */
850 void
851 VarREError(int err, regex_t *pat, const char *str)
852 {
853     char *errbuf;
854     int errlen;
855
856     errlen = regerror(err, pat, 0, 0);
857     errbuf = emalloc(errlen);
858     regerror(err, pat, errbuf, errlen);
859     Error("%s: %s", str, errbuf);
860     free(errbuf);
861 }
862
863 /*-
864  *-----------------------------------------------------------------------
865  * Var_Parse --
866  *      Given the start of a variable invocation, extract the variable
867  *      name and find its value, then modify it according to the
868  *      specification.
869  *
870  * Results:
871  *      The (possibly-modified) value of the variable or var_Error if the
872  *      specification is invalid. The length of the specification is
873  *      placed in *lengthPtr (for invalid specifications, this is just
874  *      2 to skip the '$' and the following letter, or 1 if '$' was the
875  *      last character in the string).
876  *      A Boolean in *freePtr telling whether the returned string should
877  *      be freed by the caller.
878  *
879  * Side Effects:
880  *      None.
881  *
882  *-----------------------------------------------------------------------
883  */
884 char *
885 Var_Parse(char *str, GNode *ctxt, Boolean err, size_t *lengthPtr,
886     Boolean *freePtr)
887 {
888     char        *tstr;          /* Pointer into str */
889     Var         *v;             /* Variable in invocation */
890     Boolean     haveModifier;   /* TRUE if have modifiers for the variable */
891     char        endc;           /* Ending character when variable in parens
892                                  * or braces */
893     char        startc;         /* Starting character when variable in parens
894                                  * or braces */
895     char        *start;
896     Boolean     dynamic;        /* TRUE if the variable is local and we're
897                                  * expanding it in a non-local context. This
898                                  * is done to support dynamic sources. The
899                                  * result is just the invocation, unaltered */
900
901     /*
902      * It is assumed that Var_Parse() is called with str[0] == '$'
903      */
904
905     if (str[1] == '\0') {
906         /*
907          * Error, there is only a dollar sign in the input string.
908          */
909         *freePtr = FALSE;
910         *lengthPtr = 1;
911         return (err ? var_Error : varNoError);
912
913     } else if (str[1] == OPEN_PAREN || str[1] == OPEN_BRACE) {
914         /*
915          * Check if brackets contain a variable name.
916          */
917         int     vlen;   /* length of variable name, after embedded variable
918                          * expansion */
919
920         /* build up expanded variable name in this buffer */
921         Buffer  *buf = Buf_Init(MAKE_BSIZE);
922
923         /*
924          * Skip to the end character or a colon, whichever comes first,
925          * replacing embedded variables as we go.
926          */
927         startc = str[1];
928         endc = (startc == OPEN_PAREN) ? CLOSE_PAREN : CLOSE_BRACE;
929         tstr = str + 2;
930
931         while (*tstr != '\0' && *tstr != endc && *tstr != ':') {
932             if (*tstr == '$') {
933                 size_t  rlen;
934                 Boolean rfree;
935                 char    *rval;
936
937                 rval = Var_Parse(tstr, ctxt, err, &rlen, &rfree);
938                 if (rval == var_Error) {
939                         Fatal("Error expanding embedded variable.");
940                 }
941                 if (rval != NULL) {
942                         Buf_Append(buf, rval);
943                         if (rfree)
944                                 free(rval);
945                 }
946                 tstr += rlen - 1;
947             } else {
948                 Buf_AddByte(buf, (Byte)*tstr);
949             }
950             tstr++;
951         }
952
953         if (*tstr == '\0') {
954             /*
955              * If we never did find the end character, return NULL
956              * right now, setting the length to be the distance to
957              * the end of the string, since that's what make does.
958              */
959             *freePtr = FALSE;
960             *lengthPtr = tstr - str;
961             return (var_Error);
962         }
963
964         haveModifier = (*tstr == ':');
965         *tstr = '\0';                   /* modify input string */
966         start = str;
967
968         Buf_AddByte(buf, (Byte)'\0');
969         str = Buf_GetAll(buf, (size_t *)NULL);  /* REPLACE str */ 
970         vlen = strlen(str);
971
972         v = VarFind(str, ctxt, FIND_ENV | FIND_GLOBAL | FIND_CMD);
973
974         if ((v == (Var *)NULL) && (ctxt != VAR_CMD) && (ctxt != VAR_GLOBAL) &&
975             (vlen == 2) && (str[1] == 'F' || str[1] == 'D'))
976         {
977             /*
978              * Check for bogus D and F forms of local variables since we're
979              * in a local context and the name is the right length.
980              */
981             switch (str[0]) {
982                 case '@':
983                 case '%':
984                 case '*':
985                 case '!':
986                 case '>':
987                 case '<':
988                 {
989                     char    vname[2];
990                     char    *val;
991
992                     /*
993                      * Well, it's local -- go look for it.
994                      */
995                     vname[0] = str[0];
996                     vname[1] = '\0';
997
998                     v = VarFind(vname, ctxt, 0);
999                     if (v != NULL && !haveModifier) {
1000                         /*
1001                          * No need for nested expansion or anything, as we're
1002                          * the only one who sets these things and we sure don't
1003                          * put nested invocations in them...
1004                          */
1005                         val = (char *)Buf_GetAll(v->val, (size_t *)NULL);
1006
1007                         if (str[1] == 'D') {
1008                             val = VarModify(val, VarHead, (void *)NULL);
1009                         } else {
1010                             val = VarModify(val, VarTail, (void *)NULL);
1011                         }
1012                         /*
1013                          * Resulting string is dynamically allocated, so
1014                          * tell caller to free it.
1015                          */
1016                         *freePtr = TRUE;
1017                         *lengthPtr = tstr - start + 1;
1018                         *tstr = endc;
1019                         Buf_Destroy(buf, TRUE);
1020                         return (val);
1021                     }
1022                     break;
1023                 default:
1024                     break;
1025                 }
1026             }
1027         }
1028
1029         if (v == (Var *)NULL) {
1030             if (((vlen == 1) ||
1031                  (((vlen == 2) && (str[1] == 'F' || str[1] == 'D')))) &&
1032                 ((ctxt == VAR_CMD) || (ctxt == VAR_GLOBAL)))
1033             {
1034                 /*
1035                  * If substituting a local variable in a non-local context,
1036                  * assume it's for dynamic source stuff. We have to handle
1037                  * this specially and return the longhand for the variable
1038                  * with the dollar sign escaped so it makes it back to the
1039                  * caller. Only four of the local variables are treated
1040                  * specially as they are the only four that will be set
1041                  * when dynamic sources are expanded.
1042                  */
1043                 switch (str[0]) {
1044                     case '@':
1045                     case '%':
1046                     case '*':
1047                     case '!':
1048                         dynamic = TRUE;
1049                         break;
1050                     default:
1051                         dynamic = FALSE;
1052                         break;
1053                 }
1054             } else if ((vlen > 2) && (str[0] == '.') &&
1055                        isupper((unsigned char)str[1]) &&
1056                        ((ctxt == VAR_CMD) || (ctxt == VAR_GLOBAL)))
1057             {
1058                 int     len;
1059
1060                 len = vlen - 1;
1061                 if ((strncmp(str, ".TARGET", len) == 0) ||
1062                     (strncmp(str, ".ARCHIVE", len) == 0) ||
1063                     (strncmp(str, ".PREFIX", len) == 0) ||
1064                     (strncmp(str, ".MEMBER", len) == 0))
1065                 {
1066                     dynamic = TRUE;
1067                 } else {
1068                     dynamic = FALSE;
1069                 }
1070             } else {
1071                 dynamic = FALSE;
1072             }
1073
1074             if (haveModifier) {
1075                 /*
1076                  * Still need to get to the end of the variable specification,
1077                  * so kludge up a Var structure for the modifications
1078                  */
1079                 v = VarCreate(str, NULL, VAR_JUNK);
1080
1081             } else {
1082                 /*
1083                  * No modifiers -- have specification length so we can return
1084                  * now.
1085                  */
1086                 *lengthPtr = tstr - start + 1;
1087                 *tstr = endc;
1088                 if (dynamic) {
1089                     str = emalloc(*lengthPtr + 1);
1090                     strncpy(str, start, *lengthPtr);
1091                     str[*lengthPtr] = '\0';
1092                     *freePtr = TRUE;
1093                     Buf_Destroy(buf, TRUE);
1094                     return (str);
1095                 } else {
1096                     *freePtr = FALSE;
1097                     Buf_Destroy(buf, TRUE);
1098                     return (err ? var_Error : varNoError);
1099                 }
1100             }
1101         } else {
1102             dynamic = FALSE;
1103         }
1104         *freePtr = FALSE;
1105         Buf_Destroy(buf, TRUE);
1106
1107     } else {
1108         /*
1109          * If it's not bounded by braces of some sort, life is much simpler.
1110          * We just need to check for the first character and return the
1111          * value if it exists.
1112          */
1113         char      name[2];
1114
1115         name[0] = str[1];
1116         name[1] = '\0';
1117         *lengthPtr = 2;
1118
1119         v = VarFind(name, ctxt, FIND_ENV | FIND_GLOBAL | FIND_CMD);
1120         if (v == NULL) {
1121             if ((ctxt == VAR_CMD) || (ctxt == VAR_GLOBAL)) {
1122                 /*
1123                  * If substituting a local variable in a non-local context,
1124                  * assume it's for dynamic source stuff. We have to handle
1125                  * this specially and return the longhand for the variable
1126                  * with the dollar sign escaped so it makes it back to the
1127                  * caller. Only four of the local variables are treated
1128                  * specially as they are the only four that will be set
1129                  * when dynamic sources are expanded.
1130                  */
1131                 /* XXX: It looks like $% and $! are reversed here */
1132                 *freePtr = FALSE;
1133                 switch (str[1]) {
1134                     case '@':
1135                         return ("$(.TARGET)");
1136                     case '%':
1137                         return ("$(.ARCHIVE)");
1138                     case '*':
1139                         return ("$(.PREFIX)");
1140                     case '!':
1141                         return ("$(.MEMBER)");
1142                     default:
1143                         return (err ? var_Error : varNoError);
1144                 }
1145             } else {
1146                 *freePtr = FALSE;
1147                 return (err ? var_Error : varNoError);
1148             }
1149         } else {
1150             dynamic = FALSE;
1151             start = str;
1152             *freePtr = FALSE;
1153             haveModifier = FALSE;
1154             startc = 0;
1155             endc = str[1];
1156             tstr = &str[1];
1157         }
1158     }
1159
1160         /*
1161          * Make sure this variable is fully expanded.
1162          * XXX This section really should be its own function.
1163          */
1164         {
1165                 if (v->flags & VAR_IN_USE) {
1166                         Fatal("Variable %s is recursive.", v->name);
1167                         /* NOTREACHED */
1168                 } else {
1169                         v->flags |= VAR_IN_USE;
1170                 }
1171
1172                 /*
1173                  * Before doing any modification, we have to make sure the
1174                  * value has been fully expanded. If it looks like recursion
1175                  * might be necessary (there's a dollar sign somewhere in the
1176                  * variable's value) we just call Var_Subst to do any other
1177                  * substitutions that are necessary. Note that the value
1178                  * returned by Var_Subst will have been
1179                  * dynamically-allocated, so it will need freeing when we
1180                  * return.
1181                  */
1182                 str = (char *)Buf_GetAll(v->val, (size_t *)NULL);
1183                 if (strchr(str, '$') != NULL) {
1184                         Buffer *buf;
1185
1186                         buf = Var_Subst(NULL, str, ctxt, err);
1187                         str = Buf_GetAll(buf, NULL);
1188                         Buf_Destroy(buf, FALSE);
1189
1190                         *freePtr = TRUE;
1191                 }
1192                 v->flags &= ~VAR_IN_USE;
1193         }
1194
1195     /*
1196      * Now we need to apply any modifiers the user wants applied.
1197      * These are:
1198      *            :M<pattern>   words which match the given <pattern>.
1199      *                          <pattern> is of the standard file
1200      *                          wildcarding form.
1201      *            :S<d><pat1><d><pat2><d>[g]
1202      *                          Substitute <pat2> for <pat1> in the value
1203      *            :C<d><pat1><d><pat2><d>[g]
1204      *                          Substitute <pat2> for regex <pat1> in the value
1205      *            :H            Substitute the head of each word
1206      *            :T            Substitute the tail of each word
1207      *            :E            Substitute the extension (minus '.') of
1208      *                          each word
1209      *            :R            Substitute the root of each word
1210      *                          (pathname minus the suffix).
1211      *            :lhs=rhs      Like :S, but the rhs goes to the end of
1212      *                          the invocation.
1213      *            :U            Converts variable to upper-case.
1214      *            :L            Converts variable to lower-case.
1215      */
1216     if ((str != NULL) && haveModifier) {
1217         char    *cp;
1218         /*
1219          * Skip initial colon while putting it back.
1220          */
1221         *tstr++ = ':';
1222         while (*tstr != endc) {
1223             char        *newStr;    /* New value to return */
1224             char        termc;      /* Character which terminated scan */
1225
1226             DEBUGF(VAR, ("Applying :%c to \"%s\"\n", *tstr, str));
1227             switch (*tstr) {
1228                 case 'N':
1229                 case 'M':
1230                 {
1231                     char    *pattern;
1232                     char    *cp2;
1233                     Boolean copy;
1234
1235                     copy = FALSE;
1236                     for (cp = tstr + 1;
1237                          *cp != '\0' && *cp != ':' && *cp != endc;
1238                          cp++)
1239                     {
1240                         if (*cp == '\\' && (cp[1] == ':' || cp[1] == endc)) {
1241                             copy = TRUE;
1242                             cp++;
1243                         }
1244                     }
1245                     termc = *cp;
1246                     *cp = '\0';
1247                     if (copy) {
1248                         /*
1249                          * Need to compress the \:'s out of the pattern, so
1250                          * allocate enough room to hold the uncompressed
1251                          * pattern (note that cp started at tstr+1, so
1252                          * cp - tstr takes the null byte into account) and
1253                          * compress the pattern into the space.
1254                          */
1255                         pattern = emalloc(cp - tstr);
1256                         for (cp2 = pattern, cp = tstr + 1;
1257                              *cp != '\0';
1258                              cp++, cp2++)
1259                         {
1260                             if ((*cp == '\\') &&
1261                                 (cp[1] == ':' || cp[1] == endc)) {
1262                                     cp++;
1263                             }
1264                             *cp2 = *cp;
1265                         }
1266                         *cp2 = '\0';
1267                     } else {
1268                         pattern = &tstr[1];
1269                     }
1270                     if (*tstr == 'M' || *tstr == 'm') {
1271                         newStr = VarModify(str, VarMatch, pattern);
1272                     } else {
1273                         newStr = VarModify(str, VarNoMatch, pattern);
1274                     }
1275                     if (copy) {
1276                         free(pattern);
1277                     }
1278                     break;
1279                 }
1280                 case 'S':
1281                 {
1282                     VarPattern      pattern;
1283                     char            del;
1284                     Buffer          *buf;       /* Buffer for patterns */
1285
1286                     pattern.flags = 0;
1287                     del = tstr[1];
1288                     tstr += 2;
1289
1290                     /*
1291                      * If pattern begins with '^', it is anchored to the
1292                      * start of the word -- skip over it and flag pattern.
1293                      */
1294                     if (*tstr == '^') {
1295                         pattern.flags |= VAR_MATCH_START;
1296                         tstr += 1;
1297                     }
1298
1299                     buf = Buf_Init(0);
1300
1301                     /*
1302                      * Pass through the lhs looking for 1) escaped delimiters,
1303                      * '$'s and backslashes (place the escaped character in
1304                      * uninterpreted) and 2) unescaped $'s that aren't before
1305                      * the delimiter (expand the variable substitution).
1306                      * The result is left in the Buffer buf.
1307                      */
1308                     for (cp = tstr; *cp != '\0' && *cp != del; cp++) {
1309                         if ((*cp == '\\') &&
1310                             ((cp[1] == del) ||
1311                              (cp[1] == '$') ||
1312                              (cp[1] == '\\')))
1313                         {
1314                             Buf_AddByte(buf, (Byte)cp[1]);
1315                             cp++;
1316                         } else if (*cp == '$') {
1317                             if (cp[1] != del) {
1318                                 /*
1319                                  * If unescaped dollar sign not before the
1320                                  * delimiter, assume it's a variable
1321                                  * substitution and recurse.
1322                                  */
1323                                 char        *cp2;
1324                                 size_t len;
1325                                 Boolean     freeIt;
1326
1327                                 cp2 = Var_Parse(cp, ctxt, err, &len, &freeIt);
1328                                 Buf_Append(buf, cp2);
1329                                 if (freeIt) {
1330                                     free(cp2);
1331                                 }
1332                                 cp += len - 1;
1333                             } else {
1334                                 /*
1335                                  * Unescaped $ at end of pattern => anchor
1336                                  * pattern at end.
1337                                  */
1338                                 pattern.flags |= VAR_MATCH_END;
1339                             }
1340                         } else {
1341                             Buf_AddByte(buf, (Byte)*cp);
1342                         }
1343                     }
1344
1345                     Buf_AddByte(buf, (Byte)'\0');
1346
1347                     /*
1348                      * If lhs didn't end with the delimiter, complain and
1349                      * exit.
1350                      */
1351                     if (*cp != del) {
1352                         Fatal("Unclosed substitution for %s (%c missing)",
1353                               v->name, del);
1354                     }
1355
1356                     /*
1357                      * Fetch pattern and destroy buffer, but preserve the data
1358                      * in it, since that's our lhs. Note that Buf_GetAll
1359                      * will return the actual number of bytes, which includes
1360                      * the null byte, so we have to decrement the length by
1361                      * one.
1362                      */
1363                     pattern.lhs = (char *)Buf_GetAll(buf, &pattern.leftLen);
1364                     pattern.leftLen--;
1365                     Buf_Destroy(buf, FALSE);
1366
1367                     /*
1368                      * Now comes the replacement string. Three things need to
1369                      * be done here: 1) need to compress escaped delimiters and
1370                      * ampersands and 2) need to replace unescaped ampersands
1371                      * with the l.h.s. (since this isn't regexp, we can do
1372                      * it right here) and 3) expand any variable substitutions.
1373                      */
1374                     buf = Buf_Init(0);
1375
1376                     tstr = cp + 1;
1377                     for (cp = tstr; *cp != '\0' && *cp != del; cp++) {
1378                         if ((*cp == '\\') &&
1379                             ((cp[1] == del) ||
1380                              (cp[1] == '&') ||
1381                              (cp[1] == '\\') ||
1382                              (cp[1] == '$')))
1383                         {
1384                             Buf_AddByte(buf, (Byte)cp[1]);
1385                             cp++;
1386                         } else if ((*cp == '$') && (cp[1] != del)) {
1387                             char    *cp2;
1388                             size_t len;
1389                             Boolean freeIt;
1390
1391                             cp2 = Var_Parse(cp, ctxt, err, &len, &freeIt);
1392                             Buf_Append(buf, cp2);
1393                             cp += len - 1;
1394                             if (freeIt) {
1395                                 free(cp2);
1396                             }
1397                         } else if (*cp == '&') {
1398                             Buf_AddBytes(buf, pattern.leftLen,
1399                                          (Byte *)pattern.lhs);
1400                         } else {
1401                             Buf_AddByte(buf, (Byte)*cp);
1402                         }
1403                     }
1404
1405                     Buf_AddByte(buf, (Byte)'\0');
1406
1407                     /*
1408                      * If didn't end in delimiter character, complain
1409                      */
1410                     if (*cp != del) {
1411                         Fatal("Unclosed substitution for %s (%c missing)",
1412                               v->name, del);
1413                     }
1414
1415                     pattern.rhs = (char *)Buf_GetAll(buf, &pattern.rightLen);
1416                     pattern.rightLen--;
1417                     Buf_Destroy(buf, FALSE);
1418
1419                     /*
1420                      * Check for global substitution. If 'g' after the final
1421                      * delimiter, substitution is global and is marked that
1422                      * way.
1423                      */
1424                     cp++;
1425                     if (*cp == 'g') {
1426                         pattern.flags |= VAR_SUB_GLOBAL;
1427                         cp++;
1428                     }
1429
1430                     /*
1431                      * Global substitution of the empty string causes an
1432                      * infinite number of matches, unless anchored by '^'
1433                      * (start of string) or '$' (end of string). Catch the
1434                      * infinite substitution here.
1435                      * Note that flags can only contain the 3 bits we're
1436                      * interested in so we don't have to mask unrelated
1437                      * bits. We can test for equality.
1438                      */
1439                     if (!pattern.leftLen && pattern.flags == VAR_SUB_GLOBAL)
1440                         Fatal("Global substitution of the empty string");
1441
1442                     termc = *cp;
1443                     newStr = VarModify(str, VarSubstitute, &pattern);
1444                     /*
1445                      * Free the two strings.
1446                      */
1447                     free(pattern.lhs);
1448                     free(pattern.rhs);
1449                     break;
1450                 }
1451                 case 'C':
1452                 {
1453                     int         delim;
1454                     VarREPattern    pattern;
1455                     char           *re;
1456                     int             error;
1457
1458                     pattern.flags = 0;
1459                     delim = tstr[1];
1460                     tstr += 2;
1461
1462                     cp = tstr;
1463
1464                     if ((re = VarGetPattern(ctxt, err, &cp, delim, NULL,
1465                         NULL, NULL)) == NULL) {
1466                         /* was: goto cleanup */
1467                         *lengthPtr = cp - start + 1;
1468                         if (*freePtr)
1469                             free(str);
1470                         if (delim != '\0')
1471                             Fatal("Unclosed substitution for %s (%c missing)",
1472                                   v->name, delim);
1473                         return (var_Error);
1474                     }
1475
1476                     if ((pattern.replace = VarGetPattern(ctxt, err, &cp,
1477                         delim, NULL, NULL, NULL)) == NULL){
1478                         free(re);
1479
1480                         /* was: goto cleanup */
1481                         *lengthPtr = cp - start + 1;
1482                         if (*freePtr)
1483                             free(str);
1484                         if (delim != '\0')
1485                             Fatal("Unclosed substitution for %s (%c missing)",
1486                                   v->name, delim);
1487                         return (var_Error);
1488                     }
1489
1490                     for (;; cp++) {
1491                         switch (*cp) {
1492                         case 'g':
1493                             pattern.flags |= VAR_SUB_GLOBAL;
1494                             continue;
1495                         case '1':
1496                             pattern.flags |= VAR_SUB_ONE;
1497                             continue;
1498                         default:
1499                             break;
1500                         }
1501                         break;
1502                     }
1503
1504                     termc = *cp;
1505
1506                     error = regcomp(&pattern.re, re, REG_EXTENDED);
1507                     free(re);
1508                     if (error)  {
1509                         *lengthPtr = cp - start + 1;
1510                         VarREError(error, &pattern.re, "RE substitution error");
1511                         free(pattern.replace);
1512                         return (var_Error);
1513                     }
1514
1515                     pattern.nsub = pattern.re.re_nsub + 1;
1516                     if (pattern.nsub < 1)
1517                         pattern.nsub = 1;
1518                     if (pattern.nsub > 10)
1519                         pattern.nsub = 10;
1520                     pattern.matches = emalloc(pattern.nsub *
1521                                               sizeof(regmatch_t));
1522                     newStr = VarModify(str, VarRESubstitute, &pattern);
1523                     regfree(&pattern.re);
1524                     free(pattern.replace);
1525                     free(pattern.matches);
1526                     break;
1527                 }
1528                 case 'L':
1529                     if (tstr[1] == endc || tstr[1] == ':') {
1530                         Buffer *buf;
1531                         buf = Buf_Init(MAKE_BSIZE);
1532                         for (cp = str; *cp ; cp++)
1533                             Buf_AddByte(buf, (Byte)tolower(*cp));
1534
1535                         Buf_AddByte(buf, (Byte)'\0');
1536                         newStr = (char *)Buf_GetAll(buf, (size_t *)NULL);
1537                         Buf_Destroy(buf, FALSE);
1538
1539                         cp = tstr + 1;
1540                         termc = *cp;
1541                         break;
1542                     }
1543                     /* FALLTHROUGH */
1544                 case 'O':
1545                     if (tstr[1] == endc || tstr[1] == ':') {
1546                         newStr = VarSortWords(str, SortIncreasing);
1547                         cp = tstr + 1;
1548                         termc = *cp;
1549                         break;
1550                     }
1551                     /* FALLTHROUGH */
1552                 case 'Q':
1553                     if (tstr[1] == endc || tstr[1] == ':') {
1554                         newStr = Var_Quote(str);
1555                         cp = tstr + 1;
1556                         termc = *cp;
1557                         break;
1558                     }
1559                     /*FALLTHRU*/
1560                 case 'T':
1561                     if (tstr[1] == endc || tstr[1] == ':') {
1562                         newStr = VarModify(str, VarTail, (void *)NULL);
1563                         cp = tstr + 1;
1564                         termc = *cp;
1565                         break;
1566                     }
1567                     /*FALLTHRU*/
1568                 case 'U':
1569                     if (tstr[1] == endc || tstr[1] == ':') {
1570                         Buffer *buf;
1571                         buf = Buf_Init(MAKE_BSIZE);
1572                         for (cp = str; *cp ; cp++)
1573                             Buf_AddByte(buf, (Byte)toupper(*cp));
1574
1575                         Buf_AddByte(buf, (Byte)'\0');
1576                         newStr = (char *)Buf_GetAll(buf, (size_t *)NULL);
1577                         Buf_Destroy(buf, FALSE);
1578
1579                         cp = tstr + 1;
1580                         termc = *cp;
1581                         break;
1582                     }
1583                     /* FALLTHROUGH */
1584                 case 'H':
1585                     if (tstr[1] == endc || tstr[1] == ':') {
1586                         newStr = VarModify(str, VarHead, (void *)NULL);
1587                         cp = tstr + 1;
1588                         termc = *cp;
1589                         break;
1590                     }
1591                     /*FALLTHRU*/
1592                 case 'E':
1593                     if (tstr[1] == endc || tstr[1] == ':') {
1594                         newStr = VarModify(str, VarSuffix, (void *)NULL);
1595                         cp = tstr + 1;
1596                         termc = *cp;
1597                         break;
1598                     }
1599                     /*FALLTHRU*/
1600                 case 'R':
1601                     if (tstr[1] == endc || tstr[1] == ':') {
1602                         newStr = VarModify(str, VarRoot, (void *)NULL);
1603                         cp = tstr + 1;
1604                         termc = *cp;
1605                         break;
1606                     }
1607                     /*FALLTHRU*/
1608 #ifdef SUNSHCMD
1609                 case 's':
1610                     if (tstr[1] == 'h' && (tstr[2] == endc || tstr[2] == ':')) {
1611                         const char *error;
1612                         Buffer *buf;
1613
1614                         buf = Cmd_Exec(str, &error);
1615                         newStr = Buf_GetAll(buf, NULL);
1616                         Buf_Destroy(buf, FALSE);
1617
1618                         if (error)
1619                             Error(error, str);
1620                         cp = tstr + 2;
1621                         termc = *cp;
1622                         break;
1623                     }
1624                     /*FALLTHRU*/
1625 #endif
1626                 default:
1627                 {
1628 #ifdef SYSVVARSUB
1629                     /*
1630                      * This can either be a bogus modifier or a System-V
1631                      * substitution command.
1632                      */
1633                     VarPattern  pattern;
1634                     Boolean     eqFound;
1635                     int         cnt;
1636
1637                     pattern.flags = 0;
1638                     eqFound = FALSE;
1639                     /*
1640                      * First we make a pass through the string trying
1641                      * to verify it is a SYSV-make-style translation:
1642                      * it must be: <string1>=<string2>)
1643                      */
1644                     cp = tstr;
1645                     cnt = 1;
1646                     while (*cp != '\0' && cnt) {
1647                         if (*cp == '=') {
1648                             eqFound = TRUE;
1649                             /* continue looking for endc */
1650                         }
1651                         else if (*cp == endc)
1652                             cnt--;
1653                         else if (*cp == startc)
1654                             cnt++;
1655                         if (cnt)
1656                             cp++;
1657                     }
1658                     if (*cp == endc && eqFound) {
1659                         int delim;
1660
1661                         /*
1662                          * Now we break this sucker into the lhs and
1663                          * rhs. We must null terminate them of course.
1664                          */
1665                         cp = tstr;
1666
1667                         delim = '=';
1668                         if ((pattern.lhs = VarGetPattern(ctxt,
1669                             err, &cp, delim, &pattern.flags, &pattern.leftLen,
1670                             NULL)) == NULL) {
1671                                 /* was: goto cleanup */
1672                                 *lengthPtr = cp - start + 1;
1673                                 if (*freePtr)
1674                                     free(str);
1675                                 if (delim != '\0')
1676                                     Fatal("Unclosed substitution for %s (%c missing)",
1677                                           v->name, delim);
1678                                 return (var_Error);
1679                         }
1680
1681                         delim = endc;
1682                         if ((pattern.rhs = VarGetPattern(ctxt,
1683                             err, &cp, delim, NULL, &pattern.rightLen,
1684                             &pattern)) == NULL) {
1685                                 /* was: goto cleanup */
1686                                 *lengthPtr = cp - start + 1;
1687                                 if (*freePtr)
1688                                     free(str);
1689                                 if (delim != '\0')
1690                                     Fatal("Unclosed substitution for %s (%c missing)",
1691                                           v->name, delim);
1692                                 return (var_Error);
1693                         }
1694
1695                         /*
1696                          * SYSV modifications happen through the whole
1697                          * string. Note the pattern is anchored at the end.
1698                          */
1699                         termc = *--cp;
1700                         delim = '\0';
1701                         newStr = VarModify(str, VarSYSVMatch, &pattern);
1702
1703                         free(pattern.lhs);
1704                         free(pattern.rhs);
1705
1706                         termc = endc;
1707                     } else
1708 #endif
1709                     {
1710                         Error("Unknown modifier '%c'\n", *tstr);
1711                         for (cp = tstr+1;
1712                              *cp != ':' && *cp != endc && *cp != '\0';
1713                              cp++)
1714                                  continue;
1715                         termc = *cp;
1716                         newStr = var_Error;
1717                     }
1718                 }
1719             }
1720             DEBUGF(VAR, ("Result is \"%s\"\n", newStr));
1721
1722             if (*freePtr) {
1723                 free(str);
1724             }
1725             str = newStr;
1726             if (str != var_Error) {
1727                 *freePtr = TRUE;
1728             } else {
1729                 *freePtr = FALSE;
1730             }
1731             if (termc == '\0') {
1732                 Error("Unclosed variable specification for %s", v->name);
1733             } else if (termc == ':') {
1734                 *cp++ = termc;
1735             } else {
1736                 *cp = termc;
1737             }
1738             tstr = cp;
1739         }
1740         *lengthPtr = tstr - start + 1;
1741     } else {
1742         *lengthPtr = tstr - start + 1;
1743         *tstr = endc;
1744     }
1745
1746     if (v->flags & VAR_FROM_ENV) {
1747         Boolean   destroy = FALSE;
1748
1749         if (str != (char *)Buf_GetAll(v->val, (size_t *)NULL)) {
1750             destroy = TRUE;
1751         } else {
1752             /*
1753              * Returning the value unmodified, so tell the caller to free
1754              * the thing.
1755              */
1756             *freePtr = TRUE;
1757         }
1758         VarDestroy(v, destroy);
1759     } else if (v->flags & VAR_JUNK) {
1760         /*
1761          * Perform any free'ing needed and set *freePtr to FALSE so the caller
1762          * doesn't try to free a static pointer.
1763          */
1764         if (*freePtr) {
1765             free(str);
1766         }
1767         *freePtr = FALSE;
1768         VarDestroy(v, TRUE);
1769         if (dynamic) {
1770             str = emalloc(*lengthPtr + 1);
1771             strncpy(str, start, *lengthPtr);
1772             str[*lengthPtr] = '\0';
1773             *freePtr = TRUE;
1774         } else {
1775             str = err ? var_Error : varNoError;
1776         }
1777     }
1778     return (str);
1779 }
1780
1781 /*-
1782  *-----------------------------------------------------------------------
1783  * Var_Subst  --
1784  *      Substitute for all variables in the given string in the given context
1785  *      If undefErr is TRUE, Parse_Error will be called when an undefined
1786  *      variable is encountered.
1787  *
1788  * Results:
1789  *      The resulting string.
1790  *
1791  * Side Effects:
1792  *      None. The old string must be freed by the caller
1793  *-----------------------------------------------------------------------
1794  */
1795 Buffer *
1796 Var_Subst(const char *var, const char *str, GNode *ctxt, Boolean undefErr)
1797 {
1798     Boolean     errorReported;
1799     Buffer      *buf;           /* Buffer for forming things */
1800
1801     /*
1802      * Set TRUE if an error has already been reported to prevent a
1803      * plethora of messages when recursing.
1804      */
1805     errorReported = FALSE;
1806
1807     buf = Buf_Init(0);
1808     while (*str) {
1809         if (var == NULL && (str[0] == '$') && (str[1] == '$')) {
1810             /*
1811              * A dollar sign may be escaped either with another dollar sign.
1812              * In such a case, we skip over the escape character and store the
1813              * dollar sign into the buffer directly.
1814              */
1815             Buf_AddByte(buf, (Byte)str[0]);
1816             str += 2;
1817
1818         } else if (str[0] == '$') {
1819             char        *val;   /* Value to substitute for a variable */
1820             size_t      length; /* Length of the variable invocation */
1821             Boolean     doFree; /* Set true if val should be freed */
1822             /*
1823              * Variable invocation.
1824              */
1825             if (var != NULL) {
1826                 int expand;
1827                 for (;;) {
1828                     if (str[1] == OPEN_PAREN || str[1] == OPEN_BRACE) {
1829                         size_t          ln;
1830                         const char      *p = str + 2;
1831
1832                         /*
1833                          * Scan up to the end of the variable name.
1834                          */
1835                         while (*p != '\0' &&
1836                                *p != ':' &&
1837                                *p != CLOSE_PAREN &&
1838                                *p != CLOSE_BRACE &&
1839                                *p != '$') {
1840                             ++p;
1841                         }
1842
1843                         /*
1844                          * A variable inside the variable. We cannot expand
1845                          * the external variable yet, so we try again with
1846                          * the nested one
1847                          */
1848                         if (*p == '$') {
1849                             Buf_AppendRange(buf, str, p);
1850                             str = p;
1851                             continue;
1852                         }
1853
1854                         ln = p - (str + 2);
1855                         if (var[ln] == '\0' && strncmp(var, str + 2, ln) == 0) {
1856                             expand = TRUE;
1857                         } else {
1858                             /*
1859                              * Not the variable we want to expand, scan
1860                              * until the next variable
1861                              */
1862                             while (*p != '$' && *p != '\0')
1863                                 ++p;
1864
1865                             Buf_AppendRange(buf, str, p);
1866                             str = p;
1867                             expand = FALSE;
1868                         }
1869                     } else {
1870                         /*
1871                          * Single letter variable name
1872                          */
1873                         if (var[1] == '\0' && var[0] == str[1]) {
1874                             expand = TRUE;
1875                         } else {
1876                             Buf_AddBytes(buf, 2, (const Byte *)str);
1877                             str += 2;
1878                             expand = FALSE;
1879                         }
1880                     }
1881                     break;
1882                 }
1883                 if (!expand)
1884                     continue;
1885             }
1886
1887             val = Var_Parse(str, ctxt, undefErr, &length, &doFree);
1888
1889             /*
1890              * When we come down here, val should either point to the
1891              * value of this variable, suitably modified, or be NULL.
1892              * Length should be the total length of the potential
1893              * variable invocation (from $ to end character...)
1894              */
1895             if (val == var_Error || val == varNoError) {
1896                 /*
1897                  * If performing old-time variable substitution, skip over
1898                  * the variable and continue with the substitution. Otherwise,
1899                  * store the dollar sign and advance str so we continue with
1900                  * the string...
1901                  */
1902                 if (oldVars) {
1903                     str += length;
1904                 } else if (undefErr) {
1905                     /*
1906                      * If variable is undefined, complain and skip the
1907                      * variable. The complaint will stop us from doing anything
1908                      * when the file is parsed.
1909                      */
1910                     if (!errorReported) {
1911                         Parse_Error(PARSE_FATAL,
1912                                      "Undefined variable \"%.*s\"",length,str);
1913                     }
1914                     str += length;
1915                     errorReported = TRUE;
1916                 } else {
1917                     Buf_AddByte(buf, (Byte)*str);
1918                     str += 1;
1919                 }
1920             } else {
1921                 /*
1922                  * We've now got a variable structure to store in. But first,
1923                  * advance the string pointer.
1924                  */
1925                 str += length;
1926
1927                 /*
1928                  * Copy all the characters from the variable value straight
1929                  * into the new string.
1930                  */
1931                 Buf_Append(buf, val);
1932                 if (doFree) {
1933                     free(val);
1934                 }
1935             }
1936         } else {
1937             /*
1938              * Skip as many characters as possible -- either to the end of
1939              * the string or to the next dollar sign (variable invocation).
1940              */
1941             const char *cp = str;
1942
1943             do {
1944                 str++;
1945             } while (str[0] != '$' && str[0] != '\0');
1946
1947             Buf_AppendRange(buf, cp, str);
1948         }
1949     }
1950
1951     return (buf);
1952 }
1953
1954 /*-
1955  *-----------------------------------------------------------------------
1956  * Var_GetTail --
1957  *      Return the tail from each of a list of words. Used to set the
1958  *      System V local variables.
1959  *
1960  * Results:
1961  *      The resulting string.
1962  *
1963  * Side Effects:
1964  *      None.
1965  *
1966  *-----------------------------------------------------------------------
1967  */
1968 char *
1969 Var_GetTail(char *file)
1970 {
1971
1972     return (VarModify(file, VarTail, (void *)NULL));
1973 }
1974
1975 /*-
1976  *-----------------------------------------------------------------------
1977  * Var_GetHead --
1978  *      Find the leading components of a (list of) filename(s).
1979  *      XXX: VarHead does not replace foo by ., as (sun) System V make
1980  *      does.
1981  *
1982  * Results:
1983  *      The leading components.
1984  *
1985  * Side Effects:
1986  *      None.
1987  *
1988  *-----------------------------------------------------------------------
1989  */
1990 char *
1991 Var_GetHead(char *file)
1992 {
1993
1994     return (VarModify(file, VarHead, (void *)NULL));
1995 }
1996
1997 /*-
1998  *-----------------------------------------------------------------------
1999  * Var_Init --
2000  *      Initialize the module
2001  *
2002  * Results:
2003  *      None
2004  *
2005  * Side Effects:
2006  *      The VAR_CMD and VAR_GLOBAL contexts are created
2007  *-----------------------------------------------------------------------
2008  */
2009 void
2010 Var_Init(void)
2011 {
2012
2013     VAR_GLOBAL = Targ_NewGN("Global");
2014     VAR_CMD = Targ_NewGN("Command");
2015 }
2016
2017 /****************** PRINT DEBUGGING INFO *****************/
2018 static int
2019 VarPrintVar(void *vp, void *dummy __unused)
2020 {
2021     Var    *v = (Var *) vp;
2022
2023     printf("%-16s = %s\n", v->name, (char *)Buf_GetAll(v->val, (size_t *)NULL));
2024     return (0);
2025 }
2026
2027 /*-
2028  *-----------------------------------------------------------------------
2029  * Var_Dump --
2030  *      print all variables in a context
2031  *-----------------------------------------------------------------------
2032  */
2033 void
2034 Var_Dump(GNode *ctxt)
2035 {
2036
2037     Lst_ForEach(&ctxt->context, VarPrintVar, (void *)NULL);
2038 }