git.ozlabs.org Git - ccan/blob - tools/depends.c

   1 #include <ccan/str/str.h>
   2 #include <ccan/read_write_all/read_write_all.h>
   3 #include <ccan/rbuf/rbuf.h>
   4 #include <ccan/tal/path/path.h>
   5 #include <ccan/compiler/compiler.h>
   6 #include <ccan/err/err.h>
   7 #include "tools.h"
   8 #include <sys/types.h>
   9 #include <sys/stat.h>
  10 #include <fcntl.h>
  11 #include <stdbool.h>
  12 #include <unistd.h>
  13 #include <errno.h>
  14
  15 static char ** PRINTF_FMT(2, 3)
  16 lines_from_cmd(const void *ctx, const char *format, ...)
  17 {
  18         va_list ap;
  19         char *cmd;
  20         FILE *p;
  21         struct rbuf in;
  22
  23         va_start(ap, format);
  24         cmd = tal_vfmt(ctx, format, ap);
  25         va_end(ap);
  26
  27         p = popen(cmd, "r");
  28         if (!p)
  29                 err(1, "Executing '%s'", cmd);
  30
  31         /* FIXME: Use rbuf_read_str(&in, '\n') rather than strsplit! */
  32         rbuf_init(&in, fileno(p), tal_arr(ctx, char, 0), 0);
  33         if (!rbuf_read_str(&in, 0, do_tal_realloc) && errno)
  34                 err(1, "Reading from '%s'", cmd);
  35         pclose(p);
  36
  37         return tal_strsplit(ctx, in.buf, "\n", STR_EMPTY_OK);
  38 }
  39
  40 /* Be careful about trying to compile over running programs (parallel make).
  41  * temp_file helps here. */
  42 char *compile_info(const void *ctx, const char *dir)
  43 {
  44         char *info_c_file, *info, *compiled, *output;
  45         size_t len;
  46         int fd;
  47
  48         /* Copy it to a file with proper .c suffix. */
  49         info = tal_grab_file(ctx, tal_fmt(ctx, "%s/_info", dir), &len);
  50         if (!info)
  51                 return NULL;
  52
  53         info_c_file = temp_file(ctx, ".c", "_info");
  54         fd = open(info_c_file, O_WRONLY|O_CREAT|O_EXCL, 0600);
  55         if (fd < 0)
  56                 return NULL;
  57         if (!write_all(fd, info, len))
  58                 return NULL;
  59
  60         if (close(fd) != 0)
  61                 return NULL;
  62
  63         compiled = temp_file(ctx, "", "info");
  64         if (compile_and_link(ctx, info_c_file, find_ccan_dir(dir), "",
  65                              CCAN_COMPILER, CCAN_CFLAGS " -I.", "",
  66                              compiled, &output))
  67                 return compiled;
  68         return NULL;
  69 }
  70
  71 static char **get_one_deps(const void *ctx, const char *dir, const char *style,
  72                            char *(*get_info)(const void *ctx, const char *dir))
  73 {
  74         char **deps, *cmd;
  75         char *infofile = get_info(ctx, dir);
  76
  77         if (!infofile)
  78                 return NULL;
  79
  80         cmd = tal_fmt(ctx, "%s %s", infofile, style);
  81         deps = lines_from_cmd(cmd, "%s", cmd);
  82         if (!deps) {
  83                 /* You must understand depends, maybe not testdepends. */
  84                 if (streq(style, "depends"))
  85                         err(1, "Could not run '%s'", cmd);
  86                 deps = tal(ctx, char *);
  87                 deps[0] = NULL;
  88         }
  89         return deps;
  90 }
  91
  92 /* Make copy of src, replacing "from" with "to". */
  93 static char *replace(const void *ctx, const char *src,
  94                      const char *from, const char *to)
  95 {
  96         char *ret = tal_strdup(ctx, "");
  97         unsigned int rlen, len, add;
  98
  99         rlen = len = 0;
 100         for (;;) {
 101                 const char *next = strstr(src+len, from);
 102                 if (!next)
 103                         add = strlen(src+len) + 1;
 104                 else
 105                         add = next - (src+len);
 106
 107                 tal_resize(&ret, rlen + add + strlen(to)+1);
 108                 memcpy(ret+rlen, src+len, add);
 109                 if (!next)
 110                         return ret;
 111                 len += add;
 112                 rlen += add;
 113                 strcpy(ret+rlen, to);
 114                 rlen += strlen(to);
 115                 len += strlen(from);
 116         }
 117 }
 118
 119 /* This is a terrible hack.  We scan for ccan/ strings. */
 120 static char **get_one_safe_deps(const void *ctx,
 121                                 const char *dir,
 122                                 const char *style,
 123                                 char *(*unused)(const void *, const char *))
 124 {
 125         char **deps, **lines, *raw, *fname;
 126         unsigned int i, n;
 127         bool correct_style = false;
 128
 129         fname = path_join(ctx, dir, "_info");
 130         raw = tal_grab_file(fname, fname, NULL);
 131         if (!raw)
 132                 errx(1, "Could not open %s", fname);
 133
 134         /* Replace \n by actual line breaks, and split it. */
 135         lines = tal_strsplit(raw, replace(raw, raw, "\\n", "\n"), "\n",
 136                              STR_EMPTY_OK);
 137
 138         deps = tal_arr(ctx, char *, tal_count(lines));
 139
 140         for (n = i = 0; lines[i]; i++) {
 141                 char *str;
 142                 unsigned int len;
 143
 144                 /* Ignore lines starting with # (e.g. #include) */
 145                 if (lines[i][0] == '#')
 146                         continue;
 147
 148                 if (strstr(lines[i], "\"testdepends\""))
 149                         correct_style = streq(style, "testdepends");
 150                 else if (strstr(lines[i], "\"depends\""))
 151                         correct_style = streq(style, "depends");
 152
 153                 if (!correct_style)
 154                         continue;
 155
 156                 /* Start of line, or after ". */
 157                 if (strstarts(lines[i], "ccan/"))
 158                         str = lines[i];
 159                 else {
 160                         str = strstr(lines[i], "\"ccan/");
 161                         if (!str)
 162                                 continue;
 163                         str++;
 164                 }
 165
 166                 len = strspn(str, "/abcdefghijklmnopqrstuvxwyz12345678980_");
 167                 if (len == 5)
 168                         continue;
 169                 deps[n++] = tal_strndup(deps, str, len);
 170         }
 171         deps[n] = NULL;
 172         tal_free(fname);
 173
 174         /* Make sure tal_array_length() works */
 175         tal_resize(&deps, n + 1);
 176         return deps;
 177 }
 178
 179 static bool have_dep(char **deps, const char *dep)
 180 {
 181         unsigned int i;
 182
 183         for (i = 0; deps[i]; i++)
 184                 if (streq(deps[i], dep))
 185                         return true;
 186         return false;
 187 }
 188
 189
 190
 191 /* Gets all the dependencies, recursively. */
 192 static char **
 193 get_all_deps(const void *ctx, const char *dir, const char *style,
 194              char *(*get_info)(const void *ctx, const char *dir),
 195              char **(*get_one)(const void *, const char *, const char *,
 196                                char *(*get_info)(const void *, const char *)))
 197 {
 198         char **deps;
 199         unsigned int i;
 200
 201         deps = get_one(ctx, dir, style, get_info);
 202         for (i = 0; i < tal_count(deps)-1; i++) {
 203                 char **newdeps;
 204                 unsigned int j;
 205                 char *subdir;
 206
 207                 if (!strstarts(deps[i], "ccan/"))
 208                         continue;
 209
 210                 subdir = path_join(ctx, find_ccan_dir(dir), deps[i]);
 211                 newdeps = get_one(ctx, subdir, "depends", get_info);
 212
 213                 /* Should be short, so brute-force out dups. */
 214                 for (j = 0; j < tal_count(newdeps)-1; j++) {
 215                         unsigned int num;
 216
 217                         if (have_dep(deps, newdeps[j]))
 218                                 continue;
 219
 220                         num = tal_count(deps)-1;
 221                         tal_resize(&deps, num + 2);
 222                         deps[num] = newdeps[j];
 223                         deps[num+1] = NULL;
 224                 }
 225         }
 226         return deps;
 227 }
 228
 229 /* Can return NULL: _info may not support 'libs'. */
 230 static char **get_one_libs(const void *ctx, const char *dir,
 231                            char *(*get_info)(const void *ctx, const char *dir))
 232 {
 233         char *cmd, **lines;
 234
 235         cmd = tal_fmt(ctx, "%s libs", get_info(ctx, dir));
 236         lines = lines_from_cmd(cmd, "%s", cmd);
 237         /* Strip final NULL. */
 238         if (lines)
 239                 tal_resize(&lines, tal_count(lines)-1);
 240         return lines;
 241 }
 242
 243 /* O(n^2) but n is small. */
 244 static char **add_deps(char **deps1, char **deps2)
 245 {
 246         unsigned int i, len;
 247
 248         len = tal_count(deps1);
 249
 250         for (i = 0; deps2[i]; i++) {
 251                 if (have_dep(deps1, deps2[i]))
 252                         continue;
 253                 tal_resize(&deps1, len + 1);
 254                 deps1[len-1] = tal_strdup(deps1, deps2[i]);
 255                 deps1[len++] = NULL;
 256         }
 257         return deps1;
 258 }
 259
 260 char **get_libs(const void *ctx, const char *dir, const char *style,
 261                 char *(*get_info)(const void *ctx, const char *dir))
 262 {
 263         char **deps, **libs;
 264         unsigned int i, len;
 265
 266         libs = get_one_libs(ctx, dir, get_info);
 267         len = tal_count(libs);
 268
 269         if (style) {
 270                 deps = get_deps(ctx, dir, style, true, get_info);
 271                 if (streq(style, "testdepends"))
 272                         deps = add_deps(deps,
 273                                         get_deps(ctx, dir, "depends", true,
 274                                                  get_info));
 275
 276                 for (i = 0; deps[i]; i++) {
 277                         char **newlibs, *subdir;
 278                         size_t newlen;
 279
 280                         if (!strstarts(deps[i], "ccan/"))
 281                                 continue;
 282
 283                         subdir = path_join(ctx, find_ccan_dir(dir), deps[i]);
 284
 285                         newlibs = get_one_libs(ctx, subdir, get_info);
 286                         newlen = tal_count(newlibs);
 287                         tal_resize(&libs, len + newlen);
 288                         memcpy(&libs[len], newlibs,
 289                                sizeof(newlibs[0])*newlen);
 290                         len += newlen;
 291                 }
 292         }
 293
 294         /* Append NULL entry. */
 295         tal_resize(&libs, len + 1);
 296         libs[len] = NULL;
 297         return libs;
 298 }
 299
 300 /* FIXME: This is O(n^2), which is dumb. */
 301 static char **uniquify_deps(char **deps)
 302 {
 303         unsigned int i, j, num;
 304
 305         if (!deps)
 306                 return NULL;
 307
 308         num = tal_count(deps) - 1;
 309         for (i = 0; i < num; i++) {
 310                 for (j = i + 1; j < num; j++) {
 311                         if (streq(deps[i], deps[j])) {
 312                                 memmove(&deps[j], &deps[j+1],
 313                                         (num - j - 1) * sizeof(char *));
 314                                 num--;
 315                         }
 316                 }
 317         }
 318         deps[num] = NULL;
 319         /* Make sure tal_count() works */
 320         tal_resize(&deps, num + 1);
 321         return deps;
 322 }
 323
 324 char **get_deps(const void *ctx, const char *dir, const char *style,
 325                 bool recurse,
 326                 char *(*get_info)(const void *ctx, const char *dir))
 327 {
 328         char **ret;
 329
 330         if (!recurse) {
 331                 ret = get_one_deps(ctx, dir, style, get_info);
 332         } else
 333                 ret = get_all_deps(ctx, dir, style, get_info, get_one_deps);
 334
 335         return uniquify_deps(ret);
 336 }
 337
 338 char **get_safe_ccan_deps(const void *ctx, const char *dir, const char *style,
 339                           bool recurse)
 340 {
 341         char **ret;
 342         if (!recurse) {
 343                 ret = get_one_safe_deps(ctx, dir, style, NULL);
 344         } else {
 345                 ret = get_all_deps(ctx, dir, style, NULL, get_one_safe_deps);
 346         }
 347         return uniquify_deps(ret);
 348 }