git.ozlabs.org Git - ccan/blob - tools/depends.c

   1 #include <ccan/str/str.h>
   2 #include <ccan/read_write_all/read_write_all.h>
   3 #include <ccan/rbuf/rbuf.h>
   4 #include <ccan/tal/path/path.h>
   5 #include <ccan/tal/grab_file/grab_file.h>
   6 #include <ccan/compiler/compiler.h>
   7 #include <ccan/err/err.h>
   8 #include "tools.h"
   9 #include <sys/types.h>
  10 #include <sys/stat.h>
  11 #include <fcntl.h>
  12 #include <stdbool.h>
  13 #include <unistd.h>
  14 #include <errno.h>
  15
  16 static char ** PRINTF_FMT(2, 3)
  17 lines_from_cmd(const void *ctx, const char *format, ...)
  18 {
  19         va_list ap;
  20         char *cmd;
  21         FILE *p;
  22         struct rbuf in;
  23
  24         va_start(ap, format);
  25         cmd = tal_vfmt(ctx, format, ap);
  26         va_end(ap);
  27
  28         p = popen(cmd, "r");
  29         if (!p)
  30                 err(1, "Executing '%s'", cmd);
  31
  32         /* FIXME: Use rbuf_read_str(&in, '\n') rather than strsplit! */
  33         rbuf_init(&in, fileno(p), tal_arr(ctx, char, 0), 0);
  34         if (!rbuf_read_str(&in, 0, do_tal_realloc) && errno)
  35                 err(1, "Reading from '%s'", cmd);
  36         pclose(p);
  37
  38         return tal_strsplit(ctx, in.buf, "\n", STR_EMPTY_OK);
  39 }
  40
  41 /* Be careful about trying to compile over running programs (parallel make).
  42  * temp_file helps here. */
  43 char *compile_info(const void *ctx, const char *dir)
  44 {
  45         char *info_c_file, *info, *compiled, *output;
  46         int fd;
  47
  48         /* Copy it to a file with proper .c suffix. */
  49         info = grab_file(ctx, tal_fmt(ctx, "%s/_info", dir));
  50         if (!info)
  51                 return NULL;
  52
  53         info_c_file = temp_file(ctx, ".c", "_info");
  54         fd = open(info_c_file, O_WRONLY|O_CREAT|O_EXCL, 0600);
  55         if (fd < 0)
  56                 return NULL;
  57         if (!write_all(fd, info, tal_count(info)-1)) {
  58                 close(fd);
  59                 return NULL;
  60         }
  61
  62         if (close(fd) != 0)
  63                 return NULL;
  64
  65         compiled = temp_file(ctx, "", "info");
  66         if (compile_and_link(ctx, info_c_file, find_ccan_dir(dir), "",
  67                              compiler, cflags, "", compiled, &output))
  68                 return compiled;
  69         return NULL;
  70 }
  71
  72 static char **get_one_deps(const void *ctx, const char *dir, const char *style,
  73                            char *(*get_info)(const void *ctx, const char *dir))
  74 {
  75         char **deps, *cmd;
  76         char *infofile = get_info(ctx, dir);
  77
  78         if (!infofile)
  79                 return NULL;
  80
  81         cmd = tal_fmt(ctx, "%s %s", infofile, style);
  82         deps = lines_from_cmd(cmd, "%s", cmd);
  83         if (!deps) {
  84                 /* You must understand depends, maybe not testdepends. */
  85                 if (streq(style, "depends"))
  86                         err(1, "Could not run '%s'", cmd);
  87                 deps = tal(ctx, char *);
  88                 deps[0] = NULL;
  89         }
  90         return deps;
  91 }
  92
  93 /* Make copy of src, replacing "from" with "to". */
  94 static char *replace(const void *ctx, const char *src,
  95                      const char *from, const char *to)
  96 {
  97         char *ret = tal_strdup(ctx, "");
  98         unsigned int rlen, len, add;
  99
 100         rlen = len = 0;
 101         for (;;) {
 102                 const char *next = strstr(src+len, from);
 103                 if (!next)
 104                         add = strlen(src+len) + 1;
 105                 else
 106                         add = next - (src+len);
 107
 108                 tal_resize(&ret, rlen + add + strlen(to)+1);
 109                 memcpy(ret+rlen, src+len, add);
 110                 if (!next)
 111                         return ret;
 112                 len += add;
 113                 rlen += add;
 114                 strcpy(ret+rlen, to);
 115                 rlen += strlen(to);
 116                 len += strlen(from);
 117         }
 118 }
 119
 120 /* This is a terrible hack.  We scan for ccan/ strings. */
 121 static char **get_one_safe_deps(const void *ctx,
 122                                 const char *dir,
 123                                 const char *style,
 124                                 char *(*unused)(const void *, const char *))
 125 {
 126         char **deps, **lines, *raw, *fname;
 127         unsigned int i, n;
 128         bool correct_style = false;
 129
 130         fname = path_join(ctx, dir, "_info");
 131         raw = grab_file(fname, fname);
 132         if (!raw)
 133                 errx(1, "Could not open %s", fname);
 134
 135         /* Replace \n by actual line breaks, and split it. */
 136         lines = tal_strsplit(raw, replace(raw, raw, "\\n", "\n"), "\n",
 137                              STR_EMPTY_OK);
 138
 139         deps = tal_arr(ctx, char *, tal_count(lines));
 140
 141         for (n = i = 0; lines[i]; i++) {
 142                 char *str;
 143                 unsigned int len;
 144
 145                 /* Ignore lines starting with # (e.g. #include) */
 146                 if (lines[i][0] == '#')
 147                         continue;
 148
 149                 if (strstr(lines[i], "\"testdepends\""))
 150                         correct_style = streq(style, "testdepends");
 151                 else if (strstr(lines[i], "\"depends\""))
 152                         correct_style = streq(style, "depends");
 153
 154                 if (!correct_style)
 155                         continue;
 156
 157                 /* Start of line, or after ". */
 158                 if (strstarts(lines[i], "ccan/"))
 159                         str = lines[i];
 160                 else {
 161                         str = strstr(lines[i], "\"ccan/");
 162                         if (!str)
 163                                 continue;
 164                         str++;
 165                 }
 166
 167                 len = strspn(str, "/abcdefghijklmnopqrstuvxwyz12345678980_");
 168                 if (len == 5)
 169                         continue;
 170                 deps[n++] = tal_strndup(deps, str, len);
 171         }
 172         deps[n] = NULL;
 173         tal_free(fname);
 174
 175         /* Make sure tal_array_length() works */
 176         tal_resize(&deps, n + 1);
 177         return deps;
 178 }
 179
 180 static bool have_dep(char **deps, const char *dep)
 181 {
 182         unsigned int i;
 183
 184         for (i = 0; deps[i]; i++)
 185                 if (streq(deps[i], dep))
 186                         return true;
 187         return false;
 188 }
 189
 190
 191
 192 /* Gets all the dependencies, recursively. */
 193 static char **
 194 get_all_deps(const void *ctx, const char *dir, const char *style,
 195              char *(*get_info)(const void *ctx, const char *dir),
 196              char **(*get_one)(const void *, const char *, const char *,
 197                                char *(*get_info)(const void *, const char *)))
 198 {
 199         char **deps;
 200         unsigned int i;
 201
 202         deps = get_one(ctx, dir, style, get_info);
 203         if (!deps)
 204                 return NULL;
 205         for (i = 0; i < tal_count(deps)-1; i++) {
 206                 char **newdeps;
 207                 unsigned int j;
 208                 char *subdir;
 209
 210                 if (!strstarts(deps[i], "ccan/"))
 211                         continue;
 212
 213                 subdir = path_join(ctx, find_ccan_dir(dir), deps[i]);
 214                 newdeps = get_one(ctx, subdir, "depends", get_info);
 215
 216                 /* Should be short, so brute-force out dups. */
 217                 for (j = 0; j < tal_count(newdeps)-1; j++) {
 218                         unsigned int num;
 219
 220                         if (have_dep(deps, newdeps[j]))
 221                                 continue;
 222
 223                         num = tal_count(deps)-1;
 224                         tal_resize(&deps, num + 2);
 225                         deps[num] = newdeps[j];
 226                         deps[num+1] = NULL;
 227                 }
 228         }
 229         return deps;
 230 }
 231
 232 /* Can return NULL: _info may not support prop. */
 233 static char **get_one_prop(const void *ctx, const char *dir, const char *prop,
 234                            char *(*get_info)(const void *ctx, const char *dir))
 235 {
 236         char *cmd, **lines;
 237
 238         cmd = tal_fmt(ctx, "%s %s", get_info(ctx, dir), prop);
 239         lines = lines_from_cmd(cmd, "%s", cmd);
 240         /* Strip final NULL. */
 241         if (lines)
 242                 tal_resize(&lines, tal_count(lines)-1);
 243         return lines;
 244 }
 245
 246 static char **get_one_libs(const void *ctx, const char *dir,
 247                            char *(*get_info)(const void *ctx, const char *dir))
 248 {
 249         return get_one_prop(ctx, dir, "libs", get_info);
 250 }
 251
 252 static char **get_one_cflags(const void *ctx, const char *dir,
 253                            char *(*get_info)(const void *ctx, const char *dir))
 254 {
 255         return get_one_prop(ctx, dir, "cflags", get_info);
 256 }
 257
 258 static char **get_one_ccanlint(const void *ctx, const char *dir,
 259                                char *(*get_info)(const void *ctx, const char *dir))
 260 {
 261         return get_one_prop(ctx, dir, "ccanlint", get_info);
 262 }
 263
 264 /* O(n^2) but n is small. */
 265 static char **add_deps(char **deps1, char **deps2)
 266 {
 267         unsigned int i, len;
 268
 269         len = tal_count(deps1);
 270
 271         for (i = 0; deps2[i]; i++) {
 272                 if (have_dep(deps1, deps2[i]))
 273                         continue;
 274                 tal_resize(&deps1, len + 1);
 275                 deps1[len-1] = tal_strdup(deps1, deps2[i]);
 276                 deps1[len++] = NULL;
 277         }
 278         return deps1;
 279 }
 280
 281 char **get_cflags(const void *ctx, const char *dir,
 282         char *(*get_info)(const void *ctx, const char *dir))
 283 {
 284         char **flags;
 285         unsigned int len;
 286         flags = get_one_cflags(ctx, dir, get_info);
 287         len = tal_count(flags);
 288         tal_resize(&flags, len + 1);
 289         flags[len] = NULL;
 290         return flags;
 291 }
 292
 293 char **get_ccanlint(const void *ctx, const char *dir,
 294                     char *(*get_info)(const void *ctx, const char *dir))
 295 {
 296         char **ccanlint;
 297         unsigned int len;
 298         ccanlint = get_one_ccanlint(ctx, dir, get_info);
 299         len = tal_count(ccanlint);
 300         tal_resize(&ccanlint, len + 1);
 301         ccanlint[len] = NULL;
 302         return ccanlint;
 303 }
 304
 305 static char *get_one_ported(const void *ctx, const char *dir,
 306                             char *(*get_info)(const void *ctx, const char *dir))
 307 {
 308         char **ported = get_one_prop(ctx, dir, "ported", get_info);
 309
 310         /* No news is good news. */
 311         if (tal_count(ported) == 0)
 312                 return NULL;
 313
 314         if (tal_count(ported) != 1)
 315                 errx(1, "%s/_info ported gave %zu lines, not one",
 316                      dir, tal_count(ported));
 317
 318         if (streq(ported[0], ""))
 319                 return NULL;
 320         else
 321                 return ported[0];
 322 }
 323
 324 char *get_ported(const void *ctx, const char *dir, bool recurse,
 325                 char *(*get_info)(const void *ctx, const char *dir))
 326 {
 327         char *msg;
 328
 329         msg = get_one_ported(ctx, dir, get_info);
 330         if (msg)
 331                 return msg;
 332
 333         if (recurse) {
 334                 size_t i;
 335                 char **deps = get_deps(ctx, dir, "depends", true, get_info);
 336                 for (i = 0; deps[i]; i++) {
 337                         char *subdir;
 338                         if (!strstarts(deps[i], "ccan/"))
 339                                 continue;
 340
 341                         subdir = path_join(ctx, find_ccan_dir(dir), deps[i]);
 342                         msg = get_one_ported(ctx, subdir, get_info);
 343                         if (msg)
 344                                 return msg;
 345                 }
 346         }
 347         return NULL;
 348 }
 349
 350 char **get_libs(const void *ctx, const char *dir, const char *style,
 351                 char *(*get_info)(const void *ctx, const char *dir))
 352 {
 353         char **deps, **libs;
 354         unsigned int i, len;
 355
 356         libs = get_one_libs(ctx, dir, get_info);
 357         len = tal_count(libs);
 358
 359         if (style) {
 360                 deps = get_deps(ctx, dir, style, true, get_info);
 361                 if (streq(style, "testdepends"))
 362                         deps = add_deps(deps,
 363                                         get_deps(ctx, dir, "depends", true,
 364                                                  get_info));
 365
 366                 for (i = 0; deps[i]; i++) {
 367                         char **newlibs, *subdir;
 368                         size_t newlen;
 369
 370                         if (!strstarts(deps[i], "ccan/"))
 371                                 continue;
 372
 373                         subdir = path_join(ctx, find_ccan_dir(dir), deps[i]);
 374
 375                         newlibs = get_one_libs(ctx, subdir, get_info);
 376                         newlen = tal_count(newlibs);
 377                         tal_resize(&libs, len + newlen);
 378                         memcpy(&libs[len], newlibs,
 379                                sizeof(newlibs[0])*newlen);
 380                         len += newlen;
 381                 }
 382         }
 383
 384         /* Append NULL entry. */
 385         tal_resize(&libs, len + 1);
 386         libs[len] = NULL;
 387         return libs;
 388 }
 389
 390 /* FIXME: This is O(n^2), which is dumb. */
 391 static char **uniquify_deps(char **deps)
 392 {
 393         unsigned int i, j, num;
 394
 395         if (!deps)
 396                 return NULL;
 397
 398         num = tal_count(deps) - 1;
 399         for (i = 0; i < num; i++) {
 400                 for (j = i + 1; j < num; j++) {
 401                         if (streq(deps[i], deps[j])) {
 402                                 memmove(&deps[j], &deps[j+1],
 403                                         (num - j - 1) * sizeof(char *));
 404                                 num--;
 405                         }
 406                 }
 407         }
 408         deps[num] = NULL;
 409         /* Make sure tal_count() works */
 410         tal_resize(&deps, num + 1);
 411         return deps;
 412 }
 413
 414 char **get_deps(const void *ctx, const char *dir, const char *style,
 415                 bool recurse,
 416                 char *(*get_info)(const void *ctx, const char *dir))
 417 {
 418         char **ret;
 419
 420         if (!recurse) {
 421                 ret = get_one_deps(ctx, dir, style, get_info);
 422         } else
 423                 ret = get_all_deps(ctx, dir, style, get_info, get_one_deps);
 424
 425         return uniquify_deps(ret);
 426 }
 427
 428 char **get_safe_ccan_deps(const void *ctx, const char *dir, const char *style,
 429                           bool recurse)
 430 {
 431         char **ret;
 432         if (!recurse) {
 433                 ret = get_one_safe_deps(ctx, dir, style, NULL);
 434         } else {
 435                 ret = get_all_deps(ctx, dir, style, NULL, get_one_safe_deps);
 436         }
 437         return uniquify_deps(ret);
 438 }