a1fbc614918851e50657adb8bfa53caeba695297
[ccan] / tools / run_tests.c
1 #include <err.h>
2 #include <stdio.h>
3 #include <sys/types.h>
4 #include <dirent.h>
5 #include <assert.h>
6 #include <unistd.h>
7 #include "ccan/tap/tap.h"
8 #include "ccan/talloc/talloc.h"
9 #include "ccan/string/string.h"
10 #include "tools.h"
11
12 /* FIXME: Use build bug later. */
13 #define ARRAY_SIZE(arr) (sizeof(arr) / sizeof((arr)[0]))
14
15 static struct test *tests = NULL;
16 static struct obj *objs = NULL;
17 static int verbose;
18
19 struct test_type
20 {
21         const char *name;
22         void (*testfn)(const char *dir, struct test_type *t, const char *name);
23 };
24
25 struct test
26 {
27         struct test *next;
28         struct test_type *type;
29         char *name;
30 };
31
32 struct obj
33 {
34         struct obj *next;
35         char *name;
36 };
37
38 static char *output_name(const char *name)
39 {
40         char *ret;
41
42         assert(strends(name, ".c"));
43
44         ret = talloc_strdup(name, name);
45         ret[strlen(ret) - 2] = '\0';
46         return ret;
47 }
48
49 static char *obj_list(void)
50 {
51         char *list = talloc_strdup(objs, "");
52         struct obj *i;
53
54         for (i = objs; i; i = i->next)
55                 list = talloc_asprintf_append(list, "%s ", i->name);
56
57         /* FIXME */
58         list = talloc_asprintf_append(list, "ccan/tap/tap.o");
59         return list;
60 }
61
62 static void compile_objs(void)
63 {
64         struct obj *i;
65
66         for (i = objs; i; i = i->next) {
67                 char *cmd = talloc_asprintf(i, "gcc " CFLAGS " -o %s.o -c %s%s",
68                                             output_name(i->name), i->name,
69                                             verbose ? "" : "> /dev/null 2>&1");
70                 ok(system(cmd) == 0, "%s", cmd);
71         }
72 }
73
74 static void cleanup_objs(void)
75 {
76         struct obj *i;
77
78         for (i = objs; i; i = i->next)
79                 unlink(talloc_asprintf(i, "%s.o", output_name(i->name)));
80 }
81
82 static void add_test(const char *testdir, const char *name, struct test_type *t)
83 {
84         struct test *test = talloc(testdir, struct test);
85
86         test->next = tests;
87         test->type = t;
88         test->name = talloc_asprintf(test, "%s/%s", testdir, name);
89         tests = test;
90 }
91
92 static void add_obj(const char *testdir, const char *name)
93 {
94         struct obj *obj = talloc(testdir, struct obj);
95
96         obj->next = objs;
97         obj->name = talloc_asprintf(obj, "%s/%s", testdir, name);
98         objs = obj;
99 }
100
101 static int build(const char *dir, const char *name, int fail)
102 {
103         const char *cmd;
104         int ret;
105         char *externals = talloc_strdup(name, "");
106         char **deps;
107
108         for (deps = get_deps(objs, dir); *deps; deps++) {
109                 if (!strstarts(*deps, "ccan/"))
110                         continue;
111
112                 /* ccan/foo -> ccan/foo.o */
113                 externals = talloc_asprintf_append(externals, " %s.o", *deps);
114         }
115
116         cmd = talloc_asprintf(name, "gcc " CFLAGS " %s -o %s %s %s%s%s",
117                               fail ? "-DFAIL" : "",
118                               output_name(name), name, obj_list(), externals,
119                               verbose ? "" : "> /dev/null 2>&1");
120
121         if (verbose)
122                 fprintf(stderr, "Running %s\n", cmd);
123
124         ret = system(cmd);
125         if (ret == -1)
126                 diag("cmd '%s' failed to execute", cmd);
127
128         return ret;
129 }
130
131 static void compile_ok(const char *dir, struct test_type *t, const char *name)
132 {
133         ok(build(dir, name, 0) == 0, "%s %s", t->name, name);
134 }
135
136 static void compile_fail(const char *dir, struct test_type *t, const char *name)
137 {
138         if (build(dir, name, 0) != 0)
139                 fail("non-FAIL build %s", name);
140         else
141                 ok(build(dir, name, 1) > 0, "%s %s", t->name, name);
142 }
143
144 static void run(const char *name)
145 {
146         if (system(output_name(name)) == -1)
147                 fail("running %s had error %m", name);
148 }
149
150 static void cleanup(const char *name)
151 {
152         unlink(output_name(name));
153 }
154
155 static struct test_type test_types[] = {
156         { "compile_ok", compile_ok },
157         { "compile_fail", compile_fail },
158         { "run", compile_ok },
159 };
160
161 int main(int argc, char *argv[])
162 {
163         DIR *dir;
164         struct dirent *d;
165         char *testdir;
166         struct test *test;
167         unsigned int num_tests = 0, num_objs = 0;
168
169         if (argc > 1 && streq(argv[1], "--verbose")) {
170                 verbose = 1;
171                 argc--;
172                 argv++;
173         }
174
175         if (argc != 2)
176                 errx(1, "Usage: run_tests [--verbose] <dir>");
177
178         testdir = talloc_asprintf(NULL, "%s/test", argv[1]);
179         dir = opendir(testdir);
180         if (!dir)
181                 err(1, "Opening '%s'", testdir);
182
183         while ((d = readdir(dir)) != NULL) {
184                 unsigned int i;
185                 if (d->d_name[0] == '.' || !strends(d->d_name, ".c"))
186                         continue;
187
188                 for (i = 0; i < ARRAY_SIZE(test_types); i++) {
189                         if (strstarts(d->d_name, test_types[i].name)) {
190                                 add_test(testdir, d->d_name, &test_types[i]);
191                                 num_tests++;
192                                 break;
193                         }
194                 }
195                 if (i == ARRAY_SIZE(test_types)) {
196                         add_obj(testdir, d->d_name);
197                         num_objs++;
198                 }
199         }
200
201         plan_tests(num_tests + num_objs + (num_objs ? 1 : 0));
202         /* First all the extra object compilations. */
203         compile_objs();
204
205         /* Do all the test compilations. */
206         for (test = tests; test; test = test->next)
207                 test->type->testfn(argv[1], test->type, test->name);
208
209         cleanup_objs();
210
211         /* Now run all the ones which wanted to run. */
212         for (test = tests; test; test = test->next) {
213                 if (streq(test->type->name, "run"))
214                         run(test->name);
215                 cleanup(test->name);
216         }
217
218         exit(exit_status());
219 }