source: rtems-libbsd/waf_generator.py @ 84288f4

4.115-freebsd-12freebsd-9.3
Last change on this file since 84288f4 was 84288f4, checked in by Chris Johns <chrisj@…>, on May 22, 2015 at 2:18:31 AM

waf: Check for dlfcn.h header is availavble.

  • Property mode set to 100755
File size: 22.0 KB
Line 
1#
2#  Copyright (c) 2015 Chris Johns <chrisj@rtems.org>. All rights reserved.
3#
4#  Copyright (c) 2009-2015 embedded brains GmbH.  All rights reserved.
5#
6#   embedded brains GmbH
7#   Dornierstr. 4
8#   82178 Puchheim
9#   Germany
10#   <info@embedded-brains.de>
11#
12#  Copyright (c) 2012 OAR Corporation. All rights reserved.
13#
14#  Redistribution and use in source and binary forms, with or without
15#  modification, are permitted provided that the following conditions
16#  are met:
17#  1. Redistributions of source code must retain the above copyright
18#     notice, this list of conditions and the following disclaimer.
19#  2. Redistributions in binary form must reproduce the above copyright
20#     notice, this list of conditions and the following disclaimer in the
21#     documentation and/or other materials provided with the distribution.
22#
23#  THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
24#  "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
25#  LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
26#  A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
27#  OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
28#  SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
29#  LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
30#  DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
31#  THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
32#  (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
33#  OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
34
35import os
36import tempfile
37
38import builder
39
40trace = False
41
42data = { }
43
44def _add_files(name, files):
45    if type(files) is not list:
46        files = [files]
47    if name not in data:
48        data[name] = []
49    data[name] += files
50
51class SourceFileFragmentComposer(builder.BuildSystemFragmentComposer):
52
53    def __init__(self, cflags = "default"):
54        self.cflags = cflags
55
56    def compose(self, path):
57        return ['sources', self.cflags], [path]
58
59class TestFragementComposer(builder.BuildSystemFragmentComposer):
60
61    def __init__(self, testName, fileFragments, runTest = True, netTest = False):
62        self.testName = testName
63        self.fileFragments = fileFragments
64        self.runTest = runTest
65        self.netTest = netTest
66
67    def compose(self, path):
68        return ['tests', self.testName], { 'files': self.fileFragments,
69                                           'run': self.runTest,
70                                           'net': self.netTest }
71
72class KVMSymbolsFragmentComposer(builder.BuildSystemFragmentComposer):
73
74    def compose(self, path):
75        return ['KVMSymbols', 'files'], [path]
76
77class RPCGENFragmentComposer(builder.BuildSystemFragmentComposer):
78
79    def compose(self, path):
80        return ['RPCGen', 'files'], [path]
81
82class RouteKeywordsFragmentComposer(builder.BuildSystemFragmentComposer):
83
84    def compose(self, path):
85        return ['RouteKeywords', 'files'], [path]
86
87class LexFragmentComposer(builder.BuildSystemFragmentComposer):
88
89    def __init__(self, sym, dep):
90        self.sym = sym
91        self.dep = dep
92
93    def compose(self, path):
94        return ['lex', path], { 'file': path,
95                                'sym': self.sym,
96                                'dep': self.dep }
97
98class YaccFragmentComposer(builder.BuildSystemFragmentComposer):
99
100    def __init__(self, sym, header):
101        self.sym = sym
102        self.header = header
103
104    def compose(self, path):
105        return ['yacc', path], { 'file': path,
106                                 'sym': self.sym,
107                                 'header': self.header }
108
109# Module Manager - Collection of Modules
110class ModuleManager(builder.ModuleManager):
111
112    def restart(self):
113        self.script = ''
114
115    def add(self, line = ''):
116        self.script += line + os.linesep
117
118    def write(self):
119        try:
120            out = tempfile.NamedTemporaryFile(delete = False)
121            out.write(self.script)
122            out.close()
123            wscript = builder.RTEMS_DIR + '/wscript'
124            builder.processIfDifferent(out.name, wscript, "wscript")
125        finally:
126            try:
127                os.remove(out.name)
128            except:
129                pass
130
131    def setGenerators(self):
132        self.generator['convert'] = builder.Converter
133        self.generator['no-convert'] = builder.NoConverter
134
135        self.generator['file'] = builder.File
136
137        self.generator['path'] = builder.PathComposer
138        self.generator['freebsd-path'] = builder.FreeBSDPathComposer
139        self.generator['rtems-path'] = builder.RTEMSPathComposer
140        self.generator['cpu-path'] = builder.CPUDependentPathComposer
141        self.generator['target-src-cpu--path'] = builder.TargetSourceCPUDependentPathComposer
142
143        self.generator['source'] = SourceFileFragmentComposer
144        self.generator['test'] = TestFragementComposer
145        self.generator['kvm-symbols'] = KVMSymbolsFragmentComposer
146        self.generator['rpc-gen'] = RPCGENFragmentComposer
147        self.generator['route-keywords'] = RouteKeywordsFragmentComposer
148        self.generator['lex'] = LexFragmentComposer
149        self.generator['yacc'] = YaccFragmentComposer
150
151    def generate(self):
152
153        def _source_list(lhs, files, append = False):
154            if append:
155                adder = '+'
156                adder_space = ' '
157            else:
158                adder = ''
159                adder_space = ''
160            ll = len(lhs)
161            if len(files) == 1:
162                self.add('%s %s= [%r]' % (lhs, adder, files[0]))
163            elif len(files) == 2:
164                self.add('%s %s= [%r,' % (lhs, adder, files[0]))
165                self.add('%s %s   %r]' % (' ' * ll, adder_space, files[-1]))
166            elif len(files) > 0:
167                self.add('%s %s= [%r,' % (lhs, adder, files[0]))
168                for f in files[1:-1]:
169                    self.add('%s %s   %r,' % (' ' * ll, adder_space, f))
170                self.add('%s %s   %r]' % (' ' * ll, adder_space, files[-1]))
171
172        def _data_insert(data, cpu, frag):
173            #
174            # The default handler returns an empty string. Skip it.
175            #
176            if type(frag) is not str:
177                d = data
178                for p in frag[0]:
179                    if p not in d:
180                        d[p] = {}
181                    d = d[p]
182                if type(frag[1]) is list:
183                    if cpu not in d:
184                        d[cpu] = []
185                    d[cpu] += frag[1]
186                else:
187                    d[cpu] = frag[1]
188
189        data = { }
190
191        for mn in self.getModules():
192            m = self[mn]
193            if m.conditionalOn == "none":
194                for f in m.files:
195                    _data_insert(data, 'all', f.getFragment())
196            for cpu, files in sorted(m.cpuDependentSourceFiles.items()):
197                for f in files:
198                    _data_insert(data, cpu, f.getFragment())
199
200        if trace:
201            import pprint
202            pprint.pprint(data)
203
204        self.restart()
205
206        self.add('#')
207        self.add('# RTEMS Project (https://www.rtems.org)')
208        self.add('#')
209        self.add('# Generated waf script. Do not edit, run ./freebsd-to-rtems.py -m')
210        self.add('#')
211        self.add('# To use see README.waf shipped with this file.')
212        self.add('#')
213        self.add('')
214        self.add('import os.path')
215        self.add('')
216        self.add('try:')
217        self.add('    import rtems_waf.rtems as rtems')
218        self.add('except:')
219        self.add('    print "error: no rtems_waf git submodule; see README.waf"')
220        self.add('    import sys')
221        self.add('    sys.exit(1)')
222        self.add('')
223        self.add('def init(ctx):')
224        self.add('    rtems.init(ctx)')
225        self.add('')
226        self.add('def options(opt):')
227        self.add('    rtems.options(opt)')
228        self.add('    opt.add_option("--enable-auto-regen",')
229        self.add('                   action = "store_true",')
230        self.add('                   default = False,')
231        self.add('                   dest = "auto_regen",')
232        self.add('                   help = "Enable auto-regeneration of LEX, RPC and YACC files.")')
233        self.add('    opt.add_option("--enable-warnings",')
234        self.add('                   action = "store_true",')
235        self.add('                   default = False,')
236        self.add('                   dest = "warnings",')
237        self.add('                   help = "Enable all warnings. The default is quiet builds.")')
238        self.add('    opt.add_option("--net-test-config",')
239        self.add('                   default = "config.inc",')
240        self.add('                   dest = "net_config",')
241        self.add('                   help = "Network test configuration.")')
242        self.add('')
243        self.add('def bsp_configure(conf, arch_bsp):')
244        self.add('    conf.check(header_name = "dlfcn.h", features = "c")')
245        self.add('')
246        self.add('def configure(conf):')
247        self.add('    if conf.options.auto_regen:')
248        self.add('        conf.find_program("lex", mandatory = True)')
249        self.add('        conf.find_program("rpcgen", mandatory = True)')
250        self.add('        conf.find_program("yacc", mandatory = True)')
251        self.add('    conf.env.AUTO_REGEN = conf.options.auto_regen')
252        self.add('    conf.env.WARNINGS = conf.options.warnings')
253        self.add('    conf.env.NET_CONFIG = conf.options.net_config')
254        self.add('    rtems.configure(conf, bsp_configure)')
255        self.add('    if rtems.check_networking(conf):')
256        self.add('        conf.fatal("RTEMS kernel contains the old network support; configure RTEMS with --disable-networking")')
257        self.add('')
258        self.add('def build(bld):')
259        self.add('    rtems.build(bld)')
260        self.add('')
261        self.add('    # C/C++ flags')
262        self.add('    common_flags = []')
263        for f in builder.common_flags():
264            self.add('    common_flags += ["%s"]' % (f))
265        self.add('    if bld.env.WARNINGS:')
266        for f in builder.common_warnings():
267            self.add('        common_flags += ["%s"]' % (f))
268        self.add('    else:')
269        for f in builder.common_no_warnings():
270            self.add('        common_flags += ["%s"]' % (f))
271        self.add('    cflags = %r + common_flags' % (builder.cflags()))
272        self.add('    cxxflags = %r + common_flags' % (builder.cxxflags()))
273        self.add('')
274        self.add('    # Include paths')
275        self.add('    includes = []')
276        for i in builder.includes():
277            self.add('    includes += ["%s"]' % (i[2:]))
278        self.add('    for i in %r:' % (builder.cpu_includes()))
279        self.add('        includes += ["%s" % (i[2:].replace("@CPU@", bld.get_env()["RTEMS_ARCH"]))]')
280        self.add('')
281        self.add('    # Support dummy PIC IRQ includes')
282        self.add('    if bld.get_env()["RTEMS_ARCH"] not in ("arm", "i386", "lm32", "mips", "powerpc", "sparc", "m68k"):')
283        self.add('        includes += ["rtems-dummy-pic-irq/include"]')
284        self.add('')
285
286        self.add('    # Collect the libbsd uses')
287        self.add('    libbsd_use = []')
288        self.add('')
289
290        #
291        # Support the existing Makefile based network configuration file.
292        #
293        self.add('    # Network test configuration')
294        self.add('    if not os.path.exists(bld.env.NET_CONFIG):')
295        self.add('        bld.fatal("network configuraiton \'%s\' not found" % (bld.env.NET_CONFIG))')
296        self.add('    net_cfg_self_ip = None')
297        self.add('    net_cfg_netmask = None')
298        self.add('    net_cfg_peer_ip = None')
299        self.add('    net_cfg_gateway_ip = None')
300        self.add('    net_tap_interface = None')
301        self.add('    try:')
302        self.add('        net_cfg_lines = open(bld.env.NET_CONFIG).readlines()')
303        self.add('    except:')
304        self.add('        bld.fatal("network configuraiton \'%s\' read failed" % (bld.env.NET_CONFIG))')
305        self.add('    lc = 0')
306        self.add('    for l in net_cfg_lines:')
307        self.add('        lc += 1')
308        self.add('        if l.strip().startswith("NET_CFG_"):')
309        self.add('            ls = l.split("=")')
310        self.add('            if len(ls) != 2:')
311        self.add('                bld.fatal("network configuraiton \'%s\' parse error: %d: %s" % ' + \
312                 '(bld.env.NET_CONFIG, lc, l))')
313        self.add('            lhs = ls[0].strip()')
314        self.add('            rhs = ls[1].strip()')
315        self.add('            if lhs == "NET_CFG_SELF_IP":')
316        self.add('                net_cfg_self_ip = rhs')
317        self.add('            if lhs == "NET_CFG_NETMASK":')
318        self.add('                net_cfg_netmask = rhs')
319        self.add('            if lhs == "NET_CFG_PEER_IP":')
320        self.add('                net_cfg_peer_ip = rhs')
321        self.add('            if lhs == "NET_CFG_GATEWAY_IP_IP":')
322        self.add('                net_cfg_gateway_ip = rhs')
323        self.add('            if lhs == "NET_TAP_INTERFACE_IP_IP":')
324        self.add('                net_tap_interface = rhs')
325        self.add('    bld(target = "testsuite/include/rtems/bsd/test/network-config.h",')
326        self.add('        source = "testsuite/include/rtems/bsd/test/network-config.h.in",')
327        self.add('        rule = "sed -e \'s/@NET_CFG_SELF_IP@/%s/\' ' + \
328                 '-e \'s/@NET_CFG_NETMASK@/%s/\' ' + \
329                 '-e \'s/@NET_CFG_PEER_IP@/%s/\' ' + \
330                 '-e \'s/@NET_CFG_GATEWAY_IP@/%s/\' < ${SRC} > ${TGT}" % ' + \
331                 '(net_cfg_self_ip, net_cfg_netmask, net_cfg_peer_ip, net_cfg_netmask),')
332        self.add('        update_outputs = True)')
333        self.add('')
334
335        #
336        # Add the specific rule based builders for generating files.
337        #
338        if 'KVMSymbols' in data:
339            kvmsymbols = data['KVMSymbols']
340            self.add('    # KVM Symbols')
341            self.add('    bld(target = "%s",' % (kvmsymbols['files']['all'][0]))
342            self.add('        source = "rtemsbsd/rtems/generate_kvm_symbols",')
343            self.add('        rule = "./${SRC} > ${TGT}",')
344            self.add('        update_outputs = True)')
345            self.add('    bld.objects(target = "kvmsymbols",')
346            self.add('                features = "c",')
347            self.add('                cflags = cflags,')
348            self.add('                includes = includes + ["rtemsbsd/rtems"],')
349            self.add('                source = "%s")' % (kvmsymbols['files']['all'][0]))
350            self.add('    libbsd_use += ["kvmsymbols"]')
351            self.add('')
352
353        self.add('    bld.add_group()')
354
355        if 'RPCGen' in data:
356            rpcgen = data['RPCGen']
357            rpcname = rpcgen['files']['all'][0][:-2]
358            self.add('    # RPC Generation')
359            self.add('    if bld.env.AUTO_REGEN:')
360            self.add('        bld(target = "%s.h",' % (rpcname))
361            self.add('            source = "%s.x",' % (rpcname))
362            self.add('            rule = "${RPCGEN} -h -o ${TGT} ${SRC}")')
363            self.add('')
364
365        if 'RouteKeywords' in data:
366            routekw = data['RouteKeywords']
367            rkwname = routekw['files']['all'][0]
368            self.add('    # Route keywords')
369            self.add('    if bld.env.AUTO_REGEN:')
370            self.add('        rkw_rule = "cat ${SRC} | ' + \
371                     'awk \'BEGIN { r = 0 } { if (NF == 1) ' + \
372                     'printf \\"#define\\\\tK_%%s\\\\t%%d\\\\n\\\\t{\\\\\\"%%s\\\\\\", K_%%s},\\\\n\\", ' + \
373                     'toupper($1), ++r, $1, toupper($1)}\' > ${TGT}"')
374            self.add('        bld(target = "%s.h",' % (rkwname))
375            self.add('            source = "%s",' % (rkwname))
376            self.add('            rule = rkw_rule)')
377            self.add('')
378
379        if 'lex' in data:
380            lexes = data['lex']
381            self.add('    # Lex')
382            for l in lexes:
383                lex = lexes[l]['all']
384                self.add('    if bld.env.AUTO_REGEN:')
385                self.add('        bld(target = "%s.c",' % (lex['file'][:-2]))
386                self.add('            source = "%s",' % (lex['file']))
387                self.add('            rule = "${LEX} -P %s -t ${SRC} | ' % (lex['sym']) + \
388                         'sed -e \'/YY_BUF_SIZE/s/16384/1024/\' > ${TGT}")')
389                self.add('    bld.objects(target = "lex_%s",' % (lex['sym']))
390                self.add('                features = "c",')
391                self.add('                cflags = cflags,')
392                self.add('                includes = includes,')
393                self.add('                source = "%s.c")' % (lex['file'][:-2]))
394                self.add('    libbsd_use += ["lex_%s"]' % (lex['sym']))
395                self.add('')
396
397        if 'yacc' in data:
398            yaccs = data['yacc']
399            self.add('    # Yacc')
400            for y in yaccs:
401                yacc = yaccs[y]['all']
402                yacc_file = yacc['file']
403                yacc_sym = yacc['sym']
404                yacc_header = '%s/%s' % (os.path.dirname(yacc_file), yacc['header'])
405                self.add('    if bld.env.AUTO_REGEN:')
406                self.add('        bld(target = "%s.c",' % (yacc_file[:-2]))
407                self.add('            source = "%s",' % (yacc_file))
408                self.add('            rule = "${YACC} -b %s -d -p %s ${SRC} && ' % (yacc_sym, yacc_sym) + \
409                         'sed -e \'/YY_BUF_SIZE/s/16384/1024/\' < %s.tab.c > ${TGT} && ' % (yacc_sym) + \
410                         'rm -f %s.tab.c && mv %s.tab.h %s")' % (yacc_sym, yacc_sym, yacc_header))
411                self.add('    bld.objects(target = "yacc_%s",' % (yacc_sym))
412                self.add('                features = "c",')
413                self.add('                cflags = cflags,')
414                self.add('                includes = includes,')
415                self.add('                source = "%s.c")' % (yacc_file[:-2]))
416                self.add('    libbsd_use += ["yacc_%s"]' % (yacc_sym))
417            self.add('')
418
419        #
420        # We have 'm' different sets of flags and there can be 'n' cpus
421        # specific files for those flags.
422        #
423        objs = 0
424        self.add('    # Objects built with different CFLAGS')
425        for cflags in sorted(data['sources']):
426            if cflags is not 'default':
427                objs += 1
428                _source_list('    objs%02d_source' % objs, sorted(data['sources'][cflags]['all']))
429                archs = sorted(data['sources'][cflags])
430                for arch in archs:
431                    if arch is not 'all':
432                        self.add('    if bld.get_env()["RTEMS_ARCH"] == "%s":' % arch)
433                        _source_list('        objs%02d_source' % objs,
434                                     sorted(data['sources'][cflags][arch]),
435                                     append = True)
436                defines = [d[2:] for d in cflags.split(' ')]
437                self.add('    bld.objects(target = "objs%02d",' % (objs))
438                self.add('                features = "c",')
439                self.add('                cflags = cflags,')
440                self.add('                includes = includes,')
441                self.add('                defines = %r,' % (defines))
442                self.add('                source = objs%02d_source)' % objs)
443                self.add('    libbsd_use += ["objs%02d"]' % (objs))
444                self.add('')
445
446        #
447        # We hold the 'default' cflags set of files to the end to create the
448        # static library with.
449        #
450        _source_list('    source', sorted(data['sources']['default']['all']))
451        archs = sorted(data['sources']['default'])
452        for arch in archs:
453            if arch is not 'all':
454                self.add('    if bld.get_env()["RTEMS_ARCH"] == "%s":' % arch)
455                _source_list('        source',
456                             sorted(data['sources']['default'][arch]),
457                             append = True)
458        self.add('    bld.stlib(target = "bsd",')
459        self.add('              features = "c cxx",')
460        self.add('              cflags = cflags,')
461        self.add('              cxxflags = cxxflags,')
462        self.add('              includes = includes,')
463        self.add('              source = source,')
464        self.add('              use = libbsd_use)')
465        self.add('')
466
467        #
468        # Head file collector.
469        #
470        self.add('    # Installs.    ')
471        self.add('    bld.install_files("${PREFIX}/" + rtems.arch_bsp_lib_path(bld.env.RTEMS_ARCH_BSP), ["libbsd.a"])')
472        header_paths = builder.header_paths()
473        self.add('    header_paths = [%s,' % (str(header_paths[0])))
474        for hp in header_paths[1:-1]:
475            self.add('                     %s,' % (str(hp)))
476        self.add('                     %s]' % (str(header_paths[-1])))
477        self.add('    for headers in header_paths:')
478        self.add('        ipath = os.path.join(rtems.arch_bsp_include_path(bld.env.RTEMS_ARCH_BSP), headers[2])')
479        self.add('        start_dir = bld.path.find_dir(headers[0])')
480        self.add('        bld.install_files("${PREFIX}/" + ipath,')
481        self.add('                          start_dir.ant_glob("**/" + headers[1]),')
482        self.add('                          cwd = start_dir,')
483        self.add('                          relative_trick = True)')
484        self.add('')
485
486        self.add('    # Tests')
487        tests = data['tests']
488        for test_name in tests:
489            files = ['testsuite/%s/%s.c' % (test_name, f) for f in  data['tests'][test_name]['all']['files']]
490            _source_list('    test_%s' % (test_name), sorted(files))
491            self.add('    bld.program(target = "%s",' % (test_name))
492            self.add('                features = "cprogram",')
493            self.add('                cflags = cflags,')
494            self.add('                includes = includes,')
495            self.add('                source = test_%s,' % (test_name))
496            self.add('                use = ["bsd"],')
497            self.add('                lib = ["m", "z"],')
498            self.add('                install_path = None)')
499            self.add('')
500
501        self.write()
Note: See TracBrowser for help on using the repository browser.