]> arthur.barton.de Git - bup.git/blob - lib/bup/compat.py
ftp: accommodate python 3 and test there
[bup.git] / lib / bup / compat.py
1
2 from __future__ import absolute_import, print_function
3 from array import array
4 from binascii import hexlify
5 from traceback import print_exception
6 import os, sys
7
8 # Please see CODINGSTYLE for important exception handling guidelines
9 # and the rationale behind add_ex_tb(), add_ex_ctx(), etc.
10
11 py_maj = sys.version_info[0]
12 py3 = py_maj >= 3
13
14 if py3:
15
16     from os import environb as environ
17
18     lc_ctype = environ.get(b'LC_CTYPE')
19     if lc_ctype and lc_ctype.lower() != b'iso-8859-1':
20         # Because of argv, options.py, pwd, grp, and any number of other issues
21         print('error: bup currently only works with ISO-8859-1, not LC_CTYPE=%s'
22               % lc_ctype.decode(),
23               file=sys.stderr)
24         print('error: this should already have been arranged, so indicates a bug',
25               file=sys.stderr)
26         sys.exit(2)
27
28     from os import fsencode
29     from shlex import quote
30     input = input
31     range = range
32     str_type = str
33     int_types = (int,)
34
35     def hexstr(b):
36         """Return hex string (not bytes as with hexlify) representation of b."""
37         return b.hex()
38
39     def reraise(ex):
40         raise ex.with_traceback(sys.exc_info()[2])
41
42     def add_ex_tb(ex):
43         """Do nothing (already handled by Python 3 infrastructure)."""
44         return ex
45
46     def add_ex_ctx(ex, context_ex):
47         """Do nothing (already handled by Python 3 infrastructure)."""
48         return ex
49
50     def items(x):
51         return x.items()
52
53     def argv_bytes(x):
54         """Return the original bytes passed to main() for an argv argument."""
55         return fsencode(x)
56
57     def bytes_from_uint(i):
58         return bytes((i,))
59
60     def bytes_from_byte(b):  # python > 2: b[3] returns ord('x'), not b'x'
61         return bytes((b,))
62
63     byte_int = lambda x: x
64
65     def buffer(object, offset=None, size=None):
66         if size:
67             assert offset is not None
68             return memoryview(object)[offset:offset + size]
69         if offset:
70             return memoryview(object)[offset:]
71         return memoryview(object)
72
73     def join_bytes(*items):
74         """Return the concatenated bytes or memoryview arguments as bytes."""
75         return b''.join(items)
76
77 else:  # Python 2
78
79     def fsencode(x):
80         return x
81
82     from pipes import quote
83     from os import environ
84
85     from bup.py2raise import reraise
86
87     input = raw_input
88     range = xrange
89     str_type = basestring
90     int_types = (int, long)
91
92     hexstr = hexlify
93
94     def add_ex_tb(ex):
95         """Add a traceback to ex if it doesn't already have one.  Return ex.
96
97         """
98         if not getattr(ex, '__traceback__', None):
99             ex.__traceback__ = sys.exc_info()[2]
100         return ex
101
102     def add_ex_ctx(ex, context_ex):
103         """Make context_ex the __context__ of ex (unless it already has one).
104         Return ex.
105
106         """
107         if context_ex:
108             if not getattr(ex, '__context__', None):
109                 ex.__context__ = context_ex
110         return ex
111
112     def dump_traceback(ex):
113         stack = [ex]
114         next_ex = getattr(ex, '__context__', None)
115         while next_ex:
116             stack.append(next_ex)
117             next_ex = getattr(next_ex, '__context__', None)
118         stack = reversed(stack)
119         ex = next(stack)
120         tb = getattr(ex, '__traceback__', None)
121         print_exception(type(ex), ex, tb)
122         for ex in stack:
123             print('\nDuring handling of the above exception, another exception occurred:\n',
124                   file=sys.stderr)
125             tb = getattr(ex, '__traceback__', None)
126             print_exception(type(ex), ex, tb)
127
128     def items(x):
129         return x.iteritems()
130
131     def argv_bytes(x):
132         """Return the original bytes passed to main() for an argv argument."""
133         return x
134
135     def bytes_from_uint(i):
136         return chr(i)
137
138     def bytes_from_byte(b):
139         return b
140
141     byte_int = ord
142
143     buffer = buffer
144
145     def join_bytes(x, y):
146         """Return the concatenated bytes or buffer arguments as bytes."""
147         if type(x) == buffer:
148             assert type(y) in (bytes, buffer)
149             return x + y
150         assert type(x) == bytes
151         if type(y) == bytes:
152             return b''.join((x, y))
153         assert type(y) in (bytes, buffer)
154         return buffer(x) + y
155
156
157 def restore_lc_env():
158     # Once we're up and running with iso-8859-1, undo the bup-python
159     # LC_CTYPE hackery, so we don't affect unrelated subprocesses.
160     bup_lc_all = environ.get(b'BUP_LC_ALL')
161     if bup_lc_all:
162         del environ[b'LC_COLLATE']
163         del environ[b'LC_CTYPE']
164         del environ[b'LC_MONETARY']
165         del environ[b'LC_NUMERIC']
166         del environ[b'LC_TIME']
167         del environ[b'LC_MESSAGES']
168         del environ[b'LC_MESSAGES']
169         environ[b'LC_ALL'] = bup_lc_all
170         return
171     bup_lc_ctype = environ.get(b'BUP_LC_CTYPE')
172     if bup_lc_ctype:
173         environ[b'LC_CTYPE'] = bup_lc_ctype
174
175 def wrap_main(main):
176     """Run main() and raise a SystemExit with the return value if it
177     returns, pass along any SystemExit it raises, convert
178     KeyboardInterrupts into exit(130), and print a Python 3 style
179     contextual backtrace for other exceptions in both Python 2 and
180     3)."""
181     try:
182         sys.exit(main())
183     except KeyboardInterrupt as ex:
184         sys.exit(130)
185     except SystemExit as ex:
186         raise
187     except BaseException as ex:
188         if py3:
189             raise
190         add_ex_tb(ex)
191         dump_traceback(ex)
192         sys.exit(1)
193
194
195 # Excepting wrap_main() in the traceback, these should produce similar output:
196 #   python2 lib/bup/compat.py
197 #   python3 lib/bup/compat.py
198 # i.e.:
199 #   diff -u <(python2 lib/bup/compat.py 2>&1) <(python3 lib/bup/compat.py 2>&1)
200 #
201 # Though the python3 output for 'second' will include a stacktrace
202 # starting from wrap_main, rather than from outer().
203
204 if __name__ == '__main__':
205
206     def inner():
207         raise Exception('first')
208
209     def outer():
210         try:
211             inner()
212         except Exception as ex:
213             add_ex_tb(ex)
214             try:
215                 raise Exception('second')
216             except Exception as ex2:
217                 raise add_ex_ctx(add_ex_tb(ex2), ex)
218
219     wrap_main(outer)