python 备份脚本

释放双眼,带上耳机,听听看~!

原来是ruby写的, 考虑不太全, 现在重写了一下。 按时间过滤相关东西


1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
248
249
250
251
252
253
254
255
256
257
258
259
260
261
262
263
264
265
266
267
268
269
270
271
272
273
274
275
276
277
278
279
280
281
282
283
284
285
286
287
288
289
290
291
292
293
294
295
296
297
298
299
300
301
302
303
304
305
306
307
308
309
310
311
312
313
314
315
316
317
318
319
320
321
322
323
324
325
326
327
328
329
330
331
332
333
334
335
336
337
338
339
340
341
342
343
344
345
346
347
348
349
350
351
352
353
354
355
356
357
358
359
360
361
362
363
364
365
366
367
368
369
370
371
372
373
374
375
376
377
378
379
380
381
382
383
384
385
386
387
388
389
390
391
392
393
394
395
396
397
398
399
400
401
402
403
404
405
406
407
408
409
410
411
412
413
414
415
416
417
418
419
420
421
422
423
424
425
426
427
428
429
430
431
432
433
434
435
436
437
438
439
440
441
442
443
444
1#!/usr/bin/env python
2
3
4

6
7
8
9
10import os
11
12
13
14
15
16import re
17
18
19
20
21
22import time
23
24
25
26
27
28import tarfile
29
30
31
32
33
34import string
35
36
37
38
39 
40
41
42
43
44bak_ser = "bacula@192.168.1.4"
45
46
47
48
49
50tar_dir = "/tmp/auto_tar_bak"
51
52
53
54
55
56ext_user = "/eda/bin/auto_bak.conf"
57
58
59
60
61
62config = {"deep":8, "exclude":"Code|INCA.libs", "filetype":"bmp|png|pdf|vsd|rar|log|dat|bak|sdb"}
63
64
65
66
67
68current_time = int(time.time())
69
70
71
72
73 
74
75
76
77
78def check_bak(bak_dir):
79
80
81
82
83
84    tmp_list = []
85
86
87
88
89
90    for filepath,pathlist,filelist in os.walk(bak_dir): 
91
92
93
94
95
96        #filepath  fullpath
97
98
99
100
101
102        #pathlist  fullpath child dir
103
104
105
106
107
108        #filelist  child dir file
109
110
111
112
113
114        if filepath.count("/") >= config["deep"] or ".svn" in pathlist:
115
116
117
118
119
120            continue
121
122
123
124
125
126        for filename in filelist:
127
128
129
130
131
132            if os.path.islink("%s/%s" % (filepath, filename)) or "/." in filepath or filename.startswith(".") or re.findall(config["filetype"], filename.split(".")[-1], re.I) or re.findall(config["exclude"], filepath):
133
134
135
136
137
138                continue
139
140
141
142
143
144            elif 120 <= os.path.getsize("%s/%s" % (filepath, filename)) <= 10485760 and current_time - os.stat("%s/%s" % (filepath, filename))[-2] < 172800 and istext("%s/%s" % (filepath, filename)):
145
146
147
148
149
150                tmp_list.append("%s/%s" % (filepath, filename))
151
152
153
154
155
156    return tmp_list           
157
158
159
160
161 
162
163
164
165
166def istext(filename):
167
168
169
170
171
172    s=open(filename).read(512)
173
174
175
176
177
178    text_characters = "".join(map(chr, range(32, 127)) + list("\n\r\t\b"))
179
180
181
182
183
184    _null_trans = string.maketrans("", "")
185
186
187
188
189
190    if not s:
191
192
193
194
195
196        # Empty files are considered text
197
198
199
200
201
202        return True
203
204
205
206
207
208    if "\0" in s:
209
210
211
212
213
214        # Files with null bytes are likely binary
215
216
217
218
219
220        return False
221
222
223
224
225
226    # Get the non-text characters (maps a character to itself then
227
228
229
230
231
232    # use the 'remove' option to get rid of the text characters.)
233
234
235
236
237
238    t = s.translate(_null_trans, text_characters)
239
240
241
242
243
244    # If more than 30% non-text characters, then
245
246
247
248
249
250    # this is considered a binary file
251
252
253
254
255
256    if float(len(t))/float(len(s)) > 0.30:
257
258
259
260
261
262        return False
263
264
265
266
267
268    return True
269
270
271
272
273 
274
275
276
277
278def create_tarfile(tar_name, filename, tar_list):
279
280
281
282
283
284    if not os.path.isdir(tar_name):
285
286
287
288
289
290        os.makedirs(tar_name)
291
292
293
294
295
296    bak_tar = tarfile.open(tar_name + filename, "w:bz2")
297
298
299
300
301
302    for i in tar_list:
303
304
305
306
307
308        bak_tar.add(i)
309
310
311
312
313
314    bak_tar.close()
315
316
317
318
319 
320
321
322
323
324def get_bak_dir():
325
326
327
328
329
330    tmp = []
331
332
333
334
335
336    with open("/etc/auto.nfs") as f:
337
338
339
340
341
342        for i in f:
343
344
345
346
347
348            if os.uname()[1] in i and not i.startswith("#"):
349
350
351
352
353
354                tmp.append(i.split("/")[-1].rstrip())
355
356
357
358
359
360    return tmp
361
362
363
364
365
366                 
367
368
369
370
371if __name__ == "__main__":
372
373
374
375
376
377    ext_list = []
378
379
380
381
382
383    with open(ext_user) as f:
384
385
386
387
388
389        for i in f.read():
390
391
392
393
394
395            ext_list = i.split()
396
397
398
399
400
401    for dirname in get_bak_dir():
402
403
404
405
406
407        if dirname in ext_list:
408
409
410
411
412
413            continue
414
415
416
417
418
419        file_list = check_bak("/local_home/" + dirname)
420
421
422
423
424
425        if file_list:
426
427
428
429
430
431            filename = time.strftime("/%F.tar.bz2", time.localtime())
432
433
434
435
436
437            create_tarfile(tar_dir + "/" + dirname, filename, file_list)
438
439
440
441
442
443            os.system("rsync -az --remove-source-files %s/%s%s %s:/bak/auto_bak/%s/" %(tar_dir, dirname, filename, bak_ser, dirname))
444

本文转自 nonono11 51CTO博客,原文链接:http://blog.51cto.com/abian/1714798,如需转载请自行联系原作者

给TA打赏
共{{data.count}}人
人已打赏
安全技术

C++遍历文件夹

2022-1-11 12:36:11

病毒疫情

福建省新型冠状病毒肺炎疫情情况

2020-4-27 8:48:00

个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索