JustAnotherArchivist
68e9e9fbf5
Disable archive torrent
hace 1 año
JustAnotherArchivist
6a6dbe0eb7
Fix list parsing copy-paste typo
hace 1 año
JustAnotherArchivist
b21cf13886
Ignore book_op.php VirusCheck tasks
They're slow, and the data is already safely stored on both IA servers by the time only that task remains.
hace 1 año
JustAnotherArchivist
6c6e8281d5
Fix log_loop emitting an empty line on zero output
hace 1 año
JustAnotherArchivist
46f80a357b
Shuffle FDs
Can't use FD 3 in log_loop since it collides with FD 3 output from codearchiver; FD 42 should be safe.
Further, since all log(_loop) output goes to stderr, the order of redirections on codearchiver is important, and the redirection of stderr must come last so that the subshells from out and 3 get the original stderr.
hace 1 año
JustAnotherArchivist
2c4493bf21
Remove uses of external `date`
hace 1 año
JustAnotherArchivist
50769d4d23
Parallel codearchiver processes
hace 1 año
JustAnotherArchivist
6fd569a577
Taint storage if any codearchiver process exited non-zero as it might cause parallel processes to rely on broken data
hace 1 año
JustAnotherArchivist
d9d087c2d3
Add more logging to uploader
hace 1 año
JustAnotherArchivist
0348458d4a
Separate work and upload loop in preparation for parallel codearchiver processes
hace 1 año
JustAnotherArchivist
20cbbc8603
Fix log filename finder not checking for compressed files
hace 1 año
JustAnotherArchivist
28585742d3
Remove dead code
hace 1 año
JustAnotherArchivist
88bf5c56ff
Add job timeout
hace 1 año
JustAnotherArchivist
a6b8fdaabc
Fix a couple bugs
Thanks, ShellCheck
hace 1 año
JustAnotherArchivist
6d1927515b
Use --write-artefacts-fd-3
hace 1 año
JustAnotherArchivist
49d2a78590
Drop verbosity level to INFO
hace 1 año
JustAnotherArchivist
c5adeb66e5
Fix stripping of leading ./ on filenames
hace 1 año
JustAnotherArchivist
acc4ab5a45
Initial commit
hace 1 año