A framework for quick web archiving
25개 이상의 토픽을 선택하실 수 없습니다. Topics must start with a letter or number, can include dashes ('-') and can be up to 35 characters long.
JustAnotherArchivist 8358ba9131 Add support for only reading part of the response into memory 4 년 전
..
__init__.py Handle STOP file and high memory usage before full disk to allow stopping while the disk is above the limit 4 년 전
aiohttp.py Add support for only reading part of the response into memory 4 년 전
cli.py Support deep/multiple inheritance from Item 4 년 전
const.py Catch exceptions in Item.process and mark the items as errors instead of crashing 4 년 전
utils.py Write only successful retrievals (i.e. ones that don't cause an exception) to WARC 4 년 전
version.py Use setuptools_scm for versioning 4 년 전
warc.py Stop deduping small responses 4 년 전