JustAnotherArchivist
/
qwarc
1
0
Rozštěpit 0
Zdrojový kód Úkoly 0 Požadavky na natažení 0 Vydání 13 Wiki Aktivita
38 Revize
3 Větve
484 KiB
Strom: 26aab15605
Větve Značky
${ item.name }
Vytvořit větev ${ searchTerm }
z „26aab15605“
${ noResults }
Graf revizí

32 Revize (26aab156059b8740f88e6c81d85728abe509dceb)

Autor SHA1 Zpráva Datum
  JustAnotherArchivist 26aab15605 urn:X-qwarc instead of urn:qwarc před 4 roky
  JustAnotherArchivist 50d46ad51c Use log filename in the target URI of the log resource record před 4 roky
  JustAnotherArchivist e093211496 Set content type for resource records před 4 roky
  JustAnotherArchivist ae46b53401 Always write a WARC-Warcinfo-ID header před 4 roky
  JustAnotherArchivist 23fcdd4026 Write microsecond dates for request and response records před 4 roky
  JustAnotherArchivist 3030ad10ab Mark private API accordingly před 4 roky
  JustAnotherArchivist e0b4104d21 Remove log handler before writing log record since that requires closing the stream před 4 roky
  JustAnotherArchivist 6cfd352f68 Write WARC/1.1 files před 4 roky
  JustAnotherArchivist e1ad5c232e Write warcinfo and resource records in meta WARC on firing up qwarc rather than at the end před 4 roky
  JustAnotherArchivist f038cf91db Fix unfound distribution handling před 4 roky
  JustAnotherArchivist a5dfd5c805 Write spec file + its dependencies and command line to meta WARC před 4 roky
  JustAnotherArchivist e99e2304c9 Write meta WARC with log file před 4 roky
  JustAnotherArchivist d751844626 Fix starting another item before stopping on STOP file or memory limit exceedance před 4 roky
  JustAnotherArchivist 2b0778f9b5 Remove leftovers from initial code rewrite před 4 roky
  JustAnotherArchivist 85d78cee13 Add warcinfo record with version information on Python, system, and dependencies před 4 roky
  JustAnotherArchivist 9cff6bd5c1 Only open a WARC file when necessary to avoid producing empty WARCs at the end před 4 roky
  JustAnotherArchivist 21cf784102 Use setuptools_scm for versioning před 4 roky
  JustAnotherArchivist ab22966fef Add to log which item a message is coming from před 5 roky
  JustAnotherArchivist 6fafd32685 Error when the retries are exceeded před 5 roky
  JustAnotherArchivist 8647d6b396 Use f-strings instead of str.format před 5 roky
  JustAnotherArchivist 5008e6e8cd Deduplicate items před 5 roky
  JustAnotherArchivist 46c95e2157 Disable decoding the response content před 5 roky
  JustAnotherArchivist 85f6f7bd82 Make qwarc.utils.handle_response_limit_error_retries more useful by passing the deferring handler as an argument před 5 roky
  JustAnotherArchivist ad22a2327a Support adding headers to individual requests před 5 roky
  JustAnotherArchivist 67076f964c Add support for POST requests před 5 roky
  JustAnotherArchivist 2d52e78d85 Fix reference to aiohttp.CientError před 5 roky
  JustAnotherArchivist c1574a06c9 Fix sleep task type před 5 roky
  JustAnotherArchivist e0ca88c807 Fix reference to get_rss před 5 roky
  JustAnotherArchivist 984d28ede0 Fix type of --memorylimit, --disklimit, and --warcsplit values před 5 roky
  JustAnotherArchivist 8a8935810d Fix references to memory and disk space check methods před 5 roky
  JustAnotherArchivist be5673cfbf Add record deduplication within a process před 5 roky
  JustAnotherArchivist e892a6b6a7 Initial commit před 5 roky