313 Commits (142a5a9c493ceed477bfc1625f718e2c47198d38)
 

Autor SHA1 Mensaje Fecha
  JustAnotherArchivist 142a5a9c49 Get rid of asyncio hace 2 años
  JustAnotherArchivist b6663ae731 Add concurrency hace 2 años
  JustAnotherArchivist 22f2e68356 Add JSONL output option for S3 listing hace 2 años
  JustAnotherArchivist bfebe9a2a5 Fix only sending partial file contents on retries hace 2 años
  JustAnotherArchivist 39b3b7793a Add support for IA_CONFIG_FILE environment variable hace 2 años
  JustAnotherArchivist 7ed2906dd2 Add progress bar hace 2 años
  JustAnotherArchivist 58f0f0f8d0 Fix being unable to resume an upload that crashed in the first part hace 2 años
  JustAnotherArchivist 74485c399b Require decompressed WARCs with warc-tiny hace 2 años
  JustAnotherArchivist e24790132e Add at-tracker-sample-user-item-size hace 2 años
  JustAnotherArchivist a14939b069 Add base64url hace 2 años
  JustAnotherArchivist 5c2ce7ec10 Add cdx-chunk hace 2 años
  JustAnotherArchivist fe0b020352 Add support for reading from stdin hace 2 años
  JustAnotherArchivist 1010769c3c Handle connection errors hace 2 años
  JustAnotherArchivist 1acdc88c81 Add ia-upload-stream hace 2 años
  JustAnotherArchivist 360c4d9371 Add youtube-extract-rapid hace 2 años
  JustAnotherArchivist d07b5a7d09 Remove debugging prints hace 2 años
  JustAnotherArchivist bf5e065a0f Add URL/percent decoding tool hace 2 años
  JustAnotherArchivist 11485d9404 Add infrastructure for simple C-based tools hace 2 años
  JustAnotherArchivist c50a8fd796 Fix 'Dictionary mismatch' error when very small dicts are used because the temporary file isn't written to disk before zstdcat gets executed hace 2 años
  JustAnotherArchivist 5bc3d4b020 Fix crash on an empty response hace 2 años
  JustAnotherArchivist 7f25c092d1 Catch other connection errors hace 2 años
  JustAnotherArchivist f8352809f3 Handle ConnectionResetError hace 2 años
  JustAnotherArchivist 0b34268210 Catch socket.timeout, which is a separate exception class from TimeoutError before Python 3.10 hace 2 años
  JustAnotherArchivist 0f7a2b32a3 Log number of results on a page hace 2 años
  JustAnotherArchivist 628aeb052f Handle rate limiting hace 2 años
  JustAnotherArchivist d3ea3ce8a0 Switch from urllib to http.client to reuse connections hace 2 años
  JustAnotherArchivist 8f7619ff3a Add retries hace 2 años
  JustAnotherArchivist f98fdd5f01 Fix printing HTTP response line to stdout instead of stderr hace 2 años
  JustAnotherArchivist c9400ac46f Fix recognition of command without optional parts hace 2 años
  JustAnotherArchivist 5ca15a7c94 Add concurrency support hace 2 años
  JustAnotherArchivist 191948cf9d Print number of modified records on requeueing hace 2 años
  JustAnotherArchivist 5121524f83 Log retrieval of showNumPages hace 2 años
  JustAnotherArchivist aba7a1b0b8 Replace resumeKey pagination with page number pagination hace 2 años
  JustAnotherArchivist d57324a26c Add --where for arbitrary conditions hace 2 años
  JustAnotherArchivist fed64387bd Invert count/write logic hace 2 años
  JustAnotherArchivist f914b6afbe Also reset the status_code on requeueing hace 2 años
  JustAnotherArchivist 303bb69c37 Add ia-cdx-search hace 2 años
  JustAnotherArchivist 0b45f7b2ba Swap syntaxes hace 2 años
  JustAnotherArchivist b2c9ea2fa4 Refactor hace 2 años
  JustAnotherArchivist eaf53e1a44 Add alphabetseq hace 2 años
  JustAnotherArchivist c9c8b7e1f7 Add ia-wait-item-tasks hace 2 años
  JustAnotherArchivist b440b35c2f Handle ancient /?v= URLs hace 2 años
  JustAnotherArchivist 0044281b9d Add YouTube channel listing script hace 2 años
  JustAnotherArchivist 1686e04cbe Add a timeout to prevent potentially indefinite blocking hace 2 años
  JustAnotherArchivist 2fc9652ee9 Add support for other instances and full-instance listing hace 2 años
  JustAnotherArchivist b72da478b2 Fix org repo listing on new design/site structure hace 2 años
  JustAnotherArchivist ce7a069af5 Add --jsonl option hace 2 años
  JustAnotherArchivist 9412f0c81c Add azure-storage-list hace 2 años
  JustAnotherArchivist 696e221fc1 Add support for password-protected folders hace 2 años
  JustAnotherArchivist 158c1f1fe0 Fix usage error hace 2 años