31 Commits (master)

Autor SHA1 Mensaje Fecha
  JustAnotherArchivist 4ff212eb20 Fix empty files being considered valid WARCs hace 10 meses
  JustAnotherArchivist 828dae2597 Raise an error when verification fails hace 10 meses
  JustAnotherArchivist 73f35f5591 Fix infinite loop when file ends with something that is not a WARC record hace 2 años
  JustAnotherArchivist 06d60a798c Bump read size hace 2 años
  JustAnotherArchivist 74485c399b Require decompressed WARCs with warc-tiny hace 2 años
  JustAnotherArchivist fe0b020352 Add support for reading from stdin hace 2 años
  JustAnotherArchivist 5b731fbde1 Fix compatibility with wpull 2.x hace 3 años
  JustAnotherArchivist 743e0582ba Fix confusing error message when lxml is not installed hace 3 años
  JustAnotherArchivist 491a80a04b Add warc-tiny scrape command for parsing HTTP responses using wpull and extracting links hace 3 años
  JustAnotherArchivist 01274e461a Prevent constantly moving bytes around for better performance on large chunked records hace 3 años
  JustAnotherArchivist 4c90bacaed Shield values in colons with angled brackets hace 3 años
  JustAnotherArchivist f51adccd3f Add --meta mode for dump-responses which prefixes each line with information about the file and record hace 3 años
  JustAnotherArchivist 9cc1f41917 Pass the filename in NewFile events hace 3 años
  JustAnotherArchivist a38efc31b6 Introduce a way to provide additional arguments to processors hace 3 años
  JustAnotherArchivist 49376db51b Decode HTTP request bodies hace 4 años
  JustAnotherArchivist 34c1a58034 Fix detection of multiple transfer encodings hace 4 años
  JustAnotherArchivist 5982e131a4 Stop gracefully when encountering a SIGPIPE hace 4 años
  JustAnotherArchivist c13a1150df Add support for WARC/1.1 hace 4 años
  JustAnotherArchivist 376cde7b8c Fix broken block digest calculation on malformed HTTP responses hace 4 años
  JustAnotherArchivist b121cbd958 Write all log messages to stderr hace 4 años
  JustAnotherArchivist ed1270d988 Add support for upper-cased chunk lengths hace 4 años
  JustAnotherArchivist d4826abde2 Add record ID to log messages hace 4 años
  JustAnotherArchivist 552a4147c2 Fix not returning complete body for non-chunked responses hace 4 años
  JustAnotherArchivist f2e836d2e9 Add support for differently formatted digests hace 5 años
  JustAnotherArchivist 94c4f76570 Fix crash when a digest is missing from a record hace 5 años
  JustAnotherArchivist ef78a3318c Colour only the header field names but not the values hace 5 años
  JustAnotherArchivist 9ce4653094 Document colouring and usage hace 5 años
  JustAnotherArchivist e7c5d82254 Coloured WARCs?! hace 5 años
  JustAnotherArchivist 70b413f5c1 Better events: include raw WARC header data and separate HTTP requests into headers and body hace 5 años
  JustAnotherArchivist 641bc7a207 Fix infinite loop at end of WARC hace 5 años
  JustAnotherArchivist 859c75a591 Add tool for WARC verification and extraction hace 5 años