23 Commits (9eaa7be4c8a4af45fd7b4729c9b8f7bedaafb759)
 

Autor SHA1 Mensaje Fecha
  JustAnotherArchivist 9eaa7be4c8 Python 3.7 compatibility hace 4 años
  JustAnotherArchivist 9cff6bd5c1 Only open a WARC file when necessary to avoid producing empty WARCs at the end hace 4 años
  JustAnotherArchivist 21cf784102 Use setuptools_scm for versioning hace 4 años
  JustAnotherArchivist ab22966fef Add to log which item a message is coming from hace 4 años
  JustAnotherArchivist 6fafd32685 Error when the retries are exceeded hace 4 años
  JustAnotherArchivist 8647d6b396 Use f-strings instead of str.format hace 4 años
  JustAnotherArchivist 5008e6e8cd Deduplicate items hace 4 años
  JustAnotherArchivist 46c95e2157 Disable decoding the response content hace 4 años
  JustAnotherArchivist 91cd20f567 Version 0.1.3 hace 5 años
  JustAnotherArchivist 85f6f7bd82 Make qwarc.utils.handle_response_limit_error_retries more useful by passing the deferring handler as an argument hace 5 años
  JustAnotherArchivist ad22a2327a Support adding headers to individual requests hace 5 años
  JustAnotherArchivist 67076f964c Add support for POST requests hace 5 años
  JustAnotherArchivist 57764eb2b0 Version 0.1.2 hace 5 años
  JustAnotherArchivist 2d52e78d85 Fix reference to aiohttp.CientError hace 5 años
  JustAnotherArchivist 0f107e988d Version 0.1.1 hace 5 años
  JustAnotherArchivist c1574a06c9 Fix sleep task type hace 5 años
  JustAnotherArchivist e0ca88c807 Fix reference to get_rss hace 5 años
  JustAnotherArchivist 984d28ede0 Fix type of --memorylimit, --disklimit, and --warcsplit values hace 5 años
  JustAnotherArchivist 8a8935810d Fix references to memory and disk space check methods hace 5 años
  JustAnotherArchivist 1c8983fc1e Version 0.1.0 hace 5 años
  JustAnotherArchivist be5673cfbf Add record deduplication within a process hace 5 años
  JustAnotherArchivist 43f1b5e06e Add LICENSE and README hace 5 años
  JustAnotherArchivist e892a6b6a7 Initial commit hace 5 años