Quellcode durchsuchen

Handle a bad batch

Daoud Clarke vor 2 Jahren
Ursprung
Commit
91269d5100
1 geänderte Dateien mit 5 neuen und 1 gelöschten Zeilen
  1. 5 1
      mwmbl/indexer/batch_cache.py

+ 5 - 1
mwmbl/indexer/batch_cache.py

@@ -39,7 +39,11 @@ class BatchCache:
             except FileNotFoundError:
                 logger.exception(f"Missing batch file: {path}")
                 continue
-            batch = HashedBatch.parse_raw(data)
+            try:
+                batch = HashedBatch.parse_raw(data)
+            except ValidationError:
+                logger.exception(f"Unable to parse batch, skipping: '{data}'")
+                continue
             batches[url] = batch
         return batches