Compression des fichiers de flux

Les fichiers .json ou .pb3 peuvent être compressés avec gzip avant l'importation. Cela peut réduire considérablement la taille en octets des flux quotidiens.

Chaque fichier de partitionnement doit être gzip&d'importation et être importé individuellement (par exemple, avec gzip *.json). Les segments de flux compressés doivent se terminer par .json.gz ou .pb3.gz.

Remarque : Les fichiers de descripteur de fichier *.filesetdesc.json, qui ne sont utilisés que pour les flux génériques, ne peuvent pas être compressés. Toutefois, les fichiers de données qui leur sont associés peuvent être compressés.