Technique de fusion et de compression performante pour les fichiers .jsonl.gz avec Polars
Lors du traitement de DataFrames de grande taille (par exemple, plus de 130 000 lignes de texte et de métadonnées), la fusion efficace des données et leur sauvegarde sous format compressé représente un défi fréquent en ingénierie des données. Ce guide technique décrit une approche complète pour combiner des données à l'aide de Polars et les exp ...
Publié le 14 juin à 22h40
Compression de données avec GZIP et Zip en Java
Bien que de nombreux algorithmes de compression existent, les formats Zip et GZIP restent parmi les plus courants. Cela signifie que nous disposons facilement de nobmreux outils pour manipuler nos données compressées.
Compression basique avec GZIP
L'interface GZIP est très simple, ce qui en fait un bon choix pour la compression d'un flux de don ...
Publié le 10 juin à 17h12
Techniques de compression et décompression dans l'environnement Linux
Introduction
Cet article explore les outils de compression et décompression courants sur les systèmes Linux, en couvrant les commandes de base, les options avancées et les méthodes d'encryption pour la sécurité des données.
Utilisation de tar avec différents algorithmes
Compression standard
Pour créer une archive compressée avec gzip, utilisez ...
Publié le 31 mai à 23h00