Reducing the memory usage of Lattice-Boltzmann schemes with a DWT-based compression

This paper presents a new solution to address the challenge of increasing memory usage in high-performance computing simulations of Lattice-Bolzmann or Finite-Volume schemes.Our approach utilises a lossy compression scheme based on the Discrete Wavelet Transform (DWT) to achieve high compression rat...

Full description

Saved in:
Bibliographic Details
Published in:ESAIM. Proceedings and surveys Vol. 77; pp. 79 - 99
Main Authors: Flint, Clément, Helluy, Philippe
Format: Journal Article
Language:English
Published: EDP Sciences 18.11.2024
Subjects:
Cognitive science
Computer science
Distributed, Parallel, and Cluster Computing
Hardware Architecture
Mathematical Physics
Mathematics
DWT
HPC
GPU Graphic Processor
Stencil computation
LBM algorithm
Data Compression
ISSN:2267-3059, 2267-3059
Online Access:Get full text
Tags: Add Tag
No Tags, Be the first to tag this record!
Description
Summary:This paper presents a new solution to address the challenge of increasing memory usage in high-performance computing simulations of Lattice-Bolzmann or Finite-Volume schemes.Our approach utilises a lossy compression scheme based on the Discrete Wavelet Transform (DWT) to achieve high compression ratios while preserving the accuracy of the simulation.Our evaluation on two different FV/LBM schemes demonstrates that the approach can reduce memory usage by several orders of magnitude. Ce papier présente une nouvelle solution pour faire face à l'augmentation de l'utilisation de la mémoire dans les simulations haute performance basées sur les méthodes Lattice-Bolzmann ou Volumes Finis.Notre approche utilise un schéma de compression avec perte basé sur la transformée par ondelettes discrète (DWT) pour obtenir des taux de compression élevés tout en préservant la précision de la simulation.Notre évaluation sur deux différents schémas VF/LBM démontre que l'approche peut réduire l'utilisation de la mémoire de plusieurs ordres de grandeur.
ISSN:2267-3059
2267-3059
DOI:10.48550/arXiv.2302.09883