Skip to content

Migrer la base de données postgres vers Apache Iceberg

Le backend postgres n'est pas viable à moyen terme. La base de données représente ~ 0.5% du volume de données.

Le format Apache Iceberg semble être un candidat très pertinent pour la base de donnée seedpsd. Stockage dans S3, support du SQL comme langage de sélection.

https://iceberg.apache.org/

Solution à étudier. Nécessite un service de catalogage (Hive ou Spark) et un bucket S3.

Edited by Jonathan Schaeffer