datakfy
本站致力于IT相关技术的分享
基于Delta Lake构建多租户分片数据湖的元数据路由Kit实现 基于Delta Lake构建多租户分片数据湖的元数据路由Kit实现
项目初期,为了快速迭代,我们将所有租户的分析型数据全部塞进了一个巨大的Delta Lake表中,通过一个 tenant_id 字段进行逻辑隔离。这个方案在租户数量少于一百个时运行得相当不错。但当租户数量突破一千,直逼五千时,这个单一巨表的架
2023-10-27