Postgresql索引失效(1)

案例一:批量删除历史数据导致索引失效的问题 表结构 1 2 3 4 5 6 7 8 createtableexample0(iduuidnotnullprimarykey,other_columntextnotnull,created_attimestampwithtimezone);createindexidx_example0_created_atonexample0(created_at); 业务背景 表example1大概存储了五年的数据,大概有5亿条数据。 表没有做

30了

三年没写日记了,一转眼快30岁了。 前段时间,我和老婆迎来了我们的人类崽。加上家里的两只猫崽,现在也算是个“三胎家庭”了。刚从月子中心回家的那

Spark数据倾斜的解决方案

抄 方案 提高reduce task的个数(添加分区数) 适用场景: key分布不均 思路: 添加reduce task的个数 原理: 分区数增大,可以让每个t

Spark Shuffle流程

shuffle可以分为shuffle write和shuffle read两个阶段,执行shuffle write的称为map端,执行shuffl