曾经买过假的,订了个500g的,结果发了个1t的过来,以为是赚了便宜,结果,分区时出现错误漏了马脚,不能用了,一联系卖家二话不说直接退货了,分析可能是利用了人占便宜的心里,以为自己占了便宜了就不退货了。
最近我们给一家总包公司做clickhouse大数据开发,他们那边有一位博士,研究了clickhouse两年,经验非常丰富。首先问我们这边入库方案,考虑到数据量不大,我们直接采用导数据到分布式表,开始他们可能踩过入库量过大超过分区数的问题,希望我们写入本地表,然后他们负载均衡去做本地表的同步。电话挂了后没多久,他们又电话说按照我说的方案来入库,我们分包的那个系统数据量级确实不大。之后讨论表的主键,我一脸懵,clickhouse主键听说,但是没仔细研究,和mysql类比难道是主键自增切不重复,在博士的指导下,最后看文档原来和mysql完全不是一个概念。clickhouse未指定主键则order by后的字段为主键。然后是汇聚逻辑,他们也认同。他们说的入库方案今后在性能压测超过百万每秒并且表较多的时候,而且入库出现分区相关错误,我们确实可以考虑他们说的方案。
#蓝盈莹#|#30天安利蓝盈莹#
【超话新增版块分区说明】
各位蓝精灵,蓝盈莹超话已开通新的版块~为了方便寻找各类信息,避免精品贴和重要内容被互动贴所覆盖,现将各版块做出以下分区说明