然现在的公司对我们还是很不错）。 钱，对于我而言，就是想买个安心。我用它来让父母对我的未来安心；让妻子对于未来充满信心（虽然她现在还不算很安心）；让整个家庭有一定的风险抵抗能力。 安心以后，就是上路。 我记得第一段工作，是在恒生。我当时在恒生银行事业部，工作一年后，我发现自己进步很慢，在技术体系没有任何进展，公司的技术体系很旧，而且基本不进化。我自己做了一个技术的演进，使用了一种新的方式提升了平台的整体能力（当年还没有平台能力这些体系思路）。然后还期待年底被表彰下，技术人也是虚荣的，呵呵，就是期望可以带来成就感。 做着做着，发现没有人可以帮助我提升，虽然当时我很弱，我的学**思路也不清晰。平时就是逛逛网站，学**的很肤浅。但是，我内心感受到：如果要是这样待下去，肯定废了，几年之后，还是同样的...阅读全文
，CPU持续上升到99% 5分钟内，大量应用报警，并且拒绝服务，RDS的监控显示出现大量慢SQL，联系服务器数据库提供商进行协助 8分钟内，进行数据库主备切换（业务会受损，但是也没办法，没有定位到问题） 9分钟内，部分业务恢复，但是一些业务订单的回调消息堆积超过20w，备库的CPU使用率也持续上升 15分钟内，备库CPU使用率超过97%，业务再次中断，进行切回主库，并进行限流 20分钟内，关闭一些次要应用的流量入口 25分钟内，主库CPU使用率恢复正常 30分钟内，逐步开启关闭的限流应用 35分钟内，所有应用恢复正常 接下来就是与服务器数据库提供商成立应急小组紧急优化可能出现的慢SQL，虽然说可能解决了一些慢SQL，但此次并没有定位到具体的问题，也就为几天后再次发生宕机事件埋下了伏笔 事故影响 某...阅读全文
slave，并且Basic.Consume消费时指定了x-cancel-on-ha-failover参数，那么客户端会受到一个Consumer Cancellation Notification通知。如果未指定x-cancal-on-ha-failover参数，那么消费者就无法感知master宕机，会一直等待下去。 这就告诉我们，集群中存在镜像队列时，重新master节点有风险。镜像队列中节点启动顺序，非常有讲究： 假设集群中包含两个节点，一般生产环境会部署三个节点，但为了方便说明，采用两个节点的形式进行说明。 场景1：A先停，B后停 该场景下B是master，只要先启动B，再启动A即可。或者先启动A，再在30s之内启动B即可恢复镜像队列。（如果没有在30s内回复B，那么A自己就停掉自己） 场景2...阅读全文
CHECK PROGRAM
cgroup 的 TGID（线程组 ID），TGID 是进程组中第一个进程的 PID。该文件是可写的，向该文件写入 TGID 即将对应线程组加入 cgroup，不保证文件中的 TGID 有序和不重复。 tasks 位于当前 cgroup 中 task 的 TID（线程 ID），即进程组中的所有线程的 ID。该文件是可写的，将任务的 TID 写入这个文件表示将其加入对应 cgroup，如果该任务的 TGID 在另一个 cgroup，会在 cgroup.procs 记录该任务的 TGID，进程组中的其它 task 不受影响。不保证文件中的 TID 有序和不重复。 ⚠️ 注意：如果向 cgroup.procs 写入 TGID，系统会自动更新 tasks 文件中的内容为该线程组中所有任务的 TID...阅读全文
在datanode上就应该有3个副本存在，假设只存在2个副本，那么比例就是2/3=0.666。hdfs默认的副本率0.999。我们的副本率0.666明显小于0.999，因此系统会自动的复制副本到其他dataNode，使得副本率不小于0.999。如果系统中有5个副本，超过我们设定的3个副本，那么系统也会删除多于的2个副本。 在安全模式状态下，文件系统只接受读数据请求，而不接受删除、修改等变更请求。在，当整个系统达到安全标准时，HDFS自动离开安全模式。30s 安全模式操作命令 hdfs dfsadmin -safemode get #查看安全模式状态 hdfs dfsadmin -safemode enter #进入安全模式 hdfs dfsadmin -safemode leave #离开安...阅读全文
->A4};……; {A1,A2,...,Ai}->Ai+1. 这种方式就是第二数学归纳法。对于Ai+1需要前面的所有前序状态才能完成推理过程。我们将这一模型称为高阶马尔科夫模型。对应的推理过程叫做“动态规划法”。 上述两种状态转移图如下图所示： 能用动规解决的问题的特点 能采用动态规划求解的问题的一般要具有3个性质： (1) 最优化原理：如果问题的最优解所包含的子问题的解也是最优的，就称该问题具有最优子结构，即满足最优化原理。 (2) 无后效性：即某阶段状态一旦确定，就不受这个状态以后决策的影响。也就是说，某状态以后的过程不会影响以前的状态，只与当前状态有关。 （3）有重叠子问题：即子问题之间是不独立的，一个子问题在下一阶段决策中可能被多次使用到。（该性质并不是动态规划适用的必要条件，但是如果没...阅读全文
