channel通道golang的并发模型是序列通信处理CSP（communicating sequential process）——使用通信来共享内存 ，避免goroutine因竞争共享内存频繁加锁产生的性能问题。基本数据结构golang中提供了一个特殊的类型channel实现goroutine之间的通信。channel类似于队列，先进先出。channel数据结构源码在src/runtime/chan.go下。chan 使用 hchan 表示，它的传参与赋值始终都是指针形式，每个 hchan 对象代表着一个 chan。hchan 中包含一个缓冲区 buf，它表示已经发送但是还未被接收的数据缓存。buf 的大小由创建 chan 时的参数来决定。qcount 表示当前缓冲区中有效数据的总量...阅读全文
。源码中有两个类型实现了 canceler 接口：*cancelCtx 和 *timerCtx 1 2 3 4 type canceler interface { cancel(removeFromParent bool, err error) Done() <-chan struct{} } context.cancelCtx 首先函数 WithCancel 就是我们用来创建可以取消的 context(context.cancelCtx) 的入口。 1 2 3 4 5 6 7 func WithCancel(parent Context) (ctx Context, cancel CancelFunc) { // 将传入的上下文包装成私有结构体 context.cancelCtx c...阅读全文
time desc limit 17.总结本文整理了业务中使用influxdb遇到的问题，并提出了一些优化方案。目前来看，influxdb对于笔者仍然是一个黑盒程序，更细致的内容就需要从源码追寻。当前采用了如下方式进行优化(由于需要对配置参数，策略各方面权衡，这是一个持续的过程)：(1) retention policy#将保留策略修改为：3天一周期；1天一分片 alter retention policy rp_iot_cloud on iot_cloud duration 3d REPLICATION 1 SHARD DURATION 1d default(2) 配置文件#influxdb配置文件，主要参数如下: [data] #wal日志落盘周期，官方建议0-100ms #尝试了100ms...阅读全文
多，有 100 多个系统，很多业务概念。 老大说：不要好高骛远，我建议你结合当前的工作，一步步学习，以点带面。 刚进公司的时候，我不是很有自信，因为知道自己技术可能比很多大牛差距很大。同时，自己也是一个不太会表达的人（原来的老大也说过，我的软能力不行），整体上在初期感觉相对较闷。 日常工作就会把自己占得很满，怎么去学习？我的技术不行，就想去学代码，框架，支付宝的代码全部是开源的，所以我可以很简单通过 eclipse 直接查看框架的源码，渐渐的，比很多人都了解框架，了解技术。我还会去狂公司的论坛，公司的 doc，这上面有框架设计相关的内容。所以，很多时候机会是很多的，关键是你想不想去去。 所以，不要好高骛远，脚踏实地，时刻保持饥饿感，积少成多。 开放心态，视野决定格局 12 年妻子怀孕，于是转...阅读全文
.tar.gz 注意：Monit是一个开源工具，但M/Monit是收费的。 安装 yum install monit 当然也可以下载源码安装。 当前使用版本： # monit -V This is Monit version 5.17.1 Built with ssl, with pam and with large files Copyright (C) 2001-2016 Tildeslash Ltd. All Rights Reserved. 常用命令 monit -t # 配置文件检测 monit # 启动monit daemon monit -c /var/monit/monitrc # 启动monit daemon时指定配置文件 monit reload # 当更新了配置文件需要重载...阅读全文
使是用户删除计算实例之后，数据存储继续有效。亚马逊还提供了基于硬盘的弹性块存储服务，每个月每GB的存储费仅为4.5美分。上述业者苏里预测，弹性块存储的毛利率在60%到70%之间。数据库软件亚马逊云计算还给企业提供了多种数据库工具。传统上，企业更多使用关系数据库。数据存储在一个表中，每个表有多行和多列数据。应用软件可以在数据库中保存数据，也可以读出数据。AWS的“关系数据库服务”提供了多种选项：比如微软公司的SQL Server，甲骨文公司知名的Oracle，开放源码的MariaDB、MySQL和PostgreSQL，以及亚马逊自家的Aurora（可以和MySQL和PostgreSQL兼容）。苏里表示，如果客户在关系数据库中使用亚马逊自有的Aurora，那么这一业务的毛利润率大约65%到75...阅读全文
「表情符号」和「HTML」功能。使用一两个表情符号还可以，但使用过多的花哨彩色文本会使人认为你无法表达出你的意思。过滥地使用表情符号、色彩和字体会让看起来更傻逼； 如果你是使用图形界面的邮件客户端程序(如腾讯的Foxmail、微软公司的Outlook)，注意它们的默认配置不一定满足以上的这些要求。不过大多数这类程序有「查看源码」的命令，可以用它来检查发件箱的消息，确保发送的是没有乱码的纯文本文件。 【本章注释】 [14]在本章中作者使用大量的计算机术语，我已尽量简化处理，同时，我认为以上的方法并不适合大多数的提问者，所以我在此总结一下适合普通用户的文件格式： Txt：直接粘贴，方便阅读； Pdf：文件规范，推荐使用； Doc：使用广泛，打开方便； Md：Markdown文本，趋势。 邮件送发建...阅读全文
，消费消息也是一个道理，一次拉取一批次的消息进行消费。并且Producer、Broker、Consumer都使用了优化后的压缩算法，发送和消息消息使用压缩节省了网络传输的开销，Broker存储使用压缩则降低了磁盘存储的空间。参考资料：1.《深入理解Kafka：核心设计实践原理》2.状态机程序设计套路3.raft算法源码4.https://www.bbsmax.com/A/QW5Y3kaBzm/ 作者简介屈志平腾讯数据研发工程师腾讯数据研发工程师，目前负责QQ浏览器、搜狗小说、搜狗浏览器、bingo等多款产品的数据建设。有丰富的数据治理、数仓建设、数据平台平台相关的经验。参考阅读：BIGO RTC如何低成本实现高画质一文读懂 Web3：互联网发展的新时代还是骗局？解析分布式系统的缓存设计日志中台...阅读全文
