Dubbo 2.7.0 发布。Dubbo 是阿里巴巴公司开源的一个高性能优秀的服务框架，使得应用可通过高性能的 RPC 实现服务的输出和输入功能，可以和 Spring 框架无缝集成。 据开源中国对 Dubbo 的项目负责人北纬的采访 Dubbo 重启维护一年多，现在还活着吗？，新版本的更新亮点有： Dubbo 2.7.0 添加了社区呼声很高的 异步化支持 、以及 注册中心与配置中心分离 这两个特性。与 2.6 及以前的版本相比， 异步化支持 不再局限于基于 Future 接口的异步，也不再仅仅局限于只能在客户端异步。具体来说，Dubbo 2.7.0 版本全面拥抱 JDK8，在客户端开始支持基于 CompletableFuture 的异步编程范式，在服务端支持基于 AsyncContext...阅读全文
Nick Ter... 2 1 10 月数据库排行榜：Snowflake 上升三名；三巨头分数同比下降最多 DB-Engines 10 月份流行度排行已更新（基于 9 月份的整体数据变化）。 排名前十的数据库和上个月的保持一致，分别是 Oracle、MySQL、Microsoft SQL Server、PostgreSQL、MongoDB、Redis、IBM Db2、Elasticsearch、SQLite 和 Cassandra。分数方面，只有 MySQL 和 PostgreSQL 出现了明显的增长，分别增加了 7.24 和 9.47 分... 5 5 Python 3.11 Alpha 解释器现已登陆 Microsoft Store 自从微软逐步开放 Microsoft Store，不再限制开...阅读全文
，也可以通过优化的 memory copy，最优情况下可以仅仅交换pointer。它不仅消除了标量处理模型会遇到的问题，而且在设计 pipeline 时还可以实现更优的内存分配并与业务逻辑解耦。 图片來源：fd.io/gettingstar… 向量处理模型，graph 有 1 个起点（dpdk-input, n packets）以及 7 个业务逻辑 Graph 框架优点 总体而言，与传统的标量处理模型相比，以下概括了 graph 框架主要的优势 更好的 i-cache 管理，更好的icache locality。 灵活的 pipeline 模型（pipeline 框架是从业务逻辑中抽象出来的） 减少 pointer 复制 Node 可以累积多个先前 node 所传递的报文，因此批处理性能更好...阅读全文
Workspaces) 越来越多的科技公司开始采用单体仓库模式（mono-repository — 方便跨项目共享代码，同时避免依赖同步问题）来进行代码控制，这种模式也正逐渐被开源社区和一些小型公司所采纳。 因此，Yarn 增加了一个新特性 ——工作区。工作区可以自动从多个 package.json 中收集所有的依赖项，并一次性将它们安装完毕。项目根目录下会生成一个独立的 yarn.lock 来锁定这些文件。此外，如果多个工作区之间存在依赖，Yarn 会为它们创建链接，这样所有的项目就可以始终共享最新的代码。 自动合并 yarn.lock 文件 (Auto-merging of lockfiles) 多个开发者在开发同一个项目时，可能会需要更新包依赖，从而导致 yarn.lock 文件出现冲突。如果只有一两个...阅读全文
的定制能力。ECharts 底层依托了开源渲染引擎 ZRender ，支持 Canvas 和 SVG 等多种方式的渲染，支持 PC 、移动端、数据大屏、服务端渲染等多种设备场景。 目前，在 2018 年初发布的新版本 ECharts (4) 中，一些常用图表已支持最高达千万级的数据可视化，并且提供了小程序、无障碍访问等支持。基于 WebGL 的 ECharts-GL 能支持各种 3D 图表渲染、以及海量数据的渲染加速。目前，各种基于 ECharts 的扩展库，以及相关的可视化服务系统已经形成了丰富的产品体系和活跃的社区环境。ECharts 目前在 GitHub 上拥有 25k+ 的关注和 2k+ 的相关项目。大量的社区的反馈和贡献使 ECharts 不断地迭代进化。 业内人士认为，进入...阅读全文
12月23日，由开源中国联合中国电子技术标准化研究院主办的2017源创会年终盛典在北京万豪酒店顺利举行。作为年末最受期待的开源技术分享盛会，国内顶尖技术大拿、知名技术团队、优秀开源项目作者，及近1000名技术爱好者共聚一堂，探讨最前沿、最流行的技术话题和方向，推动国内开源创新体系发展，共建国内开源生态标准。 PHP7 已发布近两年, 大幅的性能提升使得 PHP 的应用场景更加广泛，刚刚发布的 PHP7.2 相比 PHP7.1 又有了近 10% 的提升。在本次大会上，链家集团技术副总裁、PHP 开发组核心成员鸟哥发表了以 “ PHP Next: JIT ”为主题的演讲，分享了 PHP 的下一个性能提升的主要举措：JIT 的进展, 以及下一个大版本的 PHP 可能的特性。他表示，JIT 相比...阅读全文
全球的内存市场主要被三星、SK Hynix和美光三家公司垄断，他们三家加起来的份额高达95%，中国要想在内存市场突破封锁并不容易，尽管有紫光、长鑫、兆易创新等公司投身存储芯片市场，但在现有的DDR内存技术上，中国公司技术、产能还差得远呢。 此外，内存也不止传统的DDR技术，还有很多新兴领域正在发展，比如PCM相变存储，相比传统内存它的优势很多，比如速度快了1000倍，耐用性也是传统内存的1000倍，江苏淮安市时代芯存公司投资130亿元建设了国内最大的相变存储基地，上周已经开始正式运营，预计年产值45亿元。 来自中国江苏网的消息称，淮安市集成电路产业现场推进暨江苏时代芯存半导体有限公司相变存储器工厂竣工运营启动仪式在淮安高新技术产业开发区顺利举行，此举标志着130亿元投资的相变存储项目开始进...阅读全文
机系统。 但与此同时，Stapelberg 也逐渐发现并认识到了 Debian 在许多方面的不足，他发现 Debian 整个开发评估流程都非常迟钝。举例来说，补丁的评估没有截止日期，有时候他会收到通知说几年前递交的补丁现在合并了。Debian 的一些维护者出于个人喜好拒绝合作，维护者给予的个人自由度太高对 Debian 构成了严重影响。Debian bug 跟踪器 debbugs 源自 1994 年，只有 Debian 和 GNU 项目使用。 Stapelberg 抱怨了 Debian 糟糕的开发流程，对此感到十分不满，还表示对 Debian 开发流程的沮丧程度最终超过了其忍受的阈值。为此，他撰写了这篇文章，并希望自己的文章能激励 Debian 做出改变，继而改进开发者参与维护的体验。...阅读全文
作为RISC精简指令集的代表，MIPS处理器曾经比ARM还要火，比ARM更早支持64位，也是安卓系统支持的三大指令集之一，只不过现在MIPS指令集在移动、嵌入式领域影响比ARM小多了，这方面的原因也是多方面的。 MIPS在被辗转卖了几次之后，最终结局倒也不坏——MIPS走向开源了，上周末官方宣布开放了MIPS R6指令集及相关工具，32位、64位MIPS都可以免费下载使用。 2012年Imagination Technologies斥资1亿美元收购了MIPS公司，准备加强CPU业务，这样就能提供完整的CPU、GPU授权，不过Imagination Technologies在这方面并不算成功，在苹果放弃他们的PowerVR GPU授权之后，Imagination Technologies也把...阅读全文
Kiwi TCMS 是一个集测试计划、测试运行和测试用例于一身的管理系统，用 Python 和 Django 编写。6.11 版本已经发布，这是一个安全和改进版本，它更新了许多内部依赖项，添加了 2 个新的 Telemetry 报告，更新了 TestPlan 和 TestCase 克隆页面，并提供了其他一些改进和错误修复。具体内容如下。 支持的升级路径： 5.3 (or older) -> 5.3.1 5.3.1 (or newer) -> 6.0.1 6.0.1 -> 6.1 6.1 -> 6.1.1 6.1.1 -> 6.2 (or newer) 更新 Django，从 2.2.2 更新到 2.2.4更新 marked 到 0.7.0将 python-GitLab 从 1.8.0 更新...阅读全文
EnduroSLC闪存芯片，从名字上就可以看出强调超长寿命，P/E循环可选5万次、10万次、25万次三种规格(QLC才不过1000-1500次左右)，搭配无缓存主控支持增强型掉电保护，性能也是上一代的四倍，而且可耐受-40℃到85℃的极端温度。 该硬盘采用BGA整合封装的单芯片方案，集成主控和闪存，145-ball封装，尺寸仅14×24mm，容量不大2GB-128GB，系统通道是SATA 6Gbps，支持NCQ。 具体读写速度指标没有公布，但是对于这种产品来说，能跑多快反而是次要的。 Greenliant表示，NANDDrive EX系列已经开始向客户送样，计划今年第四季度量产，同时还会推出基于3D MLC闪存的NANDDrive MX系列，也是SATA 6Gbps，今年第四季度初出样，年底量产。...阅读全文
序）和 mipsel（小端序））64 位小端序 MIPS（mips64el）64 位小端序 PowerPC（ppc64el）IBM System z（s390x） 与Debian版本的情况一样，Debian 10带来了比以前更多的新软件包; 此更新包括13,370个新软件包，使总计达到了57,503个软件包。Debian 9中的35532个软件包获得升级，而7,278个软件包已从发行版中删除。删除的包将在包管理工具中标记为已过时。 部分重要的软件更新： Debian 10中的一些主要软件升级属于桌面环境，具体取决于您下载的版本。以下是此升级包含的桌面版本：GNOME 3.30，KDE Plasma 5.14，LXDE 10，LXQt 0.14，MATE 1.20和Xfce 4.12...阅读全文
。 它是为 ARM64 架构的服务器量身定做的，同时华为声称已经做了一些改变来提高其性能。你可以在华为开发博客上了解更多。 目前，根据 openEuler 的官方声明，有 50 多名贡献者为 openEuler 贡献了近 600 个提交。 贡献者们使源代码对社区可用成为可能。 值得注意的是，存储库还包括两个与之相关的新项目（或子项目），iSulad 和 A-Tune。 A-Tune 是一个基于 AI 的操作系统调优软件，iSulad 是一个轻量级的容器运行时守护进程，如在 Gitee 中提到的那样，它是为物联网和云基础设施设计的。 另外，官方的公告提到，这些系统是在华为云上通过脚本自动构建的。这确实十分有趣。 下载 openEuler 到目前为止，你找不到它的英文文档，所以你必须等待或选择通过...阅读全文
辟自己独特的商业路径？ Sam Altman：将来应该会出现几个大型的基础模型，开发人员都将基于这些基础模型研发AI应用。但目前的情况依然是某一家公司开发出一个大型语言模型，然后开放API供他人使用。 我认为，将来在基础模型和具体AI应用研发之间会有一个中间层：出现一批专门负责调整大型模型以适应具体AI应用需求的初创企业。能做好这一点的初创公司将会非常成功，但这取决于它们能在“数据飞轮”上走多远。（数据飞轮：使用更多数据可以训练出更好的模型，吸引更多用户，从而产生更多用户数据用于训练，形成良性循环。） 我对初创企业训练模型的能力持怀疑态度，将来承担模型训练角色的应该不会是初创公司，但这些企业可以在上述的中间层角色中发挥巨大价值。 Audience Member：未来会不会出现垂类AI初创公司...阅读全文
尽管 Linux 桌面操作系统有着很高的生产力和安全性，但其在软件和功能的丰富程度上仍无法与 Windows 10 和 macOS Sierra 相比，比如 Microsoft Office 和 Adobe Photoshop。好消息是，微软刚刚发布了 Skype for Linux 1.13 版本，允许从该平台上发布文本短信。此前，尽管 Google Voice 之类的基于 web的解决方案可以实现同样的功能，但在浏览器上的使用体验并不完美。 在 Skype for Linux 的最新版本中，迎来了如下变动： 支持发送短信； 更新至 Electron 1.4.7； 支持远程群体会话； 改进崩溃报告； 增加对身份验证令牌撤销的支持； 其它bug修复与性能改进。 Skype for...阅读全文
几个星期前，我一个朋友问我：“为什么要关心 Go 语言”？ 因为他们知道我热衷于 Go 语言，但他们想知道为什么我认为 其他人 也应该关心。本文包含三个我认为 Go 是重要的编程语言的原因。 安全 个人而言，你和我或许完全有能力在 C 中编写程序，既不会泄漏内存，也不会不安全地重复使用内存。然而，整体上，即使有超过40年的经验，用 C 的程序员也无法可靠地这样做。 尽管静态代码分析、valgrind、tsan 以及 “-Werror” 已经存在了几十年，却很少有证据表明这些工具被广泛认可，更不用说广泛采用。总而言之，事实表明，程序员根本无法安全地管理自己的内存。现在是离开 C 的时候了。 Go 不需要程序员直接管理内存，所有内存分配都由语言运行时自行管理，使用前初始化，必要时检查边界。它肯...阅读全文
被投诉人选择一人独任，则最终由一人独任审理，对另外一种情况我则没有查到具体的说法。 以上是我近期学习到的关于域名仲裁的相关内容，在这里分享给大家，由于个人理解的不同，描述不一定正常，在这里仅仅是作为一个介绍，欢迎朋友们一起讨论和指正。 关于域名与商标，虽然知识产权在社会中越来越被重视和保护，但还是希望各大公司、终端自身给予高度的重视，在这个互联网时代、眼球时代和信息爆炸时代，互联网经济必然会占到越来越大的比重，最终会与实体经济平起平座，各大依托于网络的公司能在短短几年内，超越苦心经营几十年的实体企业，这都是互联网经济的威力。而域名就是企业在网络上的虚似商标，是企业的网络脸面，一些大的公司无不在自身网站的域名上不惜成本，花空心思，说明一个契合自身特色的域名是多么的重要。 当然，在这里也奉劝各位...阅读全文
select-pane -[UDLR] 在指定的方向选择下一个 pane 更常用的是在 tmux 中直接通过默认前缀 ctrl + b 之后输入对应命令来操作，具体如下（这里只列出输入默认前缀之后需要输入的操作）： 基本操作 ? 列出所有快捷键；按q返回 d 脱离当前会话,可暂时返回Shell界面 s 选择并切换会话；在同时开启了多个会话时使用 D 选择要脱离的会话；在同时开启了多个会话时使用 : 进入命令行模式；此时可输入支持的命令，例如 kill-server 关闭所有tmux会话 [ 复制模式，光标移动到复制内容位置，空格键开始，方向键选择复制，回车确认，q/Esc退出 ] 进入粘贴模式，粘贴之前复制的内容，按q/Esc退出 ~ 列出提示信息缓存；其中包含了之前tmux返回的各种提示信息 t 显...阅读全文
制化的网络；二是目前的 TCP/IP 协议和框架对 ManyNets（包括 IoT 网络、卫星网络等） 互连有限制且具有复杂性。 当下，全息通信满足了人们对交互式的通信体验的需求，从而也需要更高的带宽、更低的延迟、更灵活的网络处理，而满足这些传感应用需求，需要更细度的网络服务能力。 由于现有 IP 不相兼容的寻址机制，IoT 网络、蜂窝网络、工业网络等网络之间的互连受到了限制。而后引进的多种映射机制不仅给系统带来了额外的复杂性，也带来了潜在的隐私和弹性问题。 由此，需要一个更好的解决方案来处理所有类型或虚拟对象的交付和通信，New IP 应运而生。 文章指出，New IP 主要有三个关键特征： 可变 IP 地址长度，无缝支持跨网络通信；用于标识物理和虚拟对象的 IP 地址的语义定义；用户定义...阅读全文
没有人在做任何竞选活动。” 为什么大家都不愿担任领导人呢？ Debian 领导人的主要职能有两项：一方面是代表 Debian 到世界各地，在会议上进行分享，同时处理项目与其它团队和公司的关系；另一方面是行政上的，领导人要管理项目资金，任命开发者在项目中担任不同角色，并负责项目中的一些细节。 但是公开信中也指出，实际上，因为 Debian 项目把各种各样的权限都下放到社区成员中，导致领导人的实权实际上并没有多少。比如，个别开发者几乎可以完全控制他们维护的软件包；开发人员之间的技术分歧很大的时候，将由项目技术委员会处理；发布管理者与 FTP 主人有权最终决定项目实际发布的内容，以及何时发布；项目秘书负责确保遵循必要的程序；政策团队处理项目的大部分总体设计。 另一方面，Debian 领导人这个职位...阅读全文
大的提高一条连接上面的 stream 并发，可以考虑调大 SETTINGS_MAX_CONCURRENT_STREAMS，在 TiKV 里面，我们就遇到过这个值比较小，整体吞吐上不去的问题。 这里还需要注意，虽然一条连接上面能够处理更多的请求了，但一条连接远远是不够的。一条连接通常只有一个线程来处理，所以并不能充分利用服务器多核的优势。同时，每个请求编解码还是有开销的，所以用一条连接还是会出现瓶颈。 在 TiKV 有一个版本中，我们就过分相信一条连接跑多 streams 这种方式没有问题，就让 client 只用一条连接跟 TiKV 交互，结果发现性能完全没法用，不光处理连接的线程 CPU 跑满，整体的性能也上不去，后来我们换成了多条连接，情况才好转。 Priority 因为一条连接允许多个...阅读全文
，你几乎不能更改init系统。然而对大多数不深入sysadmining的用户来说，使用哪个init系统并不重要。 当然，每个经验丰富的Linux用户都有自己的看法。这里就不一一列举出来了，Linux社区充满了很多精通技术的开发人员，他们对Linux应该如何发展和成长有着自己的意见。这些观点大多数是不相关的，取决于具体的工作需求。即便很多人投诉systemd，但却没有更完美的替代品出现，这也是systemd迅速扩张的原因。 我发现systemd单元和服务文件很容易维护，更重要的是，它可以很容易地转让给别人。systemd的拥护者给出了支持其的原因，比如很稳定，有一个容易的可配置的方式管理服务，也有一些中立人士不强烈反对systemd，但它的扩展速度实在令人担忧。它接管了很多不需要任何修复的功能...阅读全文
Debian 的不舍和热爱。 “如果说我在 Debian 的18年有什么遗憾的话，那就是在 Debian 章程最初制定的时候，尽管感觉到了不妥，但我没有发声。” 同样地，当初 Michael Stapelberg 离开 Debian 也没有“脱粉回踩”，他只是希望自己的文章能激励 Debian 做出改变，继而改进开发者参与维护的体验。 因此，他在博客中苦口婆心地列举出 Debian 的问题（包括包的上传问题、bug追踪问题、邮件列表归档问题等等），然后再给出自己的解决方案。比如他认为，项目应该努力实现更多的统一；Debian 文化需要从“这个包归我管，你不能碰”转变为共同的所有权意识等等。 1993年9月15日，Debian 0.01版发布至今，Debian 已经经历了近三十个春秋。一个完全没有盈利组...阅读全文
SciPy 是一个开源的 Python 算法库和数学工具包。SciPy 包含的模块有最优化、线性代数、积分、插值、特殊函数、快速傅里叶变换、信号处理和图像处理、常微分方程求解和其他科学与工程中常用的计算。 10月25日，SciPy 团队成员 Ralf Gommers 在 Python 官方邮件组发文宣布 SciPy 1.0 终于发布了。 Ralf 称，很高兴宣布 SciPy 1.0 的发布，自从 0.1 版面世 16 年后，1.0 版姗姗来迟。这是一次漫长而富有成效的旅程，期待在未来有更多令人激动的特性。 为什么现在才发布 1.0 版呢？ Ralf 认为版本号应当体现出项目的成熟程度，SciPy 是一个成熟且稳定的库，已经在生产环境长期大量使用很久了。从这个角度来说，1.0 版来晚了。 最...阅读全文
。Warner强调说，安全性必须是代码不可分割的一部分，不能简单地在生产过程中才添加至系统。Warner看到了由于对机器学习的关注，对目前的安全领域产生了巨大影响，这种趋势最终会导致构建的系统会受一个自动的保护机制所保护。 云服务基础设施方面将会有工具和服务的增长，这些工具和服务将减少开发人员对基础设施的关注，开发人员能够更自由地专注于构建他们的产品和项目。这一过程将会与Warner所谓的“工作流战争（workflow war）”相关联： 随着大型科技公司开始收购那些专注于提升开发人员体验、解决基础设施问题以及构建更好的工作流工具的小型企业，企业的并购活动将会升温。 开源软件将在2018年继续发展，并将成为许多开发封闭源代码系统公司的重要竞争对手。据Warner所说，这一趋势在过去的10年中一直都很强劲...阅读全文
Linus Torvalds 于28日宣布发布 Linux 4.15 内核系列，第一个完全针对 Meltdown 和 Spectre 安全漏洞进行修补的版本。 Linux Kernel 4.15 进行了为期八周的开发，内核开发者花费大量时间重新设计了内核，并针对本月早些时候公开披露的两个安全漏洞熔断（Meltdown）和幽灵（Spectre）进行了修补。 Linux kernel 4.15 是第一个针对 Meltdown 和 Spectre 安全漏洞进行完全修补的内核系列，但是仅适用于 x86 和 PowerPC（PPC）体系结构。 如果您使用的是带有英特尔或 AMD 处理器的 GNU / Linux 发行版，那么仍有可能会遇到Meltdown 和 Spectre 恶意攻击。 该版本提供对...阅读全文
Go 官方刚刚发布了 Go 1.15.7 和 Go 1.14.14，以解决最近报告的安全问题。建议所有用户都更新到以下版本之一（如果不确定哪个版本，请选择 Go 1.15.7）。具体修复的安全问题如下：1、cmd/go：使用 cgo 的包可能会在构建时导致任意代码执行。当 Windows 上使用 cgo 时，go 命令可以在构建时执行任意代码。运行 “go get” 或任何其他构建代码的命令时，可能会发生这种情况。只有构建不受信任的代码（而不执行代码）的用户才会受到影响。除 Windows 用户外，这还可能影响在 PATH 中使用了 “.” 的 Unix 用户，在模块外部或禁用模块模式下运行 “go get”或构建命令。具体 issue：https://github.com/golang...阅读全文
公司使用的openstack的备份服务组件karbor，要查询所使用的备份nas磁盘使用率的需求，根据以前的查询语句，很快写出如下的prom sql 100-topk(1,node_filesystem_free{device=~":/.*"}*100/node_filesystem_size{device=~":/.*"}) 不久后，同事过来说给出的使用率不严谨，和在系统上通过df -h的命令不一样，分别是prom：10%，df结果是11%。嘴上说着差异不大不用管，身体却很实诚，马上去主机上通过df -h查看了使用率 :/var/lib/docker/nfs 147G 15G 125G 11% /var/lib/docker/volumes/volume-nfs/_data 通过prom...阅读全文
众所周知，在Java的知识体系中，并发编程是非常重要的一环，也是面试的必问题，一个好的Java程序员是必须对并发编程这块有所了解的。为了追求成为一个好的Java程序员，我决定从今天开始死磕Java的并发编程，尽量弥补自己在这方面的知识缺陷。 并发必须知道的概念 在深入学习并发编程之前，我们需要了解几个基本的概念。 同步和异步同步和异步用请求返回调用的方式来理解相对简单。 同步：可以理解为发出一个请求后，必须等待返回结果才能执行下面的操作。 异步：请求发出后，不需要等待返回结果，可以继续执行后续操作，异步请求更像是在另一个 “空间” 中处理请求的结果，这个过程不会影响请求方的其他操作。 举个生活中的例子，比如我们去实体店买衣服，挑选完款式后下单让售货员去仓库拿货，在售货员拿货的过程你需要在店...阅读全文
有用； · 在线GC（垃圾回收）- 现在 Harbor 可以清理从后端存储中已删除的镜像且在执行GC操作之前不再要求中断 Harbor 的运行。这对那些在 CI 构建流水线中使用Harbor而导致大量镜像垃圾碎片的用户来说是个福音； · 支持定制 Logger -允许用户为在 job 服务中运行的任务定制不同的 logger，支持STDOUT / STDERR / FILE / DB多种类型； · 优化Helm Chart库 - 持续优化 Helm Chart 管理体验，同时也修复了多个相关缺陷，包括： 通用搜索结果中包含 Helm Chart 的相关结果；支持给 Helm Chart 打标签；删除指定的 Helm Chart （删除指定 Chart 下所有的版本）； 再次感谢广大用户长期以...阅读全文
1. HDFS概述 Hadoop 分布式系统框架中，首要的基础功能就是文件系统，在 Hadoop 中使用 FileSystem 这个抽象类来表示我们的文件系统，这个抽象类下面有很多子实现类，究竟使用哪一种，需要看我们具体的实现类，在我们实际工作中，用到的最多的就是HDFS(分布式文件系统)以及LocalFileSystem(本地文件系统)了。 在现代的企业环境中，单机容量往往无法存储大量数据，需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统。 HDFS（Hadoop Distributed File System）是 Hadoop 项目的一个子项目。是 Hadoop 的核心组件之一， Hadoop 非常适于存储大型数据 (比如 TB 和 PB)，其就是使用 HDFS 作为存...阅读全文
定要配置重试要根据业务情况而定。也可以用同步发送的模式去发消息，当然acks不能设置为0，这样也能保证消息发送的有序。 kafka保证全链路消息顺序消费，需要从发送端开始，将所有有序消息发送到同一个分区，然后用一个消费者去消费，但是这种性能比较低，可以在消费者端接收到消息后将需要保证顺序消费的几条消费发到内存队列(可以搞多个)，一个内存队列开启一个线程顺序处理消息。 如果为了性能好，不允许所有消息只在同一个分区，同时又要保证顺序消费，那么可以给每条消息加一个下标，当消费者拿到消息后先不急着消费，而是先判断下标，然后根据下标以此进行消费； 2.1.4 消息积压 1）线上有时因为发送方发送消息速度过快，或者消费方处理消息过慢，可能会导致broker积压大量未消费消息。 此种情况如果积压了上百万未...阅读全文
使用 AWS Athena 对账单的数据导出做分析时，会得到6张表，请问这六张表的具体功能分别是什么？ 他们的表名分别是 account_map、cur2、 hourly_view、 resource_view、 ri_sp_mapping、 summary_view...阅读全文
的版本。为Debian编写的软件几乎总是有面向Ubuntu的版本，因为Ubuntu的程序包来自Debian的软件库。由于Debian的发布周期慢，Ubuntu的软件还通常比Debian的软件来得更新颖。不过其优点是，Debian往往更稳定，经过更全面的测试。 提醒一句：别想当然地以为共同的起源让两者程序包可以相互兼容；因为虽然许多程序包可以同时安装到Ubuntu和Debian上，但大约20%的Ubuntu程序包与Debian不兼容的可能性相当大，那是由于名称和文件位置不一样。 社区方面的区别 对于从事开发工作的用户来说，Ubuntu社区和Debian社区也是他在选择时需要考虑的一个因素。众所周知，Debian常常事无巨细地讨论一切，尤其是有争议的话题，甚至会进入集体表决的地步。 近些年来...阅读全文
) ReadFile(name string) ([]byte, error) 根据此也可以确定 embed 所打包进二进制文件的内容只允许读取，不允许变更。 更抽象来讲就是在编译期就确定了 embed 的内容，在运行时不允许修改，保证了一致性。 总结 通过 Go1.16 正式提供的 embed 特性，可以实现原生就支持静态资源文件的嵌入。整体如下： 在功能上：能够将静态资源嵌入二进制文件中，在运行时可以打开和读取相关的打包后的静态文件。在安全上：是在编译期编译嵌入，在运行时不支持修改。在使用上：支持单文件读取：go:embed hello.txt。支持多文件读取：go:embed hello1.txt、go:embed hello2.txt。支持目录读取：go:embed helloworld。支持贪婪匹配...阅读全文
Go 1.16 正式发布，该版本主要包括支持 macOS ARM64、工具链优化、运行时和库的实现优化。并且，该版本保留了Go 1兼容性的承诺，几乎所有 Go 程序都能像以前一样继续编译和运行。 部分更新内容： - Go 1.16 通过 GOOS=darwin，GOARCH=arm64 在macOS（也称为 Apple Silicon）上添加了对 64 位 ARM 架构的支持。与 darwin/amd64 一样，darwin/arm64 也支持 cgo、内部和外部链接、c-archive、c-shared 和 pie build 模式、竞争检测器 - Go 现在在 NetBSD（netbsd/arm64）上支持 64 位 ARM 体系架构 - Go 现在在 OpenBSD（openbsd...阅读全文
Endian），PPC64el（PowerPC 64位Little Endian）和s390x（IBM System z）。 Debian GNU/Linux 9.3 “Stretch”Live ISO已经可以下载了 另一方面，Debian GNU/Linux 9.3 “Stretch” Live ISO 仅适用于32位和64位计算机，并且带有KDE Plasma，GNOME，Xfce，LXDE，Cinnamon 和 MATE 桌面环境。应该注意的是，还可以下载一个多重（64位和32位）的 netinstall ISO 映像。 所有这些Debian GNU/Linux 9.3 “Stretch” ISO映像包含了自Debian GNU/Linux 9.2.1 “Stretch”以来通过官方软件库发布的...阅读全文
按计划，JDK 10 将于 3 月 20 日正式发布。据前 Oracle 员工 Simon Ritter 的统计，JDK 10 总共包含 109 项新特性。当然，在最终发布前，可能还会发生变化。 新特性中最重要的，是我们之前曾报道过的 12 个 JEP ： JEP 286: 局部变量的类型推断。该特性在社区讨论了很久并做了调查，可查看 JEP 286 调查结果。 JEP 296: 将 JDK 的多个代码仓库合并到一个储存库中。 JEP 304: 垃圾收集器接口。通过引入一个干净的垃圾收集器（GC）接口，改善不同垃圾收集器的源码隔离性。 JEP 307: 向 G1 引入并行 Full GC。 JEP 310: 应用类数据共享。为改善启动和占用空间，在现有的类数据共享（“CDS”）功能上再次拓...阅读全文
Cincoze 刚刚推出了面向嵌入式应用的全新紧凑型迷你工作站，除了采用至强 E 系列处理器，还支持自定义 I/O 扩展。从外形来看，Diamond Extreme 系列的 DX-1100 周身被硕大的散热片包围，但较小的体型，很适合空间受限的环境。处理器方面，客户可选英特尔八代酷睿、或至强 E-2100 系列 CPU 。 值得一提的是，DX-1100 工作站为办公室和工业环境提供了极其强大的连接选项，可定制 I/O 的功能相当受客户欢迎。 Cincoze DX-1100 采用了全金属机身，能够为容量 3.2L 的内部空间带来不错的被动式散热性能（TDP 80W 封顶）。 此外，主板上提供了 2 根 DDR4 SO-DIMM 内存插槽、2 个前端可访问的 2.5 英寸热插拔 SATA 托架...阅读全文
对 Docker 的使用大部分都比较熟悉，但是说到 docker 的实现原理很多人还是一知半解。我把在团队内部做的一次 Docker 核心原理分享总结到文章里，以供参考。 Docker 的优势 Build once, Run anywhere 上面这句话很精辟的总结了 docker 的优点。我从下面几点具体描述 docker 带给开发者的能力 应用标准化 无论什么语言开发的应用，我们都能用 dockerfile 和构建脚本方便的进行应用构建打包，代码库 + 构建 + registry 统一了 CI/CD 流程，也提升了效率。 环境一致 由于应用和依赖全部构建成镜像，做到了一次构建多次交付，无论是开发，测试还是上线环境都是一致的。大大提高了开发效率 应用隔离 由于通过 docker 部署的应...阅读全文
名称也是如此(开源项目的产品通常与项目共享名称，但有些项目会生产多个产品)。声明项目的品牌为商标，并考虑注册商标。制定商标使用指南，以便采用者知道如何使用此品牌。这是一个与开源软件基金会合作可以增值的领域。基金会可以代表社区持有和捍卫项目的商标。这可以避免任何特定的个人或组织劫持开源项目的名称。 13、管理知识产权和版权 为项目作出贡献的代码、文档和其他工件都是知识产权。谁是这些知识产权的拥有者呢?作者保留所有权还是指派给了另一个实体?确保所有的贡献者理解贡献者的权利和责任。考虑让贡献者签署开发者原产地证书(DCO)或贡献者许可证协议(CLA)。确保版权声明包含在源代码和通知中。 请注意，项目本身不可能作为持有版权的法律实体。这是另一个开源基金会可以提供有价值的服务的地方。 14、选择OSI...阅读全文
中的经典挑战是减少从运行 git clone 到在设备上执行二进制文件的时间。对于生产嵌入式项目，往往通常需要一整套工具。而 Pigweed 能够通过虚拟环境提供简化设置的工具，具体来说，Pigweed 的 pw_env_setup 模块中的引导脚本可设置当前的 shell 以访问一组标准化工具——包括 Python 3.8、clang 格式以及 ARM 编译器。所有这些都是在虚拟环境中完成的，因此无需修改系统的默认环境。 在典型的嵌入式开发中，即使添加很小的更改也需要一些额外的手动步骤。而 Pigweed 的 pw_watch 模块直接解决了这种效率低下的问题，它提供了一个监视者（watcher），该监视者可以在保存文件时自动调用构建，还可以运行受代码更改影响的特定测试。这大大缩短了更改的...阅读全文
Ryzen 9 3950X 系统上，任何版本的速度均未达到 OpenJDK 8 的速度。 结论： 当对所有执行的 Java 基准测试结果取几何平均值时，OpenJDK 8 毫无疑问是最快的 Java 版本。业界经常听到有关 OpenJDK 8 仍可提供最佳性能的消息，以及为什么英特尔的 Clear Linux 在有众多选择的情况下仍坚持该版本的原因。从本文的测试结果来看，这不足为奇。 好消息是，从这种几何意义上来看，OpenJDK 14 是经过测试的发行版中第二快的版本。与之前的版本相比，其领先优势虽然很小，但整体来看毕竟是在保持进步。...阅读全文
TiDB 3.1.0 GA 版本现已发布，该版本的更新集中在 Bug 修复。具体的更新有如下内容： 兼容性变化 TiDB支持 TiDB 在启动服务时，在开启 report-status 配置项情况下，如果发现 HTTP 监听端口不可用，则直接退出启动 #16291ToolsBackup & Restore (BR)BR 不支持在 3.1 GA 版本之前的 TiKV 集群上进行恢复 #233 新功能 TiDB支持在 explain format = "dot" 中展示 coprocessor 任务的信息 #16125通过 disable-error-stack 配置项减少日志的冗余 stack 信息 #16182Placement Driver (PD)优化热点 Region 调度...阅读全文
发现了一个开源项目，其中有一系列管理 NVMe 驱动器的工具。它被称为 nvme-cli。安装 nvme-cli你可以从你的发行版的包管理器中安装 nvme-cli。例如，在 Fedora、CentOS 或类似系统上：$ sudo dnf install nvme-cli在 Debian、Mint、Elementary 和类似系统上:$ sudo apt install nvme-cli探索 NVMe 驱动器在安装 nvme-cli 后，我想探索我的驱动器。nvme-cli 没有手册页，但你可以通过输入 nvme help 获得很多帮助：$ nvme helpnvme-1.14usage: nvme
当我们还在体验 Linux 5.5 稳定发行版带来更好的硬件支持时，Linux 5.6 已经来了。说实话，Linux 5.6 比 5.5 更令人兴奋。即使即将发布的 Ubuntu 20.04 LTS 发行版将自带 Linux 5.5，你也需要切实了解一下 Linux 5.6 内核为我们提供了什么。 我将在本文中重点介绍 Linux 5.6 发布版中值得期待的关键更改和功能： Linux 5.6 功能亮点 当 Linux 5.6 有新消息时，我会努力更新这份功能列表。但现在让我们先看一下当前已知的内容： 1、支持 WireGuard WireGuard 将被添加到 Linux 5.6，出于各种原因的考虑它可能将取代 OpenVPN。如果你使用过它，那你可能已经知道它比 OpenVPN 更好的...阅读全文
Alpine Linux 操作系统是由社区开发的，面向安全的轻型 Linux 发行版，它和其他常见的 Linux 发行版不同。Alpine 采用了 musl libc 和 busybox 以减小系统体积和运行时的资源消耗，功能上要比 busybox 完善的多，因此得到开源社区越来越多的青睐。 在保持瘦身的同时，Alpine 提供了自己的包管理工具 apk，可以在官方网站上查询包信息，也可以通过类似 apt 和 yum 的方式，在命令行查询或安装软件。 Alpine 支持广泛的场景，它特别为资深/重度Linux用户而优化，关注安全，性能和资源利用率，是一个优秀的可适用于生产环境的基础系统。 Alpine Docker 镜像继承了 Alpine Linux 发行版的这些优势。相比于其他...阅读全文
1确保提案所做的任何变更都可以帮助到尽可能多的 Go 开发者（使他们编写的代码更健壮、正确性更高等），条件2则保证了变更将给使用者带来的影响降到最低。 至于条件3，如果提案不能满足该条件，它将不会被实现。即便这项提案能够解决一个很重要的问题，思路也很好，但在没有实现方案的情况下，它将会被拒绝，并需要重新起草。 下一步 在这篇文章发布时，Go 开发团队表示已经执行提案评估流程的第一步，并开始了流程的第二步，关于具体的提案可点此进行查看。 对于 Go 开发团队已经明确并通过的提案，将会继续实现（即评估流程的第3步）。开发团队表示希望在下一个发布周期的第一天（暂定于2019年2月1日）完成这些提案变更的实现，所以这次可能会在较早的时间开始进行，以留出两个月的反馈时间（2018年12月至2019年1...阅读全文
本章将介绍如何在Apollo配置中心中删除已经发布的项目。 专栏目录： 携程 Apollo 配置中心 | 学习笔记 序章 欢迎关注个人公众号： Coder编程 欢迎关注个人网站：https://coder-programming.cn/ 一、前言 之前一直学习SpringCloud, 对于配置中心，一直也是采用的Spring Cloud Config,但是用久了，发现很多地方满足不了要求，同时也感觉很low(个人看法勿喷)。在学习Spring cloud config 的时候也有听到过携程的apollo，但一直没时间去弄。直到昨天看了一张图，如下：使我下定决心去看看携程的apollo配置中心。 这张图也算是综合对比了spring cloud config,netflix archaius...阅读全文
去年 5 月曾经写了一篇文章介绍了下 [Lex Fridman 大佬的日常生活安排](https://zhuanlan.zhihu.com/p/371254789) ，后续我也根据他的方法对自己的日常生活做了一系列规范和改进。这一年整体实行下来，效果还是非常显著的，本文的最后会对我的一些实践以及借助的工具做一些分享。...阅读全文
