你有没有想过为什么安装在你系统上的某个二进制文件或软件包没有按预期的那样来运行，或者说没有按正常的方式来运行，也许它根本就无法启动。 考虑到这是维护系统上未损坏软件包的一个重要因素，因而对照存储在软件包中的信息，验证文件系统上的文件是个重要步骤，为此需要阅读本文。 推荐阅读：《学会如何在Linux下生成MD5校验和并使用它来校验文件?》 如何对照MD5校验和校验已安装的Debian软件包? 在Debian/Ubuntu系统上，你可以使用debsums工具来校验已安装软件包的MD5和。如果你想在安装之前知道关于debsums软件包的信息，可以使用APT-CACHE，就像这样： $ apt-cache search debsums 下一步，使用apt命令来安装它，如下所示： $ sudo...阅读全文
正如体育界不成文的规定一样，这些规则基本上不会出现在官方文档和正式记录上。比如说，在棒球运动中，从比分领先时不要盗垒，到跑垒员跑了第一时也不要放弃四坏球保送。对于圈外人来讲，这些东西很难懂，甚至觉得没什么意义。但是对于那些想成为 MVP 的队员来说，这些都是理所当然的。 软件开发，特别是开源软件开发中，也有一套不成文的规定。和其它的团队运动一样，这些规定很大程度上决定了开源社区如何看待一名开发者，特别是新加入社区的开发者。 按部就班，循序渐进 在参与社区之前，比如开放源代码或者其它什么的，你需要做一些基本工作。对于有眼界的开源贡献者，这意味这你需要理解社区的目标，并学习应该从哪里起步。人人都想贡献源代码，但是只有少量的人做过准备，并且乐意、同时也有能力完成这项艰苦卓绝的工作：测试补丁、复审...阅读全文
的包组成了该分发版的基石，main 是像石头一样稳定的。因此他们要确保那里没有主要的功能或者安全问题。他们同样给予了不同的优先级，例如 Essential、Required、Important、Standard、Optional 和 Extra，详细介绍可参考这里。 这是必要的，因为 Debian 在很多环境中被用作服务器，人们已经变得依赖 Debian。他们同样看重升级周期是否有破环，因此他们寻找人们来测试，来查看当升级的时候是否有破坏并通知 Debian 这样的问题。 Debian 10 Buster 的新内容 这里是即将到来的 Debian Buster 主要发布版的一些变化。 新的主题和壁纸 Buster 的 Debian 主题被称为 FuturePrototype 并且看起来如下图...阅读全文
项来向 API 服务器添加自定义业务逻辑在对象创建的时候进行更改，以及验证策略。 对于联合的集群，引入了基于策略的联合资源放置（Policy-based Federated Resource Placement），处于alpha状态，其基于自定义的要求如规则、定价或者性能。 废弃： 第三方资源（Third Party Resource，TPR）已经被自定义资源定义（Custom Resource Definition，CRD）取代，后者的API更加简洁，并且解决了 TPR beta 测试时出现的问题和边缘场景。鼓励从 TPR 迁移到 CRD，因为Kubernetes 1.9中社区会去掉TRP。 上面就是 Kuberenetes 1.7 关键特性的一部分。完整的列表可以查看发布说明。 采用 感...阅读全文
脚本开头使用了#!/bin/sh而不是#!/bin/dash，从而自掘坟墓，损人害己。由此可见Ubuntu本身就不是一个严肃的产品，不适合作为操作系统使用。 只有让用户经常遇到麻烦，为Ubuntu提供服务的公司才能最大限度地赚钱。要多赚钱，不但要让每个用户多使用服务，还要扩大用户群。这就要从Windows世界不择手段地拉拢用户。 Ubuntu为了讨好Windows用户不惜东施效颦。作出了一些破坏*nix惯例的修改，例如学习Windows的Program Files目录，将不同软件装到各自的目录而不是分散在统一目录结构中，导致类似tkConfig失效等Ubuntu特有问题。 综上所述，Ubuntu完全就是一个用砸钱的办法耧取商业利益同时祸害自由软件社区的发行版。一般人无论是从自身利益还是从社会...阅读全文
，另有两个变种1.CLFS Sysroot 采用Sysroot的方法来进行编译，好处是软件包的编译次数可以减少，坏处是不能支持在编译后对软件进行测试，必须要启动到目标平台上才能测试。 2.CLFS Embedded 一般用于极小系统以及嵌入式系统。为此，它使用uclibc而不是一般LFS使用的glibc。 Automated Linux From Scratch（ALFS） 标准LFS只是一本书，用户需要根据书上的指引下载软件包并手动输入指令进行编译。ALFS子项目提供了把这一切自动化的脚本。 Hardened Linux From Scratch（HLFS） 这个子项目致力于打造在安全性上无懈可击的Linux系统。 Hints 收集一些解释性、增强性的文档，以协助用户 LiveCD 利用...阅读全文
Go 1规范还存在，他们的程序将可以继续编译并正确运行。现在，要设计的Go 2规范，存在破坏与1.x兼容的可能性。Cox认为需要谨慎选择新特性。 Go 2必须带动所有开发者[包括使用Go 1.x的开发者]。只有回报足够丰富，我们才能要求他们放弃旧有习惯，来学习Go 2的新特性。 Go 2还必须兼顾所有现有的Go 1源代码。 我们不能分裂Go生态系统。在混合型的项目中，用Go 2 写的包中导入了用Go 1写的包，或者相反的情况，这种情况必须要在多年的过渡期中正常运行。我们必须弄清楚如何做到这一点，自动化工具像go fix一定会发挥作用。 为了避免引起混乱，Google将新功能的数量限制为“两到三个”，一定不超过五个“，”每一个变化都需要仔细的思考，规划和工具化“。 这些功能不包括“允许使用更加口...阅读全文
Ubuntu 19.10 生命周期将在今年 7 月结束，之后一段时间内最大的版本则是 Ubuntu 20.04 LTS，其重大更新和改进将在 2030 年前终止。20.04 是 Ubuntu 的第 8 个 LTS 版本，计划于今年 4 月 23 日发布。前两天我们报导过 Ubuntu 20.04 LTS 的版本更新时间表，描述了各个时间节点的发布情况，今天来看看 20.04 会带来什么亮点。 首先是主题变化，Yaru 会有一个从亮到暗的主题变化可选，该主题下的复选框、单选按钮以及滑块和进度条等，都不再呈蓝色或绿色，而以紫色取代之。从绿色切换到紫色，整体上减少了纷杂的色彩，同时也不破坏 Ubuntu 本身的和谐。 其次，Ubuntu 社区的另一个期待已久的需求也将得到满足，系统将删除预装的...阅读全文
减少耦合的操作，需要通过提供类型需要的依赖项作为该类型上的字段，而不是使用包变量。 简单性很重要 简单性不是老练的代名词。简单并不意味着粗糙，它意味着可读性和可维护性。如果可以选择，请遵循较简单的解决方案。 编写测试以确认包 API 的行为 软件包的 API 是与使用者的一份合约，不管先后，不管多少，一定要进行测试。测试是确定合约的保证。要确保测试使用者可以观察和依赖的行为。 如果你认为速度缓慢，先通过基准测试进行验证 以性能之名会犯下许多危害可维护性的罪行。优化会破坏抽象、暴露内部和紧密耦合。如果要付出这样的代价，请确保有充分理由这样做。 节制是一种美德 适度使用 goroutine、通道、锁、接口与嵌套。...阅读全文
hash 分区表时指定非常大的分区数量导致 TiDB OOM 的问题 #16219让 union 语句的行为和 select 语句保持相同，修复把 warnings 当 error 的问题 #16138修复 TopN 下推到 mocktikv 中的执行错误 #16200增大 chunk.column.nullBitMap 的初始化长度，以避免多余的 runtime.growslice 开销 #16142TiKV修复 replica read 导致 TiKV panic 的问题 #7418 #7369修复 restore 产生许多空 Region 的问题 #7419修复重复的 resolve lock 请求可能会破坏悲观事务原子性的问题 #7389TiFlash修复从 TiDB 同步 schema...阅读全文
引入的新的仲裁控制器确保元数据在整个仲裁中可以被准确复制。活动控制器将元数据存储在事件源日志主题中，仲裁中的其他控制器对活动控制器创建的事件做出响应。事件日志定期进行快照，确保日志不会无限增长。与基于 ZooKeeper 的控制器不同，如果出现了问题，仲裁控制器不需要从 ZooKeeper 加载状态，因为集群的内部状态已经分布在元数据主题中。这大大减少了不可用时间窗口，缩短了系统最坏情况恢复时间。下图显示了使用新的仲裁控制器比使用 ZooKeeper 更快地关闭具有 200 万个分区的 Kafka 集群。新的 KRaft 共识算法和仲裁控制器使得 Kafka 集群可以扩展到数百万个分区，不仅提升了稳定性，让 Kafka 变得更容易监控、管理和支持，而且让整个系统可以有一个单一的安全模型，使...阅读全文
户，这样，你能最有效地得到问题的回答。 第一件需要明白的事：黑客喜欢艰巨的任务和激发思考的好问题。否则，我们也不会写这篇文章了。如果你有值得我们反复咀嚼玩味的好问题，我们自会对你感激不尽。好问题是激励和馈赠，帮助我们发展认知，揭示没有注意的问题。对于黑客，提供「好问题」就是热情而真诚的赞扬。 虽然如此，黑客在外却有坏名声：遇到简单问题就表现出鄙视或傲慢的姿态。有时，我们看起来还会对新手和愚蠢的人有条件反射般的无礼，但事实并不如此。 我们只是毫无歉意地鄙视那些提问前不愿思考、不做功课的人。这种人就象时间黑洞一样，只知道索取，不愿意付出，他们在浪费我们时间，而这些时间我们本可用于其它更有趣的问题或更值得回答的人身上。我们将这种人叫做 「loser」[4] （由于历史原因，我们有时将「loser...阅读全文
-address = 127.0.0.1”这句话在作祟。把地址绑定到了127.0.0.1上，因此远程无法访问到数据库，这里我们把它注释掉就可以了，或者你的服务器是指定ip的话就配置成你服务器的ip地址就可以了。 当然也有可能是你的mysql没有开启远程访问账户的权限，如果是这个原因，只需在mysql的user表里添加一条记录即可： grant all PRIVILEGES on thedb.* to user1@'%'identified by 'complex-password'; FLUSH PRIVILEGES; 然后重启一下mysql的服务： service mysql restart 3.安装PHP 使用apt工具安装： apt-get install php5-fpm php5-gd php5...阅读全文
HBM并不怎么热心，所以HBM降低成本的过程将是漫长的，对桌面级玩家来说DDR4很长一段时间内都不会过时，2020年左右会开始推DDR5内存，所以三五年内我们是看不到DDR内存被HBM干掉的可能的。...阅读全文
“隐藏”和“显示”。当对索引进行隐藏时，它不会被查询优化器所使用。我们可以使用这个特性用于性能调试，例如我们先隐藏一个索引，然后观察其对数据库的影响。如果数据库性能有所下降，说明这个索引是有用的，然后将其“恢复显示”即可；如果数据库性能看不出变化，说明这个索引是多余的，可以考虑删掉。 5. 降序索引：MySQL 8.0 为索引提供按降序方式进行排序的支持，在这种索引中的值也会按降序的方式进行排序。 6. 通用表表达式(Common Table Expressions CTE)：在复杂的查询中使用嵌入式表时，使用 CTE 使得查询语句更清晰。 7. UTF-8 编码：从 MySQL 8 开始，使用 utf8mb4 作为 MySQL 的默认字符集。 8. JSON：MySQL 8 大幅改进了对...阅读全文
GitHub 刚刚通过官方博客发布了 21 日“挂掉”的事件分析。GitHub 指出此次事件发生的原因是在 10 月 21 日 22:52 UTC 进行日常维护——更换发生故障的 100G 光学设备时导致美国东海岸网络中心与美国东海岸数据中心之间的连接断开。 更具体地，GitHub 分析，虽然两地的连接在 43 秒内恢复，但这次短暂的中断引发了一系列事件，这才导致了长达 24 小时 11 分钟的服务降级。 为了大规模提高性能，GitHub 的应用程序将直接写入每个群集的相关主数据库，但在绝大多数情况下将读取请求委派给副本服务器的子集。GitHub 使用 Orchestrator 来管理 MySQL 集群拓扑并处理自动故障转移，Orchestrator 在此过程中考虑了许多变量，并在...阅读全文
和强大性，更重要的是它的框架(MSF)。它允许使用者开发自己的漏洞脚本，从而进行测试。 之所以称为框架，因为 MSF 本身包含了很多漏洞攻击模块，由一群开发者在进行维护和更新，更重要的是几乎每个 CVE 漏洞都会被添加到 MSF 里，有人称之为是“可以黑掉整个宇宙”的渗透测试框架。 这个强大的框架日前已发布最新的 5.0 版本。这是 Metasploit 团队在过去一年中的工作成果。此外，该版本还是自2011年以来 Metasploit 的第一个主要版本。Metasploit 5.0 带来了许多新功能，以及新的发布周期。 其中官方特别提到 Metasploit 5.0 使用了新的数据库，并提供了一种新的数据服务。新版本引入了新的规避机制(evasion capabilities)，支持多项语...阅读全文
树莓派是一款旨在通过超实惠的方式，来鼓励孩子们投身编程事业的奇趣开发套件。不过这款主板只有信用卡大小的装置，已经在教育系统之外培养出了一大票粉丝，首年就卖掉了百万台。 今天，树莓派在官网上宣布了 Raspberry Pi 4 正式开售的消息。作为一款改变游戏规则的产品，其处理能力是前一代 Raspberry Pi 3+ 的三倍、多媒体性能为四倍。 树莓派的每一次迭代，都会引入一些新的卖点，比如 64 位处理器、802.11ac 双频 Wi-Fi、以及通过 HAT 的以太网供电（PoE）。 今天发布的树莓派 4，不仅在计算和多媒体性能上有所提升，还采用了运行频率为 1.5GHz 的四核 ARM Cortex-A72 处理器、千兆以太网、蓝牙 5.0、以及 USB 3.0 连接。 性能的提升...阅读全文
*.deb 放在 /var/cache/apt/archives 中。apt-get autoclean 只会删除 /var/cache/apt/archives 已经过期的deb。使用 apt-get clean 会将 /var/cache/apt/archives 的 所有 deb 删掉。 dpkg工具管理deb格式软件包 $ dpkg -l #列出所有安装的deb软件包 $ dpkg -l|grep nginx #查询nginx是否已安装 $ dpkg -s zip #查看软件包zip的状态和详细信息 $ dpkg -S openssh-server #查看软件包openssh-server包含的所有文件 $ dpkg -S /path/to/file #查看某文件对应的软件包名 $ sudo...阅读全文
这两天开源配置管理工具 saltstack 爆出了CVSS得分为10分的漏洞。如果你对CVSS的评分没有概念，那么前几年震惊互联网的 openssl心脏滴血漏洞，CVSS base评分是5.0，由此可知这次爆出来的 saltsatck 漏洞是多么严重。 漏洞信息： 该漏洞是 F-secure 研究人员在3月份发现的，目前该漏洞已经在最新版本中修复。本次极高危漏洞，是由两个不同的漏洞引起的，一个是身份验证绕过漏洞 CVE-2020-11651，一个是目录遍历漏洞没有过滤掉不受信任的输入 CVE-2020-11652，从而导致攻击者可以不受限制的访问 salt-master 的整个文件系统。 攻击者获取salt-master的权限后，便可以控制整个被salt-master管理的数据中心的各主机...阅读全文
{namespace} 这个方法简单粗暴有效。因为 Kubernetes 是声明式 API，所以删掉了之后，Pod API 对象就与预期的不一致了，便会自动重新创建 Pod 保持与预期一致。但是如果ReplicaSet 管理的 Pod 对象很多的话，那么要一个个手动删除，会很麻烦，所以可以使用命令来删除 ReplicaSet， kubectl delete replicaset {rs_name} -n {namespace} 由于 Deployment 对象并不是直接操控的 Pod 对象，而是操控的 ReplicaSet 对象，而 ReplicaSet 对象就是由副本数目的定义和Pod 模板组成，所以我们也可以通过调整 ReplicaSet 的数量来实现重启，比如先 scale 到 0，然后再 scale...阅读全文
block_usb.conf (也可能叫其他名字) ， $ sudo vim /etc/modprobe.d/block_usb.conf 然后将下行内容添加进去： install usb-storage /bin/true 最后保存文件并退出。 方法 2：删除 USB 驱动 这种方法要求我们将 USB 存储的驱动程序（usb_storage.ko）删掉或者移走，从而达到无法再访问 USB 存储设备的目的。 执行下面命令可以将驱动从它默认的位置移走： $ sudo mv /lib/modules/$(uname -r)/kernel/drivers/usb/storage/usb-storage.ko /home/user 现在在默认的位置上无法再找到驱动程序了，因此当 USB 存储器连接到系统上时也就无法加载到驱动...阅读全文
distroless 时有一些事项需要注意。当容器在运行时，如果你想要检查它，可以使用以下命令 attach 到正在运行的容器上： $ docker exec -ti docker_id_here bash attach 到正在运行的容器并运行 bash 命令就像是建立了一个 SSH 会话一样。但 distroless 版本是原始操作系统的精简版，没有了额外的二进制文件，所以容器里没有 shell！ 在没有 shell 的情况下，如何 attach 到正在运行的容器呢？答案是，你做不到。这既是个坏消息，也是个好消息。之所以说是坏消息，因为你只能在容器中执行二进制文件。你可以运行的唯一的二进制文件是 Node.js： $ docker exec -ti docker_id_here node 说它是个好消息，是...阅读全文
欢销售），很多人认为销售技能不可习得。 做销售的另一个秘诀是：重要的事情要亲力亲为。在刚开始创业时，我非常乐意出差办事，这在很多人看来是不必要的，但是事事亲力亲为却给我带来了三次职业生涯的转折点，如果当时没有选择这样做，我可能会走上另一条道路。 5 要有冒险精神 大多数人往往都高估了风险低估了回报。冒险对我们来说也很重要，因为人不可能永远不犯错，我们需要不断试错，学习并快速适应。 在职业生涯早期，人们往往更愿意冒险，因为那时你没有什么可失去的东西，但却可能得到很多。一旦一个人履行了自己的基本责任义务，就可以开始大胆冒险了。我们可以先下小的赌注，如果赌输了会输掉1倍，但如果成功了，则可以赚到100倍。之后我们再沿着这个方向下更大的赌注。 但是要注意不能一直待在舒适圈。在YC，我们从谷歌和脸书长...阅读全文
包列表是最新的。apt-get install packagename——安装一个新软件包（参见下文的 aptitude ）apt-get remove packagename——卸载一个已安装的软件包（保留配置文件）apt-get –purge remove packagename——卸载一个已安装的软件包（删除配置文件）dpkg –force-all –purge packagename 有些软件很难卸载，而且还阻止了别的软件的应用 ，就可以用这个，不过有点冒险。apt-get autoclean apt会把已装或已卸的软件都备份在硬盘上，所以如果需要空间 的话，可以让这个命令来删除你已经删掉的软件apt-get clean 这个命令会把安装的软件的备份也删除，不过这样不会影响软件的使用...阅读全文
态。这时，虽然 Java 能够对外提供服务，但服务质量较差，如果该阶段的用户并发较高，那么就会造成服务质量降级乃至服务崩溃。 为了优化这一过程，通常的工业实践会在 Java 启动后引入 " 预热 "(warmup) 步骤，通过人为导入数据来让应用提前加热。在预热完成之前，用户请求通过网络控制不让它发送到 Java 进程，在预热完成之后才打开流量限制让 Java 真正提供服务。这个做法可以部分缓解上述问题，但是该方案在很多场景下会有一些局限性，在很多情况下，获取一份高质量的预热数据是很困难的。而预热数据的正确性直接影响预热效果，与实际情况相符的数据可以提高编译质量，如果不一致，有时反而会造成反面效果，比如一种常见的情况是预热时漏掉重要方法调用。更糟糕的情况是由于和实际情况不一致，导致 JVM...阅读全文
签名的证书。 我习惯把视图调整为目录视图。 左上角有个下拉框，Folder View. 这里系统是安装完了，但是还需要一些配置. 设置网络Datacenter - Nodes - node System - Network 现在服务器是通过具体的硬件网卡来获取 IP 地址接入互联网。 如图: 但是我们需要新建一个桥接网卡，VM 会通过这个桥接网卡来配置 IP 地址，类比桌面环境下用 VMWare 开虚拟机，通过桥接上网之类的。 这里需要先删掉 Network Device 上面的 IP 地址，因为 IP 地址不能同时分配到两张网卡上，所以记下你的 IP 地址和网关，当然，你的服务器后台也应该有这些。 那么，问题来了，删掉后，IP 地址没有配置到网卡上，我们是不是无法访问到这台服务器了呢？会立...阅读全文
DevOps流程中去以确保合规。对于需要快速推进的DevOps世界来说，将安全放在首位是一种挑战。但是，如果没有这么做，2017年可能会出现由于DevOps推进导致的重要数据泄漏。 Harrison说，“我们可能会看见重大漏洞溯源后和DevOps的使用有关，这将会促成DevOps和安全团队成为亲密伙伴。” 更多自动化代码 上一年，公司开始引入自动化工具以减少为应用程序中寻找缺陷代码的冗长工作。2017年对于开发者会有更多的自动化工具。GitLab产品副总裁Job van der Voort认为，这不是一件坏事，因为自动化将会围绕着代码测试、数据聚合和格式化、报表和通知展开。 他提到，“由于当前的新硬件和技术（如GPU和并行计算），通过机器学习的自动化编码将比以往更加流行。” 感谢朱昊冰对本文的审校...阅读全文
因。也有其他人认为，systemd的日志记录并不是很好，二进制日志被很多人所诟病，虽然systemd提供了更快的索引，但二进制日志本身就有问题，而且systemd的日志损坏也不是第一次发生了。而且systemd真正令人反感的是设计不够灵活，对很多人而言，systemd阻止了他们的选择自由，考虑到kFreeBSD分支的软件源无法纳入systemd，为与其他分支保持一致，Debian的开发者尽力避免纳入systemd。但Lennart Poettering本人对此并不在意，并称“Debian GNU/kFreeBSD不过是玩具系统”。 systemd目前还处于中间发展阶段，那些想要超级安全或超级小或超快速系统的人都不适合使用。事实的真相是，systemd的很多反对者并不真正关心“底层”，只是抱怨...阅读全文
60k 服务器可以被利用，并且这些服务器往往拥有较高的带宽资源。 基于以上特点，作者认为该攻击方式可以被利用来发起大规模的DDoS攻击，某些小型攻击团队也可能因此获得原先没有的大流量攻击能力。 在 DDoSMon 上观察到的现网趋势 自批露以来，我们就一直利用 DDoSMon 的统计页面 持续监控Memcache DRDoS在实际现网中的情况。在过去的几个月中，这种类型攻击的频率和单次破坏性都不大，但是自2018-02-24开始，这种情况发生了较大变化。 近期，Memcache DRDoS 的攻击频率上升到了平时的10+倍，从每天小于50件，上升到每天300~400件，直到今天的1484件（实际上，离今天结束还有1个小时），如下图所示。 需要指出，当前 Memcache DRDoS 仍然还不是...阅读全文
Java 架构师是什么？是一个既需要掌控整体又需要洞悉局部瓶颈并依据具体的业务场景给出解决方案的团队领导型人物。一个架构师得需要足够的想像力,能把各种目标需求进行不同维度的扩展，为目标客户提供更为全面的需求清单。 所谓架构师，思考的是全局的东西，是如何组织你的系统，以达到业务要求，性能要求，具备可扩展性（scalability），可拓展性（extendability），前后兼容性等。可能涉及到的东西包括了从硬件到软件的方方面面。 架构师在软件开发的整个过程中起着很重要的作用。 架构师的主要任务不是从事具体的软件程序的编写，而是从事更高层次的开发构架工作。他必须对开发技术非常了解，并且需要有良好的组织管理能力。可以这样说，一个架构师工作的好坏决定了整个软件开发项目的成败。 在成为Java架构...阅读全文
ExpiringCache 缓存策略扩展 Bug修复及优化 负载均衡策略优化，包括 ConsitentHash(#2190) 、LeastActive(#2171)、Random(#2597) 、RoundRobin(#2586) (#2650)升级第三方依赖：默认通信框架为 netty 4、默认 ZK 客户端为 Curator、Jetty 9k增加地址读取时对 IPV6 的支持 (#2079)性能优化，链接关闭的情况下使得 Consumer 快速返回 (#2185)修复 Jdk 原生类型在 kryo 中的序列化问题 (#2178)修复 Provider 端反序列化失败后，没有及早通知 Consumer 端的问题 (#1903) 升级与兼容性 此次版本发布我们遵循了保持和老版本兼容的原则，尤其是在一些可能会破坏...阅读全文
=> os.ReadFileTempDir => os.MkdirTempTempFile => os.CreateTempWriteFile => os.WriteFile 与此同时大家也不需要担心存在破坏性变更，因为有 Go1 兼容性的保证，在 Go1 中 io/ioutil 还会存在，只变更内部的方法调用： func ReadAll(r io.Reader) ([]byte, error) { return io.ReadAll(r) } func ReadFile(filename string) ([]byte, error) { return os.ReadFile(filename) } 大家在后续也可以改改调用习惯。 支持静态资源嵌入 如果我们希望把静态文件编译进 Go 的二进制文件的话，在以往需要借助 go...阅读全文
前发了推文： JDK 11 版本包括 JEP 320（移除 Java EE 和 CORBA 模块），因此它们体积更小：减少了 9 个模块，文件大小少了 22 MB。 JEP-320：移除 Java EE 和 CORBA 模块 Java SE 9 的重组包括对 Java EE 和 CORBA 模块的支持，但根据 JEP-277，它们立即遭到弃用，并在未来版本中移除掉。 Java EE 模块是自 Java SE 6 发布以来在 JDK 中提供的 Web 服务栈，以方便 Java 开发人员： JSR-224：基于 XML 的 Web 服务 Java API（JAX-WS） JSR-222：用于 XML 绑定的 Java 架构（JAXB） JSR-925：JavaBeans 激活框架（JAF...阅读全文
出现的原因，又是谁在何时报告了某个功能缺陷等等。 使用版本控制系统通常还意味着，就算你乱来一气把整个项目中的文件改的改删的删，你也照样可以轻松恢复到原先的样子。 但额外增加的工作量却微乎其微。 1.1.1集中化的版本控制系统，代表Svn 缺点： 1、依赖中央服务器。 如果宕机一小时，那么在这一小时内，谁都无法提交更新，也就无法协同工作。 2、如果中心数据库所在的磁盘发生损坏，又没有做恰当备份，将丢失所有数据——包括项目的整个变更历史，只剩下人们在各自机器上保留的单独快照。 3、整个项目的历史记录被保存在单一位置，就有丢失所有历史更新记录的风险 4、必须联网才能工作，如果在局域网还可以，带宽够大，速度够快，如果在互联网下，如果网速慢的话，效率就很低了。 1.1.2分布式版本控制系统，代表Git...阅读全文
，可能是先从RSS数据源中抓取文章的内 容，然后将其丢入一个叫做“文章”的topic中；后续操作可能是需要对这个内容进行清理，比如回复正常数据或者删除重复数据，最后再将内容匹配的结果返 还给用户。这就在一个独立的topic之外，产生了一系列的实时数据处理的流程。 日志聚合:使用Kafka代替日志聚合（log aggregation）。日志聚合一般来说是从服务器上收集日志文件，然后放到一个集中的位置（文件服务器或HDFS）进行处理。然而Kafka忽略掉 文件的细节，将其更清晰地抽象成一个个日志或事件的消息流。这就让Kafka处理过程延迟更低，更容易支持多数据源和分布式数据处理。比起以日志为中心的 系统比如Scribe或者Flume来说，Kafka提供同样高效的性能和因为复制导致的更高的耐用性保证...阅读全文
启动后向namenode注册，通过后，周期性（1小时）的向namenode上报所有的块信息。(dfs.blockreport.intervalMsec)。 心跳是每3秒一次，心跳返回结果带有namenode给该datanode的命令如复制块数据到另一台机器，或删除某个数据块。如果超过10分钟没有收到某个datanode的心跳，则认为该节点不可用。 集群运行中可以安全加入和退出一些机器。 数据完整性 当DataNode读取block的时候，它会计算checksum。 如果计算后的checksum，与block创建时值不一样，说明block已经损坏。 client读取其他DataNode上的block。 datanode在其文件创建后周期验证checksum。 掉线时限参数设置 datanode...阅读全文
您应该知道如何在一个新鲜的Linux服务器上执行的最基本的任务之一是添加和删除用户。当您创建一个新的系统，你往往只能给出默认root帐户。 虽然运行在root用户提供了大量的功能和灵活性，这也是危险的，可能是破坏性的。添加一个额外的，无特权的用户来执行常见任务几乎总是一个更好的主意。然后，您应为系统上可能有的任何其他用户创建其他帐户。 您仍然可以获取管理员权限，当你需要他们通过一个名为机制sudo 。 在本教程中，您将学习如何创建用户帐户，分配sudo特权，和删除用户。 如何添加用户 如果您作为root用户登录，您可以创建在通过键入任何时候一个新的用户： adduser sammy 如果要在谁被赋予了非root用户登录， sudo特权，因为在证明初始服务器设置向导 ，您可以添加通过键入新用...阅读全文
，Aptitude也很有用。实用的功能特性包括why命令和why-not命令，前者显示依赖某软件包的其他软件包，后者显示什么软件包与某个指定软件包冲突。此外，Resolver菜单列出了可能解决破损软件包的方法，从破坏性最小的那种方法开始。 6. apt-cache apt-cache搜索已安装软件包数据库，寻找信息。它能显示关于单个软件包、依赖项和冲突等方面的信息，以及其他众多信息。 一个特别有用的命令是apt-cache search，它可搜索数据库中的文本字符串。使用这个命令，你就能找到软件包的具体名称，那样可以安装它，还可以找到想要安装的相关软件包。在Debian中，它必不可少，所以默认情况下已安装。 5. dpkg-reconfigure dpkg-reconfigure可改变安装软件包的方法。比如...阅读全文
普通人来说,也没有那么可怕。一般人平均每天的写入量很少能超过10GB，那么我们就假设是10GB，120GB QLC SSD，写入寿命达到120 TB。假设写入放大系数则假定为3，甚至5，那么三年之内，很难写坏它。且QLC闪存拥有高容量，也意味着其在QLC驱动器中可通过超额配置以延长产品本身的有效寿命。 目前TLC SSD在质保期普遍达到3年，有的质保期甚至达到5年。那么QLC 寿命问题又有什么好担心？ 2、稳定性 QLC闪存是存储4位电荷，有16种状态，而TLC存储3位电荷，有8种状态 。这意味着QLC闪存单位存储密度更大，是TLC的2倍，单颗芯片可达到256GB甚至512GB。但是，也因如此，QLC闪存的电压更难控制，干扰更复杂，而这些问题都会影响QLC闪存的性能、可靠性及稳定性。不过...阅读全文
写代码并通过自动化脚本来测试各种案例的测试人员的需求将大幅增长。如果你是测试人员并且在是否学习编码方面处于两难境地，我们建议你还是学习编码吧。了解不同的 DevOps 工具和自动化脚本在当今的软件开发中起着至关重要的作用，并且将在 2019 年占据主导地位。 如果测试人员不学习编写代码和自动化测试脚本，就有可能被淘汰。手动测试将在 2019 年过时，因为它们需要耗费大量的时间。测试自动化不仅可以提高效率，还可以确保更快地将功能交付给市场。 微服务架构采用率增加 DevOps 和微服务将齐头并进。微服务是独立的实体，因此在出现问题时不会给其他系统造成破坏。微服务架构可以帮助公司轻松部署和添加新功能。预计更多的企业将会转向微服务架构，以改进他们的在线运行时间和有效交付。不要只是因为别人采用了微服...阅读全文
岗回了成都，成都是个远离核心的待发展的技术部，当时人就 20，30 号人吧。 回去后，由于原来是在杭州负责核心 A1 系统，大家都还挺羡慕，都还挺给面子的。所以，变得越来越自信。 当你自信后，同样你会越来越勇敢，越来越开放。当时，也看了些敏捷的书，虽然从来没有完整的看完一本敏捷的书，现在我对敏捷也是半懂不懂，依然很讨厌职业的咨询师，喊喊口号，比如 TDD，说实话，我就很难看到 TDD 的模式，在如此复杂的业务系统成功过。 当时对于敏捷最深刻的一点就是：反馈环。怎么去利用反馈坏不断是提升自己，自己缩短反馈坏，让自己成长的更快。 回成都后，我变得更为开放，这种开放，让我收获更多，在交流，不断的学**中，成长更快。从一个基本是完成任务型的技术人员，渐渐去思考更全局，更开放性的内容。 成都远离核心...阅读全文
。 现在，核心互联网协议的重要改变已经开始了。虽然它们意图与互联网大部分兼容（因为，如果不兼容的话，它们不会被采纳），但是它们可能会破坏那些在协议中没有规定的地方，或者根本就假设那些地方不存在变化。 为什么我们需要去改变互联网 有大量的因素推动这些变化。 首先，核心互联网协议的局限性越来越明显，尤其是考虑到性能的时候。由于在应用和传输协议方面的结构性问题，网络没有得到高效使用，导致终端用户认为性能不能满足要求（特别是，网络延迟）。 这就意味着人们有强烈的动机来演进或者替换这些协议，因为有 大量的经验表明，即便是很小的性能改善也会产生影响。 其次，演进互联网协议的能力 —— 无论在任何层面上 —— 会随着时间的推移变得更加困难，这主要是因为上面所讨论的对网络的非预期使用。例如，尝试去压缩响应的...阅读全文
有一个“填充因子（padding factor）”，为文档增长提供空间。 你也许会想，你可以通过不建立数组索引来绕开这个问题。遗憾的是，没有索引，你会遇到其他问题。因为文档会从头到尾扫描，找到一个接近数组尾部的元素需要花更多的时间， 大部分处理这个文档的操作都会变慢 。 忘记聚合情况下的阶段排序 在有查询优化器的数据库系统中，你编写的查询是说明你想要什么而不是如何获取它。这就像在餐馆中点餐；你通常只需要点菜，而不必对厨师发出详细的指令。 在 MongoDB 中，你是对厨师发指令。例如，你需要通过$match 和$project 确保管道中的数据尽早减少，排序只在数据减少时发生一次，查找按照你希望的顺序执行。查询优化器省去了不必要的工作，优化阶段顺序，选择连接类型，这会把你宠坏。MongoDB...阅读全文
。 pipeline 在图片的中部，有两个小企鹅扛着管道（PipeLine）在行走，一只小企鹅可以把自己手上的东西通过这个管道，传递给后面的小企鹅。不过怎么看起来前面这种（男？）企鹅累得满头大汗，而后面那只（女？）企鹅似乎游刃有余——喂喂，前面那个，裤子快掉了~ Wine 在这一层还有另外的一个小企鹅，它手上拿着一杯红酒，身上写着 411，看起来有点不胜酒力。它就是红酒（Wine）小企鹅,它可以干（执行）一些来自 Windows 的任务。 跃层 在一层之上，还有一个跃层，这里有很多不同的屏幕，每个屏幕上写着 TTY（这就是对外的终端）。比如说最左边 tty4 上输入了“fre”——这是想输入“freshmeat...”么 ：d ；它旁边的 tty2 和 tty3 就正常多了，看起来是比较正常的命令；tty7...阅读全文
是纯净安装，那肯定是纯净为首了，对于软件包流行度调查，不参加即可。 不扫描其他DVD，不使用网络镜像。 我为了速度快所以用DVD-1完整镜像做了教程，如果是网络安装镜像的话不会有下面这个提示，对于网络镜像站点也选择不使用就行了。 如果非要选择，在Asia的China中选ftp.cn.debian.org。 选择软件包进行安装，当然是全不选，需要的后面会手动安装，在这里安装的桌面环境话会连接安全服务器更新内核，那速度真等着哭吧。 安装完成后就是配置Grub了，如果你不想用Grub替换MBR，就选手动输入。 然后输入你前面配置的挂载根目录/的文件系统，像我前面用的是/sda1，这里就输入/dev/sda1。 安装完成后，拔掉启动U盘，直接点继续。 开机后进入Grub引导界面，如果没有替换MBR的...阅读全文
。 关于 Kotlin/Native 说了这么多，Kotlin/Native 到底是什么？Kotlin/Native 能将 Kotlin 编译成机器码，目前还处于技术预览版阶段，离商用估计还需要至少一年的时间。 Kotlin/Native 不是 Jni 的概念，它不仅仅是要与底层代码比如 C、C++ 交互，而且还要绕过 JVM 直接编译成机器码供系统运行。这说明了什么？Kotlin 准备扔掉 Java 这根拐杖了。 第一次看到 Native 这个名字或许会很自然地想到 Jni，Kotlin 跑在 JVM 上面，使用 Jni 与底层代码交互。不过详细深入研究后可以发现，Kotlin 开发团队的野心不可小觑，Java 诞生这么多年，也没有涉足过编译成除 Java 虚拟机字节码以外的字节码的事情...阅读全文
pam_google_authenticator.so 此外，我们还需要注释掉这一行 "@include common-auth”，这样 PAM 就不会提示输入密码，修改后如下： # Standard Un*x authentication. # @include common-auth 接下来，我们需要编辑 SSH 服务器配置文件： vim /etc/ssh/sshd_config 改变 ChallengeResponseAuthentication 的值为 yes，以便我们启用键盘交互的认证方式： ChallengeResponseAuthentication yes 接下来，添加以下代码行来启用两个身份验证方案：SSH 密钥和谷歌认证器（需要键盘交互）： AuthenticationMethods "publickey,keyboard...阅读全文
（border gateway protocol）是外部路由协议（边界网关路由协议），用来在AS之间传递路由信息是一种增强的距离矢量路由协议（应用场景），基本功能是在自治系统间自动交换无环路的路由信息，通过交换带有自治系统号序列属性的路径可达信息，来构造自治系统的拓扑图，从而消除路由环路并实施用户配置的路由策略。（边界网关协议(BGP)，提供自治系统之间无环路的路由信息交换（无环路保证主要通过其AS-PATH实现），BGP是基于策略的路由协议，其策略通过丰富的路径属性(attributes)进行控制。BGP工作在应用层，在传输层采用可靠的TCP作为传输协议（BGP传输路由的邻居关系建立在可靠的TCP会话的基础之上）。在路径传输方式上，BGP类似于距离矢量路由协议。而BGP路由的好坏不是基于距离（多数路由...阅读全文
硬件本身存在的问题，例如静默数据损坏。事实上，通过使用Btrfs我们发现了一些较为严重的硬件bug，这对Btrfs来说也是一个利好。 Linux.com：刚才我们聊了Facebook使用Linux的情况，我比较好奇您怎么看待和使用原生内核，毕竟大家都是根据实际生产环境的需求来fork一个内核的分支，鲜有人使用原生版本？ Chris Mason：从Linux的角度来看，我们的主要目标是尽可能和原生内核保持一致——我们的目标是至少每年升级一次内核，我们还试图进一步缩短这个更新周期。我们有一个上游优先策略，在使用一个主线更新之前我们要先了解它。如果我们想添加一个特性到Linux内核中，我们首先会把它合并到内核的主线更新中。 Linux.com：那为什么还需要fork一个自己的版本？ Chris...阅读全文
