GNU nano 5.0 已正式发布，代号 ”Among the fields of barley”。 GNU nano 是 Unix 和类 Unix 系统中，非常流行的一个文本编辑器，也是 Pico 的复制品，旨在成为一个类似 Pico 的全功能但又易于使用的编辑器。在多个主流 Linux 发行版中，nano 做为默认的编辑器出现。 下载地址：https://www.nano-editor.org/download.php 与 Nano 4.x 系列相比，5.0 在编辑体验方面进行了许多改进。其中值得关注的更新亮点包括： -indicator 选项可用于在屏幕右侧提供一个 “滚动条”，以指示视口(viewport)/文本在缓冲区的大约位置执行命令提示符现在可以直接从主菜单中访问对于支持至...阅读全文
，IETF QUIC "在TCP上明显优于TLS 1.3的HTTPS"。例如，谷歌搜索延迟降低了2%，而YouTube的重新缓冲时间减少了9%。 因此，该公司在其浏览器中启用了对IETF QUIC的支持，不少于25%的用户从今天起会自动启用。根据谷歌的说法，本次实现是基于29号草案，这不是最新的版本，但在后续的草案中没有突破性的变化。谷歌还没有添加的是对IETF QUIC 0-RTT的支持，它将在以后出现，这将带来更好的性能。 HTTP/3还没有最终确定，目前还不清楚浏览器何时能有一个完全最终确定的实现。...阅读全文
的最终设计目标是10Tbpsi。 另外，西部数据日前宣布了MAMR“微波辅助磁记录”(microwave-assisted magnetic recording)硬盘，与HAMR的区别在于利用微波取代HAMR里的激光来作为辅助媒介，2019年出货，号称密度高达4Tb。 希捷再次强调了时间节点，2018年试产并展示16TB HAMR硬盘、2019年大规模量产20TB以上的机械硬盘，2023年把容量提升到40TB以上，2030年推出100TB。...阅读全文
SK海力士今天正式发布了最新款的企业级SSD PE8000系列，包括PE8010、PE8030、PE8111三款型号，这也是其首款PCIe 4.0 SSD，无论存储密度、容量还是性能都是世界一流的，甚至是超一流的。 PE8010、PE8030都配备了SK海力士自产的96层堆叠4D TLC NAND闪存颗粒，搭配自研主控，最大容量8TB，兼容U.2、U.3接口，其中PE8010面向读取密集型应用，PE8030则为读写混合应用而优化。 性能方面，持续读写速度最高均可达8.3GB/s、3.7GB/s，随机读写速度最高则可达1100K IOPS、320K IOPS。 相比于去年的上代产品，持续读取性能提升103％，随机写入性能提升357％，另外最大功耗为17W。 PE8111则是针对读取密集型负载...阅读全文
在安装 Debian 10 的时候提示没有iwlwifi驱动，因为当时没有安装有 iwlwifi 的驱动盘，跳过后开机发现没有 wifi。这里我们将介绍，有线网正常的状态下，如何下载安装 iwlwifi 驱动，并开启 wifi 。 因为我用的是 Intel Wireless-N 的无线网卡，所以本教程以 Intel Wireless-N 为例说明。如果你使用的是其他厂商的无线网卡，请参考 Debian wiki，查找相应的配置方法。如果不确定无线网卡的型号，可以通过命令 lspci 查询，或者在 dmesg 的命令输出中找到线索。 更新安装源 我们需要添加 non-free 的安装源，到系统中，更新 /etc/apt/sources.list，添加以下记录： deb http...阅读全文
于更好的机器学习和数字信号处理。在安全方面，armv9 会获得 Arm Confidential Compute Architecture (CCA)，在使用时屏蔽数据的访问，在硬件层面保护数据。此外，还会有一个叫做 Realms 的东西，应用程序可以在安全和非安全区域之外使用。ARM 并没有透露首款基于 armv9 的新芯片何时会发布，不过可以肯定的是还需要再等待一段时间。...阅读全文
运作开源项目很容易。所有你需要做的就是让你的源代码可用和开源，对吧?嗯，也许。其实，开源项目是否成功取决于你对项目成功的定义。且不论你是怎么定义的，创建开源项目需要大量的工作。如果你已经有了目标，那么你需要准备投资。虽然开源软件是免费的，但它的创作却不是免费的：你需要往项目中投入时间和精力等宝贵资源。 那么，你如何投资这些资源? 1、定义成功 在考虑运作开源项目之前，你需要明确定义成功的意义。这里有很多因素要考虑。只将代码放入可公开访问的存储库就可以了，还是说你想对你的项目做更多?合作与采用对你来说重要吗?你只是为了打造作为一名软件开发者的声誉吗?你对成功的定义是否包括长期的可行性?你想围绕这个项目发展一个社区吗?你关心商业采用吗?你对这些问题的回答可以帮助你确定接下来你需要采纳的建议有多...阅读全文
Facebook 高速发展的 2007 年到 2016 年，他们一天部署 3 次代码，cherry-pick 集齐成千上万个 commit；现在使用类似持续交付的方法，每个 commit 能自动部署到 production。公司里有很多员工、很多用户的好处：新代码让公司所有员工先用上，因为员工数足够多，能很快发现问题；然后让 2% 的访问量用上新代码，最后慢慢增加到 100% 的访问量。 不久前有篇关于缩短 Facebook 发布流程的文章，阐述了将代码投入生产的灵活方法。这篇文章着重讲述了他们在一年之内如何从“ cherry-picking ”升级到“ push-from-master ”策略。早些时候， Facebook 也分享了他们部署过程的细节。作者 Chuck Rossi 是...阅读全文
发行版）。该版本引入了一系列新功能，包括对多平台项目的实验性支持 —— 允许开发者在针对 JVM 和 JavaScript 的模块之间共享代码，以及多项对语言方面的改进 —— 包括支持在注释中使用数组字面量。更多关于 1.2 版本新功能的内容，点此查看。 此外，值得关注的就是协程这个特性了。虽然协程仍然被标记为实验性状态，但官方特意说明了这里“实验性”代表的含义。官方表示协程已经完全准备好用于生产环境，他们也已使用协程进行开发，而且也没发现在使用当中出现任何重大问题。之所以仍保持实验性状态，是为了能够对 Kotlin 继续进行设计迭代。根据目前的计划，Kotlin 1.3 将会删除协程的实验性状态。 Kotlin/Native 对 iOS 开发的支持 另外一个重大消息就是 Kotlin...阅读全文
在2018年的 Linux Plumber 大会上，eBPF成了亮点，有24个议题提到了 eBPF，可以预计eBPF会成为一大技术热点。 eBPF(Extended Berkeley Packet Filter) 的核心是驻留在 kernel 的高效虚拟机。最初的目的是高效网络过滤框架，前身是 BPF。 Linux kernel 3.18版本开始包含了eBPF，相对于 BPF 做了一些重要改进，首先是效率，这要归功于 JIB 编译 eBPF 代码；其次是应用范围，从网络报文扩展到一般事件处理；最后不再使用socket，使用map进行高效的数据存储。 根据以上的改进，内核开发人员在不到两年半的事件，做出了包括网络监控、限速和系统监控。目前eBPF可以分解为三个过程： 以字节码的形式创建...阅读全文
3月27日，华为开发者大会2020以线上形式举行，华为云与计算BG总裁侯金龙在主题演讲中发布openEuler系商业发行版操作系统，首批参与的操作系统包括银河麒麟服务器操作系统V7.6，普华服务器操作系统V5.1（鲲鹏版）、深度欧拉V1.0以及傲徕服务器操作系统1.0。 IT之家此前报道过，今年1月份，openEuler开源社区（以下简称openEuler社区）正式开放源代码、镜像及开发测试环境，标志着openEuler社区开放运作迈出了坚实一步。作为主要筹备方，华为会逐步开放在ICT基础软件领域的技术积累，将操作系统、编译器/JDK等领域的基础平台能力开源至openEuler社区。 在openEuler社区，社区参与者可下载操作系统安装镜像或源代码，快速了解并掌握openEuler操作系...阅读全文
-proxy/cloaking-rules.txt 这个文件，在后面添加你的DNS，例如：# my customized dns www.one-domain.com x.x.x.x *.your-domain.com x.x.x.x其实我想要方案是匹配域名，然后把这些域名的DNS指向另一个DNS，这样会方便些，不过似乎 dnscrypt-proxy 还不支持。还有一个方案就是把 fallback_resolver 改成公司所提供的DNS。更多文章socketserver 源码阅读与分析functools 源码阅读与分析contextlib代码阅读Collections 源码阅读与分析Redis通信协议阅读2016年就要结束了，2017年就要开始啦！unittest 源代码阅读APUEv3 - 重读笔...阅读全文
Go 官方刚刚发布了 Go 1.15.7 和 Go 1.14.14，以解决最近报告的安全问题。建议所有用户都更新到以下版本之一（如果不确定哪个版本，请选择 Go 1.15.7）。具体修复的安全问题如下：1、cmd/go：使用 cgo 的包可能会在构建时导致任意代码执行。当 Windows 上使用 cgo 时，go 命令可以在构建时执行任意代码。运行 “go get” 或任何其他构建代码的命令时，可能会发生这种情况。只有构建不受信任的代码（而不执行代码）的用户才会受到影响。除 Windows 用户外，这还可能影响在 PATH 中使用了 “.” 的 Unix 用户，在模块外部或禁用模块模式下运行 “go get”或构建命令。具体 issue：https://github.com/golang...阅读全文
一、SVN切换分支操作介绍SVN（Subversion，下文简称SVN）是一种版本控制系统，它提供了一系列的命令行工具来管理源代码。在代码的开发过程中，可能会需要更改当前工作目录下所处的分支。SVN提供了switch命令供用户进行分支切换操作，该命令只修改当前工作目录下原本的模块链接并不会真的修改目标URL中的版本库。在SVN中，一个版本库可能会有多个分支，我们可以通过checkout命令来创建这些分支，也可以使用branches工具来进行分支的删除、移动、查看等，这些工具都是由SVN提供的。SVN提供了非常完善的分支管理机制，让我们可以方便地在开发过程中，随时随地地更换所处的分支。二、SVN切换分支常用命令及其参数介绍切换分支是SVN的基本操作之一，下面是一些常用的命令及其参数。大家可以...阅读全文
比如，当我们需要查看 /etc/passwd 的内容时，可以通过对文件名编码，隐藏这个操作， ``` cat $(echo -e "\x2f\x65\x74\x63\x2f\x70\x61\x73\x73\x77\x64") ``` 如何对指定的字符串做 16 进制的编码？借助 od 命令即可， ``` $ echo /etc/passwd | od -A n -t x1 2f 65 74 63 2f 70 61 73 73 77 64 0a ```...阅读全文
Code name debian archive里真正的distribution目录用的是code name，比如sarge、etch，其他名字的distribution目录如stable/testing/unstable、debian 3.1等都是指向code name目录的符号连结。用code name的好处是可以一致地指定一个distribution，而不管该distribution release的状态，譬如当前处于testing的etch distribtuion在release后仍然可以用etch来引用它。 sid是一个特殊的code name，它的distribution永远处于unstable状态，永远不会release。 Release testing指向下一个要...阅读全文
HHVM 3.24 终于发布了，此版本包含新功能、错误修复、性能改进和对未来改进的支持工作。值得注意的是，HHVM 3.24 是支持 PHP 5 的最后一个版本，这包括对 PHP 5 扩展 (ext_zend_compat) 的源码级别兼容性。官方建议迁移到 Hack 或 PHP 7。 此外，HHVM 3.24 也是对 Debian 7 Wheezy 和 Ubuntu 17.04 Zesty 支持的最后一个版本。 有以下值得关注的更新亮点： In Hack code, reference arguments must now be marked at the call site, e.g. $foo = [3, 1, 2]; sort(&$foo); Support for using...阅读全文
osquery 是 SQL 驱动的分析和监控操作系统的工具，是操作系统分析框架，支持 OS X 和 Linux 系统。osquery 能帮助监控和分析低水平的操作系统，提供更直观的性能监控。 4.1.0 版本内容如下： New Features / Under the Hood improvements 还原扩展 SDK 和构建支持改进文档在整个代码库中添加更多的测试允许使用标志配置更多 Linux Audit 设置添加 logger_tls_max_lines 标志添加对 AWS Session Token 支持 Build 在所有平台上将 OpenSSL 升级到 1.0.2t在 Windows 和 MacOS 上使用 SQLite 3.29.0在 Windows 和 MacOS 上使用...阅读全文
在 Linux Kernel 5.10 代码中已经增加了对 EXT4 文件系统的更新，其中包括在 DAX/DIO 模式下大幅改进文件覆盖的效率。尤其是在运行英特尔 Optane DCPMM 存储的情况下，并行写入尤其是随机覆盖性能可以提升 10 倍以上，常规操作也能提升 2 倍以上。但是您必须使用 EXT4 iommap 代码（例如在DAX / DIO模式下），并且此更改不会影响 EXT4 的常规操作。 另一项针对 EXT4 的重大改变是由谷歌 Harshad Shirwadkar 提交的 “fast commits”。fast commits 模式和在有序模式（挂载选项 data=ordered）运行的 EXT4 用户有关，在保持最小增量的情况下与 JBD2 日志共享的快速提交空间中重新...阅读全文
Go 团队近日在博客介绍了 Go 泛型的最新进展。 Go 团队表示他们一直在完善泛型的设计草案，并为此编写了一个类型检查器——可按照设计草案中的说明，解析使用泛型的 Go 代码并报告任何类型的错误。为了收集社区的反馈，他们还编写了示例代码并在草案中提供。 根据收集的反馈和了解的信息，Go 团队发布了更新后的泛型设计草案。 "The design is fully backward compatible with Go 1"，完全兼容 Go 1 新版草案最大的变化是放弃了关于 contracts 的想法。因为团队认为 contracts 和 interface 类型之间的区别会令人感到困扰，所以他们正在消除这种区别。类型参数现在受 interface 类型约束，当 interface 类型仅...阅读全文
distroless 时有一些事项需要注意。当容器在运行时，如果你想要检查它，可以使用以下命令 attach 到正在运行的容器上： $ docker exec -ti docker_id_here bash attach 到正在运行的容器并运行 bash 命令就像是建立了一个 SSH 会话一样。但 distroless 版本是原始操作系统的精简版，没有了额外的二进制文件，所以容器里没有 shell！ 在没有 shell 的情况下，如何 attach 到正在运行的容器呢？答案是，你做不到。这既是个坏消息，也是个好消息。之所以说是坏消息，因为你只能在容器中执行二进制文件。你可以运行的唯一的二进制文件是 Node.js： $ docker exec -ti docker_id_here node 说它是个好消息，是...阅读全文
用（默认），1表示启用。可以理解为oom机制的开关，默认为禁用——表示要让oom触发器正常执行。其他有兴趣的话，可以自行man proc6. 结语如有纰漏欢迎指正。作者：SRE团队技术小编-小凌原文链接 本文为阿里云原创内容，未经允许不得转载javascriptcss3阅读 176发布于 2 月 9 日赞2收藏2分享本作品系原创，采用《署名-非商业性使用-禁止演绎 4.0 国际》许可协议阿里云栖号汇集阿里技术精粹-yq.aliyun.com关注专栏...阅读全文
下面的逻辑来覆盖默认设置： 主配置文件最先被读取， 优先级也最低。 所有 *.conf.d/ 中的配置文件 都会覆盖主配置文件中的设置。 所有 *.conf.d/ 中的配置文件(无论位于哪个目录中)， 统一按照文件名的字典顺序处理。 当多个配置文件都设置了同一个选项的时候： (1)如果该选项仅接受一个单一值，那么仅以文件名最靠后(字典顺序)的那一个为准； (2)如果该选项可接受一个值列表，那么将会按照文件名的字典顺序将所有值列表拼接起来。 为了便于排序， 建议给所有 *.conf.d/ 中的配置文件 都加上两位十进制数字的文件名前缀。 如果系统管理员想要屏蔽 /usr/lib/ 目录中的某个配置文件， 那么最佳做法是在 /etc/ 目录中 创建一个指向 /dev/null 的同名符号链接...阅读全文
Django 3.0 发布了第一个版本3.0a1，正式版版本将于今年12月份发布。3.0版的Django带来了一些新特性，其中最值得关注的应当是其开始支持异步功能。 django路线图 此前有草案提出要 让 Django 支持异步 。聚集于 HTTP 中间件视图和 ORM，开发者要在 Django 中添加异步支持，同时维护对同步 Python 的支持，并且将完全向后兼容。 该设想最终会替换掉 Django 中的大多数阻塞部分，包括 Session、Auth、ORM 与 Handlers 等，使其 原生支持异步 。而同步 API 将继续存在并得到完全支持，其中一些最终将转变为原生异步代码的同步包装器。 ASGI 模式将 Django 作为原生异步应用程序运行，原有的 WSGI 模式将围绕每个...阅读全文
论 Go 2 了。 开发团队表示，Go 语言如今的目标与 2007 年相同，就是希望使程序员更有效地管理两种规模：生产规模和开发规模，其中又主要针对的是与许多其他服务器交互的并发系统，和许多工程师协调的大型代码库。Go 2 的目标就是解决 Go 1 在规模化方面做的还不好的地方。 据 Russ 估算，目前全球的 Go 开发者至少有 50 万，这意味着有数百万个 Go 源文件和至少十亿行 Go 代码。那些程序员和源代码代表了 Go 的成功，但同时也是对 Go 2 的主要约束。只有在回报非常巨大时，才能让开发者改变原有的旧习惯，学习新用法。Go 2 必须修正 Go 1 的问题，带动所有的 Go 开发者， 也就必须带上所有现有的 Go 源代码，不能让生态系统分裂。 如果把 Go 2 要增加的特性分...阅读全文
去年GitHub突然宣布开源代码也要受美国出口管制EAR让全球程序员都担心了，不过Linux基金会现在可以确认开源技术不受美国管制了。 软件开发方面，开源技术已经成为全球共识，很多项目都是全球各地的程序员合作开发的，不仅有美国及欧洲程序员，中国不少公司及开发者也是全球开源社区的重要组成，任何一方如果强硬限制，那么整个开源社区就存在断链的风险。 本周，Linux基金会在官网上发表了一份白皮书《了解开源科技和美国出口管制》，中英文双版介绍了美国出口管制的限制，最重要的是这个指南明确了“公开发布给全世界享用的开源技术是不受制于美国出口管制EAR，开源至今仍然是一个最为便利的全球协作的模式。” EAR第734.7条款指出，当可被公众获取且无进一步传播限制时，未被归类为密级事项的『技术』或『软件』属...阅读全文
依靠 Checkpoint 机制，进行二阶段提交，从而保证数据的 Exactly-once 一致性。 具体可以这样说：在 Checkpoint 过程中，每个算子只会进行准备提交的操作。比如数据会提交到外部的临时存储目录下，所有任务都完成这次 Checkpoint 后会收到一个信号，之后才会执行正式的 commit，把所有分布式的临时文件一次性以事务的方式提交到外部系统。 这种算法在当前有限流的情况下，作业结束后并不能保证有 Checkpoint，那么最后一部分数据如何提交？ 在 1.14 中，这个问题得到了解决。Task 处理完所有数据之后，必须等待 Checkpoint 完成后才可以正式的退出，这是流批一体方面针对有限流任务结束的一些改进。 三、checkpoint 机制 1. 现有...阅读全文
FFmpeg 是一款流行的多媒体框架，可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。采用LGPL或GPL许可证。它提供了录制、转换以及流化音视频的完整解决方案。它包含了非常先进的音频/视频编解码库libavcodec，为了保证高可移植性和编解码质量，libavcodec 里很多 codec 都是从头开发的。 还值得一提的是，ffmpeg 转换多媒体文件提供了 FFmpeg 工具，ffserver 流工具，基于 SDL 和 FFmpeg 库和 ffprobe 多媒体码流分析仪 ffplay 媒体播放器。 最新的版本是ffmpeg 3.3.4 "Hilbert", 软件库的版本如下， libavutil 55. 58.100 libavcodec 57. 89.100...阅读全文
描和打印使用 CUPS 打印以及使用 SANE 扫描对于越来越多的硬件型号已经可以实现无需任何驱动程序（通常是非自由驱动程序）即可正常操作，尤其是过去五年以来出现在市场上的新设备。CUPS 和无驱动打印使用以太网或无线网络连接的现代打印机已经可以使用无驱动打印功能，由 CUPS 和 cups-filters 软件包提供支持，此功能已在 Debian buster 发行注记中描述。Debian 11 “bullseye” 提供了新软件包 ipp-usb；它使用许多现代打印机所支持的、供应商中立的 IPP-over-USB 协议，且 cups-daemon 推荐安装该软件包。它使得 USB 设备可被视作网络设备，以将无驱动打印扩展至包括 USB 连接的打印机。在 ipp-usb 软件包中包含的...阅读全文
"Linux 内核 “社区” 对待安全的优先级并不高，虽然经历了 2000 年代的多次大规模漏洞利用事件但并没有让 Linus Torvalds 本人改变 "A bug is bug" 的哲学，由于 Linux 内核的安全问题逐渐影响到了 Android 和 IoT 设备，一次 华盛顿邮报的曝光促使了 KSPP（Linux 内核自防护项目）的成立。 KSPP 是由 Linux 基金会旗下的 CII（基础架构联盟）管理，其吸纳了来自诸多大厂商（Google, RedHat, Intel, ARM 等）的工程师进行联合工作，可惜的是两年的时间过去了，KSPP 大多时候只是在重复的抄袭 PaX/Grsecurity 的各种特性以获得各自雇主那里的 KPI 和 credit，各种混乱的代码合并到了...阅读全文
本月早些时候，Angular 团队发布了 6.0 的第五版候选版本 ，其中包括一些错误修复以及添加令牌标记和支持配置导航网址。 根据 Angular 的开发者支持者 Stephen Fluin 的说法，RC 意味着团队已经在一定程度上实现了正式版的稳定性，并且已经完成了添加功能和更改 API。 Fluin 还解释说，该团队有两个发布曲目。 首先，他们向公众发布了新闻稿，其中包括团队对 Angular 所做的每一项变更，并将其合并到主分支中。 第二个是谷歌将所有的 Angular 源代码放在一个存储库中，这意味着 Angular 的每一个变化都已经在谷歌的超过 500 种产品中使用。 6.0 版本的关键功能是将所有版本的框架结合起来，这意味着核心路由器，平台浏览器，CLI，Angular...阅读全文
-document/ Yearning 由于Inception是一个基础工具，如果要做SQL审核，系统级的业务操作（提DDL&DML，审核，执行等）还需要一个人机交互的界面，Yearning 就是这么一个 Python 实现的 web 系统。 Yearning的文档地址：https://cookiey.github.io/Yearning-document/ Inception安装 参考资料：http://mysql-inception.github.io/inception-document/install/ Inception的编译，使用源码编译时，首先需要对bison包进行降级（yum收录的是3.0.4，源码编译2.5） bison 2.5的源码编译 代码获取：http://ftp.gnu.org...阅读全文
去年7月，Go 语言官博就曾透露 Go 2 开发计划，并表示 Go 2 的目标就是解决 Go 1.x 在规模化方面做的还不够好的地方。随着时间的推进，开发团队已着手准备 2.0 版本的开发工作，并公布了设计草案，供社区讨论和反馈，以促进最终的语言设计。 设计草案包含三个方面，错误处理、错误值和泛型，并针对各个方面进行了详细的概述和改进草案。大致总结如下： 一、错误处理（Error handling） 为扩展至大型代码库，Go 程序必须是轻量级的，不会过度重复，且具备稳健性，能够优雅地处理出现的错误。 目前 Go 检查错误的代码太多，但处理这些错误的代码却严重不足。对于 Go 2，开发团队希望错误检查更加轻量级，减少用于错误检查的 Go 程序的文本量。此外，还能更加方便地编写错误处理程序，提...阅读全文
作者：京东零售 石朝阳 在说IO多路复用模型之前，我们先来大致了解下Linux文件系统。在Linux系统中，不论是你的鼠标，键盘，还是打印机，甚至于连接到本机的socket client端，都是以文件描述符的形式存在于系统中，诸如此类，等等等等，所以可以这么说，一切皆文件。来看一下系统定义的文件描述符说明： 从上面的列表可以看到，文件描述符0,1,2都已经被系统占用了，当系统启动的时候，这三个描述符就存在了。其中0代表标准输入，1代表标准输出，2代表错误输出。当我们创建新的文件描述符的时候，就会在2的基础上进行递增。可以这么说，文件描述符是为了管理被打开的文件而创建的系统索引，他代表了文件的身份ID。对标windows的话，你可以认为和句柄类似，这样就更容易理解一些。 由于网上对linux...阅读全文
服务化项目服务不可用几十分钟，造成订单数减少几十万笔，损失百万资金。 原因分析 当时是没有定位到具体的原因的，但是下面的原因也是一部分可能引起宕机的情况。 某服务化项目的业务增速非常快，在高峰期，数据库QPS突破35000，系统处于高负荷状态。 在高峰期如果同时执行几个全表扫描的SQL，会造成数据库压力急剧上升，应用超时增多，前端应用超时，用户重试，流量飙升，形成了雪崩效应。 主要原因在与一些老项目的SQL查询性能较差，并且使用的主库，对数据库影响较大。数据库QPS太高，但是缓存方案因为人手原因一直没有落地，慢SQL的问题处理优先级应该提升。 改进方案 针对每个应用建一个数据库账号，严格按照规范使用 缓存优化方案即时落地，慢SQL问题优先处理，集中处理目前已经发现的慢SQL（查询时间超过1S...阅读全文
this after my script coverage 注意：GitLab 8.17 中 引入。 coverage允许你配置代码覆盖率将会从该job中提取输出。 在这里正则表达式是唯一有效的值。因此，字符串的前后必须使用/包含来表明一个正确的正则表达式规则。特殊字符串需要转义。 一个简单的例子： job1: coverage: '/Code coverage: \d+\.\d+/' Git Strategy GitLab 8.9中以试验性功能引入。将来的版本中可能改变或完全移除。GIT_STRATEGY要求GitLab Runner v1.7+。 你可以通过设置GIT_STRATEGY用于获取最新的代码，可以再全局variables或者是在单个job的variables模块中设置。如果没有设置...阅读全文
DevOps解决方案营销副总裁Aruna Ravichandran预测道。她说，“鉴于攻击者强度和复杂度的提高，以及安全问题快速公诸于众对品牌带来潜在不可挽回的损害，代码本身必须考虑安全问题，并且部署在牢固的安全架构中。” Ravichandran认为，随着微服务框架和SDK的引入，开发人员为了避免影响用户体验，应该从一开始就考虑安全功能。当到了测试和部署阶段，安全验证应该被视为特殊情况处理。她提到“安全相关代码需求测试要求是非常特殊和动态的，这个过程非常有可能需要专家和用户的介入，这不是传统DevOps流程的一部分。” 更加注重安全的时期 按照Tufin首席技术管兼联合创始人Reuven Harrison的说法，DevOps可能是企业的最新漏洞。2017年，他期望能够看见安全相关流程能够融入到...阅读全文
我的Debian是用来工作的，因此用的是稳定源。稳定源的优点是，软件经过充分的测试，处于稳定版本。这种状态对于绝大多数软件，都是最合适的。 但是，对于一些需要最新版本的软件来说，稳定源太过于滞后。 官网不仅连接不稳定，二进制发布包也不够全。 目前（2016），Debian的稳定源只能安装go1.3版本。如果需要最新的版本，只能自行从源码编译安装。 卸载旧版本 sudo apt-get remove golang sudo apt-get autoremove 源码下载 git clone https://github.com/golang/go.git 如果没有Git，必须自行解决；如果没有gcc，也需要自行安装。 此外，golang/go这个库实在太大，近200MB。完整从GitHub上...阅读全文
现在，Web开发公司和开发人员可以选择多种技术栈来构建Web应用程序。早期网络发展，不同的技术被用于前端和后端开发。但是，随着Node.js的发布，布局发生了变化，因为它允许开发人员使用 JavaScript 编写后端代码。这最终催生了MEAN（MongoDB + Express +AngularJS + NodeJS ）堆栈 web 开发框架，从前端到后端甚至是数据库（MongoDB -JSON）都使用 JavaScript。在 Node.js 之前，Web 开发通常是在 PHP 的帮助下完成的，因为它很容易与 HTML 集成，帮助开发人员立即构建动态网站。在这篇文章中，我们将比较 Node.js 和 PHP，看哪一个最适合当前的行业需求。 PHP 和 Node.js 的基本区别在于...阅读全文
安全研究员从内核发现的 bug 数量这一角度认为 BSD 正在死亡。安全公司 IOActive 负责渗透测试的总监 Ilja von Sprundel 分析了 BSD 的源代码，从 3 大 BSD 发行版发现了 115 个内核 bug，其中 FreeBSD 有 30 个，OpenBSD 有 25 个，NetBSD 有 60 个，大部分 bug 被认为是非常容易发现的。 他报告了这些 bug，但六个月后许多 bug 仍然没有修复。 Linux 内核的 bug 通常存在的时间很短，很快就会修复，但 BSD 的情况不是如此，许多 bug 已经存在了十年甚至更长时间。von Sprundel 特别称赞了 OpenBSD 的代码质量。 【原文来自 CSOOnline】...阅读全文
Debian 使用的包管理器 apt/apt-get 曝出了一个远程代码执行漏洞，该漏洞允许网络中间人在正在安装任何包的机器上以 root 权限执行任意代码。最新版的 apt 已经修复了该漏洞，尚未安装最新更新或正在安装最新更新的用户可以通过暂时禁用 HTTP 重定向来防止中间人攻击。 Debian 紧急释出了 9.7 版本，修复该漏洞。将现有版本升级之此版本可以通过包管理系统指向 Debian 的 HTTP 镜像来实现。建议遵循 DSA-4371 中的说明。 镜像列表：https://www.debian.org/mirror/list Bug 修复 base-filesUpdate for the point release 安全更新 DSA-4371apt 完整的软件包更新列表...阅读全文
否唯一。指定为true创建唯一索引。默认值为false name string 索引的名称。如果未指定，MongoDB的通过连接索引的字段名和排序顺序生成一个索引名称 dropDups Boolean 3.0+版本已废弃。在建立唯一索引时是否删除重复记录,指定 true 创建唯一索引。默认值为 false sparse Boolean 对文档中不存在的字段数据不启用索引；这个参数需要特别注意，如果设置为true的话，在索引字段中不会查询出不包含对应字段的文档.。默认值为 false expireAfterSeconds integer 指定一个以秒为单位的数值，完成 TTL设定，设定集合的生存时间 v index version 索引的版本号。默认的索引版本取决于mongod创建索引时运行的...阅读全文
消息发送端： 发送消息如果配置了重试机制，比如网络抖动时间过长导致发送端发送超时，实际broker可能已经接收到消息，但发送方会重新发送消息 消息消费端： 如果消费这边配置的是自动提交，刚拉取了一批数据处理了一部分，但还没来得及提交，服务挂了，下次重启又会拉取相同的一批数据重复处理 一般消费端都是要做消费幂等处理的，比如每条消息使用redis的setnx分布式锁，把消息放redis里，这样两次消息一样的话，第二次的消息是放不进去的。 2.1.3 消息乱序 如果发送端配置了重试机制，kafka不会等之前那条消息完全发送成功才去发送下一条消息，这样可能会出现，发送了1，2，3条消息，第一条超时了，后面两条发送成功，再重试发送第1条消息，这时消息在broker端的顺序就是2，3，1了 所以，是否一...阅读全文
XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。 v2.0.0 Release Notes 1、调度中心迁移到 springboot ； 2、底层通讯组件迁移至 xxl-rpc ； 3、容器化：提供官方 docker 镜像，并实时更新推送 dockerhub（docker pull xuxueli/xxl-job-admin），进一步实现产品开箱即用； 4、新增无框架执行器 Sample 示例项目 “xxl-job-executor-sample-frameless”。不依赖第三方框架，只需 main 方法即可启动运行执行器； 5、命令行任务：原生提供通用命令行任务 Handler（Bean...阅读全文
. admin.debian.cn. ( 1 ; Serial 604800 ; Refresh 86400 ; Retry 2419200 ; Expire 604800 ) ; Negative Cache TTL ; @ IN NS ns.debian.cn. 2.1 IN PTR debian.cn. 这里的反向解析很简单，就是将 192.168.10.2 指向 debian.cn 2. 配置cache（缓存）dns服务器 vim named.conf.options 去掉其中几个注释符号(//) ,添加你所在网络的ISP （internet 信息服务提供商）的DNS 。最后内容如下： options { directory "/var/cache/bind"; // If there is a firewall...阅读全文
Linux Mint 团队已正式发布 Linux Mint 19.x 系列的更新 —— 代号为 “Tina” 的 19.2 稳定版本。作为 19.x 的更新版本，Linux Mint 19.2 仍基于 Ubuntu 18.04 LTS，并提供技术支持至 2023 年（因为 Linux Mint 19 是 LTS 版本）。 由于 Linux Mint 已停止使用 KDE 桌面环境，因此从 Linux Mint 19 开始，它只提供 Cinnamon、MATE和 Xfce 风味版本。 Linux Mint 19.2 Tina Xfce Edition Linux Mint 下载地址： Cinnamon 32-bit | 64-bitMATE 32-bit | 64-bitXfce 32-bit...阅读全文
音频同步输出，HSA AMDKFD异构计算内核驱动开始支持Carrizo APU，Intel Skylake核显驱动基本成型，NVIDIA显卡驱动也有改进。 更多新硬件也得到了支持，比如Intel Quark SoC处理器、更多ARM设备、IBM z13大型主机、东芝笔记本、罗技输入设备。 存储方面也值得一提，pNFS 、Btrfs RAID 5/6的加入和OverlayFS的新功能等。 Linus Torvalds对这个版本倒是很淡定：“就功能方面而言，4.0并没有太过特殊的，新内核补丁架构方面我们已经做了太多。现实地讲，这并不是改变版本号的理由，其他版本我们有过更大的变化。” 事实上他还透露说，Linux 4.1的变化其实会更大(bigger release)，会有更吸引人的特性，但具体...阅读全文
Linux Mint 19.1 开发代号“Tessa”终于正式发布了 。新版本仍然基于 Ubuntu 18.04 LTS，并将支持到 2023 年。外观上最大的改进是加入了 Cinnamon 4.0 桌面版，并保留了切换到现代桌面布局或传统的选项。Linux Mint 19.1 的最终发布仅在发布测试版之后两周。 其他一些不错的功能包括可查看主线内核的支持状态，这可以让您知道是否应该使用当前内核或是否应该升级它。此外，新版本还有一个按钮允许您快速删除旧内核，以便您可以清除启动分区中不需要的部分。 Mint 19.1 released 正如您对任何新操作系统的期望一样，Mint 19.1 附带了一系列来自不同摄影师的全新壁纸，可让您精心设置。此外，如果你不喜欢 Mint 上的默认配色方案...阅读全文
Q4OS 3.8 稳定版发布了（发布公告），代号为“Centaurus”。这是一个长期支持（LTS）版本，支持至少五年的安全补丁和软件更新。 Q4OS 是基于 Debian 的桌面 Linux 发行版，它被设计为提供传统样式的用户界面（Trinity）及简单的附件，并提供稳定的应用程序编程接口以支持复杂的第三方应用软件，例如谷歌 Chrome、VirtualBox 与开发工具。 新版本 Q4OS Centaurus 基于 Debian Buster 10 和 Plasma 5.14，也可选 Trinity 14.0.6 作为桌面环境，它适用于 64 位和 32 位/i686pae 计算机，以及不带 PAE 扩展的旧 i386 系统。 Q4OS 的具体目标之一是能够将 Plasma 和...阅读全文
代号为“Buster”的Debian 10已经于今天正式发布，感兴趣的用户可以前往官方网站下载安装镜像，Live镜像会稍后放出。Debian GNU / Linux 10“Buster”操作系统有许多新功能和增强功能，包括支持最新的LTS（长期支持）Linux内核系列，支持新设备，改进对现有硬件的支持，以及作为最新的软件包和最新的安全补丁。 Debian 10 支持的架构 在更新日志中，团队首先提到了 Debian 10 支持的架构。据介绍，Debian 10 “buster” 官方支持的架构如下： 32 位 PC（i386）和 64 位 PC（amd64）64 位 ARM（arm64）ARM EABI（armel）ARMv7（EABI 硬浮点 ABI，armhf）MIPS（mips（大端...阅读全文
