英特尔刚刚发布了迄今为止最为密集的 SSD 产品，它就是面向数据中心应用的 P4500 。为了将 32TB 的容量纳入单块 SSD，尽管其身材依然纤薄（宽高 1.5×0.3 英寸 / 3.8×0.8 厘米），但长度已经达到了丧心病狂的 12 英寸（30.5 厘米）。存储颗粒方面，其选用了 64 层堆叠的 3D NAND 架构。不过英特尔表示，它只需一半的气流，即可满足运行时的散热需求。 Intel P4500 是当前最密集的 SSD，将 32TB 容量纳入 12 英寸“标尺”外形。32 组 P4500 SSD 可纳入一个标准服务器插槽，总容量达到 1PB（1024TB）。 这些 3D NAND SSD 的功耗只有 1PB SATA 机械硬盘的 10%，空间占用更是只有 5% 。对于 IBM...阅读全文
根据 GitLab CEO Sid Sijbrandij 在圣诞节来临之际，向开发者宣布，在 GitLab 11.8 发布时，将开源 ChatOps 功能。 GitLab ChatOps 的主要功能，就是开发者通过即使通讯平台发送命令，目前支持的平台包括 Slack 和 Mattermost 。Sid Sijbrandij 表示，GitLab 在未来也会加入 GitLab ChatOps 功能。 ChatOps 共有以下 5 大特点： 提供监测功能，配备相关的监工仪表盘，让运维人员更方便的进行鼓掌排除。支持 JQuery 指令操作，也支持输入简单的 SQL 指令。整合角色控制权限，为每个使用者配置不同的权限。不需要进行相关的设置工作，开发者开通后即可使用。ChatOps 作为平台中的功能...阅读全文
本文将介绍如何远程升级 Debian 11 Bullseye 到最新的稳定版 Debian 12 Bookworm。本升级流程简单、快速，适用于绝大部分运行在 公有云 上的主机实例。 在升级之前，建议妥善备份重要的数据，InfraPub 有一个简单的备份策略，只需要一个文件列表 记录需要备份的文件及目录，即可实现快速备份， ``` ## cat /root/backup.list /var/lib/mysql /etc/mysql /var/www /etc/nginx ``` 随后使用一条命令即可备份: `tar czvf /tmp/backup.tgz --files-from /root/backup.list` 稳妥期间，备份时把数据库类的服务停一下...阅读全文
Linkerd 是一个提供弹性云端原生应用服务网格（service mesh）的开源项目，也是面向微服务的开源 RPC 代理。Linkerd（发音 "linker-DEE"）是一个透明的服务网格，旨在通过透明地将服务发现、负载均衡、故障处理，插桩（instrumentation）和路由添加到所有的服务间通信中，使现代应用程序安全可靠，而无需侵入应用内部本身的实现。 linkerd 作为一个透明的 HTTP/gRPC/thrift/ 等代理，通常可以以最少的配置被加入到现有的应用程序中，不管这些应用程序采用什么语言编写。linkerd 能与许多通用协议和服务发现后端运行，包括 Mesos 和 Kubernetes 等预定好的环境。 Linkerd 基于 Netty 和...阅读全文
-cachedfree: 未使用的内存 memFree & swapFree in /proc/meminfoshared: tmpfs使用的内存 shmem in /proc/meminfobuffers：被内核缓冲去使用的内存cached: 被页缓存和slabs使用的内存buffers/cache： 表示buffers和cache的总和swap： 交换分区的使用量2.3 buffer和cache会使用内存吗？答案是肯定的，先来了解下buffer和cache。cache（缓存）官方定义是用来弥补高速设备和低速设备之间的访问速度不匹配而预留的一段空间，用来加快资源的访问。 简单讲就是读的更快。buffer（缓冲）是为了做资源写入整形，计算机遇到大量的“小规模IO”时，会将其整形为少量的“大规模IO”，降低写入次...阅读全文
在引擎层面，API 层面和算子的执行层面上做到了真正的流与批用同一套机制运行。但是在任务具体的执行模式上会有 2 种不同的模式： 下图是不同的执行模式： 对于无限的数据流，统一采用了流的执行模式。流的执行模式指的是所有计算节点是通过 Pipeline 模式去连接的，Pipeline 是指上游和下游计算任务是同时运行的，随着上游不断产出数据，下游同时在不断消费数据。这种全 Pipeline 的执行方式可以： 通过 eventTime 表示数据是什么时候产生的； 通过 watermark 得知在哪个时间点，数据已经到达了； 通过 state 来维护计算中间状态； 通过 Checkpoint 做容错的处理。 这两种各有优劣，可以根据作业的具体场景来进行选择。 对于有限的数据集有 2 种执行模式，我...阅读全文
, ctrip apollo, disconf, hawk 等配置中心的功能点。综合比较下来携程apollo 更具有优势。 二、简单介绍携程Apollo配置中心 1、What is Apollo 1.1 背景 随着程序功能的日益复杂，程序的配置日益增多：各种功能的开关、参数的配置、服务器的地址…… 对程序配置的期望值也越来越高：配置修改后实时生效，灰度发布，分环境、分集群管理配置，完善的权限、审核机制…… 在这样的大环境下，传统的通过配置文件、数据库等方式已经越来越无法满足开发人员对配置管理的需求。 Apollo配置中心应运而生！ 1.2 Apollo简介 Apollo（阿波罗）是携程框架部门研发的开源配置管理中心，能够集中化管理应用不同环境、不同集群的配置，配置修改后能够实时推送到应用端，并且具备规范...阅读全文
一些发行版中我们也能看到它的身影。 Apt是一个很完整和先进的软件包管理程序，使用它可以让你又简单，又准确的找到你要的的软件包， 并且安装或卸载都很简洁。 它还可以让你的所有软件都更新到最新状态，而且也可以用来对 Debian/Ubuntu 进行升级。apt是需要用命令来操作的软件，不过现在也出现了很多有图形的软件，比如 Synaptic, Kynaptic 和 Adept。 命令样例 下面将要介绍的命令大部分需要sudo，使用时请将“packagename”和“string”替换成您想要安装或者查找的程序。 apt-get update —— 在修改/etc/apt/sources.list或者/etc/apt/preferences之後运行该命令。此外您需要定期运行这一命令以确保您的软件...阅读全文
only no 定义一列git分支，并为其创建job except no 定义一列git分支，不创建job tags no 定义一列tags，用来指定选择哪个Runner（同时Runner也要设置tags） allow_failure no 允许job失败。失败的job不影响commit状态 when no 定义何时开始job。可以是on_success，on_failure，always或者manual dependencies no 定义job依赖关系，这样他们就可以互相传递artifacts cache no 定义应在后续运行之间缓存的文件列表 before_script no 重写一组在作业前执行的命令 after_script no 重写一组在作业后执行的命令 environment...阅读全文
/docker/plugins/ 中删除 plugins.json 重新启动 Docker，验证 Docker 守护程序启动时是否有错误。 重新安装插件 该版本更新内容较多，涉及到网络、插件、移除掉的 API & 客户端、运行时、安全性以及依赖等。更多更新内容和下载地址，点此查看。 相关链接 Docker 的详细介绍：点击查看 Docker 的下载地址： 点击下载...阅读全文
802.11ac是当今最流行的Wi-Fi无线标准，不过，为了提高速度、吞吐量、降低功耗，IEEE 802.11ax/ad/ay先后应运而生。其中802.11ax是对ac/n的自然演进，同样工作在2.4/5GHz频段上，而ad/ay则是作为辅助技术，由于工作频段极高，没有干扰，所以速率可以非常高。比如基于60GHz的802.11ad可以达到8Gbps的数据传输率，如今TP-Link Talon AD7200路由、戴尔E74450/7470笔记本、Windows 10创作者更新都将支持。 据悉，目前的最新进展是，第一个修订版802.11ay（verison 0.2）标准已经认证完毕，目标速率高达176Gbps，也就是22GB/s，理论上说蓝光电影可以1秒下完。不过，你的电脑硬盘肯定是跟不上，即...阅读全文
OCP 峰会刚刚轻松的结束了，但是让我们惊讶的发现微软发布了一个基于 Debian Linux 的操作系统，这个操作系统主要运行在网络交换机之上。该软件被称为 SONiC ，也就是 Software for Open Networking in the Cloud 的缩写。你可以使用它来管理网络交换机的各种操作，网络切换等，而无需依赖网络设备供应商提供的系统。 类似的操作系统还有来自 HP、DELL 和 Cumulus Networks 的系统。 SONiC 基于 Linux 的 Azure Cloud Switch (ACS) 操作系统，该系统我们在去年 9 月份有了解过。ACS 是微软 Azure 云系统中交换机的大脑。可通过 C API Switch Abstraction...阅读全文
在 Debian Stretch 中，系统自带的 PHP 版本已经默认为 PHP 7.0。我们如何在 Debian 9 中，把 PHP 的版本降为 Php 5 呢？本文提供了一种多个 PHP 版本共存的方案，我们以安装配置 PHP-5.6 为例，并且支持在多个 PHP 的版本中切换。 首选，我们需要配置一个新的安装源，以便安装 php 5.6 的包，这里我们选择 deb.sury.org ， 打开终端，运行以下命令， apt-get install apt-transport-https lsb-release ca-certificates 然后下载安装对应的GPG key 文件，使用命令， wget -O /etc/apt/trusted.gpg.d/php.gpg https...阅读全文
进行完整的依赖性维护。Arch 可以从光盘镜像或者从 FTP 服务器安装，它以一份连续演化的、动态的系统形式运作。缺省的安装提供一份坚实的 基础，用户可再进行定制安装。此外，Arch Build System（ABS）能支持简便创建新软件包，修改原先软件包的配置，以及通过 Arch Linux User Repository 来将这些软件包与其他人共享。 下载地址：https://www.archlinux.org/download/...阅读全文
4.19 内核并且 Raspberry Pi 镜像已经简化。对于使用 TFT LCD 的用户，不再有单独的 Raspberry Pi 镜像，因为现在在所有这些平台上都包含 re4son 的 kalipi-tft-config 脚本，因此如果想设置一块带有 TFT 的主板，请运行 ‘kalipi-tft-config’ 并按照提示操作。 参考链接：发布公告 下载地址...阅读全文
SwitchHosts 是一个用于快速切换本地 hosts 文件的小程序，便于开发人员快速修改测试域名的解析记录。SwitchHosts 基于 Electron 开发，同时使用了 React、Ant Design 以及 CodeMirror 等框架/库，项目主页为 https://oldj.github.io/SwitchHosts/。 SwitchHosts 主界面 SwitchHosts 功能特性 快速切换本地 hosts 文件hosts 文件语法高亮在线 hosts 方案系统托盘图标快速切换macOS: 支持 Alfred workflow 快速切换 下载安装 switchhosts 你可以直接下载源码到本地运行或编辑，或者在下面下载可执行版本： SwitchHosts! 下载地址1...阅读全文
5.10拥有长期支持版本的常规6年声明周期。同时，Linux 4.4 LTS在运行六年后将于明年年初被淘汰。 目前活跃的Linux内核发布分支和对Linux 5.10到2026年的确认可以通过Kernel.org找到。 这是个好消息，Debian 11、谷歌Android操作系统的下一个版本，以及其他使用这个2020年Linux长期支持分支的版本都会因此而获益。...阅读全文
开源堡垒机 Jumpserver v1.4.7 已发布 , 修改了配置文件的格式，使用yaml方式配置。本版本主要更新的内容如下： 支持 radius 认证统一生成 coco 的 host key，这样部署多个 coco 也不需要再复制 Host key权限列表增加详细过滤更改配置文件类型为 yml 格式修改心跳方式优化任务执行的日志记录方式修复节点右击测试连接资产为节点下所有资产，而不是直接资产sftp 支持修改 home 目录， 支持不显示隐藏文件修复 luna 隐藏侧边栏的 bugluna 支持直接登录到某个资产 更新说明 Jumpserver 是全球首款完全开源的堡垒机，使用 GNU GPL v2.0 开源协议，是符合 4A 的专业运维审计系统。Jumpserver 使用...阅读全文
硬件黑客 NODE 开发了一款运行在树莓派零（Raspberry Pi Zero）上的模块化手持式 Linux PC，名为 "Zero Terminal 3"。其配有 WaveShare 5.5 英寸全高清触控 AMOLED 显示屏、全尺寸 USB 2.0 接口、micro SD 插座和 1200 mAh 的内置锂电池。 同时，Zero Terminal 3 还支持附加组件，包括键盘、游戏控制器、无线电收发器、网络接口、太阳能电池板或电视调谐器等。事实上，这并不是 NODE 开发的第一款手持计算机，不过与旧版本相比，Zero Terminal 3 拥有更大的显示屏和更多的功能。 Zero Terminal 3 Linux PC 的规格具体如下： USB 2.0 A 型端口微型 USB 端口...阅读全文
媒体援引消息人士的话说，经过几个月的测试和bug修复，谷歌已经准备好让Debian 10 “Buster” 作为 Chrome OS 中默认的 Linux 容器。值得一提的是，尽管Debian project在今年早些时候发布了 Debian 10 “buster”，但谷歌当时并没有做想用的准备工作！感兴趣的朋友，不妨来了解一下。 根据在 Chromium Gerrit 中发现的最近合并的 commit，默认情况下，新的Crostini（Chrome OS上Linux应用程序的代号）安装将获得Debian 10。 该commit并未提及如何将安装了Debian 9的Chromebook迁移到较新版本，但是用户可以通过运行一些命令轻松地自己升级容器。升级到较新版本的Debian可以启用新功能...阅读全文
一、HAProxy简介 （1）HAProxy 是一款提供高可用性、负载均衡以及基于TCP（第四层）和HTTP（第七层）应用的代理软件，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。 HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在时下的硬件上，完全可以支持数以万计的 并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中， 同时可以保护你的web服务器不被暴露到网络上。 （2）HAProxy 实现了一种事件驱动、单一进程模型，此模型支持非常大的并发连接数。多进程或多线程模型受内存限制 、系统调度器限制以及无处不在的锁限制，很少能处理数千并发连接。事件驱动模型因为在有更好的资源和时间管理的用户端(User...阅读全文
近日，Facebook 开源了一套解决重要计算集群管理问题的 Linux 内核组件和相关工具，这些项目覆盖了资源控制、资源利用、工作负载隔离、负载均衡、测量和监控等方面：BPF、Btrfs、Netconsd、Cgroup2、PSI、Oomd。 Facebook 表示这些项目现在已大规模用于其所有基础设施生产环境中，并用于其它许多企业组织的环境中。 BPF：https://facebookmicrosites.github.io/bpf/ BPF 是 Linux 内核中一种高度灵活、高效率的代码执行引擎，可以让字节码在各个 hook 点运行，以使用自定义代码。虽然 BPF 已广泛用于数据包过滤，但是 BPF 的指令集具有很强的通用性和灵活性，足以支持和允许除网络之外的众多使用场合，比如跟踪和...阅读全文
Oracle Linux 8.0 发布了，更新包中包括基础 BaseOS 和 Application Streams，其中 BaseOS 提供运行环境的用户空间，Application Streams 提供了一系列以往分发在软件集中的应用，以及可在用户空间内运行的其它产品和程序。 Application Streams Oracle Linux 8 引入了 Application Streams 的概念，它可以比核心操作系统包更频繁地交付和更新多个版本的用户空间组件。Application Streams 包含必要的系统组件和一系列以往分发在软件集中的应用，以及其它产品和程序。 系统管理 引入 Dandified Yum 软件包管理器，它是基于 DNF 技术的 yum 工具的新版本，可在基...阅读全文
Docker CE 19.03 和 EE 3.0 都已经发布，19.03 主要内容包括无需 root 权限、支持 GPU 的增强功能和 CLI 插件更新等等，19.03 现在是允许非 root 用户运行守护程序，启用 Rootless 模式可以防止攻击者夺取主机的 root 权限，即使 Docker 存在漏洞或设置错误。 更新内容如下： Builder 增加了内联缓存支持 –cache-from docker/engine#215允许输出配置 moby/moby#38898固定的 GCR 变通令牌缓存 docker/engine#212下载错误时调用 stopprogress docker/engine#215Buildkit 现在使用 systemd 的 resolv.conf...阅读全文
Solus Linux 的创造者 Ikey Doherty 宣布其正在打造一个“真正现代的 Linux 发行版” Serpent OS，并且该发行版将不依赖 GNU 工具链与运行时。 Ikey Doherty 认为当前市面上绝大多数 Linux 发行版都有非常相似的目标： Modern, lightweight, privacy oriented/respecting, user-friendly desktop现代、轻巧、面向隐私/尊重用户友好的桌面 但是其专注于构建可满足自己需求的 Linux 发行版，而不是关注与 macOS * + Windows * 互用性的“基于 Linux 的操作系统”。也就是说，“这不是‘面向大众的 Linux’，而是一个还原 Linux 真正该有的样子的...阅读全文
} -n {namespace} -o yaml | kubectl replace --force -f - 在这个命令中，由于没有 yaml 文件，且启动的是 Pod 对象，我们先 get 当前运行的 pod 的 yaml 声明定义，通过管道重定向输出到 kubectl replace 命令的标准输入，来达到上一条命令同样的效果。 总结，我们可以通过多种方式来重启对象，最通用的方式是使用 replace 命令，强制替换 Pod 的这个： kubectl get pod {podname} -n {namespace} -o yaml | kubectl replace --force -f - 这种方式，也适用于多种其他对象。值得一提的是，重启 Pod 并不会修复运行程序的 bug，想要解决程...阅读全文
。IOChaos：模拟具体某个应用的文件 I/O 故障，例如 I/O 延迟、读写失败。TimeChaos：模拟时间跳动异常。KernelChaos：模拟内核故障，例如应用内存分配异常。平台类型故障：AWSChaos：模拟 AWS 平台故障，例如 AWS 节点重启。GCPChaos：模拟 GCP 平台故障，例如 GCP 节点重启。应用层故障：JVMChaos：模拟 JVM 应用故障，例如函数调用延迟。混沌实验场景混沌实验场景由一组混沌实验和应用状态检查组成，旨在帮助用户在平台上实现混沌工程闭环。用户运行混沌场景，可以通过一系列的混沌实验，不断地扩大爆炸半径（包括攻击范围）和增加故障类型。运行混沌实验后，用户可以方便地检查当前的应用状态，判断是否需要进行后续混沌实验。同时用户可以不断地迭代混沌实验场景，积累...阅读全文
在真正的生产环境中，如何合理的分配服务器资源、提高利用率、让整个集群运行的更加稳定使得 k8s-scheduler 这个角色在集群中的地位愈发重要。 kube-scheduler的预选(过滤)和精选(打分) api-server会将创建pod的请求发送给kube-scheduler，并且将pod信息记录在etcd数据库中。之后kube-scheduler会根据预选（过滤）规则，首先过滤掉一部分node节点中的pod，没有被过滤掉的pod可以看做是可以被调度的pod，之后再通过更加严格的规则给剩下的pod打分，这一步也叫作优选。打分最高的pod可以看做被优先分配到pod任务。 调度流程简介 创建pod的命令被api-server的api接口接收到。api-server将pod信息存储在...阅读全文
系统上是否安装了Python 3。在 Debian 10 中，默认已经安装了Python 3.7 的版本。 推荐的创建虚拟环境的方法是使用软件包venv提供的模块python3-venv。 如果你还没有安装 python3-venv ，请输入以命令安装： sudo apt update sudo apt install python3-venv 2、创建虚拟环境 建立一个独立的工作目录， mkdir my_tensorflow cd my_tensorflow 进入目录，使用以下命令创建新的虚拟环境， python3 -m venv venv 上面的命令创建一个名为venv的目录，该目录包含Python二进制文件，Pip程序包管理器，标准Python库和其他支持文件的副本。运行...阅读全文
有望提升40%以上。除了CPU性能，ARMv9还非常重视整体的性能提升，包括降低内存延迟（从150ns降至90ns）、频率提升（从2.6GHz到3.3GHz）内存带宽（从20GB/s到60GB/s）、缓存等。ARMv9这次与性能有关的一个重要升级是SVE2指令集，SVE最早是ARM与富士通合作的浮点性能扩展，日本最强也是TOP500最强超算富岳就使用了SVE指令集，现在推出的是第二代SVE浮点指令了。相比SVE的128位矢量，SVE2可以支持多倍128位运算，最多2048位，因此SVE2可以增强ML机器学习、DSP信号处理能力，提升了未来5G、虚拟现实、增强现实以及CPU本地运行ML的性能，同时ARM未来还会继续提升AI人工智能性能。除了CPU之外，这次还简单提到了未来的Mali GPU...阅读全文
档: monotonic time 位处理操作 新增加了math/bits包， 提供了很多位运算的函数。 Test Helper函数 新加｀(T).Helper和(B).Helper m｀， 用来标记调用的函数是一个测试辅助函数，当输出文件名和行数的时候，这个函数回呗忽略。 标准库的微小改动 标准库也有一些小的功能的加入和提升， 比如image、net、runtime、sync等。 并行编译 支持并行地编译函数，并且在Go 1.9中势默认设置。如果不想并行编译，设置GO19CONCURRENTCOMPILATION为0。 ./... 会忽略vendor下的包 这一条很有用，以后你在Makefile中可以直接使用./...,而不是曲折地将vendor文件夹排除。 如果你想使用vendor下的包...阅读全文
/S架构变成B/S架构，传统的上位机开发将不复存在。 大量的互联网、移动互联网开发资源和方法应用到物联网，设备、云、人相互之间的联系更加方便。 目前发展 Tessel， 是Tessel是一个针对软件开发者的可连接网络的微控制器。Tessel 的目标是让网站开发者能够轻松玩转物联网。 IoT.js，IoT.js 旨在为物联网提供一个基于 Web 技术的可相互操作的服务平台。IoT.js 的目标是要在资源受限的设备上良好运行。 JerryScript，JerryScript 是一个轻量级的 JavaScript 引擎，它可以运行在受限制的设备上，例如低于64KB RAM、200KBROM的MCU上。 node-red，Node-RED 是 IBM Emerging Technology 团队创建的...阅读全文
问题被频繁提及，这不免令人有些惊讶。如果你不运行主流的发行版，这个问题会更严重。也许你在使用中没有更多的体会，但越来越多人在使用AppImage、Flatpak或者Snaps，这让我们意识到问题的存在，笔者很想更多地了解软件不兼容的问题，如果你最近遇到了，请在评论中告诉我们。 3.UEFI和安全引导 UEFI(UnifiedExtensibleFirmwareInterface)全称"统一的可扩展固件接口"，是一种详细描述类型接口的标准。这种接口用于操作系统自动从预启动的操作环境，加载到一种操作系统上。尽管随着部署更多支持的硬件，UEFI和安全引导问题仍在改善，许多用户表示，他们仍然存在与UEFI安全启动相关的问题。使用一个完全支持UEFI安全启动开箱分配是最好的解决之道。 4.32位操作系...阅读全文
source /etc/profile Hadoop文件配置 配置文件都在etc/hadoop/文件夹下 1. hadoop-env.sh # jdk环境变量 （因为要远程调用 ${java_home}找不到变量） export JAVA_HOME=/usr/lib/jvm/jdk 2. workers # 添加所有slave机器的hostname slave1 slave2 slave3 3. core-site.xml