Linux Kernel 4.15 正式发布，修补Intel漏掉
RISC-V 体系结构的支持，对 AMD 安全加密虚拟化的支持，以及对英特尔 CPU 上的用户模式指令预防功能的支持。 详细内容可查看发布说明。Linux kernel 4.15 的下载地址： Version: 4.15 (mainline) Released: 2018-01-28 Source: linux-4.15.tar.xz PGP Signature: linux-4.15.tar.sign...阅读全文
Debian 爱好者社区 为您找到相关结果 119 个
Docker 核心原理
经存在的一个容器共享一个 Network Namespace，而不是和宿主机共享。新创建的容器不会创建自己的网卡，配置自己的 IP，而是和一个指定的容器共享 IP、端口范围等 None 模式 使用none模式，Docker 容器拥有自己的 Network Namespace，但是，并不为Docker 容器进行任何网络配置。也就是说，这个 Docker 容器没有网卡、IP、路由等信息。需要我们自己为 Docker 容器添加网卡、配置 IP 等 Cgroups 通过 Linux Namespace 为新创建的进程隔离了文件系统、网络并与宿主机器之间的进程相互隔离，但是 Namespace 并不能够为我们提供物理资源上的隔离，比如 CPU 或者内存。所以 Docker 还借助了 Linux...阅读全文
Monit：开源服务器监控工具
36m threads 1 children 2 memory 820 kB memory total 7.3 MB memory percent 0.0% memory percent total 0.2% cpu percent 0.0% cpu percent total 0.0% data collected Sat, 18 Feb 2017 10:09:56 System 'iZ28s4jxu17Z' status Running monitoring status Monitored load average [0.03] [0.06] [0.06] cpu 8.4%us 0.8%sy 0.2%wa memory usage 1.5 GB [41.2%] swap usage 0 B...阅读全文
深度解密基于 eBPF 的 Kubernetes 问题排查全景图
需要观测时没有数据。eBPF 执行引擎可通过动态加载执行 eBPF 脚本来采集可观测性数据，举个具体例子，假设原本的 K8S 系统并没有做进程相关的监测，有一天发现了某个恶意进程（如挖矿程序）在疯狂地占用 CPU，这时候我们会发现这类恶意的进程创建应该被监测起来，这时候我们可以通过集成开源的进程事件检测库来是实现，但这往往需要打包、测试、发布这一整套流程，全部走完可能一个月就过去了。相比之下，eBPF 的方式显得更为高效快捷，由于 eBPF 支持动态地加载到内核监听进程创建的事件，所以我们可以将 eBPF 脚本抽象成一个子模块，采集客户端每次只需要加载这个子模块里的脚本完成数据采集，再通过统一的数据通道将数据推送到后端。这样我们就省去了改代码、打包、测试、发布的繁琐流程，通过无侵入的方式动态...阅读全文
固态硬盘的 PCIE、SATA、M2、NVMe、AHCI 如何理解
个 SATA 就要迷糊了。其实上面的 SATA 更多是指插槽，而这里的 SATA 是指数据走的通道，目前的新设备普遍都是 SATA3 接口了，但是 SATA3 是向下兼容 SATA2 跟 SATA1 的（所以下文我们只讨论SATA3）。 PCI-E 跟 SATA3 简单说就是数据走的“路”。PCI-E 就像是特别宽大的路，数据可以走的特别快，而 SATA3 与之相比更像是一条崎岖的小路，数据走的特别慢。但是CPU内部就那么大一点，修不了特别多的大路，所以PCI-E通道也就仅有那么几条。 通常 SATA 的插槽只能走 SATA3 的通道。而 M.2 的插槽上文我们说了分为 Socket 2 跟 Socket 3。M.2（Socket 2）的固态可以走 SATA3 或者 PCI-E 3.0×2...阅读全文
观点：DDR内存即将谢幕 HBM 3/4内存才是未来
HBM 2内存，核心容量可达8Gb，通过TSV技术可以实现每个CPU支持64GB HBM2内存，每路插槽的带宽可达2TB/s，而到了HBM 4时代，每个CPU支持的容量可达512GB，带宽超过8TB/s。作为对比的话，目前AMD的EPYC处理器支持8通道DDR4内存，虽然最高容量能达到2TB，但是带宽不过150GB/s左右，与HBM内存相比就差远了。 按照他的观点，在一些需要高带宽的场合中，HBM技术无疑远胜DDR内存，所以他说的DDR内存将死在这方面是成立的，比如HPC高性能计算机行业就非常需要HBM。不过话说回来，DDR将死这个判断并不适合桌面市场，HBM技术虽然各种好，但是现在来看成本问题一时半会都没法解决. 目前能生产HBM内存的厂商只有三星、SK Hynix，美光因为有HMC技术，对...阅读全文
Kubernetes 1.18 发布
Kubernetes 1.18 发布了，这是 2020 年首次版本发布。此版本包含 38 项功能增强，其中 15 项为稳定版功能、11 项 beta 功能以及 12 项 alpha 版功能。 主要更新亮点包括： Kubernetes 拓扑管理器 beta 拓扑管理器的作用是让 CPU 与其它设备（例如 SR-IOV-VF）实现 NUMA 对齐，进而让工作负载运行在优化环境中以降低延迟。在拓扑管理器推出之前，CPU 与设备管理器只能彼此独立地做出资源分配决策。此版本拓扑管理器已经发展到 beta 版本。 Serverside Apply beta 2 beta 2 版本将跟踪并管理所有新 Kubernetes 对象的字段变更，确保用户及时了解哪些资源在何时进行过更改。 使用...阅读全文
Ubuntu 18.04 LTS首个Beta风味版本上线
在延迟1天时间之后，Ubuntu Release团队终于宣布Ubuntu 18.04 LTS (Bionic Beaver) 的首个Beta版本上线，而且基于该Beta镜像的一些官方风味（flavors）版本也一同发布。 导致Ubuntu 18.04 LTS发布时间推迟的原因有很多，首先该版本的开发任务本来就很重，而且期间经历了Meltdown和Spectre两大CPU漏洞。 其次就是团队制定的发布计划并不完善。例如部分风味版本原本计划应该经历两个Alpha版本，一个定在新年之后的一周半时间内，另一个定在2月1日发布。但是最终两个Alpha版本都没有发布，所以才直到现在才看到Beta版本。 这些风味版本包括Kubuntu，Xubuntu，Ubuntu MATE，Ubuntu Budgie和...阅读全文
服务监控系统 Prometheus 2.0 发布
服务监控系统 Prometheus 2.0 已发布，Prometheus 是一个 Go 语言开发的开源的服务监控系统和时间序列数据库。 Prometheus 2.0 有一个简单而强大的运营模式。然而，基础设施领域也没有停滞不前，像 Kubernetes 和 Mesos 这样的项目正在迅速改变软件的部署和管理方式。受监控的环境变得越来越活跃。 存储 Prometheus 2.0 有性能显着提高，几乎在所有方面都有所改进。查询延迟更加一致，特别是在高系列流失的情况下，它的规模更大。在不同的现实世界生产情景下测量的资源消耗也显着下降： 与 Prometheus1.8 相比，CPU 使用率 降低了 20％ – 40％ 与普 Prometheus1.8 相比， 磁盘空间使用率 降低了 33...阅读全文
Ubuntu 20.04 LTS 正式版发布
Ubuntu 20.04 LTS (Focal Fossa)于 4 月 23 日正式发布。主要新特性包括：Linux 内核 5.4，支持新的硬件如英特尔 Comet Lake CPU 和 AMD Navi 12 和 14 GPU；支持 exFAT 文件系统，支持 Wireguard VPN，完整性模式启用锁定；为 RISC-V 硬件提供了 riscv64 内核。 其它包括：GNOME 3.36，Mesa 20.0 OpenGL stack，BlueZ 5.53，PulseAudio 14.0，Firefox 75.0 和 Thunderbird 68.7.0，LibreOffice 6.4 等。 与 Ubuntu 20.04 同时发布的还有多个衍生版本如 Kubuntu 和 Lubuntu...阅读全文
Linux Kernel 5.0 正式面向公众
big.LITTLE CPU 架构的设备的电源管理。以及支持 fscrypt 中用于低功耗设备的 Adiantum 加密文件系统和 Btrfs 交换文件系统。 其它值得留意变化包括：支持用户数据报协议（UDP）中的通用接收卸载（GRO）功能，cgroupv2 中的cpuset 资源控制器，以及支持能够运行多个 Android 实例的 binderfs 文件系统。 当然，Linux Kernel 5.0 还更新了添加了许多驱动程序，以及无数的 bug 和安全修复。预计接下来几天内，各大 GNU / Linux 发行版都将迎来更新。 Linux Kernel 5.0 下载地址： https://cdn.kernel.org/pub/linux/kernel/v5.x/linux-5.0.tar.xz...阅读全文
Ryzen发布两周：AMD 称表现达到预期 四月发布更新
要游戏正确识别了 Zen 的核心与缓存，即可在启用 Ryzen SMT 技术后恢复正常性能。遗憾的是，该公司暂未给出确切的时间表。 简而言之，当前 Ryzen 用户只能享受到略低于理想状况的性能，除非它们将 Windows 电源设置选项指定为“高性能”模式才能得到改观。AMD 称，此举可减少处理器核心闲置行为，在程序有需要时给出更快的响应。 至于Ryzen 桌面处理器的 CPU 默认均衡配置优化，AMD 表示会通过 4 月首周的更新进行修复。【原文编译自 TechReport.com 】...阅读全文
AMD 2020处理器产品线曝光： Zen2 APU与Zen 3锐龙4000
Planet 3DNow上关于AMD新处理器代号和路线图的文章引发广泛关注，提供了很多此前不曾为人了解的信息。其中，ThreadRipper产品线第三代产品代号Castle Peak，第四代产品代号Genesis，这是位于华盛顿的两处地理坐标。 访问购买页面： AMD旗舰店 看完HEDT，再来了解下锐龙家族， 按照时间顺序，明年一季度，AMD会推出Ryzen 4000U/4000H系列移动APU，其中U代表低电压，H代表35W标准电压，处理器家族代号Renoir（雷诺阿），升级到Zen 2架构，即7nm CPU+12nm I/O集成化设计，同时搭配Navi显卡，插槽为FP6，BGA封装。 接着在二季度末，EPYC嵌入式芯片“Starship”上线，最高8C16T，Zen 2架构。6月份是...阅读全文
RTX 2080 Super移动版显卡现身：150W塞入笔记本中
版RTX 2080显卡是一样的，但是频率最高1230MHz，这个就要比桌面版的1.8GHz+低很多了，毕竟TDP功耗少了170W之多。 值得一提的是，这次GK4曝光的CPU也非常有看点，是酷睿i9-10980HK处理器，8核16线程，基础频率3.1GHz，加速频率4.92GHz，符合Intel之前所说的8核5GHz笔记本处理器，也就是十代酷睿高性能标压版，代号Comet Lake-H系列。 十代酷睿高性能标压版是在3月份上市，那么RTX 20 Super系列移动版显卡也会是在这个时间点上市了。 今年的CES展会上，AMD也发布了7nm工艺的锐龙4000系列处理器，有15W低压版的锐龙4000 U系列及45W高性能版的锐龙4000 H系列，其中旗舰锐龙7 4800H也是8核16线程，到时候就有...阅读全文
Java 12 / JDK 12 正式发布
，同时保留 32 位 ARM 实现和 64 位 aarch64。 JDK 中存在两套 64 位 ARM 实现，主要存在于 src/hotspot/cpu/arm 和 open/src/hotspot/cpu/aarch64 目录。两者都实现了 aarch64，现在将只保留后者，删除由 Oracle 提供的 arm64。这将使贡献者将他们的精力集中在单个 64 位 ARM 实现上，并消除维护两套实现所需的重复工作。 Default CDS Archives 默认类数据共享归档文件 针对 64 位平台，使用默认类列表增强 JDK 构建过程以生成类数据共享（class data-sharing，CDS）档。 Abortable Mixed Collections for G1 可中止的 G1...阅读全文
Linux 中使用 Fio 测评硬盘性能
], 99.95th=[ 1], | 99.99th=[ 1] lat (usec) : 2=99.99%, 4=0.01%, 10=0.01%, 20=0.01% cpu : usr=15.14%, sys=84.00%, ctx=8, majf=0, minf=26 IO depths : 1=100.0%, 2=0.0%, 4=0.0%, 8=0.0%, 16=0.0%, 32=0.0%, >=64=0.0% submit : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0% complete : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0...阅读全文
开源硬件是趋势，Arm 却走了一条与众不同的路
Cortex-M33 CPU 开始使用。这将使得 Arm 客户能够向基于 Cortex-M 的 IoT CPU 添加自定义指令，以针对特定市场量身定制芯片。 Dirvin 说到：“例如，有些数学算法是重复的。如果我们要使用一块硅存储片来维护它，那么拥有一条指令将会非常好。但这与 Arm 想要的不符。不过现在使用自定义指令后，我们的合作伙伴将能够针对该市场专门对芯片进行优化。” 为此，许多行业从业者和分析家将 Arm 的这些声明视为对 RISC-V 日益严峻挑战的回应。由于 RISC-V 具有相当吸引人的优势 —— 高度的自由性、轻量级和可扩展性，它已引起 NVIDIA 和 Qualcomm 等技术巨头的广泛关注。 Dirvin 则强调，即使没有 RISC-V 的兴起，Arm 也会推出其政策变更。“创新...阅读全文
Node.js Vs. PHP：你应该选择哪一个
。 2.托管和部署： PHP 应用程序可以在包括 Nginx 和 Apache 以及 Windows 和 Linux 平台在内的任何服务器上运行，这使得部署过程变得更容易，而 Node.js，则需要具有 SSH 访问权限的虚拟服务器。因此，在没有任何控制台命令和 Secure Shell（SSH）知识的情况下，用 PHP 部署小型企业和个人应用会更好。 3.外部依赖： Node.js 依赖关系较少，用几行代码就可以设置一个 Web 服务器。但运行 PHP 应用程序，就需要外部服务器软件。用 Node.js 的开发人员只需要 NPM（节点包管理器）就可以下载 Node 模块，这些模块可以轻松地集成到应用程序中，提供额外的功能。 4. CPU 扩展任务： Node.js 可能在高吞吐量方面表现优异...阅读全文
Debian 安装包的简单制作
└── usr ├── local │ ├── bin （可执行文件安装位置） │ └── lib （使用到的相关库，目标机器没有安装） └── share （非必须） └── doc └── example-package 准备相关文件 程序编译完成后，将编译后的文件放到 example-package/usr/local/bin下 根据需要按上方的文件结构添加内容 编写control 文件 Package: example-package Version: 1.0-1 Architecture: amd64 # 运行的CPU架构 Maintainer: UserName <邮箱> Installed-Size: 10 Section: unknown # 应用类型 不知道就用 unknown...阅读全文
Q4OS 3.8 LTS 发布，基于 Debian Buster
Trinity 桌面安装在一起，用户可以在两者之间来回切换。两个桌面可以并行独立共存，不会相互干扰。Plasma 是大多数用户的主要选择，因此它被认为是默认选项，这在 Q4OS 下载站点中也很明显。 官方表示将推出自己独有的实用程序和特性，特别是使用“桌面分析器”将用户的计算机分析成不同的专业工作工具，“设置实用程序”用于安装第三方应用程序，具有多个集成快捷方式的“欢迎屏幕”使新手用户配置系统更容易，LXQT、XFCE 和 LXDE 替代环境安装脚本等等。 桌面分析器不仅仅可以执行桌面环境安装。其主要目的是提供“应用程序配置文件”，一组预定义的应用程序，并只需单击即可轻松安装。支持 .deb 和 .esh 包格式。包可以定义为 cpu 体系结构，也可以定义为桌面环境。此外，每个桌面环境都可以保留自己的应...阅读全文
Knoppix 8.6 发布，GNU/Linux 系统
kernel 5.2.5 和 Xorg 7.7(核心 1.20.4) 来支持当前的计算机硬件。内核补丁：Cloop，aufs32 位和 64 位内核都支持新旧计算机，64 位版本还支持具有超过 4GB RAM 和 chroot 到 64 位安装系统崩溃修复任务的系统。如果检测到具有 64 位功能的 CPU，引导加载程序将自动启动 64 位内核 (如果不是手动指定的话)。对于只能从 CD 启动的计算机，而不是从 DVD 或 USB 闪存笔启动的计算机，在“KNOPPIX”文件夹中放置了一个可启动的小型 CD 映像，该文件夹可以与完整的 USB 或 DVD 版本一起使用，以便在旧计算机上启动。QEMU-KVM 3.1 作为可编写脚本的虚拟化解决方案隐私增强的 tor 浏览器，可升级并可通过 knoppix...阅读全文
Golang后端面试题目
技术一面 基础面试 一面是通过电话直接沟通。 go的调度go struct能不能比较go defer（for defer）select可以用于什么context包的用途client如何实现长连接主协程如何等其余协程完再操作slice，len，cap，共享，扩容map如何顺序读取实现set实现消息队列（多生产者，多消费者）大文件排序基本排序，哪些是稳定的http get跟headhttp 401,403http keep-alivehttp能不能一次连接多次请求，不等后端返回tcp与udp区别，udp优点，适用场景time-wait的作用数据库如何建索引孤儿进程，僵尸进程死锁条件，如何避免linux命令，查看端口占用，cpu负载，内存占用，如何发送信号给一个进程git文件版本，使用顺序...阅读全文
Go 1.8 正式发布 标准库有显著变化和性能提升
今天Go 团队很高兴地宣布Go 1.8发布了。现已提供下载。整个标准库有了显著的性能提升和变化。该版本主要的更新内容如下： Go 1.7中为64位x86引入的编译器后端现在用于所有体系结构，这些体系结构将会有显著的性能改进。例如，我们的基准程序所需的CPU时间在32位ARM系统上减少了20-30％。在此版本中，64位x86系统还有一些性能改进，编译器和链接器更快了，编译时间应该比Go 1.7提高约15％。但是在这一领域还有很长的路要走：我们希望在未来版本中实现更快的编译速度。 垃圾收集暂停时间明显更短，通常在100微秒以下，有时候甚至低至10微秒。 HTTP服务器添加对 HTTP/2 Push的支持，允许服务器抢先发送响应到客户端。这对于通过消除往返行程来最小化网络延迟非常有用。HTTP服...阅读全文
都是颗粒 为什么SSD有寿命、内存却没有?
随着技术的发展，我们使用的存储器也各种各样，虽然都基于芯片颗粒，但表现截然不同，比如说读写次数限制，或者叫寿命，SSD固态硬盘就有限制，DRAM内存却没有。 按照分布位置的不同，DRAM内存属于内部存储器，紧挨着CPU处理器，用来临时存放后者需要的运算数据，并与外部存储器进行交换，起到桥梁的作用。 DRAM内存的特点是读写速度快、延迟低，但属于易失性存储，也就是一旦断电，数据就会全部丢失。 DRAM内存颗粒利用晶体管加电容来保存数据，而且只是临时存储数据，并没有实质性的写入，不涉及对物理单元结构、属性的改变，所以可以无限次读写。 当然，这并不意味着DRAM内存就可以永久使用，毕竟其中的晶体管、电容等物理结构也会慢慢老化，所有电子设备都是如此，只是这个过程非常非常缓慢，正常使用根本感觉不到...阅读全文
DDR5内存最大亮点是啥
内）的等效频率能够去到更高，可以达到DDR5-6400，而在DDR5-4800时，其有效带宽就已经是DDR4-3200的1.87倍了。 最近几年CPU的核心数在显著的增多，不止是服务器端，桌面端在Coffee Lake和Zen、Zen 2的推动下也是有越来越多的核心，核心数是多了，但是内存带宽仍然只有这么点，这使得每个核心在同时间可以吃到的内存带宽在减少，这将给处理器整体的性能带来负面影响，目前在桌面端它表现的还不是非常明显，可能也就是Ryzen 9 3950X这种用着双通道DDR4内存的16核处理器上能够看到。 美光还在计划新的工艺节点，在目前的1z nm节点之后，他们规划了1α、1β和1γ，将继续提升内存的存储密度，这也将是DDR5的一个重要特征。...阅读全文
Linus Torvalds谈ECC内存的重要性 痛斥英特尔
2020年，Torvalds在主系统使用英特尔CPU超过15年后，转而使用基于AMD Threadripper的工作站。...阅读全文
Go 1.12 正式版发布，初步支持 TLS 1.3
在 trace 工具加入了 Mutator Utilization 图的支持，它可以方便发现 GC 性能受限的情况；不再支持 go tool vet；go tool tour 不再包含在主二进制发行版中，需要手动安装；Go 1.12 是最后一个支持 binary-only packages 的版本；……Runtime 方面，Go 1.12：提升了大量堆（Heap）活跃状态情况下的扫除（Sweeping）性能，这减少了垃圾回收之后的分配延迟，可以更好地将内存释放回操作系统；Runtime 的 timer 和 deadline 代码随着 CPU 数目的增加，会有更好的表现。这提升了网络连接最后期限（deadline）相关操作的性能；通过大型堆分配的相关修复，提升了内存配置文件的精确性；……平台相...阅读全文
架构师详解 Nginx 架构
线程启动和执行的流程如下：主程序 Master process 启动后，通过一个 for 循环来接收和处理外部信号；主进程通过 fork() 函数产生子进程，每个子进程执行一个 for 循环来实现 Nginx 服务器对事件的接收和处理。 一般推荐 worker 进程数与 cpu 内核数一致，这样一来不存在大量的子进程生成和管理任务，避免了进程之间竞争 CPU 资源和进程切换的开销。而且 Nginx 为了更好的利用多核特性，提供了 cpu 亲缘性的绑定选项，我们可以将某一个进程绑定在某一个核上，这样就不会因为进程的切换带来 cache 的失效。 对于每个请求，有且只有一个工作进程对其处理。首先，每个 worker 进程都是从 master 进程 fork 过来，在 master 进程里面，先建...阅读全文
Linux系统诊断-内存基础
的文件，大多反馈系统信息的实时情况（进程、内存、cpu、设备信息等）。结论： /proc/meminfo 是 /proc 文件系统下保存你内存相关信息的"伪文件"。2.2 命令输出简介每个发行版输出都有一定差异，我们以debian8 4.19.x发行版为例。root@4f996feeb851:~# free -m total used free shared buffers cached Mem: 1991 1909 81 4 155 836 -/+ buffers/cache: 917 1073 Swap: 1023 1 1022大部分的命令输出意思，大家可以在man文档中找到解析，这里不做赘述。used: 已使用的内存 used = total - free -buffers...阅读全文
WebAssembly：无需容器的 Docker （上）
，实现 WASI 和 WebAssembly 应用程序的标准化。🚀 快速 —— 它可以通过大多数运行时的 JIT/AOT 能力提供类似原生的速度。 与启动 VM 或启动容器不同的是，它没有冷启动。🔒 安全 —— 默认情况下，Wasm 运行时是沙箱化的，允许安全访问内存。 基于能力的模型确保 Wasm 应用程序只能访问得到明确允许的内容。软件供应链更加安全。💼 可移植 —— 几个主要的 Wasm 运行时支持大多数 CPU（x86、ARM、RISC-V）和大多数操作系统，包括 Linux、Windows、macOS、Android、ESXi，甚至非 Posix 操作系统。🔋 高效 —— 最小的内存占用和最低的 CPU 门槛就能运行 Wasm 应用程序。🗣️ 支持多语言 ——40 多种编程...阅读全文
什么是线程安全，以及并发需要知道的几个概念
里等待，直到售货员把衣服交给你后才算购物成功，这就相当于同步的过程。 不过，如果是在网上购物的话，我们只需下单并完成支付，对我们来说整个购物过程就算完成了。网上的商家接到订单会帮我们加紧安排送货，这段时间我们可以去做其他的事，比如去外面打个篮球之类的。等送货上门并签收商品就完事了，这个过程就相当于异步。 并发和并行并发和并行的功能很相似，两者都可以表示多个任务一起执行的情况，但本质上两者其实是有区别的。 严格意义上来说，并行的多任务是真实的同时执行，而并发更多的情况是任务之间交替执行，系统不停的在多个任务间切换执行，也就是 “串行” 执行。 最直接的例子的就是我们的计算机系统，在单核CPU时代，系统表面上能同时进行多任务处理，比如听歌的同时又浏览网页，但真实环境中这些任务不可能是真实并行的...阅读全文
译：Kubernetes 最佳实践
探针则不会生效。译者：还有一点尽量为 Pod 内的所有容器都定义探针。使用自动缩放在适当的情况下，可以使用自动缩放来动态调整 pod 的数量（Pod 水平自动缩放器，HPA）、pod 消耗的资源量（Pod 垂直自动缩放器, VPA）或集群中的节点数量（集群自动缩放器，CA），具体取决于 对资源的需求。Pod 水平自动扩缩器还可以根据 CPU 需求扩展复制控制器、副本集或有状态集。使用缩放也带来了一些挑战，例如不在容器的本地文件系统中存储持久数据，因为这会阻止水平自动缩放。相反，可以使用 PersistentVolume。当集群上存在高度可变的工作负载并且可能根据需求在不同时间需要不同数量的资源时，集群自动缩放器非常有用。 自动删除未使用的节点也是省钱的好方法！译者：更多自动缩放的内容，可以浏...阅读全文
在 Kubernetes 上扩展 TensorFlow 模型
由于人工智能 / 机器学习日益集成到应用和业务流程中，因此生产级机器学习模型需要更多可扩展的基础设施和计算能力，以用于训练和部署。 现代机器学习算法在大量数据上进行训练，并且需要数十亿次迭代才能使成本函数最小化。这类模型的垂直扩展会遇到操作系统级别的瓶颈，包括可提供的 CPU、GPU 和存储的数量，而且对于这种类型的模型，已经证明效率并不高。更为高效的并行处理算法，例如异步训练和 allreduce 式训练，需要一个分布式集群系统，由不同的 worker （工作器）以协调的方式同时学习。 可扩展性对于在生产环境中服务深度学习模型也非常重要。将单个 API 请求处理到模型预测端点可能会触发复杂的处理逻辑，这将花费大量时间。由于更多用户访问模型的端点，为了有效地处理客户端请求，需要更多服务实例...阅读全文
使用 Go 语言的三个原因
阅读行为放在编写之上 。Go 通过工具和自定义来强制所有代码格式化成特定的样式。这消除了学习项目特定语言的方言时的困难，并有助于发现错误，因为它们 看上去 就是不正确。 由于专注于分析和机器辅助，Go 开发人员开始采用越来越多的工具来发现常见的编码错误，这种工具从来没有在 C 语言开发者中产生共鸣 – Go 开发人员 希望 工具帮助他们保持代码清洁。 并发性 十多年来，芯片设计师一直在警告 免费午餐将会结束 。从最低端的手机到最耗电的服务器，硬件的并行性以 更多、更慢、堆砌 cpu 内核 的形式出现，但只有 当 你的语言可以利用它们才有意义。因此，并发特性需要内置到我们编写的要在今天的硬件上运行的软件中。 通过提供一种基于协程的 轻量级并发模型 ，或者是 Go 中已知的 goroutines...阅读全文
可用于企业的三个非主流 Web 服务器
，可支持服务器及其所有功能的直接配置。Cherokee 在 Linux，Mac OS X，BSD 和 Solaris 上本机运行，但不在 Windows 上运行。 Monkey HTTP 服务器 Monkey HTTP 是一个轻量级的服务器和开发堆栈，最初针对 Linux 进行了优化，但现在也与 Mac OS X 兼容。它专为嵌入式设备而设计，因此具有高度可扩展性，具有低内存和低 CPU 消耗。该项目于 2001 年开始，在 2008 年被改写为事件驱动系统时转向专业应用程序。 服务器通过混合机制运行，为每个线程提供数千个客户端的访问能力。它提供高性能的重负载服务器，易于安装，是嵌入式设备的理想选择。 除了这三种Web服务器，你还有其他开源项目推荐吗？...阅读全文
高性能日志采集工具 logpipe 简单介绍
在集群化环境里，日志采集是重要基础设施。本文结合最新的 1.0.9 版，对 logpipe 做一个简单的介绍。开源主流解决方案是基于 flume-ng，但在实际使用中发现 flume-ng 存在诸多问题。 比如 flume-ng 的 spoolDir 采集器只能对文件名转档后的大小不能变化的最终日志文件进行采集，不能满足采集时效性要求，如果要采集正在被不断追加的日志文件，只能用 exec 采集器搭配 tail -F 命令，但 tail -F 命令又不能通配目标目录中将来新增的未知文件名。其它解决方案如 logstash 由于是 JAVA 开发，内存占用和性能都不能达到最优。 作为一个日志采集的本地代理，内存占用应该小而受控，性能应该高效，耗费 CPU 低对应用影响尽可能小，要能异步实时追踪...阅读全文
如何在 Debian 上安装 TensorFlow
activate脚本将虚拟环境激活： source venv/bin/activate 激活后，虚拟环境的bin目录将添加到系统$PATH变量的开头。Shell 提示符也将会带上相应的提示信息，会显示您当前所在的虚拟环境的名称。在此示例中，即(venv)。 TensorFlow安装需要pip版本19或更高版本。运行以下命令以升级pip到最新版本： pip install --upgrade pip 3、安装TensorFlow 现在我们已经成功创建了虚拟环境，下一步是安装TensorFlow软件包。 可以从 PyPI 安装多个 TensorFlow 软件包。该tensorflow软件包仅支持CPU，建议初学者使用。如果您拥有具有CUDA计算功能3.5或更高版本的专用NVIDIA GPU，并希望利用其处理能...阅读全文
Linux 5.11窗口合并期今天结束 引入大量新特性
持，图形驱动中的异步翻页，用于缓解射频干扰的新 "RFIM "驱动，围绕Rocket Lake和Alder Lake的新设备ID，WiFi驱动内的WiFi 6GHz频段支持，以及其他工作。 在 AMD 方面，主要围绕着改进电源管理和传感器处理，CPU 帧率频率不变性支持（虽然与 Schedutil 在一些系统上处于糟糕的状态），AMD 传感器融合枢纽驱动程序终于被合并，以支持Ryzen笔记本电脑上的传感器功能，以及其他各种改进。 Linux 5.11 还为不知名的设备提供了新的硬件支持，从失败的 OUYA 游戏机到 Guitar Hero Live PS3 / Wii U 扩展坞。 改进内容如下： 处理器: - 经历了 40 多轮的代码审查之后终于整合了 Intel SGX enclaves...阅读全文
Facebook 开源的一组 Linux 内核组件与工具
题。 Cgroup2：https://facebookmicrosites.github.io/cgroup2/ Cgroup2 是下一代 Linux 内核机制，用于分组和构造工作负载，以及控制分配给每个组的系统资源量。它具有内存、I/O、中央处理单元等控制器，它还允许隔离工作负载，并为每个工作负载确定资源分配的优先级和配置。 PSI：https://facebookmicrosites.github.io/psi/ PSI（Pressure Stall Information，压力失速信息）首次提供了一种规范，通过内存、CPU 和 I/O 这三种主要资源的新压力指标来量化资源短缺。这些压力指标与此次开源的其它内核和用户空间工具相结合，可以在智能开发和响应时检测资源短缺。PSI 统计数据为即...阅读全文
ChaosMesh 的基本功能有哪些
Chaos Mesh 的基本功能，包括故障注入、混沌实验场景、可视化操作、安全保障。故障注入故障注入是混沌实验的核心。Chaos Mesh 充分考虑分布式系统可能出现的故障，提供全面、细粒度的故障类型，分为基础资源类型故障、平台类型故障和应用层故障三大类。基础资源类型故障：PodChaos：模拟 Pod 故障，例如 Pod 节点重启、Pod 持续不可用，以及特定 Pod 中的某些容器故障。NetworkChaos：模拟网络故障，例如网络延迟、网络丢包、包乱序、各类网络分区。DNSChaos：模拟 DNS 故障，例如 DNS 域名解析失败、返回错误 IP 地址。HTTPChaos：模拟 HTTP 通信故障，例如 HTTP 通信延迟。StressChaos：模拟 CPU 抢占或内存抢占场景...阅读全文
Solus Linux 正在打造“现代化的 Linux 发行版”，不依赖 GNU
Linux”。同时，这一发行版既模块化又针对现代机器进行优化。 更具体地说，Serpent 将会是一个“真正现代化的 Linux 发行版”（A Truly Modern Linux Distribution），它将采用发行优先、兼容性更高的设计决策。同时还将把过去十年左右的时间里更明智的设计改进纳入 Linux 发行版设计中： 不再拆分 usrbin整个过程均采用 100％ 的 clang 编写（包括内核）musl 作为 libc，依靠编译器优化而不是内联 asmlibc++ 代替 libstdc++LLVM 的 binutils 的变种（lld、as等）混合源/二进制分发从x86_64-generic通用基线转向新的 CPU，包括针对 Intel 和 AMD 的优化程序包管理器中基于功能的订阅（硬...阅读全文
故意泼脏水？AMD官方回应Zen安全漏洞
恶意软件，危害程度并不是最高的，属于二等漏洞。 这一年来AMD处理器可以说是气势如虹，不断在各个领域取得突飞猛进，得到了行业和用户的普遍认可。眼下第二代Ryzen CPU也即将发布，却突然出现这么一件很诡异的漏洞事件，背后有什么不为人知的故事？确实值得玩味。 后续进展，我们将持续保持关注。...阅读全文
三大亮点带你看 Linux 内核 5.6
版中，硬件支持也将继续提升。而支持新式无线外设的计划也同样是优先的。 新内核中将增加对 MX Master 3 鼠标以及罗技其他无线产品的支持。 除了罗技的产品外，你还可以期待获得许多不同硬件的支持（包括对 AMD GPU、NVIDIA GPU 和 Intel Tiger Lake 芯片组的支持）。 6、其他更新 此外，Linux 5.6 中除了上述主要的新增功能或支持外，下一个内核版本也将进行其他一些改进： 改进 AMD Zen 的温度/功率报告修复华硕飞行堡垒系列笔记本中 AMD CPU 过热开源支持 NVIDIA RTX 2000 图灵系列显卡内建 FSCRYPT 加密 Phoronix 跟踪了 Linux 5.6 带来的许多技术性更改。因此，如果你好奇 Linux 5.6 所涉及的全...阅读全文
NVDIMM-P非易失内存标准公布：断电不丢数据、兼容DDR4
。 － 大容量：支持扩展的内存寻址功能。 － 支持即插即用：在电脑开机时可以直接插入标准的双列内存插槽，并立刻与同一总线上的DDR内存交互操作。 NVDIMM-P的主要特征： － 与现有DDR通道完全兼容，包括物理接口、电气性能、协议、时钟。 － 保证为下一代CPU插槽增加的针脚尽可能少。 － 协议支持数据读取时的不确定延迟。 － 确保数据在非易失内存中的事务性操作。 － 从NAND到DRAM多种延迟模式的支持(在模块级别)。 － 内存本身具备高可靠性、链路错误保护功能。 事实上，NVDIMM是一个系列标准，除了这里说的NVDIMM-P，还有NVDIMM-F、NVDIMM-N、NVDIMM-H。 NVDIMM-F本质上就是DDR接口的SSD固态盘，只使用NAND闪存，优点是延迟低(纳秒级别)、带宽高...阅读全文
树莓派 9 周年：你不知道的树莓派冷知识
的孩子们提供这种价格低廉、易于破解的计算机，从而培养他们对计算机编程的兴趣。2.目前至少已有 21 种不同型号的树莓派自 2012 年推出以来，树莓派基金会已经发布了 21 种不同型号的树莓派，如果算上 Raspberry Pi 4 B 的四个不同 RAM 容量的版本和 Raspberry Pi Compute Module 4 的所有 32 个不同存储组合版本，则共有 52 种型号。（包括带有或不带有 Wi-Fi） 最初的 Raspberry Pi B 型仅具有 256 MB 的 RAM 和一个单核 700 MHz 处理器。当前的主流型号 Pi 4 B 具有高达 8 GB 的 RAM，四核 1.5 GHz CPU 和 USB 3.0 端口。其中，Raspberry Pi 400 于...阅读全文
Kubernetes 部署 Nacos 1.4 集群 · 小豆丁
containers: - name: nacos image: nacos/nacos-server:1.4.1 resources: limits: cpu: 2 memory: "2Gi" requests: cpu: 100m memory: "1Gi" ports: - name: client-port containerPort: 8848 - name: rpc containerPort: 7848 envFrom: - configMapRef: name: nacos-config env: - name: POD_NAMESPACE valueFrom: fieldRef: apiVersion: v1 fieldPath: metadata.namespace...阅读全文
Linux下多线程程序为什么消耗大量虚拟内存
，使用了很多叫做arena的memory pool,缺省配置在64bit下面是每一个arena为64M，一个进程可以最多有 cores * 8个arena。假设你的机器是4核的，那么最多可以有4 * 8 = 32个arena，也就是使用32 * 64 = 2048M内存。 当然你也可以通过设置环境变量来改变arena的数量.例如 export MALLOC_ARENA_MAX=1 hadoop推荐把这个值设置为4。当然了，既然是多核的机器，而arena的引进是为了解决多线程内存分配竞争的问题，那么设置为cpu核的数量估计也是一个不错的选择。设置这个值以后最好能对你的程序做一下压力测试，用以看看改变arena的数量是否会对程序的性能有影响。 mallopt(M_ARENA_MAX, xxx)如果...阅读全文
DPDK Graph Pipeline 框架简介与实现原理
DPDK 全称为 Data Plane Development Kit ，是近年来在高速网络通信行业中炙手可热的一种网络报文处理加速框架。DPDK 从十年前诞生直至发展到今天已经可以支持业界主流的高端网卡以及各类加速硬件设备，同时也支持主流的各个CPU 体系结构（可以运行于 X86, Arm, Power 等平台）。同时也可以运行于 Linux/FreeBsd/Windows 等主流操作系统之上。DPDK因为其优异的性能指标被广泛的应用于网关/负载均衡/SDN/虚拟交换的各个场景。 本文主要介绍 DPDK 中的 libgraph 设计思想以及实现，libgraph 的设计思想源自于开源项目 Vector Packet Processor(VPP)。VPP 中的向量包处理优化方案是...阅读全文
处理器架构消亡史
印机，数字机顶盒，数字电视，DSL，电缆调制解调器和个人数字助手等多种产品。到1990年代后期，MIPS已成为嵌入式系统领域的强者。根据MIPS科技公司的统计，1997年以MIPS架构为基础的CPU出货量为4800万，占RISC CPU总市场份额的49％。MIPS 架构如此成功，于是，在1998年SGI把MIPS科技公司拆分成为一个子公司（SGI 在1992年直接收购了MIPS）。DEC（Digital Equipment Corporation）也是受这股RISC风潮影响下的企业之一，DEC看到了许多RISC架构（例如MIPS和SPARC）的兴起，他们认为竞争激烈，最终将拯救在VAX上的败退。于是，在1982年到1985年间，DEC将RISC划分为几个部分来分开研究，1985年，DEC负责...阅读全文
粘合万种芯片的“万能胶” 是摩尔定律的续命丹吗？ - 硬件
更早之前，AMD在其EYPC系列CPU中，也用到了"黏合"这一步骤，让芯片设计成本减少一半。自家芯片的“黏合”似乎已经不成问题，那么能否从全球市场上挑选出性能最优的芯片黏合在一起，创造出更强大的芯片？几周前，能够实现芯片互连的"万能胶"出现了，英特尔、AMD、台积电等芯片公司联合成立小芯片互连产业联盟，定制UCIe 1.0（Universal Chiplet Interconnect Express）标准。如果将同一家芯片公司的互连方式（例如英伟达的NVlink）视为只能黏合一种材质且功能单一的胶水，那么UCIe标准的提出则意味着能够实现各种芯片互连的芯片万能胶的雏形初现。芯片万能胶，是否已经有足够的能力替代不断微缩的晶体管，成为摩尔定律的"续命丹"？“胶水”芯片时代的真起点"胶水"芯片发...阅读全文
最新评论
